第４期(总第２２９期)２０２３年８月山西电子技术网络技术收稿日期:２０２２－１２－２２基金项目:第二批国家级职业教育教师教学创新团队课题研究项目和双高专业群“１＋Ｘ证书”制度探索与实践研究课题(ＹＢ２０２１１２０３０３)ꎮ作者简介:李红(１９９４￣)ꎬ女ꎬ山西临汾人ꎬ助教ꎬ工学硕士ꎬ研究方向:大数据技术ꎮ文章编号:１６７４￣４５７８(２０２３)０４￣００５１￣０３基于Ｓｃｒａｐｙ的太原二手房爬虫的设计与实现∗李红(山西职业技术学院ꎬ山西太原０３０００６)摘要:随着经济的快速发展ꎬ人们买房获取数据信息越来越便利ꎬ但网络的海量数据也给人们快速摘取有用信息带来了很大的困难ꎬ同样太原二手房数据量也很庞大ꎮ利用Ｓｃｒａｐｙ框架快速高效的爬取太原链家二手房数据ꎬ并对数据完成处理和存储ꎬ为买房人群提供有用信息数据参考ꎮ关键词:Ｓｃｒａｐｙ框架ꎻ太原二手房数据ꎻ爬虫中图分类号:ＴＮ９１９文献标识码:ＡＤｅｓｉｇｎａｎｄＩｍｐｌｅｍｅｎｔａｔｉｏｎｏｆＳｅｃｏｎｄＨａｎｄＨｏｕｓｅＣｒａｗｌｅｒｉｎＴａｉｙｕａｎＢａｓｅｄｏｎＳｃｒａｐｙＬｉＨｏｎｇ(ＳｈａｎｘｉＰｏｌｙｔｅｃｈｎｉｃＣｏｌｌｅｇｅꎬＴａｉｙｕａｎＳｈａｎｘｉ０３０００６ꎬＣｈｉｎａ)Ａｂｓｔｒａｃｔ:Ｗｉｔｈｔｈｅｒａｐｉｄｄｅｖｅｌｏｐｍｅｎｔｏｆｅｃｏｎｏｍｙꎬｉｔｉｓｍｏｒｅａｎｄｍｏｒｅｃｏｎｖｅｎｉｅｎｔｆｏｒｐｅｏｐｌｅｔｏｏｂｔａｉｎｄａｔａｉｎ￣ｆｏｒｍａｔｉｏｎｆｏｒｂｕｙｉｎｇａｈｏｕｓｅꎬｂｕｔｔｈｅｍａｓｓｉｖｅｄａｔａｏｎｔｈｅＩｎｔｅｒｎｅｔａｌｓｏｂｒｉｎｇｓｇｒｅａｔｄｉｆｆｉｃｕｌｔｉｅｓｆｏｒｐｅｏｐｌｅｔｏｑｕｉｃｋｌｙｅｘｔｒａｃｔｕｓｅｆｕｌｉｎｆｏｒｍａｔｉｏｎ.ＳｉｍｉｌａｒｌｙꎬＴａｉｙｕａｎｈａｓａｈｕｇｅａｍｏｕｎｔｏｆｓｅｃｏｎｄ￣ｈａｎｄｈｏｕｓｅｄａｔａ.ＩｎｔｈｉｓｐａｐｅｒꎬｉｔｕｓｅｓｔｈｅＳｃｒａｐｙｆｒａｍｅｗｏｒｋｔｏｑｕｉｃｋｌｙａｎｄｅｆｆｉｃｉｅｎｔｌｙｃｒａｗｌｔｈｅｓｅｃｏｎｄ￣ｈａｎｄｈｏｕｓｅｄａｔａｏｆＴａｉｙｕａｎＣｈａｉｎＨｏｍｅꎬｃｏｍｐｌｅｔｅｔｈｅｐｒｏｃｅｓｓｉｎｇａｎｄｓｔｏｒａｇｅｏｆｔｈｅｄａｔａꎬａｎｄｐｒｏｖｉｄｅｕｓｅｆｕｌｉｎｆｏｒｍａｔｉｏｎａｎｄｄａｔａｒｅｆｅｒｅｎｃｅｆｏｒｐｅｏｐｌｅｗｈｏｂｕｙｈｏｕｓｅｓ.Ｋｅｙｗ...
