爬虫获取 房地产数据

从统计局发布的数据进行爬取，以房地产数据为例，遇到了一些问题，不过最终解决了，执行时间是2022-2-11。
基本思路就是使用Python的requests库进行抓取。分析网页1发现是动态加载。查找里面的网络内容，是jsquery加载的（不知道大神是怎么找的哈，我就是挨个找的，只不过通过名字找稍微靠谱的）。 以房地产投资情况为例：
查到js请求为：
https://data.stats.gov.cn/easyquery.htm?m=QueryData&dbcode=hgyd&rowcode=zb&colcode=sj&wds=%5B%5D&dfwds=%5B%7B%22wdcode%22%3A%22zb%22%2C%22valuecode%22%3A%22A0601%22%7D%5D&k1=1644573450992&h=1

使用浏览器可以看到该请求返回一个json结果。我们想要的数据都在这里面了。

爬虫获取 房地产数据最先出现在Python成神之路。