一、思路分析
目标数据所在的网站是天气后报网站,网址为:www.tianqihoubao.com,需要采集武汉市近十年每天的空气质量数据。先看一下爬取后的数据情况:
1、寻找数据接口
在天气后报网站主页找到空气质量菜单项并,找到湖北武汉市并,下拉找到时间列表,一个月份时间(以2024年3月为例),进入到如下图所示页面:
打开浏览器开发者工具(按F12键或者在页面右键然后检查)进行抓包,按F5刷新页面,发现开发者工具Network选项卡下抓到了很多数据包,如图所示:
Python实战项目18:爬取城市空气质量数据本文介绍了如何使用 Python 从天气后报网站抓取武汉市近十年的空气质量数据
目标数据所在的网站是天气后报网站,网址为:www.tianqihoubao.com,需要采集武汉市近十年每天的空气质量数据。先看一下爬取后的数据情况:
在天气后报网站主页找到空气质量菜单项并,找到湖北武汉市并,下拉找到时间列表,一个月份时间(以2024年3月为例),进入到如下图所示页面:
打开浏览器开发者工具(按F12键或者在页面右键然后检查)进行抓包,按F5刷新页面,发现开发者工具Network选项卡下抓到了很多数据包,如图所示:
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
如需转载请保留出处:https://bianchenghao.cn/bian-cheng-ji-chu/104238.html