如何用爬虫下载武汉市环保局空气污染数据?
该需求并不难, 用八爪鱼采集器只需简单几步就可以实现了。由于武汉市环保局网站最近无法访问,没法上采集截图,小八描述下大致的采集流程,以供楼主参考。
第一步,对时间进行检索,如果网站支持直接输入开始年份和结束年份,那么在八爪鱼打开该网页后,分别点击2个年份输入框,设置时间文本输入进行检索;如果网站只限按月展示,那么可以做循环输入时间,将三年中每月的时间放入文本循环框中进行自动时间切换检索。
第二步,对表格数据做循环采集。该步骤可自动收集表格上的全部字段信息,只需点击表格中的第一行,点击“选中子元素”,“选中全部”,“采集以下文本”,4次点击完成配置。
第三步,点击“开始采集”,在极短的时间内,就可以轻松获取3年的空气指数数据啦。
采集后,支持导出excel,csv,数据库等格式。
八爪鱼采集器是一款功能强大、使用简单的傻瓜式爬虫工具,无需编程,即可轻松进行网页数据爬取,效率极高。
给有需要的朋友附上八爪鱼的下载链接:
本站所有文章、数据、图片均来自互联网,一切版权均归源网站或源作者所有。
如果侵犯了你的权益请来信告知我们删除。邮箱:dacesmiling@qq.com