Web Scraper 是一个网页数据抓取工具,可以使用此插件提取网页数据。关键跟Python里的Scraper 不同,这个更贴近普通用户开发,使用起来无需写一行代码,可以方便的抓取网页上的内容:文字、链接、图片、表格等等。
Web Scraper网站:https://www.webscraper.cc/
Web Scraper 的优点
- 免费
- 不受操作系统限制,只要安装Chrome浏览器即可运行
- 操作简单,易上手。(很多没有技术背景的同学,都可以快速学会)
- 功能强大:不仅可以抓静态网页,对于js动态加载的数据,也很容易抓取
Web Scraper 的使用方法
键盘F12键直接打开网页调试模式(浏览器网页点击 “右键” ----> “检查”后,出现如下界面)
如果红框处,没有出现webscraper的入口。
解决方案:将开发者工具,调试成 底部 模式,操作步骤如下图
调成“底部”模式后
Web Scraper 抓取的数据默认是无序的,如果需要排序需要安装CouchDB,CouchDB采用的是有序的方式,安装后点击webscraper的options,将默认库换为CouchDB。重启浏览器,任务完成。
Web Scraper v0.4.2
上次更新日期:2019年8月23日
点击进入下载页
Web Scraper v0.5.4
上次更新日期:2020年9月23日
Web Scraper v1.29.60.0
上次更新日期:2023年5月8日