WebScraper是一款强大的网站内容信息提取工具,WebScraper能够快速提取与某个网页相关的信息,支持从网页提取的信息类型分别为URL,标题,描述,与其他类或ID关联的内容,标题,各种格式(纯文本,HTML或Markdown)。
WebScraper 是一款Mac系统平台的网站内容采集工具,可以帮助我们采集网站内容,指定好采集地址以及内容采集规则,就可以将网页内容全部采集下来,并且导出为容易处理的CSV或是JSON文件。
使用Web Scraper,您可以构建将导航站点并提取数据的站点地图。使用不同的类型选择器,Web Scraper将导航站点并提取多种类型的数据 - 文本,表格,图像,链接等。
与其他仅从HTML Web提取数据的抓取工具不同,Scraper还可以提取使用JavaScript动态加载或生成的数据。
Web Scrapper是一个独立的chrome扩展。站点地图构建,数据提取和导出都在浏览器中完成。在抓取您的网站后,您可以下载CSV格式的数据。对于高级用例,您可能希望尝试将数据保存到CouchDB中。