打开APP
userphoto
未登录

开通VIP,畅享免费电子书等14项超值服

开通VIP
kol研究室‖如何用工具在知乎中找到有价值的问答


webscraper简介

Web Scraper 是一款网页数据采集工具,只要是我们日常在网页上可以浏览到的内容,它都可以帮助我们爬取下来。

Web Scraper最大的特色是免费和免编程,不懂编程的人也很容易操作,尽管在爬取网页数据方面也有很多工具,但综合对比来看还是web scraper更加方便快捷一些。

Web Scraper主要有以下几个特点:

  • 轻量级,只是浏览器插件,无需在电脑中安装
  • 免费,并且没有按下载数据条数收费的要求
  • 免编程,好上手,一天学会无压力
  • 唯一缺点是免费版不能设置定时任务


webscraper下载


登录官方网站进行插件安装,插件有两种浏览器可供选择:火狐或者谷歌的Chrome。我选择的是火狐浏览器,如果选用Chrome浏览器,则需要科学上网。
(具体下载网址不方便粘贴,可以私信获取)

知乎关键字搜索信息爬取代码

{'_id':'zhihuchaxun','startUrl':['
https://www.zhihu.com/search?type=content&q=k30s至尊'],'selectors':[{'id':'question','type':'SelectorElementScroll','parentSelectors':['_root'],'selector':'div[] div.List-item','multiple':true,'delay':'3000'},{'id':'url','type':'SelectorLink','parentSelectors':['question'],'selector':'div [itemprop='zhihu:question'] a','multiple':true,'delay':0},{'id':'title','type':'SelectorText','parentSelectors':['url'],'selector':'.QuestionHeader h1','multiple':false,'regex':'','delay':0},{'id':'view','type':'SelectorText','parentSelectors':['url'],'selector':'div.NumberBoard-item strong','multiple':false,'regex':'','delay':0},{'id':'follower','type':'SelectorText','parentSelectors':['url'],'selector':'button strong','multiple':false,'regex':'','delay':0},{'id':'answer','type':'SelectorText','parentSelectors':['url'],'selector':'div.Card:nth-of-type(1) a.QuestionMainAction','multiple':false,'regex':'','delay':0}]}

webscraper安装

本站仅提供存储服务,所有内容均由用户发布,如发现有害或侵权内容,请点击举报
打开APP,阅读全文并永久保存 查看更多类似文章
猜你喜欢
类似文章
Web Scraper 高级用法——抓取二级网面 | 简易数据分析 13
网页爬虫:零基础用爬虫爬取网页内容
都来学爬虫!!0⃣️代码
推荐一个网页抓取小工具Web Scraper
超酷!我不写一行代码,爬取GitHub上几万的Python库(教程分享)
零代码爬虫神器 -- Web Scraper
更多类似文章 >>
生活服务
热点新闻
分享 收藏 导长图 关注 下载文章
绑定账号成功
后续可登录账号畅享VIP特权!
如果VIP功能使用有故障,
可点击这里联系客服!

联系客服