本帖最后由 scraper 于 2016-12-6 11:47 编辑


【启动采集前的配置】
  • 预先登陆网站:否
  • 配置打码平台:否

【运行方法】— 详见数据DIY图文教程

  • 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问百度新闻搜索列表页面;
  • 输入一条网址,或者点击“输入多条网址”,然后点击“获取数据”;
  • 点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。

【常见问题】— 欢迎跟帖留言
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2022-2-10 22:56

lxs111_ 新手上路 发表于 2022-2-10 20:52:19 | 显示全部楼层
请问怎么样才能把关于某个关键词的新闻资讯全部抓取,而不是一页一页的复制网址
举报 使用道具
Fuller 管理员 发表于 2022-2-10 22:56:47 | 显示全部楼层
lxs111_ 发表于 2022-2-10 20:52
请问怎么样才能把关于某个关键词的新闻资讯全部抓取,而不是一页一页的复制网址 ...

不用一页页复制,把搜索某个关键词的网址放到这个快捷采集工具上,爬虫会自动翻页采集:https://www.gooseeker.com/res/rule_667.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 19:16