本帖最后由 scraper 于 2016-12-30 10:57 编辑

【启动采集前的配置】
  • 预先登陆网站:否
  • 配置打码平台:否

【运行方法】— 详见数据DIY图文教程

  • 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问豆瓣小组_话题回复列表页面;
  • 输入一个或多个搜索结果网址,然后点击“获取数据”;
  • 点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。

【常见问题】— 欢迎跟帖留言
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2022-6-3 09:31

ran999 新手上路 发表于 2022-6-2 22:27:28 | 显示全部楼层
输入豆瓣小组帖子链接打开网页后会自动跳转导致采集帖子评论失败,不知道是不是要登录
举报 使用道具
Fuller 管理员 发表于 2022-6-3 09:31:18 | 显示全部楼层
ran999 发表于 2022-6-2 22:27
输入豆瓣小组帖子链接打开网页后会自动跳转导致采集帖子评论失败,不知道是不是要登录 ...

你要采集的网址是什么?发出来我试试。

另外,你选用了这个“豆瓣小组_话题回复列表”快捷采集工具?

采集豆瓣之前,要在爬虫浏览器中登录豆瓣
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 18:39