如果在微博上抓数据,选取一个关键词“上海疫情”,然后想抓取的时间段是1年(2021年1月-2021年12月)。觉得数据量太大,想要每天抓取50条信息就行,怎么设置这个每天抓取的信息条数呢?谢谢!【我已经把细分时间粒度选了1天了,但是每天抓的数据也有200多条,整个我感觉太多,导致抓的速度太慢了。还有没有别的限制条数的办法呢?】


非常感谢,非常感谢!
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2022-12-5 15:10

沙发
gz51837844 管理员 发表于 2022-12-2 19:44:31 | 只看该作者
目前微博工具箱里的微博关键词搜索工具没有提供自定义翻页数,如果需要自定义翻页数,可以试试这个快捷采集:微博关键词搜索结果采集
旗舰版用户也可以在技术交流群里联系管理员,单独为你修改微博工具箱里的微博关键词搜索工具的翻页数。




举报 使用道具
板凳
scdscdscd12345 初级会员 发表于 2022-12-4 22:39:04 | 只看该作者
好的, 谢谢!我想再问下以关键词检索到的内容,感觉更多是官方认证或者自媒体发布的内容在实时里当时应该是有更多普通用户发言的,爬不到是被清掉了嘛?就爬到的大部分都是官方的评论,个人用户的很少很少,这种怎么办呀~求解答,谢谢吖~
举报 使用道具
地板
gz51837844 管理员 发表于 2022-12-5 15:10:14 | 只看该作者
scdscdscd12345 发表于 2022-12-4 22:39
好的, 谢谢!我想再问下以关键词检索到的内容,感觉更多是官方认证或者自媒体发布的内容在实时里当时应该 ...

微博网站提供的高级搜索选项,在使用微博工具箱的微博关键词工具时也可以选择,比如选择搜索类型是“原创”或者其它类型的

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-20 10:14