本帖最后由 wangyong 于 2017-9-14 17:18 编辑

网页采集 ->  高级视频 -> 微博关键词搜索博文采集

不想看广告?直接下视频
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2017-10-24 09:09

风景不在对岸 初级会员 发表于 2016-6-5 18:02:07 | 显示全部楼层
本帖最后由 风景不在对岸 于 2016-6-5 18:04 编辑

老师,你好,我问一下,这个采集到的数据时不包含转发的微博,可是怎么有重复数据,要怎么才可以搜索到所有可以转发的微博数据?
举报 使用道具
Fuller 管理员 发表于 2016-6-5 18:14:08 | 显示全部楼层
风景不在对岸 发表于 2016-6-5 18:02
老师,你好,我问一下,这个采集到的数据时不包含转发的微博,可是怎么有重复数据,要怎么才可以搜索到所有 ...

把微博采集工具箱组合起来用:http://www.gooseeker.com/land/weibo.html

先用关键词搜索工具,导出excel来以后,把要采集转发的微博网址找出来,存到excel中,批量导入到采集转发的工具中

重复总是难免,新浪微博自身的搜索排序就有重复,所以要在采集下来以后做重复过滤
举报 使用道具
风景不在对岸 初级会员 发表于 2016-6-7 14:07:04 | 显示全部楼层
好的,谢谢老师
举报 使用道具
toyaowu 新手上路 发表于 2016-9-1 00:45:35 | 显示全部楼层
为什么我只能翻到第二页?谢谢!
举报 使用道具
Fuller 管理员 发表于 2016-9-1 08:52:17 | 显示全部楼层
toyaowu 发表于 2016-9-1 00:45
为什么我只能翻到第二页?谢谢!

重点检查如下两方面
1,要登录新浪微博;
2,要把DS打数机窗口放到最大。

最后,就是网速要快一些,观察微博网页的显示速度,如果半天加载不出来,断掉的可能性很大。现在很多杀毒软件开启了在线查杀,每个网页都要过滤一遍,会大大降低抓网页的速度,可以把在线查杀功能关闭
举报 使用道具
小黄鸭 新手上路 发表于 2017-10-23 22:40:49 | 显示全部楼层
视频怎么看不了

举报 使用道具
umsung 高级会员 发表于 2017-10-24 09:09:06 | 显示全部楼层

GS浏览器是不支持播放视频的,你换个浏览器应该就可以直接观看的,GS浏览器不支持flash
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 02:40