试用 购买
留言论坛
当前页面:熊猫智能采集软件> 留言论坛
发新贴

百度已经采用了新规则防止采集

作者: yalong | 阅读: 5690/1   2016/12/22 8:50:57
 
昨天我在试用的过程中,总共采集4600条数据左右(百度占多少没注意)。采集成功1000左右。这个时候百度就已经开始阻止我继续采集。而且浏览器直接查找也是用了验证码的方式。
所以是不是熊猫大侠也要进行升级了,要不然采几条数据就进行不下去了啊。


2 楼: 管理员 2016/12/22 16:45:21
 
请问是选择的是百度“网页”采集,还是百度“新闻”采集。百度一直想对还是比较宽松的。

采集的时候建议降低访问速度。尽量使用百度“新闻”采集。

另外可以选择“云采集”。可以避免被K。

另外可以在项目高级设置-页面访问参数-勾选“同时使用动态UserAgent”,这样百度基本就不会封你了。




回复
 
 
 
验证码:
 

电话:171 9219 7361

建议/合作: 139 1618 6547

邮箱:123jlxie@ 163.com

友情链接: 建筑结构软件 中国制造业博览 飞翔下载 好特下载 当下软件园 采集器 六度软件下载 ZOL应用下载

Copyright @ 2011 www.CaiJiRuanJian.com All Rights Reserved 上海齐索信息科技有限公司 沪ICP备16048952号-4