蓝天采集器通过 Tor 代理 如何绕过机器人检测

2018-05-14 189 19 编辑:wangchenyuF2 来源:蓝天采集社区

目前基于 CentOS 7 x64 搭建 了 tor + socks5 转 http代理的一个服务器, tor每分钟更换一次IP, 能抓的到,baidu.com的 源码, 但测试 www.skycaiji.com抓不到源码,请问需要怎么配置 或者 加 什么头,解决此问题后,就可以写个搭建教程供大家用咯
抓不到源码是显示空白还是有内容?显示空白估计是ip线路问题,baidu应该全球都有点吧所以抓取的到

相关知识点: 源码 空白 都有
本站文章均为蜀戎网络摘自权威资料,书籍,或网络原创文章,如有版权纠纷或者违规问题,请即刻联系我们删除,未经允许禁止复制转载!感谢...
更多人喜欢

在线
客服

在线客服服务时间:9:00-21:00

客服
热线

13227777380
7*24小时客服服务热线

客服
微信

扫一扫微信咨询
顶部