Python爬虫代理tor
TOR是全球有名的匿名网络,具有很高的匿名性,简单点说,Tor网络利用流量转发的方式,达到隐藏真实请求端(客户端)的目的,是目前比较受欢迎也比较有名气的的匿名工具。
其原理图如下:
由于出口IP随机轮换,且具有很强的匿名性,因此我们可以使用Tor网络作为爬虫代理,用来解决一些网站的IP封禁问题。
Tor的安装和使用
Tor安装
sudo apt-get install tor
重启
sudo /etc/init.d/tor restart
生成密码
tor --hash-password mypassword
这个操作会生成一个Hash串
修改配置文件
命令 vim /etc/tor/torrc
ControlPort 9051HashedControlPassword 16:872860B76453A77D60CA2BB8C1A7042072093276A3D701AD684053EC4C
以上是 Python爬虫代理tor 的全部内容, 来源链接: utcz.com/z/527362.html