Linuxword Global
当前位置: 通信协议 > 爬虫设置-3proxy+tinydns 设置代理服务

images-2

1 准备一台linux 服务器,公网访问;python3 环境,python2 也ok(没人用python2了)
2 安装3proxy yum install 3proxy 如果yum 查看没有,需要安装yum 源:yum install https://dl.fedoraproject.org/pub/epel/epel-release-latest-8.noarch.rpm
3 配置 /etc/3proxy.cfg 文件
cp 3proxy.cfg 3proxy.cfg-ar
rm -rf 3proxy.cfg
vim 3proxy.cfg
文件内容如下:

nserver 80.240.25.96
#DNS缓存
#nscache 65535
timeouts 1 5 30 60 180 1800 15 60
daemon
#users ox:CL:ox
#log /data/log/3proxy/3proxy.log D
log /var/log/3proxy/3proxy.log
logformat "- +_L%t.%. %N.%p %E %U %C:%c %R:%r %O %I %h %T"
rotate 30
external 0.0.0.0
internal 0.0.0.0
auth iponly
maxconn 1000
allow *
#parent 1000 http 94.191.114.51 3130
#bandlimin 50000000 * * * 3130
proxy -n -p3130
flush

运行 service 3proxy start

安装tinydns 服务
pip install tinydns
vim /etc/tinydns.conf

填写配置文件
[tinydns]
m.so.com=171.8.167.12,180.163.239.219,42.236.98.98,180.163.251.63,104.192.110.225,101.198.191.56,221.181.72.215
www.so.com=171.8.167.22,180.163.239.218,171.8.167.31,180.163.251.85,42.236.9.70,27.115.124.192,104.192.110.226,117.135.153.183,117.135.153.171,101.198.191.55,111.7.73.11
运行命令:
tinydns -c /etc/tinydns.conf
这样dns 服务代理,就实现了
测试
proxies = {“https”: “http://80.240.25.96:3130”, “http”: “http://80.240.25.96:3130”}
res = requests.get(“https://www.so.com”,proxies=proxies)
就会随机解析到不同的IP,提高我们爬虫效率
————————————————
版权声明:本文为CSDN博主「瓶瓶罐罐的」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/zhplz123/article/details/106727989

「梦想一旦被付诸行动,就会变得神圣,如果觉得我的文章对您有用,请帮助本站成长」

赞(0) 打赏
一分也是爱

支付宝扫一扫打赏

微信扫一扫打赏

上一篇:

下一篇:

相关推荐

博客简介

本站CDN采用VmShell免费提供离中国大陆最近的香港CMI高速网络做支撑,ToToTel打造全球最快速的边沿网络支撑服务,具体详情请见 :https://vmshell.com/ 以及 https://tototel.com/,网站所有的文件和内容禁止大陆网站搬迁复制,谢谢,VPS营销投稿邮箱: [email protected],我们免费帮大家发布,不收取任何费用,请提供完整测试文稿!

精彩评论

友情链接

他们同样是一群网虫,却不是每天泡在网上游走在淘宝和网游之间、刷着本来就快要透支的信用卡。他们或许没有踏出国门一步,但同学却不局限在一国一校,而是遍及全球!申请交换友链

站点统计

  • 文章总数: 2306 篇
  • 草稿数目: 12 篇
  • 分类数目: 6 个
  • 独立页面: 0 个
  • 评论总数: 2 条
  • 链接总数: 0 个
  • 标签总数: 5836 个
  • 注册用户: 139 人
  • 访问总量: 8,670,870 次
  • 最近更新: 2024年4月2日