V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  ThomasHuang  ›  全部回复第 1 页 / 共 1 页
回复总数  3
2014-11-19 17:12:34 +08:00
回复了 ccbikai 创建的主题 程序员 大家都是怎么处理爬虫代理问题的?
@binux 不好意思,我没怎么用过Squid,不怎么看懂您的意思。Squid怎么才能做到动态添加代理池地址,并且自动调整权重?

您的意思是动态生成配置文件,然后重启吗?

最近我自己用gevent和pycurl自己实现了一个简单的代理,主要是代理池里,除了http代理,还有https,socks4,socks5,请问你所说的方式支持https和socks协议吗?我查看Squid的文档,上面来看,似乎cache_peer只能设置http代理是吗?
2014-02-28 13:50:13 +08:00
回复了 Sean 创建的主题 Atom 分享 Github Atom 邀请三枚!
非常感谢,hyhcookie#163.com
2014-02-28 13:47:14 +08:00
回复了 sutar 创建的主题 Atom 继续散 Atom 邀请码
好人一生平安~~~ hyhcookie#163.com
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5134 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 13ms · UTC 08:48 · PVG 16:48 · LAX 01:48 · JFK 04:48
Developed with CodeLauncher
♥ Do have faith in what you're doing.