利用 Flask+Redis 维护 IP 代理池

2017 年 4 月 25 日
 QKID

代理池的维护

目前有很多网站提供免费代理,而且种类齐全,比如各个地区、各个匿名级别的都有,不过质量实在不敢恭维,毕竟都是免费公开的,可能一个代理无数个人在用也说不定。所以我们需要做的是大量抓取这些免费代理,然后筛选出其中可用的代理存储起来供我们使用,不可用的进行剔除。 阅读全文

2951 次点击
所在节点    Linux
3 条回复
ryd994
2017 年 4 月 25 日
循环队列 round robin
leky
2017 年 4 月 26 日
类似的实现 不过免费代理速度感人
https://github.com/songjiz/proxy_pump
xiongbiao
2017 年 4 月 26 日

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.xtra.eu.org/t/357303

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX