基于Flask的在线代理池

分享 · 源码 109 字 大概 1 分钟 411 次

示例图

20200220230640.jpg

结构

文件/文件夹说明
geetest极验支持,防止爬虫爬取
spider三方爬虫,获取代理,可以自己扩展,返回代理格式为 List
static资源文件
templates模板文件
data.sql数据库结构文件
index.py主文件

运行

  • Mysql 新建数据库,导入data.sql
  • 修改index.py中所有的pymysql.connect("localhost","root","root","proxy" )
  • 极验官网申请id和key,填入index.py
  • 初次运行 python index.py reload ,该命令会清空数据库并调用spider下所有的爬虫

演示:http://proxy.s0s.cc/
Github: https://github.com/k-fire/Proxy_Pool/

文章目录
END

本作品采用 知识共享署名-相同方式共享 4.0 国际许可协议 进行许可。

发表感想