ip代理池

IP代理

用于爬虫反爬
ip代理池位置为https://www.m0yuqi.cn/ip_proxy.txt
查看自身IPhttps://www.m0yuqi.cn/ip.php

构建过程

爬取西刺代理快代理云代理IP海的免费代理IP,保存到本地文件

定时任务

创建linux定时任务crontab -e,写入如下

0 */4 * * * python3 /proxypool/ip_proxy_crawl.py #爬取IP
0 */2 * * * python3 /proxypool/check_ip_proxy.py #检查IP是否存活
Edit with markdown