• 推荐使用最新版火狐浏览器和Chrome浏览器访问本网站
  • 欢迎访问泽同学的网站,网络空间安全,python脚本 , 工具库,欢迎加入泽同学的小屋 QQ群
  • 当然也欢迎大家来到我的心情博客来玩呀~,推荐一个视频网站
  • 感觉网站还不错的可以来加QQ一起玩呀,有不错的资料可以联系我,可以出稿费哦~
  • 推荐使用最新版火狐浏览器和Chrome浏览器访问本网站
  • 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏泽同学的博客吧

爬取各大代理网站代理ip

python笔记 小驴 10个月前 (07-20) 1037次浏览 0个评论 扫描二维码
文章目录[隐藏]

代理网站爬虫

此脚本利用urllib2和selenium对网站进行爬取。

代理网站可以评论在下方,共同使用,爬取,本网站会提供免费代理api接口供大家使用

api地址:proxy.php

防止伸手党,设置了最高单次获取最大值

api没做混淆。需要的可以自己在网页中script源码哦

需要修改db文件中的数据库账号密码,还要新建一个名为porxy的数据库。还需要指定一下文件根目录。根据报错修改就可以了。使用愉快~

github地址:https://github.com/a1764325807/python/tree/master/python

可能会有一定bug,欢迎底部评论~

本站作品的版权皆为作品作者所有。

本站文字和内容为本站编辑或翻译,部分内容属本站原创,所以转载前务必通知本站并以超链接形式注明内容来自本站,否则以免带来不必要的麻烦。

本站内容欢迎分享,但拒绝有商业目的的转载!


泽同学 , 版权所有丨如未注明 , 均为原创丨本网站采用BY-NC-SA协议进行授权
转载请注明原文链接:爬取各大代理网站代理ip
喜欢 (5)
[略略]
分享 (0)
小驴
关于作者:
卢本伟。!!!
发表我的评论
取消评论

表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址