Python教程

python爬虫之代理IP

本文主要是介绍python爬虫之代理IP,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

python爬虫之代理IP

免费代理网站:快代理
最好使用最新的免费代理,免费的很多都不能用

from fake_useragent import UserAgent
import requests

url = 'http://mip.chinaz.com/'

proxies = {
    'http': 'http://'+'ip:端口',
    'https': 'https://'+'ip:端口'
}

headers = {
    'user-agent': UserAgent().random
}
res = requests.get(url=url, headers=headers, proxies=proxies)
page_text = res.text

with open('代理ip.html', 'w', encoding='utf-8') as fp:
    fp.write(page_text)

版权属于:瞌学家 所有,转载请注明出处

本文链接:https://songonline.top/archives/144/

友情提示: 如果文章部分链接出现404,请留言或者联系博主修复。

这篇关于python爬虫之代理IP的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!