python 爬虫ip代理
生活随笔
收集整理的這篇文章主要介紹了
python 爬虫ip代理
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
新建proxy_list.txt文本,一行一個ip代理ip地址,必要情況下可以加上端口號
import requestsurl = 'www.920vip.net'headers = {'User-Agent': "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36" }# 讀取ip代理池 with open('proxy_list.txt', 'r') as f:while True:for line in f.readlines():proxy = line.strip('\n') # 刪除每一行最后面的換行符print(proxy)proxy_support = {'http': 'http://' + proxy}response = requests.get(url, proxies=proxy_support)print(response.text)總結(jié)
以上是生活随笔為你收集整理的python 爬虫ip代理的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 微信小程序 长按属性
- 下一篇: WARN util.NativeCode