网络爬虫配置ip代理

网络爬虫配置ip 代理，下面以python request 库为例子。
首先，准备好文章链接和开发工具（Pycharm）

1.配置proxies

proxies = {
'http':'http://' + ip,
'https':'https://' + ip,
}

2.设置参数

content = requests.get(url=url,proxies=proxies).content.decode('utf-8')

3.完整代码

import requests  
  
url = 'https://www.qq.com'  
ip = '你的代理IP'  
headers = {

    #以下填你的请求头信息  
 'accept': '',  
 'accept-encoding': '',  
 'accept-language': '',  
 'cache-control': '',  
 'cookie':'',  
 'sec-fetch-mode': '',  
 'sec-fetch-site': '',  
 'sec-fetch-user': '',  
 'upgrade-insecure-requests': 1,  
 'user-agent': '',  
}  
  
proxies = {  
'http':'http://' + ip,  
'https':'https://' + ip,  
}  
  
content = requests.get(url=url,headers=headers,proxies=proxies).content.decode('utf-8')
print(content)