爬虫-requests模块使用代理

一，使用代理的原因
1，让服务器以为不是一个客户端在不停的请求
2，防止我们的真实地址被泄漏，防止追究责任
二，免费代理网站
米扑代理：​​​https://proxy.mimvp.com/free.php​​三，使用代理
首先安装request模块

pip install requests

设置代理字典，使用get方法使用代理

# coding=utf-8
import requests
proxies={"http":"http://115.159.116.37:60372"} #设置代理地址
headers={
    "User-Agent":"Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:63.0) Gecko/20100101 Firefox/63.0"
}
response=requests.get("https://www.baidu.com", headers=headers,proxies=proxies)
assert response.status_code==200 #检测是否使用成功 不成功会报错
print (response.status_code)  #200代表正常