阅读量:3
要自定义Python爬虫的User-Agent,您可以使用requests库来发送HTTP请求。首先,确保您已经安装了requests库。如果没有,请使用以下命令安装:
pip install requests
接下来,您可以在发送请求时设置自定义的User-Agent。以下是一个示例代码:
import requests
url = 'https://www.example.com'
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
response = requests.get(url, headers=headers)
print(response.text)
在这个示例中,我们设置了一个常见的Chrome浏览器User-Agent。您可以将其替换为其他浏览器的User-Agent,或者创建一个自定义的User-Agent字符串。只需将headers字典中的User-Agent值更改为所需的User-Agent即可。
以上就是关于“如何自定义Python爬虫user agent”的相关介绍,筋斗云是国内较早的云主机应用的服务商,拥有10余年行业经验,提供丰富的云服务器、租用服务器等相关产品服务。云服务器资源弹性伸缩,主机vCPU、内存性能强悍、超高I/O速度、故障秒级恢复;电子化备案,提交快速,专业团队7×24小时服务支持!
简单好用、高性价比云服务器租用链接:https://www.jindouyun.cn/product/cvm