【前端爬虫】关于如何获取自己的请求头信息(user-agent和cookie)
在Python中，你可以使用requests库来发送HTTP请求，并获取返回的响应头信息。以下是一个示例代码，展示了如何获取请求头中的User-Agent和Cookie信息：
import requests
url = 'http://example.com' # 替换为你想爬取的网站
# 发送HTTP请求
response = requests.get(url)
# 获取User-Agent
user_agent = response.request.headers.get('User-Agent')
print('User-Agent:', user_agent)
# 获取Cookie
cookies = response.cookies
for cookie in cookies:
print(cookie.name, ':', cookie.value)确保在使用这段代码前已经安装了requests库，可以使用pip install requests来安装。
此代码发送一个GET请求到指定的URL，然后打印出响应中的User-Agent和所有Cookie信息。response.request.headers包含了发送请求时的HTTP头部信息，而response.cookies是一个包含服务器设置的Cookie的容器。
评论已关闭