Python 爬虫技术 第06节 HTTP协议与Web基础知识
HTTP（Hypertext Transfer Protocol）是一种用于分布式、协作式和超媒体信息系统的应用层协议。设计HTTP最初的目的是为了提供一种发布和接收HTML页面的方法。
在Python中，可以使用requests库来发送HTTP请求。以下是一个简单的例子，展示如何使用requests库发送HTTP GET请求：
import requests
url = 'http://www.example.com' # 替换为你想访问的网站
response = requests.get(url)
# 检查响应状态
if response.status_code == 200:
print("请求成功")
# 处理响应数据
print(response.text) # 打印网页内容
else:
print("请求失败")确保在使用前安装requests库：
pip install requests以上代码发送一个HTTP GET请求到指定的URL，并打印出响应的文本内容。如果需要抓取动态网站或处理更复杂的HTTP请求，可能还需要使用到如BeautifulSoup、lxml等库来解析HTML内容。
评论已关闭