浅谈Python两大爬虫库——urllib库和requests库区别

urllib和requests都是Python用于网络请求的库，但它们有一些主要的区别：

1. 接口不同：urllib提供了 rich, consistent, and easy-to-use interfaces，适合进阶使用；requests提供了简洁的API，更适合初学者和日常使用。
2. 功能不同：urllib是Python内置的HTTP请求模块，支持从URLs读取数据，包括HTTP, HTTPS, FTP等协议；requests不仅支持HTTP请求，还可以发送各种HTTP请求，如GET，POST，PUT，DELETE等，并且还可以处理cookies和session。
3. 异步支持：urllib本身不支持异步，而requests支持异步请求，可以使用aiohttp库进行异步请求。
4. 第三方库：requests更加第三方库，如需要安装，使用pip install requests即可，而urllib则是Python标准库，无需额外安装。

例子：

使用urllib发送GET请求：

import urllib.request
 
response = urllib.request.urlopen('http://www.example.com/')
html = response.read()

使用requests发送GET请求：

import requests
 
response = requests.get('http://www.example.com/')
html = response.text

在实际应用中，由于requests API更简洁和易用，开发者通常更倾向于使用requests库。而urllib更适合需要更高级或更低级控制的场景，例如需要处理复杂的HTTP请求或者需要接入异步IO的场景。