python 笔记——request、爬虫、socket、多线程
这是一个关于Python网络请求、简单爬虫、Socket编程和多线程的概述和代码示例。
网络请求使用requests
库:
import requests
response = requests.get('https://www.example.com')
print(response.text)
简单爬虫使用BeautifulSoup
解析HTML内容:
from bs4 import BeautifulSoup
import requests
url = 'https://www.example.com'
r = requests.get(url)
soup = BeautifulSoup(r.text, 'html.parser')
# 提取所有的链接
for link in soup.find_all('a'):
print(link.get('href'))
Socket编程示例:
import socket
# 创建一个socket对象
s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
# 建立连接
s.connect(('www.example.com', 80))
# 发送数据
s.send(b'GET / HTTP/1.1\r\nHost: www.example.com\r\nConnection: close\r\n\r\n')
# 接收响应
response = s.recv(1024)
print(response)
# 关闭连接
s.close()
多线程示例:
from threading import Thread
def task(n):
print(f'Thread {n} is running')
# 创建并启动线程
t1 = Thread(target=task, args=(1,))
t2 = Thread(target=task, args=(2,))
t1.start()
t2.start()
t1.join()
t2.join()
print('All threads completed')
这些代码片段展示了如何在Python中进行网络请求、简单爬虫、Socket编程和多线程编程。这些技术在数据科学、网络编程和分布式系统等领域有着广泛的应用。
评论已关闭