python写爬虫爬取京东商品信息

要使用Python写一个爬虫来爬取京东的商品信息，你可以使用requests库来发送HTTP请求，以及BeautifulSoup库来解析HTML页面。以下是一个简单的例子，展示了如何获取一个商品的基本信息。

首先，确保安装了所需的库：

pip install requests beautifulsoup4

然后，你可以使用以下代码作为爬虫的基本框架：

import requests
from bs4 import BeautifulSoup
 
# 商品URL
product_url = 'https://item.jd.com/100012043978.html'
 
# 发送HTTP请求
response = requests.get(product_url)
response.raise_for_status()  # 检查请求是否成功
 
# 解析HTML内容
soup = BeautifulSoup(response.text, 'html.parser')
 
# 提取商品信息
product_name = soup.find('div', class_='sku-name').text.strip()
product_price = soup.find('div', class_='pin').text.strip()
product_img = soup.find('img', class_='J_Img')['src']
 
# 打印商品信息
print(f"商品名称: {product_name}")
print(f"商品价格: {product_price}")
print(f"商品图片: {product_img}")

请注意，为了获取更多信息，你可能需要分析HTML结构，并根据需要提取更多的元素。此外，很多网站采取了反爬措施，例如JavaScript渲染的内容、动态加载的数据，或者需要登录才能访问的内容，这些情况下你可能需要处理更复杂的情况，比如使用Selenium等工具来模拟浏览器行为。

此外，应遵守网站的robots.txt规则以及法律法规，不进行滥用。