Windows IDEA Python开发环境安装+爬虫示例
以下是一个简单的Python爬虫示例,用于在Windows环境下使用PyCharm IDE安装Python爬虫所需的库,并展示了一个简单的爬虫代码。
安装Python和PyCharm:
- 在PyCharm中创建新的Python项目。
安装爬虫所需的库,例如requests和beautifulsoup4。
打开PyCharm的Terminal窗口,输入以下命令安装:
pip install requests pip install beautifulsoup4
- 编写一个简单的爬虫示例代码,例如爬取一个网页的标题。
示例代码:
import requests
from bs4 import BeautifulSoup
def get_page_title(url):
response = requests.get(url)
if response.status_code == 200:
soup = BeautifulSoup(response.text, 'html.parser')
return soup.title.string
else:
return "Error: Page not found or the request was not successful"
url = "http://example.com" # 替换为你想爬取的网页
title = get_page_title(url)
print(title)
确保你有相应网站的爬取权限,不要进行侵犯其他网站权益的行为。
评论已关闭