基于selenium的简单爬虫示例
warning:
这篇文章距离上次修改已过190天,其中的内容可能已经有所变动。
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
# 创建WebDriver对象,指定使用Chrome浏览器
driver = webdriver.Chrome()
# 打开一个页面
driver.get("http://www.python.org")
# 找到页面上的搜索框元素
search_box = driver.find_element_by_name("q")
# 清除搜索框中的内容并输入新的内容
search_box.clear()
search_box.send_keys("Selenium")
# 提交搜索
search_box.send_keys(Keys.RETURN)
# 等待页面加载完成
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
wait = WebDriverWait(driver, 10)
wait.until(EC.presence_of_element_located((By.ID, "result_logo")))
# 关闭浏览器
driver.close()
这段代码使用了Selenium WebDriver来打开Python官网,在搜索框中输入"Selenium",并提交搜索。然后等待搜索结果出现,并在加载完成后关闭浏览器。这是一个简单的爬虫示例,展示了如何使用Selenium进行基本的网页操作。
评论已关闭