Selenium绕过爬虫检测（终极方案）

Selenium绕过爬虫检测通常涉及使用Selenium WebDriver来模拟人的正常浏览器行为，从而绕过简单的JavaScript检查。以下是一个使用Python和Selenium的示例代码：

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
 
# 设置webdriver路径，这里以Chrome为例
driver_path = 'path/to/your/chromedriver'
 
# 启动webdriver
driver = webdriver.Chrome(executable_path=driver_path)
 
# 打开目标网页
driver.get('http://example.com')
 
# 通过Selenium操作浏览器，模拟正常用户的行为
# 例如，搜索引擎通常会检查用户是否在搜索框中输入了文本
search_input = driver.find_element_by_id('search-input')
search_input.send_keys('Selenium Bots Detection Bypass', Keys.ENTER)
 
# 等待页面加载完成
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
wait = WebDriverWait(driver, 10)
wait.until(EC.presence_of_element_located((By.ID, 'some-id-on-result-page')))
 
# 执行需要的操作，例如获取结果
# ...
 
# 清理，关闭浏览器
driver.quit()

这段代码展示了如何使用Selenium WebDriver来打开一个页面，模拟用户输入并执行搜索操作。它通过定位元素、发送键盘输入和点击按钮来模拟人的行为，从而绕过简单的爬虫检测。