目录

• 安装 Selenium
• 写代码
• 点位网页元素

pip install webdriver-manager

from selenium import webdriverfrom webdriver_manager.chrome import ChromeDriverManagerfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as ECfrom selenium.webdriver.common.keys import Keys

class Search_Baidu:def __init__(self):def search(self, keyword):def tear_down(self):

   def __init__(self): #类构造函数，用于初始化selenium的webdriver        url = "https://www.baidu.com/" #这里定义访问的网络地址        self.url = url        options = webdriver.ChromeOptions()        options.add_experimental_option("prefs", {"profile.managed_default_content_settings.images": 2}) # 不加载图片,加快访问速度        options.add_experimental_option("excludeSwitches", ["enable-automation"]) # 此步骤很重要，设置为开发者模式，防止被各大网站识别出来使用了Selenium# 这里使用chrome浏览器，而且使用我们刚才安装的webdriver_manager的chrome driver，并赋值上面的浏览器设置options变量        self.browser = webdriver.Chrome(ChromeDriverManager().install(), options=options)        self.wait = WebDriverWait(self.browser, 10) #超时时长为10s，由于自动化需要等待网页控件的加载，所以这里设置一个默认的等待超时，时长为10秒    def tear_down(self):        self.browser.close() #最后，关闭浏览器

def search(self, keyword):    # 打开百度网页    self.browser.get(self.url)    # 等待搜索框出现，最多等待10秒，否则报超时错误    search_input = self.wait.until(EC.presence_of_element_located((By.XPATH, "//*[@id="kw"]")))    # 在搜索框输入搜索的关键字    search_input.send_keys(keyword)    # 回车    search_input.send_keys(Keys.ENTER)    # 等待10秒钟    self.browser.implicitly_wait(10)    # 找到所有的搜索结果    results = self.browser.find_elements_by_css_selector(".t a , em , .c-title-text")    # 遍历所有的搜索结果    with open("search_result.txt","w") as file:                    for result in results:            if result.get_attribute("href"):                print(result.get_attribute("text").strip())                # 搜索结果的标题                # 搜索结果的网址                link = result.get_attribute("href")                # 写入文件                file.write(f"Title: {title}, link is: {link} ")

search_input = self.wait.until(EC.presence_of_element_located((By.XPATH, "//*[@id="kw"]")))

self.browser.find_elements_by_css_selector(".t a , em , .c-title-text")

results = self.browser.find_elements_by_css_selector(".t a , em , .c-title-text")

from datetime import timefrom selenium import webdriverfrom webdriver_manager.chrome import ChromeDriverManagerfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as ECfrom selenium.webdriver.common.keys import Keysclass Search_Baidu:    def __init__(self):        url = "https://www.baidu.com/"        self.url = url        options = webdriver.ChromeOptions()        options.add_experimental_option("prefs", {"profile.managed_default_content_settings.images": 2}) # 不加载图片,加快访问速度        options.add_experimental_option("excludeSwitches", ["enable-automation"]) # 此步骤很重要，设置为开发者模式，防止被各大网站识别出来使用了Selenium        self.browser = webdriver.Chrome(ChromeDriverManager().install(), options=options)        self.wait = WebDriverWait(self.browser, 10) #超时时长为10s    def search(self, keyword):        # 打开百度网页        self.browser.get(self.url)        # 等待搜索框出现，最多等待10秒，否则报超时错误        search_input = self.wait.until(EC.presence_of_element_located((By.XPATH, "//*[@id="kw"]")))        # 在搜索框输入搜索的关键字        search_input.send_keys(keyword)        # 回车        search_input.send_keys(Keys.ENTER)        # 等待10秒钟        self.browser.implicitly_wait(10)        # 找到所有的搜索结果        results = self.browser.find_elements_by_css_selector(".t a , em , .c-title-text")        # 遍历所有的搜索结果        with open("search_result.txt","w") as file:                        for result in results:                if result.get_attribute("href"):                    print(result.get_attribute("text").strip())                    # 搜索结果的标题                    # 搜索结果的网址                    link = result.get_attribute("href")                    # 写入文件                    file.write(f"Title: {title}, link is: {link} ")    def tear_down(self):        self.browser.close()if __name__ == "__main__":    search = Search_Baidu()    search.search("selenium")    search.tear_down()