Python selenium模拟网页点击爬虫交管12123违章数据-6ren

gpt4 book

didi

Python selenium模拟网页点击爬虫交管12123违章数据

转载作者：qq735679552 更新时间：2022-09-27 22:32:09

25

4

gpt4 key购买

nike

CFSDN坚持开源创造价值，我们致力于搭建一个资源共享平台，让每一个IT人在这里找到属于你的精彩世界.

这篇CFSDN的博客文章Python selenium模拟网页点击爬虫交管12123违章数据由作者收集整理，如果你对这篇文章有兴趣，记得点赞哟.

在上一篇文章《Python教程—模拟网页点击爬虫定位系统》讲解怎么通过模拟点击方式爬取车辆定位数据，本次介绍怎么以模拟点击方式进入交管12123爬取车辆违章数据，本文直接讲解过程，使用的命令解释见上一篇文章。本文同《Python教程—模拟网页点击爬虫定位系统》同样为企业中实际的爬虫案例，如果之后想进入车企行业可以做个了解.

准备工具：spyder、selenium库、google浏览器及对应版本的chromedriver.exe 。

效果。

Python selenium模拟网页点击爬虫交管12123违章数据

注：分享此案例目的是为了帮助同行解放双手，更好管理企业资产，本文程序以删除网址、账号密码，该网址比较麻烦的一点是开始点击登录的时候网页可能会有其他弹窗出现，使得原有路径改变，程序会因为找不到对应路径而报错，重新执行程序即可。除了模拟点击登录，还可以直接通过Cookie直接登录网页，这种方式就可以绕过登录的繁琐步骤.

调用库

 
    ? 
   
         from 
         selenium  
         import 
         webdriver 
        
         import 
         time 
        
         import 
         csv 
        
         import 
         datetime 
        
         from 
         selenium.webdriver.common.by  
         import 
         By 
        
         from 
         selenium.webdriver.support  
         import 
         expected_conditions as EC 
        
         from 
         selenium.webdriver.support.wait  
         import 
         WebDriverWait 
        
         import 
         math 
        
         import 
         xlrd

读取需要查询的车牌号。

Python selenium模拟网页点击爬虫交管12123违章数据

 
    ? 
   
         data  
         = 
         xlrd.open_workbook( 
         'cheliang.xlsx' 
         )

创建浏览，打开网页。

 
    ? 
   
         opt  
         = 
         webdriver.ChromeOptions()    
         #创建浏览 
        
         #opt.set_headless()    #无窗口模式 
        
         driver  
         = 
         webdriver.Chrome(options 
         = 
         opt)   
         #创建浏览器对象 
        
         driver.maximize_window()    
         #最大化窗口 
        
         ​ 
        
         print 
         ( 
         "正在打开网页" 
         ) 
        
         driver.get('')  
         #打开网页

依次点击单位登录、输入账号、密码、点击验证码填写区域触发图片、勾选、输入验证码、点击登录。

Python selenium模拟网页点击爬虫交管12123违章数据

 
    ? 
   
         time.sleep( 
         3 
         )      
         #加载等待 
        
         print 
         ( 
         "点击单位登录" 
         ) 
        
         time.sleep( 
         3 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[1]/div[2]/div/div[2]/div[2]/button" 
         ).click() 
         #点击单位登录 
        
         ​ 
        
         time.sleep( 
         3 
         )      
         #加载等待 
        
         print 
         ( 
         "正在填写账号" 
         ) 
        
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[1]/div/input" 
         ) 
        
         # 清空原有内容 
        
         elem.clear() 
        
         # 填入账号 
        
         elem.send_keys("") 
        
         ​ 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         print 
         ( 
         "正在填写密码" 
         ) 
        
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[2]/div/input" 
         ) 
        
         # 清空原有内容 
        
         elem.clear() 
        
         # 填入密码 
        
         elem.send_keys("") 
        
         ​ 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         print 
         ( 
         "正在查看验证码" 
         ) 
        
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input" 
         ).click() 
         #查看验证码 
        
         print 
         ( 
         "请输入验证码" 
         ) 
        
         yanzhengma 
         = 
         input 
         () 
        
         ​ 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[4]/div/label/input" 
         ).click() 
         #勾选 
        
         ​ 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         # 填入验证码 
        
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input" 
         ) 
        
         elem.clear() 
        
         elem.send_keys( 
         str 
         (yanzhengma)) 
        
         ​ 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         print 
         ( 
         "正在登陆" 
         ) 
        
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[5]/button" 
         ).click() 
         #点击

点击违法查询，设置查询时间。

Python selenium模拟网页点击爬虫交管12123违章数据

 
    ? 
   
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[5]/button" 
         ).click() 
         #点击 
        
         time.sleep( 
         3 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/ul/li[5]/a" 
         ).click() 
         #点击违法查询 
        
         time.sleep( 
         1 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[1]/div/div[1]/span/i" 
         ).click() 
         #点击选择日期 
        
         for 
         i  
         in 
         range 
         ( 
         3 
         ): 
        
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[4]/table/thead/tr/th[1]/i" 
         ).click() 
         #点击 
        
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[4]/table/tbody/tr/td/span[1]" 
         ).click() 
         #点击 
        
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[3]/table/tbody/tr[2]/td[1]" 
         ).click() 
         #点击

循环依次查询每个车牌违章信息，每次都需要清空上次输入，填写本次查询车牌，识别有多少条数据，共多少页，每页最多展示10条，最后一页有多少条数据。

Python selenium模拟网页点击爬虫交管12123违章数据

 
    ? 
   
         for 
         ii  
         in 
         range 
         ( 
         0 
         ,nrows): 
        
         rowValues 
         = 
         table.row_values(ii)  
         #某一行数据 
        
         print 
         ( 
         '正在读取第' 
         + 
         str 
         (ii 
         + 
         1 
         ) 
         + 
         '辆车' 
         ) 
        
         # 填写车牌 
        
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[3]/div/input" 
         ) 
        
         elem.clear() 
        
         elem.send_keys(rowValues) 
         #输入车牌 
        
         time.sleep( 
         0.1 
         )      
         #加载等待 
        
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[4]/button" 
         ).click() 
         #点击查询 
        
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
         result 
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[2]/div[1]/div/p/span" 
         ).text 
         #总违章条数 
        
         result 
         = 
         int 
         (result) 
        
         a 
         = 
         math.ceil(result 
         / 
         10 
         ) 
         #总页数 
        
         b 
         = 
         result 
         % 
         10 
         #除余

读取列表中的数据，其中扣分和罚款需要点击"查看详情"，从弹窗中读取数据。

 
    ? 
   
 
     
       
       
         result1 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[1]" 
         ))).text 
        
 
         result2 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[2]" 
         ))).text 
        
 
         result3 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[3]" 
         ))).text 
        
 
         result4 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[4]" 
         ))).text 
        
 
         result5 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[5]" 
         ))).text 
        
 
         result6 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[6]" 
         ))).text 
        
 
         result7 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[7]" 
         ))).text 
        
 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[8]/a" 
         ))).click() 
         #查看详情，打开弹窗 
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         result8 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[7]/span[2]" 
         ))).text 
        
 
         result9 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[8]/span[2]" 
         ))).text 
        
 
         result 
         = 
         [result1,result2,result3,result4,result5,result6,result7,result8,result9] 
        
 
         R.append(result) 
        
 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//div[@class='modal-footer ui_modal']/button" 
         ))).click() 
         #关闭弹窗 
        
 
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
     
 
   

每读取一辆车的数据就写入表格中。

 
    ? 
   
         with  
         open 
         (wenjian, 
         'w' 
         ,encoding 
         = 
         'utf-8' 
         ,newline 
         = 
         '') as fp: 
        
         writer  
         = 
         csv.writer(fp) 
        
         writer.writerows(R)  
         #写入数据

完整代码

 
    ? 
   
 
     
       
       
         from 
         selenium  
         import 
         webdriver 
        
 
         import 
         time 
        
 
         import 
         csv 
        
 
         import 
         datetime 
        
 
         from 
         selenium.webdriver.common.by  
         import 
         By 
        
 
         from 
         selenium.webdriver.support  
         import 
         expected_conditions as EC 
        
 
         from 
         selenium.webdriver.support.wait  
         import 
         WebDriverWait 
        
 
         import 
         math 
        
 
         import 
         xlrd 
        
 
         data  
         = 
         xlrd.open_workbook( 
         'cheliang.xlsx' 
         ) 
        
 
         table  
         = 
         data.sheets()[ 
         0 
         ] 
        
 
         nrows  
         = 
         table.nrows  
         #行数 
        
 
         ncols  
         = 
         table.ncols  
         #列数 
        
 
           
        
 
         opt  
         = 
         webdriver.ChromeOptions()    
         #创建浏览 
        
 
         #opt.set_headless()    #无窗口模式 
        
 
         driver  
         = 
         webdriver.Chrome(options 
         = 
         opt)   
         #创建浏览器对象 
        
 
         driver.maximize_window()    
         #最大化窗口 
        
 
           
        
 
         print 
         ( 
         "正在打开网页" 
         ) 
        
 
         driver.get('')  
         #打开网页 
        
 
           
        
 
         time.sleep( 
         3 
         )      
         #加载等待 
        
 
         print 
         ( 
         "点击单位登录" 
         ) 
        
 
         time.sleep( 
         3 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[1]/div[2]/div/div[2]/div[2]/button" 
         ).click() 
         #点击单位登录 
        
 
           
        
 
         time.sleep( 
         3 
         )      
         #加载等待 
        
 
         print 
         ( 
         "正在填写账号" 
         ) 
        
 
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[1]/div/input" 
         ) 
        
 
         # 清空原有内容 
        
 
         elem.clear() 
        
 
         # 填入账号 
        
 
         elem.send_keys("") 
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         print 
         ( 
         "正在填写密码" 
         ) 
        
 
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[2]/div/input" 
         ) 
        
 
         # 清空原有内容 
        
 
         elem.clear() 
        
 
         # 填入密码 
        
 
         elem.send_keys("") 
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         print 
         ( 
         "正在查看验证码" 
         ) 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input" 
         ).click() 
         #查看验证码 
        
 
         print 
         ( 
         "请输入验证码" 
         ) 
        
 
         yanzhengma 
         = 
         input 
         () 
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[4]/div/label/input" 
         ).click() 
         #勾选 
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         # 填入验证码 
        
 
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input" 
         ) 
        
 
         elem.clear() 
        
 
         elem.send_keys( 
         str 
         (yanzhengma)) 
        
 
           
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         print 
         ( 
         "正在登陆" 
         ) 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[5]/button" 
         ).click() 
         #点击 
        
 
           
        
 
         time.sleep( 
         3 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[4]/div/div[1]/ul/li[5]/a" 
         ).click() 
         #点击违法查询 
        
 
           
        
 
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[1]/div/div[1]/span/i" 
         ).click() 
         #点击选择日期 
        
 
           
        
 
         for 
         i  
         in 
         range 
         ( 
         3 
         ): 
        
 
              
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
              
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[4]/table/thead/tr/th[1]/i" 
         ).click() 
         #点击 
        
 
           
        
 
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[4]/table/tbody/tr/td/span[1]" 
         ).click() 
         #点击 
        
 
           
        
 
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
         driver.find_element_by_xpath( 
         "/html/body/div[6]/div[3]/table/tbody/tr[2]/td[1]" 
         ).click() 
         #点击 
        
 
           
        
 
         wenjian 
         = 
         datetime.datetime.now().strftime( 
         '%Y-%m-%d-%H%M%S' 
         )  
         #以开始时间作为数据导出的表格文件名 
        
 
         wenjian 
         = 
         wenjian 
         + 
         '.csv' 
        
 
           
        
 
         R 
         = 
         [] 
        
 
         for 
         ii  
         in 
         range 
         ( 
         0 
         ,nrows): 
        
 
              
         rowValues 
         = 
         table.row_values(ii)  
         #某一行数据 
        
 
              
         print 
         ( 
         '正在读取第' 
         + 
         str 
         (ii 
         + 
         1 
         ) 
         + 
         '辆车' 
         ) 
        
 
              
         # 填写车牌 
        
 
              
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
              
         elem  
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[3]/div/input" 
         ) 
        
 
              
         elem.clear() 
        
 
              
         elem.send_keys(rowValues) 
         #输入车牌 
        
 
              
         time.sleep( 
         0.1 
         )      
         #加载等待 
        
 
              
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[4]/button" 
         ).click() 
         #点击查询 
        
 
              
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
              
         result 
         = 
         driver.find_element_by_xpath( 
         "/html/body/div[3]/div/div[2]/div[2]/div[1]/div/p/span" 
         ).text 
         #总违章条数 
        
 
              
         result 
         = 
         int 
         (result) 
        
 
              
         a 
         = 
         math.ceil(result 
         / 
         10 
         ) 
         #总页数 
        
 
              
         b 
         = 
         result 
         % 
         10 
         #除余 
        
 
              
        
 
              
         for 
         i  
         in 
         range 
         ( 
         1 
         ,a): 
        
 
                  
         for 
         j  
         in 
         range 
         ( 
         1 
         , 
         11 
         ): 
        
 
                      
        
 
                      
         result1 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[1]" 
         ))).text 
        
 
                      
         result2 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[2]" 
         ))).text 
        
 
                      
         result3 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[3]" 
         ))).text 
        
 
                      
         result4 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[4]" 
         ))).text 
        
 
                      
         result5 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[5]" 
         ))).text 
        
 
                      
         result6 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[6]" 
         ))).text 
        
 
                      
         result7 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[7]" 
         ))).text 
        
 
                      
         #result1=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[1]").text 
        
 
                      
         #result2=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[2]").text 
        
 
                      
         #result3=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[3]").text 
        
 
                      
         #result4=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[4]").text 
        
 
                      
         #result5=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[5]").text 
        
 
                      
         #result6=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[6]").text 
        
 
                      
         #result7=driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[7]").text 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[8]/a" 
         ))).click() 
         #查看详情，打开弹窗 
        
 
                      
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
                      
         #driver.find_element_by_xpath("//table[@id='my-msg-list']/tbody/tr["+str(j)+"]/td[8]/a").click()#点击列表中的元素 
        
 
                      
         #time.sleep(0.5)     #加载等待 
        
 
                      
         result8 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[7]/span[2]" 
         ))).text 
        
 
                      
         result9 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[8]/span[2]" 
         ))).text 
        
 
                      
         #result8=driver.find_element_by_xpath("//form[@class='form-horizontal']/div[7]/span[2]").text 
        
 
                      
         #result9=driver.find_element_by_xpath("//form[@class='form-horizontal']/div[8]/span[2]").text 
        
 
                      
         result 
         = 
         [result1,result2,result3,result4,result5,result6,result7,result8,result9] 
        
 
                      
         R.append(result) 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//div[@class='modal-footer ui_modal']/button" 
         ))).click() 
         #关闭弹窗 
        
 
                      
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
                      
         #driver.find_element_by_xpath("//div[@class='modal-footer ui_modal']/button").click()#点击列表中的元素 
        
 
                      
         #time.sleep(0.5)     #加载等待 
        
 
                      
        
 
                  
         driver.find_element_by_link_text( 
         "下一页" 
         ).click() 
         #翻页 
        
 
                  
         time.sleep( 
         0.5 
         )      
         #加载等待    
        
 
                  
        
 
              
         if 
         b> 
         0 
         : 
        
 
                  
         for 
         j  
         in 
         range 
         ( 
         1 
         ,b 
         + 
         1 
         ): 
        
 
                      
         result1 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[1]" 
         ))).text 
        
 
                      
         result2 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[2]" 
         ))).text 
        
 
                      
         result3 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[3]" 
         ))).text 
        
 
                      
         result4 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[4]" 
         ))).text 
        
 
                      
         result5 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[5]" 
         ))).text 
        
 
                      
         result6 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[6]" 
         ))).text 
        
 
                      
         result7 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[7]" 
         ))).text 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[8]/a" 
         ))).click() 
         #查看详情，打开弹窗 
        
 
                      
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
                      
         result8 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[7]/span[2]" 
         ))).text 
        
 
                      
         result9 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[8]/span[2]" 
         ))).text 
        
 
                      
         result 
         = 
         [result1,result2,result3,result4,result5,result6,result7,result8,result9] 
        
 
                      
         R.append(result) 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//div[@class='modal-footer ui_modal']/button" 
         ))).click() 
         #关闭弹窗 
        
 
                      
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
           
        
 
              
         if 
         b 
         = 
         = 
         0 
         : 
        
 
                  
         for 
         j  
         in 
         range 
         ( 
         1 
         , 
         11 
         ): 
        
 
                      
         result1 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[1]" 
         ))).text 
        
 
                      
         result2 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[2]" 
         ))).text 
        
 
                      
         result3 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[3]" 
         ))).text 
        
 
                      
         result4 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[4]" 
         ))).text 
        
 
                      
         result5 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[5]" 
         ))).text 
        
 
                      
         result6 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[6]" 
         ))).text 
        
 
                      
         result7 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[7]" 
         ))).text 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//table[@id='my-msg-list']/tbody/tr[" 
         + 
         str 
         (j) 
         + 
         "]/td[8]/a" 
         ))).click() 
         #查看详情，打开弹窗 
        
 
                      
         time.sleep( 
         1 
         )      
         #加载等待 
        
 
                      
         result8 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[7]/span[2]" 
         ))).text 
        
 
                      
         result9 
         = 
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//form[@class='form-horizontal']/div[8]/span[2]" 
         ))).text 
        
 
                      
         result 
         = 
         [result1,result2,result3,result4,result5,result6,result7,result8,result9] 
        
 
                      
         R.append(result) 
        
 
                      
         WebDriverWait(driver, 
         10 
         ).until(EC.element_to_be_clickable((By.XPATH, 
         "//div[@class='modal-footer ui_modal']/button" 
         ))).click() 
         #关闭弹窗 
        
 
                      
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
             
        
 
              
         time.sleep( 
         0.5 
         )      
         #加载等待 
        
 
              
         with  
         open 
         (wenjian, 
         'w' 
         ,encoding 
         = 
         'utf-8' 
         ,newline 
         = 
         '') as fp: 
        
 
                  
         writer  
         = 
         csv.writer(fp) 
        
 
                  
         writer.writerows(R)  
         #写入数据 
        
 
     
 
   

到此这篇关于Python selenium模拟网页点击爬虫交管12123违章数据的文章就介绍到这了,更多相关Python selenium模拟点击爬虫内容请搜索我以前的文章或继续浏览下面的相关文章希望大家以后多多支持我！。

原文链接：https://blog.csdn.net/qq_39899679/article/details/117267056 。

最后此篇关于Python selenium模拟网页点击爬虫交管12123违章数据的文章就讲到这里了,如果你想了解更多关于Python selenium模拟网页点击爬虫交管12123违章数据的内容请搜索CFSDN的文章或继续浏览相关文章，希望大家以后支持我的博客！。

25

4

0

文章推荐：对Python3 序列解包详解

文章推荐： C语言实现骑士飞行棋

文章推荐：对Python3 pyc 文件的使用详解

文章推荐： C++11 并发指南之std::thread 详解

java - 使用 selenium webdriver 从屏幕 A(网页)跳转到屏幕 B(网页)，绕过中间屏幕(网页)
这个问题与窗口处理或多个浏览器窗口的杂耍无关，而是关于在同一窗口中浏览 Web 应用程序的网页。我遇到这样的情况 1.我导航为屏幕 A->屏幕 x->屏幕 Y->屏幕 B 2.我需要捕获首次登录时屏幕
网页:系统会记录用户显示每个页面的时长
我有这个要求: The system will record the length of time the user displayed each page. 虽然在富客户端应用程序中微不足道，但我不
JavaScript 网页
我在调试 JavaScript 网页时遇到问题。我遇到困难的地方是我标记 (...) 的地方。我收到未定义的错误。我是否将函数 countDown(start, Increment) 中的参数(即 s
网页 |屏幕中央菜单栏
需要一些帮助。我刚开始学习 HTML，今天一直在研究如何制作菜单，但在这样做时遇到了问题。我似乎不知道如何在屏幕上居中显示菜单。这就是我目前所拥有的； Home
javascript - 我想通过单击按钮将小程序的任何参数发送到浏览器。 (网页)
我想通过单击按钮将小程序的任何参数发送到浏览器。 (HTML)。我知道按钮对象有一些方法，但不知道使用哪个。我怎样才能做到这一点？ps .: 我使用的是 jnlp 协议(protocol)。类似于:
java - 使用维基百科数据时如何提高性能？网页？
我应该使用Wikipedia的文章链接数据转储从组织的网站中提取代表性术语。为此，我已经- 抓取并下载了该组织的网页。 (〜110,000) 创建了Wikipedia ID和术语/标题的字典。 (约
javascript - 我如何从android调用javascript函数(网页)？
我的网页中包含 javascript 函数... function callFromAndroid(varName) { alert("call from android activated by
java - 用java编辑html/网页
我想创建一个 Java 应用程序，允许用户导入网页并能够在程序中对其进行编辑。导入网页将对其进行渲染，并且页面的组件(图像、文本等)将是可编辑或可拖动的，从而允许用户重新布局组件。例如，用户可以加
java - 将scrollPane添加到EditorPane(网页)
当我们按下按钮时，我向 JFrame 添加了一个网页(网页在同一框架中打开)。效果很好。但我想向其中添加一个scrollPane，但是当我添加 JScrollPane jsp = new JScrol
javascript - 网页 |定心
我在使用 particles.js 时无法将图像居中。图像居中，但略微偏离中心。为什么要这样做，我如何才能将它居中？ html particles.js demo CSS
javascript - 加载页面时如何修复音频不自动播放？ - 网页
我正在尝试在加载页面时播放音频，它应该非常简单但我无法完成。问题是它没有播放，我尝试检查自动播放的状态(真/假)，它说它在页面加载时播放，尽管它没有播放，还尝试制作一个将改变自动播放的功能状态为
javascript - 显示选定的图像、网页
我正在尝试显示用户从列表中选择的图像，但我在屏幕上看不到任何内容。 .container { position: relative; } .ce
html - Bootstrap 网页
这听起来有点奇怪，但我需要一些帮助，网页必须有一行必须包含三个部分，第一部分必须有 1 列的偏移量，并且部分之间的空间必须是 10px到目前为止，使用 Bootstrap 一切顺利。现在第二行将有
html - 网页 - 以毫米为单位的图像大小
这个问题在这里已经有了答案: Web and physical units (2 个答案) Div width in cm (inch) (6 个答案) 关闭 9 年前。
javascript - 网页。背景是如何构建的。
这个问题不太可能帮助任何 future 的访问者；它只与一个小的地理区域、一个特定的时间点或一个非常狭窄的情况有关，这些情况并不普遍适用于互联网的全局受众。为了帮助使这个问题更广泛地适用，visit
css - IPython笔记本设置笔记本面板的宽度(网页)
我想将我的 IPython 笔记本的宽度设置为 2500 像素，并且我希望它左对齐。我该怎么做？我使用这段代码来应用我自己的 CSS: from IPython.core.display impor
Javascript |网页 |饼图状态
关闭。这个问题需要更多focused .它目前不接受答案。想改进这个问题吗？更新问题，使其只关注一个问题 editing this post . 关闭 7 年前。 Improve this q
javascript - 如何接受姓名和号码输入并将其添加到文档/网页
我在 Word 中制作了一份文档，希望人们在其中添加自己的姓名以及他们的教学经验。我已将其保存为网页并发布到此处: http://epicforum.net/TS ...但操作部分实际上就是这样: h
javascript - 按下空格键时触发按钮单击(网页)
这个问题在这里已经有了答案: Execute JS code after pressing the spacebar (5 个答案) 关闭 4 年前。
javascript - 要求用户先登录 - 网页
我正在开发一个只有两个页面的网站。 1.登录 2.首页我正在使用 Angular 框架。 app.config(['$routeProvider', function ($routeProvider

qq735679552

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

滴滴打车优惠券

全站热门文章

Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com