python - 刮削表格底行-6ren

python - 刮削表格底行

转载作者：行者123 更新时间：2023-11-30 23:01:09

我使用的是Python 3.4。我知道如何利用BeautifulSoup抓取网页，但我正在尝试想出最有效的方法来完成此任务。 Nexus factory image page (Android) 包含所有 Nexus 设备的列表，并在新版本可用时更新。最新版本始终添加到相应表格的底部。我有每个设备的名称列表，包括真实名称和代号，我只提取这些(设备本身每年只更新一次，如果是的话，只有部分设备仍然收到更新)。

从每个表中提取底部条目的最有效方法是什么？我计划保存第一个 <td> 中的每个字符串。在底部行中作为腌制对象，这样我以后就可以轻松地比较字符串以检查当前底部行是否是新的，但我不确定抓取条目本身的最佳方法是什么。

每个<tr>其 ID 格式为 devnamebuildnumber 。由于我有每个设备的名称并且将有最新的字符串，因此我应该能够使用 soup.find("tr", id=dev + buildstring) 进行搜索。然而，这会返回找到的行的每个同级和子级，因此我不确定如何最好地利用它。

最佳答案

这里有一些可以帮助您入门的东西。这个想法是获取带有 id 属性的 h2 元素 - 除了第一个元素之外，这些元素是设备名称元素。对于找到的每个元素，让我们获取下一个 table 元素并将版本解析到列表中。实现:

from pprint import pprint

import requests
from bs4 import BeautifulSoup


url = "https://developers.google.com/android/nexus/images"
response = requests.get(url)

soup = BeautifulSoup(response.content, "lxml")

data = {}
for device in soup.find_all("h2", id=True)[1:]:
    device_name = device.get_text(strip=True)

    data[device_name] = [version.find("td").get_text(strip=True)
                         for version in device.find_next("table").find_all("tr", id=True)]

pprint(data)

打印字典，其中设备名称作为键，版本作为值:

{'"angler" for Nexus 6P': ['6.0.0 (MDA89D)',
                           '6.0.0 (MDB08K)',
                           '6.0.0 (MDB08L)',
                           '6.0.0 (MDB08M)',
                           '6.0.0 (MMB29N)',
                           '6.0.1 (MMB29M)',
                           '6.0.1 (MMB29P)'],
 '"bullhead" for Nexus 5X': ['6.0.0 (MDA89E)',
                             '6.0.0 (MDB08I)',
                             '6.0.0 (MDB08L)',
                             '6.0.0 (MDB08M)',
                             '6.0.1 (MMB29K)',
                             '6.0.1 (MMB29P)'],
 '"fugu" for Nexus Player': ['5.0 (LRX21M)',
                             '5.0 (LRX21V)',
                             '5.1.0 (LMY47D)',
                             '5.1.1 (LMY47V)',
                             '5.1.1 (LMY48J)',
                             '5.1.1 (LMY48N)',
                             '6.0.0 (MRA58K)',
                             '6.0.0 (MRA58N)',
                             '6.0.1 (MMB29M)',
                             '6.0.1 (MMB29T)'],
 '"hammerhead" for Nexus 5 (GSM/LTE)': ['4.4 (KRT16M)',
                                        '4.4.2 (KOT49H)',
                                        '4.4.3 (KTU84M)',
                                        '4.4.4 (KTU84P)',
                                        '4.4.4 Release 2 (For 2Degrees/NZ, '
                                        'Telstra/AUS and India ONLY) (KTU84Q)',
                                        '5.0 (LRX21O)',
                                        '5.0.1 (LRX22C)',
                                        '5.1.0 (LMY47D)',
                                        '5.1.0 (LMY47I)',
                                        '5.1.1 (LMY48B)',
                                        '5.1.1 (LMY48I)',
                                        '5.1.1 (LMY48M)',
                                        '6.0.0 (MRA58K)',
                                        '6.0.0 (MRA58N)',
                                        '6.0.1 (MMB29K)',
                                        '6.0.1 (MMB29S)'],
 '"mantaray" for Nexus 10': ['4.2.2 (JDQ39)',
                             '4.3 (JWR66Y)',
                             '4.4 (KRT16S)',
                             '4.4.2 (KOT49H)',
                             '4.4.3 (KTU84L)',
                             '4.4.4 (KTU84P)',
                             '5.0 (LRX21P)',
                             '5.0.1 (LRX22C)',
                             '5.0.2 (LRX22G)',
                             '5.1.0 (LMY47D)',
                             '5.1.1 (LMY47V)',
                             '5.1.1 (LMY48I)',
                             '5.1.1 (LMY48M)',
                             '5.1.1 (LMY48T)',
                             '5.1.1 (LMY48X)',
                             '5.1.1 (LMY48Z)',
                             '5.1.1 (LMY49F)'],
 '"mysid" for Galaxy Nexus "toro" (Verizon CDMA/LTE)': ['4.0.4 (IMM76K)',
                                                        '4.1.1 (JRO03O)',
                                                        '4.2.2 (JDQ39)'],
 '"mysidspr" for Galaxy Nexus "toroplus" (Sprint CDMA/LTE)': ['4.1.1 (FH05)',
                                                              '4.2.1 (GA02)'],
 '"nakasi" for Nexus 7 (Wi-Fi)': ['4.1.2 (JZO54K)',
                                  '4.2.2 (JDQ39)',
                                  '4.3 (JWR66Y)',
                                  '4.4 (KRT16S)',
                                  '4.4.2 (KOT49H)',
                                  '4.4.3 (KTU84L)',
                                  '4.4.4 (KTU84P)',
                                  '5.0 (LRX21P)',
                                  '5.0.2 (LRX22G)',
                                  '5.1.0 (LMY47D)',
                                  '5.1.1 (LMY47V)'],
 '"nakasig" for Nexus 7 (Mobile)': ['4.2.2 (JDQ39)',
                                    '4.3 (JWR66Y)',
                                    '4.4 (KRT16S)',
                                    '4.4.2 (KOT49H)',
                                    '4.4.3 (KTU84L)',
                                    '4.4.4 (KTU84P)',
                                    '5.0.2 (LRX22G)',
                                    '5.1.0 (LMY47D)',
                                    '5.1.1 (LMY47V)'],
 '"occam" for Nexus 4': ['4.2.2 (JDQ39)',
                         '4.3 (JWR66Y)',
                         '4.4 (KRT16S)',
                         '4.4.2 (KOT49H)',
                         '4.4.3 (KTU84L)',
                         '4.4.4 (KTU84P)',
                         '5.0 (LRX21T)',
                         '5.0.1 (LRX22C)',
                         '5.1.0 (LMY47O)',
                         '5.1.1 (LMY47V)',
                         '5.1.1 (LMY48I)',
                         '5.1.1 (LMY48M)',
                         '5.1.1 (LMY48T)'],
 '"razor" for Nexus 7 [2013] (Wi-Fi)': ['4.3 (JSS15Q)',
                                        '4.3 (JSS15R)',
                                        '4.4 (KRT16S)',
                                        '4.4.2 (KOT49H)',
                                        '4.4.3 (KTU84L)',
                                        '4.4.4 (KTU84P)',
                                        '5.0 (LRX21P)',
                                        '5.0.1 (LRX22C)',
                                        '5.0.2 (LRX22G)',
                                        '5.1.0 (LMY47O)',
                                        '5.1.1 (LMY47V)',
                                        '5.1.1 (LMY48G)',
                                        '5.1.1 (LMY48I)',
                                        '5.1.1 (LMY48M)',
                                        '5.1.1 (LMY48T)',
                                        '6.0.0 (MRA58K)',
                                        '6.0.0 (MRA58U)',
                                        '6.0.0 (MRA58V)',
                                        '6.0.1 (MMB29K)',
                                        '6.0.1 (MMB29O)'],
 '"razorg" for Nexus 7 [2013] (Mobile)': ['4.3 (JLS36C)',
                                          '4.3.1 (JLS36I)',
                                          '4.4 (KRT16S)',
                                          '4.4.2 (KOT49H)',
                                          '4.4.2_r2 (Verizon) (KVT49L)',
                                          '4.4.3 (KTU84L)',
                                          '4.4.4 (KTU84P)',
                                          '5.0.2 (LRX22G)',
                                          '5.1.0 (LMY47O)',
                                          '5.1.1 (LMY47V)',
                                          '5.1.1 (LMY48P)',
                                          '5.1.1 (LMY48U)',
                                          '5.1.1 (LMY48X)',
                                          '5.1.1 (LMY48Z)',
                                          '6.0.0 (MRA58K)',
                                          '6.0.0 (MRA58N)',
                                          '6.0.0 (MRA58V)',
                                          '6.0.0 (MRA59B)',
                                          '6.0.1 (MMB29K)',
                                          '6.0.1 (MMB29O)'],
 '"ryu" for Pixel C': ['6.0.1 (MXB48J)', '6.0.1 (MXB48K)'],
 '"shamu" for Nexus 6': ['5.0 (LRX21O)',
                         '5.0.1 (LRX22C)',
                         '5.1.0 (LMY47D)',
                         '5.1.0 (LMY47E)',
                         '5.1.0 (LMY47I)',
                         '5.1.0 (For T-Mobile ONLY) (LMY47M)',
                         '5.1.1 (All carriers except T-Mobile US) (LMY47Z)',
                         '5.1.1 (For T-Mobile ONLY) (LYZ28E)',
                         '5.1.1 (For Project Fi ONLY) (LVY48C)',
                         '5.1.1 (LMY48I)',
                         '5.1.1 (For T-Mobile ONLY) (LYZ28J)',
                         '5.1.1 (For Project Fi ONLY) (LVY48E)',
                         '5.1.1 (LMY48M)',
                         '5.1.1 (For T-Mobile ONLY) (LYZ28K)',
                         '5.1.1 (For Project Fi ONLY) (LVY48F)',
                         '5.1.1 (LMY48T)',
                         '5.1.1 (For T-Mobile ONLY) (LYZ28M)',
                         '5.1.1 (For Project Fi ONLY) (LVY48H)',
                         '5.1.1 (LMY48W)',
                         '5.1.1 (LMY48X)',
                         '5.1.1 (LMY48Y)',
                         '5.1.1 (For T-Mobile ONLY) (LYZ28N)',
                         '5.1.1 (For Project Fi ONLY) (LVY48I)',
                         '6.0.0 (MRA58K)',
                         '6.0.0 (MRA58N)',
                         '6.0.0 (MRA58R)',
                         '6.0.0 (MRA58X)',
                         '6.0.1 (MMB29K)',
                         '6.0.1 (MMB29S)'],
 '"soju" for Nexus S (worldwide version, i9020t and i9023)': ['2.3.6 (GRK39F)',
                                                              '4.0.4 (IMM76D)',
                                                              '4.1.2 (JZO54K)'],
 '"sojua" for Nexus S (850MHz version, i9020a)': ['2.3.6 (GRK39F)',
                                                  '4.0.4 (IMM76D)',
                                                  '4.1.2 (JZO54K)'],
 '"sojuk" for Nexus S (Korea version, m200)': ['2.3.6 (GRK39F)',
                                               '4.0.4 (IMM76D)',
                                               '4.1.1 (JRO03E)'],
 '"sojus" for Nexus S 4G (d720)': ['2.3.7 (GWK74)',
                                   '4.0.4 (IMM76D)',
                                   '4.1.1 (JRO03R)'],
 '"takju" for Galaxy Nexus "maguro" (GSM/HSPA+) (with Google Wallet)': ['4.0.4 '
                                                                        '(IMM76I)',
                                                                        '4.1.2 '
                                                                        '(JZO54K)',
                                                                        '4.2.2 '
                                                                        '(JDQ39)',
                                                                        '4.3 '
                                                                        '(JWR66Y)'],
 '"tungsten" for Nexus Q': ['4.0.4 (IAN67K)'],
 '"volantis" for Nexus 9 (Wi-Fi)': ['5.0 (LRX21Q)',
                                    '5.0 (LRX21R)',
                                    '5.0.1 (LRX22C)',
                                    '5.0.2 (LRX22L)',
                                    '5.1.1 (LMY47X)',
                                    '5.1.1 (LMY48I)',
                                    '5.1.1 (LMY48M)',
                                    '5.1.1 (LMY48T)',
                                    '6.0.0 (MRA58K)',
                                    '6.0.0 (MRA58N)',
                                    '6.0.1 (MMB29K)',
                                    '6.0.1 (MMB29S)'],
 '"volantisg" for Nexus 9 (LTE)': ['5.0.1 (LRX22C)',
                                   '5.0.2 (LRX22L)',
                                   '5.1.1 (LMY47X)',
                                   '5.1.1 (LMY48I)',
                                   '5.1.1 (LMY48M)',
                                   '5.1.1 (LMY48T)',
                                   '5.1.1 (LMY48X)',
                                   '5.1.1 (LMY48Z)',
                                   '5.1.1 (LMY49F)',
                                   '6.0.0 (MRA58K)',
                                   '6.0.0 (MRA58N)',
                                   '6.0.1 (MMB29K)',
                                   '6.0.1 (MMB29S)'],
 '"yakju" for Galaxy Nexus "maguro" (GSM/HSPA+)': ['4.0.4 (IMM76I)',
                                                   '4.1.2 (JZO54K)',
                                                   '4.2.2 (JDQ39)',
                                                   '4.3 (JWR66Y)']}

关于python - 刮削表格底行，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/34998901/

文章推荐： Python线程未启动

文章推荐： mysql - 如何使用 mysql 匹配我想要的数据？

文章推荐： c# - 制作 list 的最简单方法

latex - 表格，表格，tabularx 垂直对齐， latex
好的，这听起来很简单，但我已经花了几个小时在谷歌上搜索，我只是找不到解决方案，这并不复杂。我想创建一个包含图像和文本的表格。我希望表格的每一行都具有相同的高度。我希望文本始终从顶部开始。 IE。 \
HTML/CSS 表格(表格)DOB 行显示在两行上
在我的网站表单上 - 我的出生日期、月份和年份菜单显示在两行上，我希望它们都显示在同一行上。当我测试代码时，它显示在一行中，所以我相信一定存在宽度问题。您可以在右侧表格 (incomeprotec
javascript - Web 应用程序 - Google 表格 - 带有输入字段的 html 表格
我们需要跟踪和审核生产，本质上我们有很多订单，但我们似乎在途中丢失了一些产品(废品等)。为了阻止这种情况，我们现在已在 Google 表格上下了订单，并列出了应有的数量，然后员工会写下收到的数量。
ios - 带有两个搜索栏的 UISearchDisplayController 表格 View ，表格 View 无法正确滚动
我正在转换我的应用程序，以便它适用于 iOS 7。在应用程序的一部分，我有两个搜索栏，每个搜索栏都有一个与之关联的 UISearchDisplayController。当我搜索 UISearchDis
html - CSS 表格(非固定)是否会遇到与 HTML 表格(非固定)相同的性能问题？
正如标题所说，非固定表格布局是否与类似的 HTML 表格具有相同的性能问题？最佳答案非固定表格的问题在于，要确定一列的宽度，必须加载该列的所有单元格。这仅在...... …您有一个包含几千字节或几
Javascript 表格
我在使用 Javascript 遍历表格并从一行的第一个单元格获取文本时遇到问题。我想获取此单元格的文本，以便我可以将它与其他内容进行比较，如果文本匹配则删除该行。但是，当我尝试获取文本时，实际出现的
HTML:表格？
我经常发现自己想要制作一个表格表格——一堆行，每一行都是一个单独的表格，有自己的字段和提交按钮。例如，这是一个宠物店应用程序示例——假设这是一个结帐屏幕，您可以选择更新所选宠物的数量和属性，并在结帐前
关于表格的正则表达式讨论(表格)
看过许多UBB代码，包括JS，ASP，JSP的，一直没发现表格的UBB，虽然可以直接用HTML模式实现相同表格功能，但对于某些开放的站点来说开放HTML模式终究是不合适的，故一直想实现表格的UBB。
HTML 表格
表格由 table 标签来定义。每个表格均有若干行（由 tr 标签定义），每行被分割为若干单元格（由 td 标签定义）。字母 td 指表格数据（table data），即数据单元格的内容。数据单元格
带有边框半径和粘性标题的 HTML 表格
我有一个 HTML 与 border-radius和使用 position: sticky 的粘性标题看起来像这样: https://codepen.io/muhammadrehansaeed/pen
iPhone - 表格/网格数据
对于 iPhone 应用程序，我需要以网格格式显示只读表格数据。该数据可能有许多行和列。我可以使用 UITableView，但问题是数据很可能会非常宽并且需要滚动。有没有办法将 UITableVi
javascript - 根据选择显示表格/表格
我知道这里有类似的问题，但我找不到适合我的答案。我想要的是显示表单“默认”是选择了某些选项(在这种情况下，除了“Ban Appeal”或“Ban Appeal(西类牙语)”之外的所有内容，我希望仅在
flutter - 在Flutter中创建对齐文本的表格/表格
天啊! 我想在Flutter中创建以下非常简单的表。基本上是两列文字，左列右对齐，右列左对齐。如果右列具有多个名称，则每一行都将顶部对齐。左列应自动调整为最大项目的大小(因为每个标题都有翻译字符串)
SSAS 表格 - 多个模型？
我们开始构建 SSAS 表格模型，并想知道大多数人是否拥有一个或多个模型。如果有多个，您是否复制每个所需的表，或者是否有办法在模型之间共享表？我想我知道答案，但我希望那些有更多经验的人能够证实我们的发
将任意数量的单词分成两列 - Google 表格
tl;博士如何将任意数量的单词分成两列，总是在最后一列中只有最后一个单词，在第一列中包含所有其他单词？ =IFS( LEN(C2)-LEN(SUBSTITUTE(C2," ",""))=1, SP
zeromq - 关于面向消息的中间件的图表/表格
你们知道一个图表或dable，它可以提供一个简短而简洁但仍然完整且相对最新的现有协议(protocol)及其细节的 View ？ (即:ZeroMQ、Rendez-Vous、EMS、...所有这些!:
c++ - 使用MFC的表格/表格
我才刚刚开始开发MFC应用程序，我希望对整个“控件”概念更加熟悉。我在Visual Studio中使用对话框编辑器，到目前为止，我无法找到添加简单表/网格的功能。这对我来说似乎很基础，但是我什至找不到
c# - 代表一个巨大的矩阵/表格
我需要对一个非常大的表或矩阵执行计算和操作，大约有 7500 行和 30000 列。矩阵数据将如下所示: 文件编号|字1 |字 2 |字 3 |... |字 30000 |文档类 0032 1 0
java - 表格 reshape
我正在使用设计非常糟糕的数据库，我需要在编写查询之前重新调整表格。以下是我的常见问题: 时间戳已分为两列(一列用于日期，另一列用于时间)。一些字符串列也被拆分成多个列。大多数字符串都有固定长度和
PHP HTML 表格
我正在尝试显示 $row["name"] 通过 HTML Table 的形式，如下所示: echo " ".$row["name"]." "; 我也从这里获取行变量: $que

行者123

个人简介

我是一名优秀的程序员,十分优秀！

作者热门文章

滴滴打车优惠券免费领取

全站热门文章

首页

博学

6Ren·AI

商城

python - 刮削表格底行