- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
我正在尝试抓取网站并获取 HTML 中的所有 div
元素。我试图访问的网页是一个包含工作机会的页面,其中每个工作都在单独的 div
中。我正在尝试获取它们,以便我可以通过 for
循环运行它们并分别提取它们的数据。
我还没有编码。
是否有特定的方法或途径获取它们? 而且我只想提取包含作业的 div
。
外部 HTML
<div class="row result clickcard" id="p_1d1829a543b1f3a7" data-jk="1d1829a543b1f3a7" data-tn-component="organicJob" data-tu="">
<h2 id="jl_1d1829a543b1f3a7" class="jobtitle">
<a href="/rc/clk?jk=1d1829a543b1f3a7&fccid=95ea1992d038e9af&vjs=3" target="_blank" rel="noopener nofollow" onmousedown="return rclk(this,jobmap[1],0);" onclick="setRefineByCookie([]); return rclk(this,jobmap[1],true,0);" title="Planner II" class="turnstileLink" data-tn-element="jobTitle">Planner II</a>
- <span class="new">new</span></h2>
<span class="company">
Vantage Utility Services</span>
- <span class="location">Upland, CA</span>
<table cellspacing="0" cellpadding="0" border="0">
<tbody><tr>
<td class="snip">
<div class="">
<span class="summary">
Transportation or giving away of up to 28.5 grams of marijuana, other than concentrated <b>cannabis</b>, or the offering to transport or give away up to 28.5 grams of...</span>
</div>
<div class="result-link-bar-container">
<div class="result-link-bar"><span class="date">4 hours ago</span> <span id="tt_set_1" class="tt_set"> - <a id="sj_1d1829a543b1f3a7" href="#" class="sl resultLink save-job-link " onclick="changeJobState('1d1829a543b1f3a7', 'save', 'linkbar', false, ''); return false;" title="Save this job to my.indeed">save job</a> - <a href="#" id="tog_1" class="sl resultLink more-link " onclick="toggleMoreLinks('1d1829a543b1f3a7'); return false;">more...</a></span><div id="editsaved2_1d1829a543b1f3a7" class="edit_note_content" style="display:none;"></div><script>if (!window['result_1d1829a543b1f3a7']) {window['result_1d1829a543b1f3a7'] = {};}window['result_1d1829a543b1f3a7']['showSource'] = false; window['result_1d1829a543b1f3a7']['source'] = "Vantage Utility Services"; window['result_1d1829a543b1f3a7']['loggedIn'] = false; window['result_1d1829a543b1f3a7']['showMyJobsLinks'] = false;window['result_1d1829a543b1f3a7']['undoAction'] = "unsave";window['result_1d1829a543b1f3a7']['relativeJobAge'] = "4 hours ago";window['result_1d1829a543b1f3a7']['jobKey'] = "1d1829a543b1f3a7"; window['result_1d1829a543b1f3a7']['myIndeedAvailable'] = true; window['result_1d1829a543b1f3a7']['showMoreActionsLink'] = window['result_1d1829a543b1f3a7']['showMoreActionsLink'] || true; window['result_1d1829a543b1f3a7']['resultNumber'] = 1; window['result_1d1829a543b1f3a7']['jobStateChangedToSaved'] = false; window['result_1d1829a543b1f3a7']['searchState'] = "q=Cannabis&fromage=last"; window['result_1d1829a543b1f3a7']['basicPermaLink'] = "https://www.indeed.com"; window['result_1d1829a543b1f3a7']['saveJobFailed'] = false; window['result_1d1829a543b1f3a7']['removeJobFailed'] = false; window['result_1d1829a543b1f3a7']['requestPending'] = false; window['result_1d1829a543b1f3a7']['notesEnabled'] = true; window['result_1d1829a543b1f3a7']['currentPage'] = "serp"; window['result_1d1829a543b1f3a7']['sponsored'] = false;window['result_1d1829a543b1f3a7']['reportJobButtonEnabled'] = false; window['result_1d1829a543b1f3a7']['showMyJobsHired'] = false; window['result_1d1829a543b1f3a7']['showSaveForSponsored'] = false; window['result_1d1829a543b1f3a7']['showJobAge'] = true;</script></div></div>
<div class="tab-container">
<div id="tt_display_1" class="more-links-container result-tab" style="display:none;"><a class="close-link closeLink" title="Close" href="#" onclick="toggleMoreLinks('1d1829a543b1f3a7'); return false;"></a><div id="more_1" class="more_actions"><ul><li><span class="mat">View all <a href="/q-Vantage-Utility-Services-l-Upland,-CA-jobs.html" rel="nofollow">Vantage Utility Services jobs in Upland, CA</a> - <a href="/l-Upland,-CA-jobs.html">Upland jobs</a></span></li><li><span class="mat">Salary Search: <a href="/salaries/Planner-Salaries,-Upland-CA" onmousedown="this.href = appendParamsOnce(this.href, '?campaignid=serp-more&fromjk=1d1829a543b1f3a7&from=serp-more-nofollow');" rel=""nofollow"">Planner salaries in Upland, CA</a></span></li><li><span class="mat">Learn more about working at <a href="/cmp/Vantage-Utility-Services" onmousedown="this.href = appendParamsOnce(this.href, '?fromjk=1d1829a543b1f3a7&from=serp-more&campaignid=serp-more&jcid=424bbfe9ea0cfaab');">Vantage Utility Services</a></span></li><li><span class="mat">Related forums: <a href="/forum/loc/Upland-California.html">Upland, California</a> - <a href="/forum/job/Planner.html">Planner</a> - <a href="/forum/cmp/Vantage-Utility-Services.html">VANTAGE UTILITY SERVICES</a></span></li></ul></div></div><div class="dya-container result-tab"></div>
<div class="tellafriend-container result-tab email_job_content"></div>
<div class="sign-in-container result-tab"></div>
<div class="notes-container result-tab"></div>
</div>
</td>
</tr>
</tbody></table>
</div>
最佳答案
你可以使用
find_elements_by_tag_name('div')
这将返回 html 中所有 div 的列表。
关于python selenium 获取所有的div,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/49935754/
Selenium IDE、Selenium RC 和 Selenium WebDriver 有什么区别;我们可以在什么样的项目中使用它们?任何建议将不胜感激。 最佳答案 Selenium IDE 是一
我的 Selenium 服务器在远程服务器上运行。我从我的本地 PC 启动我的 Selenium 脚本,它从网站获取数据。 例如,我的 Selenium 脚本执行这段 JS 代码: JSON.stri
Selenium 中“//div[.//a[text()='SELENIUM']]”和“//div[//a[text()='SELENIUM']]”有什么区别xpath。 有人可以澄清我在 xpath
我正在创建自动冒烟测试。我读到在单元测试中使用多个断言不是一个好的做法,这条规则是否也适用于使用 selenium 的 webdriver 测试? 在我的冒烟测试中,有时我会使用 20 多个断言来验证
我在一个变量中存储了一个值,在另一个变量中存储了第二个值,现在我想将这两个数字相加。我无法做到这一点,我尝试过下面的代码,但它不起作用 store 6 w sto
Selenium 中的回车键和回车键有什么区别? This related SO answer并且提供的链接说明它们是不同的。我还注意到,在使用 Firefox 24.2 时,回车键将发送一个 HTM
以下是我遇到异常的详细信息: 当我使用以下命令启动节点时,出现如下错误: F:\SeleniumGrid\Jars>java -jar selenium-server-standalone-3.0.0
我是 的新手 Selenium 我对版本号有点困惑。 Selenium 2.0 2011年发布。我刚刚下载了 Selenium IDE Firefox 扩展,版本为 1.7.2 .是否还有 IDE 的
我正在使用 Selenium 运行Codeception 2。我可以看到 Selenium 打开了浏览器并运行了测试。然后,我从代码接收中得到一个错误,即存在失败的断言。 我知道有一个HTML文件可以
Closed. This question needs to be more focused。它当前不接受答案。 想要改善这个问题吗?更新问题,使它仅关注editing this post的一个问题。
我想关闭弹出窗口(已知的窗口名称),然后返回到原始窗口。 我该怎么办? 如果我无法获得窗口中关闭按钮的常量。那么有没有达到目标的一般行为? 最佳答案 你有没有尝试过: selenium.Close()
我正在用webdriver做一个测试机器人。我有一个场景,它单击一个按钮,打开一个新窗口,并且它通过特定的xpath搜索元素,但是有时没有这样的元素,因为可以将其禁用,并且出现此错误:org.open
我是第一次使用Selenium,对这些选项不知所措。我在Firefox中使用IDE。 当我的页面加载时,它随后通过JSONP请求获取值,并在其中填充选择中的选项。 我如何让Selenium等待选择中的
我开始使用nightwatch.js编写e2e测试,我注意到我想在目标浏览器的控制台(开发人员工具)中手动检查一些错误。但总是在我打开开发者控制台时,浏览器会自动关闭它。这是selenium还是nig
我正在尝试使用以下方式刮除Glassdoor的评论: https://github.com/MatthewChatham/glassdoor-review-scraper 但是我得到了错误并且不知道如
背景 我设置了一个Selenium Grid项目,以在两种不同的浏览器Chrome和Firefox中执行测试。我正在使用Gradle执行测试。该测试将成功执行两次,一次按预期在Chrome中执行,一次
当测试失败时,运行 selenium 测试的浏览器将关闭。这在尝试调试时没有帮助。我知道我可以在失败时选择屏幕截图,但如果没有整个上下文,这并没有帮助。在浏览器仍然可用的情况下,我可以回击并检查发生了
使用 Selenium Web 驱动程序而不是 Selenium RC 启动新的测试框架是个好主意吗?对于 Selenium Web 驱动程序,并非所有 Selenium 方法都已实现。那么使用 Se
我使用 selenium 页面对象模型来定义所有页面元素。我对元素命名所遵循的命名约定不太相信,并且感觉太长了。请对此提出建议。 @FindBy(xpath = "//tbody[@id='tabvi
有一个带有按钮的 html 页面,我的 Selenium 测试正在测试,当单击按钮时,会执行一个操作。 问题是,看起来点击发生在 javascript 执行之前 - 在处理程序绑定(bind)到页面之
我是一名优秀的程序员,十分优秀!