- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
在工作中,我们为其中一个应用程序提供了一个自动化套件,该套件设置为在每次提交到 master/部署到产品时运行,并且很长一段时间以来,我们一直在尝试使其足够可靠。
测试在 Jenkins 中运行,使用 Selenium webDriver + Chrome + xvfb 作为显示服务器。我们知道这些测试是有效的,因为如果我们在笔记本电脑上本地运行它们(我和两个 friend 已经尝试过),它们每次都会完美运行,但在 Jenkins 中几乎每次都会失败。 几乎是关键字,因为它们也在那里起作用......大约每 5 次一次。
当他们失败时,他们并不总是在同一个地方失败。有时是等待元素时超时,有时测试最终会出现一个本来不应该到达的错误页面,我不知道它是如何到达那里的......所以是的,这很令人沮丧。
我们尝试了很多不同的方法来调试它。重写每个测试的设置,以确保在每个测试结束时都清除所有内容,以便下一个测试从干净的工作区/缓存开始,从而使 Selenium 每次无法看到发生了什么时都会截取屏幕截图,尝试过不同版本的 chromedriver/chrome/selenium,将测试连续运行几次,看看是否有任何模式......而且因为我已经没有想法了,所以我想我可以在这里问!
有什么方法可以设置 Selenium 驱动程序来记录整个流程,而不是只是到处截图?我希望能够观看 Jenkins 中运行的测试,但我不知道这是否可能或如何做到。
测试使用Java7 + Spring + TestNG 6.8.1 + Selenium 2.45.0 + XVFB作为显示服务器。
关于我可以尝试什么的任何想法或提示?
最佳答案
阅读您尝试过的所有解决方案,我几乎可以肯定您使用虚拟机 (VM) 来执行 Selenium 测试。表明这一点的事实主要是:
And when they fail they don't always fail at the same spot. Sometimes it's a timeout while waiting for an element, sometimes the test ends up in an error page that shouldn't have reached in the first place and I have no idea how it got there...
我已经和同样的问题斗争了两年多了,相信我,我知道
So yeah, it's frustrating.
虚拟机的主要问题是它们没有正确的渲染功能,而且无论它们的 CPU 和 RAM 有多大,它们最终都无法重现您的本地(或任何物理)显卡。当您尝试并行运行所有测试时,事情会变得非常糟糕。例如,我的团队实际上无法在具有 12 GB RAM 的虚拟机上运行 4 个以上的浏览器!?!我的 8 GB easy 笔记本电脑可以运行 15 个浏览器,同时我可以继续做日常工作。所以底线:Selenium 驱动程序和浏览器之间的同步是问题。每次都不同,具体取决于渲染速度。
Is there any way I could set Selenium driver to record the entire flow instead of just taking a screenshot every here and there?
实际上有几种方法。但为了保持简单 - 使用第二个线程,每 5 秒(或您的服务器可以跟上的尽可能多的时间)进行一次扫描,并将它们保存在每个测试的文件夹中。但出于性能原因,我建议使用 Queue并只保留最后 12 个(最后一分钟)。
更新:
我已经在片状测试中扩展了所有这些 blog post .
关于java - Selenium 测试在本地工作但在 Jenkins 中失败,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/37681256/
我在使用以下代码时遇到问题: function http_file_exists($url){ $f=fopen($url,"r"); if($f){ fclose($f); retu
我已经通过 Git 部署到 Azure 几个月了,没有出现重大问题,但现在我似乎遇到了一个无法克服的错误。 我创建了一个新的 Azure 网站,为正在开发的项目创建单独的预览链接。我在新站点上设置了
我已经通过flutter创建了一个App并完成了它,我想在flutter文档中阅读时进行部署。 我收到此错误: FAILURE: Build failed with an exception. * W
我在Windows 10中使用一些简单的Powershell代码遇到了这个奇怪的问题,我认为这可能是我做错了,但我不是Powershell的天才。 我有这个: $ix = [System.Net.Dn
我正在尝试使用 RapidJSON 解析从服务器接收到的数据。以下是收到的确切字符串: [ { "Node": "9478149a08f9", "Address": "172.17
我尝试为 ios 编译 OpenCV。我总是收到这些错误。我用不同版本的opencv试了一下,结果都是一样的。 我运行这个:python 平台/ios/build_framework.py ios_o
我在一台机器上做基本的发布/订阅,我的客户端是 StackExchange-Redis 的 C# 客户端,我在同一台机器上运行基于 Windows 的 Redis 服务器(服务器版本 2.8.4) 当
我有这段代码,但无法执行,请帮我解决这个问题 连接 connect_error) { die ("connection failed: " . $terhubung->connect_erro
我在 tomcat 上运行并由 maven 编译的 Web 应用程序给出了以下警告和错误。我可以在本地存储库中看到所有 JAR,但有人可以帮忙吗。 WARNING: Failed to scan JA
我正在 Windows 8 上使用 Android Studio 开发一个 android 应用程序,我正在使用一些 native 代码。突然间我无法编译我的 C 文件。当我运行 ndk-build
下面的代码对类和结构的成员进行序列化和反序列化。序列化工作正常,但我在尝试使用 oarch >> BOOST_SERIALIZATION_NVP(outObj); 反序列化时遇到了以下错误; 代码中是
如果我运行此命令“rspec ./spec/requests/api/v1/password_reset_request_spec.rb”,此文件中的所有测试都会通过。 但是,当我运行“rspec”时
我在尝试执行测试以使用 Protractor 上传文件时出错,我的代码是这个 it('it should be possible to upload a file', function() {
System.loadLibrary("nativefaceswap"); 当我运行我的应用程序时,我在 Android Studio 中发现了此类错误。在logcat中显示: java.lang.U
我希望有人能帮助我!使用任何方法或命令行的任何 SSL/HTTPS 调用均无效。 我在 Windows 10 中使用 Ubuntu Server 18.04 作为子系统。我的问题是昨天才开始出现的,因
通过删除这两个值将日期字段从 null=True 和 Blank=True 更改为 required 时,使用 db.alter 命令时遇到问题。 当以下行被注释掉时,迁移运行不会出现问题。
我第一次使用 Heroku 尝试创建应用程序(使用 SendGrid 的 Inbound Parse Webhook"和 Twilio SMS 通过电子邮件发送和接收 SMS 消息)。通过 Virtu
我正在将我的 swift 项目更新到 Xcode 7 上的 Swift 2.0。xcode 在构建项目时报告了以下错误: 命令/Applications/Xcode.app/Contents/Deve
在我的代码中,SSL 库函数 SSL_library_init() 没有按预期返回 1。我如何才能看到它返回了什么错误? 我在 SSL_library_init() 之后调用了 SSL_load_er
我正在尝试运行在以下链接中找到的答案: Asynchronously Load the Contents of a Div 但是当我这样做时,我会遇到我不太理解的错误。 我的代码: $(documen
我是一名优秀的程序员,十分优秀!