- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我已经阅读了很多有关端到端测试的内容,而我无法理解的一件事就是端到端测试应该多么“真实”。
不管我用于e2e测试的工具是什么,我都看到它们大多数时候都在本地,开发或alpha环境中使用。
如果我的应用程序具有身份验证,是否应该在数据库中创建一个具有有效凭据的“测试”用户?我应该在Alpha甚至生产环境中这样做吗?该测试用户还如何登录我的应用程序?
说我有臭名昭著的TODO应用。我有一个用于登录用户的测试。登录后,我想测试用户是否可以创建TODO。该待办事项保存在数据库中。
运行测试之后,我是否应该运行一些操作来删除e2e测试期间创建的数据?还是应该在保存请求并模拟响应之前拦截该请求(这将是e2e测试的反模式)?
最佳答案
我目前在一家大型知名公司的测试工具和框架团队中工作。因此,尽管我不是专家,但这是我工作的一部分。我将专门讨论Web测试。对于iOS和Android等本机应用程序,测试有些不同,我对这些方面并不十分熟悉。
e2e(端到端)和集成测试之间的术语在某种程度上是可以互换的,而单元测试则具有更具体的定义。
通常,端到端/集成测试应可在开发和生产环境中运行。根据您的设置,您的开发环境可能正在使用生产数据库的一些半频繁更新的快照。在其他情况下,您的本地环境可能会达到实际的生产数据库。两种方法都有其优点/缺点,但这在很大程度上取决于您公司或项目的规模。例如,如果您在一家拥有专门团队的大公司中,则可以看到生产数据库每天发生的许多变化,而小型团队的产品数据库每周快照可能足以在本地进行测试。
一世
在基础级别上,所有集成测试都应视为真实测试。在处理Web应用程序时,我们还必须考虑许多其他因素,例如不同的Web浏览器,网络 Activity /可用性等。因此,为api调用模拟数据将允许进行超快速测试,但又增加了另一层次的复杂性确保模拟与最新数据库保持同步。
在本地运行集成测试应该或多或少地对开发服务器执行与对登台和生产进行的相同操作。除了让应用程序检测其是否在开发,登台或生产环境中运行以切换URL和各种凭据外,应期望该应用程序的行为完全相同。
关于您关于身份验证的问题,答案是肯定的。让我们看两个显示不同注意事项的示例。
假设您的项目很小。您在生产环境上创建了一些真实帐户,并且您的数据库每周都会快照一次,以供您在本地开发环境中使用。您只需要根据需要与一个或多个用户一起运行集成测试。由于本地测试仅影响本地数据库,因此您不必担心生成的数据,因为它不会影响生产。您团队中的其他工程师可以使用相同的用户,而不必担心。如果一位工程师对数据库模式,ORM等进行了一些更改,那么每个人都将获得数据库快照的新副本并继续工作。
现在换个极端。假设您的项目很大。每天都有数百万的用户和数百名员工共同对代码库和数据库进行更改。建立基础结构的方式有很多种,可以处理各种工程任务。数据太多,数据库更改太频繁,以致于无法使用本地快照。以这种规模,您可能正在进行持续集成,并在每次提交时运行测试。您想要这样做,以使传入的更改不会影响到生产并引起重大问题。您可能正在针对不断更新的登台数据库甚至是生产数据库本身运行本地开发环境。 (尝试规划登台数据库,因为它避免了很多其他问题。)
现在,只有一小部分专用测试用户开始成为一个问题。测试一直在自动运行,并且由数十名工程师共同完成自己的工作。由于登台数据库可能是共享的,因此您可以轻松地开始产生奇怪的冲突,因为同一测试用户正在做各种事情,并开始导致测试失败。我看到的一个很好的解决方案是一种测试帐户结帐服务器。您创建了100个或1000个(或更多)测试用户帐户。在运行集成测试时,它们实际上是从服务器中 checkout 测试用户帐户。测试完成后,集成测试将清除他们对该用户所做的任何更改,并告知结帐服务器该用户再次有空。然后它被某人/其他人随机 checkout ,并且该循环继续。
因此,与您的问题直接相关的要点:
关于javascript - e2e测试是否应将数据持久保存在真实数据库中?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/55093017/
我获得了一些源代码示例,我想测试一些功能。不幸的是,我在执行程序时遇到问题: 11:41:31 [linqus@ottsrvafq1 example]$ javac -g test/test.jav
我想测试ggplot生成的两个图是否相同。一种选择是在绘图对象上使用all.equal,但我宁愿进行更艰巨的测试以确保它们相同,这似乎是identical()为我提供的东西。 但是,当我测试使用相同d
我确实使用 JUnit5 执行我的 Maven 测试,其中所有测试类都有 @ExtendWith({ProcessExtension.class}) 注释。如果是这种情况,此扩展必须根据特殊逻辑使测试
在开始使用 Node.js 开发有用的东西之前,您的流程是什么?您是否在 VowJS、Expresso 上创建测试?你使用 Selenium 测试吗?什么时候? 我有兴趣获得一个很好的工作流程来开发我
这个问题已经有答案了: What is a NullPointerException, and how do I fix it? (12 个回答) 已关闭 3 年前。 基于示例here ,我尝试为我的
我正在考虑测试一些 Vue.js 组件,作为 Laravel 应用程序的一部分。所以,我有一个在 Blade 模板中使用并生成 GET 的组件。在 mounted 期间请求生命周期钩子(Hook)。假
考虑以下程序: #include struct Test { int a; }; int main() { Test t=Test(); std::cout<
我目前的立场是:如果我使用 web 测试(在我的例子中可能是通过 VS.NET'08 测试工具和 WatiN)以及代码覆盖率和广泛的数据来彻底测试我的 ASP.NET 应用程序,我应该不需要编写单独的
我正在使用 C#、.NET 4.7 我有 3 个字符串,即。 [test.1, test.10, test.2] 我需要对它们进行排序以获得: test.1 test.2 test.10 我可能会得到
我有一个 ID 为“rv_list”的 RecyclerView。单击任何 RecyclerView 项目时,每个项目内都有一个可见的 id 为“star”的 View 。 我想用 expresso
我正在使用 Jest 和模拟器测试 Firebase 函数,尽管这些测试可能来自竞争条件。所谓 flakey,我的意思是有时它们会通过,有时不会,即使在同一台机器上也是如此。 测试和函数是用 Type
我在测试我与 typeahead.js ( https://github.com/angular-ui/bootstrap/blob/master/src/typeahead/typeahead.js
我正在尝试使用 Teamcity 自动运行测试,但似乎当代理编译项目时,它没有正确完成,因为当我运行运行测试之类的命令时,我收到以下错误: fatal error: 'Pushwoosh/PushNo
这是我第一次玩 cucumber ,还创建了一个测试和 API 的套件。我的问题是在测试 API 时是否需要运行它? 例如我脑子里有这个, 启动 express 服务器作为后台任务 然后当它启动时(我
我有我的主要应用程序项目,然后是我的测试的第二个项目。将所有类型的测试存储在该测试项目中是一种好的做法,还是应该将一些测试驻留在主应用程序项目中? 我应该在我的主项目中保留 POJO JUnit(测试
我正在努力弄清楚如何实现这个计数。模型是用户、测试、等级 用户 has_many 测试,测试 has_many 成绩。 每个等级都有一个计算分数(strong_pass、pass、fail、stron
我正在尝试测试一些涉及 OkHttp3 的下载代码,但不幸失败了。目标:测试 下载图像文件并验证其是否有效。平台:安卓。此代码可在生产环境中运行,但测试代码没有任何意义。 产品代码 class Fil
当我想为 iOS 运行 UI 测试时,我收到以下消息: SetUp : System.Exception : Unable to determine simulator version for X 堆
我正在使用 Firebase Remote Config 在 iOS 上设置 A/B 测试。 一切都已设置完毕,我正在 iOS 应用程序中读取服务器端默认值。 但是在多个模拟器上尝试,它们都读取了默认
[已编辑]:我已经用 promise 方式更改了我的代码。 我正在写 React with this starter 由 facebook 创建,我是测试方面的新手。 现在我有一个关于图像的组件,它有
我是一名优秀的程序员,十分优秀!