java - 如何让 chromedriver 检测不到

Question

这是我的第一个 Stack Overflow 问题，请多多包涵。

我已阅读 this SO 问题，这让我想知道，是否有可能使 chromedriver 完全检测不到？

出于好奇，我测试了所描述的方法，发现它无法成功创建一个完全匿名的浏览器。

我通读了驱动程序的文档，发现了这个:

partial interface Navigator {
readonly attribute boolean webdriver;
};

The webdriver IDL attribute of the Navigator interface must return the value of the webdriver-active flag, which is initially false.

This property allows websites to determine that the user agent is under control by WebDriver, and can be used to help mitigate denial-of-service attacks.

但是，我什至无法通过浏览器控制台或源代码找到这些标签的位置。

本以为是负责chromedriver的检测，但是梳理了源码，并没有找到这个接口(interface)。结果，我想知道当前的 chromedriver 中是否包含此功能。如果不是，我仍然知道当前的 chromedriver 可以被网站和其他服务检测到，例如 distill .

Answer 1

为了使用无法检测到的 ChromeDriver 来提取检查点(在 stackoverflow post 中有很好的描述)，您需要确保您的浏览器在其窗口或文档原型(prototype)中不包含任何变量，这些变量表明您正在使用webdriver，就像你提到的那样。

只要您采取一些预防措施并对二进制文件进行一些修复，您就可以将 Selenium 等软件与 ChromeDriver 和 Chrome 一起使用。此方法仅适用于有头版本，如果您希望使用 headless 版本，则需要进行额外的测量才能通过窗口/渲染测试，described here .

---

<强>1。修复 Chrome 二进制文件，或使用旧版本

首先，让我们处理设置为 True 的 navigator.webdriver。这个 由 W3C 协议(protocol)定义here作为...的一部分 浏览器的“NavigatorAutomationInformation”，它扩展了 Navigator 界面。如何删除它？那个项目有很多文件、第三方的东西、blink web runtimes 等等。所以，与其变得疯狂地试图弄清楚它是如何工作的，因为 Chromium 是开源的，不如聪明点，在谷歌上搜索合并的提交那。 Here is the link .注意这些文件:

• third_party/WebKit/Source/core/frame/Navigator.h，里面有一行代码:

   `bool webdriver() const { return true; }` 
  
  This method is supossed to always return true, as you can see.
  

• third_party/WebKit/Source/core/frame/Navigator.idl，里面包含了Navigators的扩展，包含了我们的

  `Navigator implements NavigatorAutomationInformation;` 
  
  which is being commited. Interesting, isn't it?
  

• third_party/WebKit/Source/core/frame/NavigatorAutomationInformation.idl 包含扩展本身，带有一个只读变量，即 webdriver:

       `[
           NoInterfaceObject, // Always used on target of 'implements'
           Exposed=(Window),
           RuntimeEnabled=AutomationControlled
       ] interface NavigatorAutomationInformation {
           readonly attribute boolean webdriver;
       };`
  

要摆脱此功能，注释 Navigator.idl 中扩展 Navigator 的行就足够了，并编译源代码(compiling in linux here ).然而，这对几乎所有计算机来说都是一项艰巨的任务，可能需要几个小时。如果您查看提交日期，它是在 2017 年 10 月，因此可以选择下载该日期之前发布的任何版本的 Chrome。要搜索镜像，您可以在谷歌上搜索 inurl:/deb/pool/main/g/google-chrome-stable/。

---

<强>2。修复 ChromeDriver

Distil 根据窗口变量检查正则表达式规则 '/\$[a-z]dc_/'，并且 ChromeDriver 添加一个，如前所述 here满足那个条件。正如他们提到的，您必须在源代码中编辑 call_function.js，并重新定义变量 var key = '$cdc_asdjflasutopfhvcZLmcfl_';。用别的东西。此外，您可以使用十六进制编辑器更新现有的二进制文件，这可能更简单。

如果您决定使用旧版本的 Chrome(我想您已经这样做了)，则需要使用合适版本的 ChromeDriver。您可以在 ChromeDriver downloads webpage 中知道哪一个适合您的 Chrome 版本。 .例如，对于 Chrome v61(符合您的需要)，您可以使用 ChromeDriver 2.34 .完成后，只需将 ChromeDriver 二进制文件放在“/usr/bin/local”即可。

---

<强>3。采取其他预防措施

• 注意您的用户代理。
• 不要执行太多重复请求。
• 在请求之间使用(随机)延迟。
• 使用使用过的 Chrome 参数 here模仿正常的用户配置文件。