python - 为什么 instagram 不能与 Selenium headless Chrome 一起使用？

Question

我正在尝试构建一个 headless (headless)工作的 insta 机器人，但它似乎没有找到用户名、密码列(即 NoSuchElementException)。

我尝试运行这段代码来排除故障。 (基本上打开 ig 主页并截屏)

from selenium import webdriver
from time import sleep

options = webdriver.ChromeOptions()
options.headless = True
options.add_argument("--window-size=1920,1080")
browser = webdriver.Chrome(options=options)
browser.get("https://www.instagram.com")
browser.get_screenshot_as_file(f"screenshot.png")

我得到了这些截图 basically saying 'error, retry after several minutes' in french

我尝试通过 selenium 找到“connectez-vous”按钮，但我尝试的每个 xpath 都不起作用，而且不可能通过 f12 找到它

该机器人稍后会上传到 pythonanywhere，这样我就可以在云端运行它(所以如果您认为我可能会遇到其他问题，您可以告诉我)

你建议我做什么？

Answer 1

from selenium import webdriver
from time import sleep

options = webdriver.ChromeOptions()
#options.headless = True
options.add_argument("--window-size=1920,1080")
options.add_argument("--headless")
options.add_argument("--disable-gpu")
options.add_argument(
    "user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36")
browser = webdriver.Chrome(options=options)
browser.get("https://www.instagram.com")
sleep(5)
#browser.refresh()
browser.get_screenshot_as_file(f"screenshot.png")

对于 headless chrome，useragent 设置为 chromeheadless 之类的，这使得 instagram 检测到您正在使用 headless chrome。

您可以通过指定硬编码的用户代理来解决这个问题，

打开一个普通的 chrome，转到网络选项卡，打开请求 header 并复制用户代理部分并替换为您的代码

Headless browser detection