gpt4 book ai didi

node.js - 无法在谷歌云功能中调试 Puppeteer 超时

转载 作者:行者123 更新时间:2023-12-05 07:02:35 26 4
gpt4 key购买 nike

我已经进行了大量的调试,阅读了文章,但无法弄清楚为什么我会得到一个

在 Promise.then (/workspace/node_modules/puppeteer/lib/cjs/puppeteer/common/LifecycleWatcher.js:106:111) name: 'TimeoutError'

对于下面的“goto”行,我尝试调整参数,并尝试返回 package.json 中的 puppeteer 版本,从版本 5 到 4 再到 3。代码在本地运行良好,但在 Google Cloud Function 中一直超时。我通过为 google.com 编写一个简单的获取函数来验证我的 VPC 连接器是否正常工作,所以这纯粹是 GCF 问题中的 Puppeteer。

仅供引用,这是在 PubSub 主题上触发的。

const puppeteer = require('puppeteer')

const PUPPETEER_OPTIONS = {
headless: true,
args: [
'--disable-gpu',
'--disable-dev-shm-usage',
'--disable-setuid-sandbox',
'--no-first-run',
'--no-sandbox',
'--no-zygote',
'--single-process',
"--proxy-server='direct://'",
'--proxy-bypass-list=*',
],
};

const closeConnection = async (page, browser) => {
page && (await page.close());
browser && (await browser.close());
};

exports.runScraper = async (message, context) => {
const url = Buffer.from(message.data, 'base64').toString()
console.log( `triggered with ${url}`)

const browser = await puppeteer.launch(PUPPETEER_OPTIONS);
const page = await browser.newPage();

try // open url and get price and title
{
console.log( "awaiting goto")
await page.goto(url, { waitUntil: 'networkidle2' })
console.log( "awaiting evaluate")
let item = await page.evaluate( async () => {
let priceArray = document.querySelector('div.cAIbCF').innerText.split('.')
return {
title: document.querySelector('h1 > span').innerText,
whole: priceArray[0],
part: priceArray[1]
}
})
} // try
catch (error) {
console.log( error );
throw error;
} finally {
console.log( "finally closeConnection" );
await closeConnection(page, browser);
return;
}
}

最佳答案

我遇到了类似的问题。我变了

await page.goto(url, { waitUntil: 'networkidle2' })

await page.goto(url, {
waitUntil: 'load',
timeout: 0
});

它奏效了。请随意使用它并告诉它是否有效。

关于node.js - 无法在谷歌云功能中调试 Puppeteer 超时,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/63530336/

26 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com