系统: ubuntu 16.04
各依赖版本如下:
puppeteer
: 1.11.0python
: 3.6.2chrome
: 609904pyppeteer
: 0.0.25需求: 使用 python 控制 chrome 访问页面 A,并一直点击页面 A 上的下一页按钮,同时获取每一页数据
利益相关:原始代码暂时不方便发出来
bug: 在有界面模式下,可以正常的翻页并且获取每一页的数据,直到最后一页(6000 页). 但是, 在无头模式下,翻页到 28 页的时候,会报错 Navigation Timeout Exceeded: 3000 ms exceeded
, 我捕获了这个错误,然后重新 click 和 waitforNavigation, 然后程序就一直停在这里了.
尝试过:
主要想问:是否有大佬遇到在无头模式超时并程序假死的情况?
大过年的, 谢谢各位啦.
在github上提了一个issue,大佬们有熟悉的可以瞅一眼,非常感谢了!
困扰了半个月了。
https://github.com/miyakogi/pyppeteer/issues/201
1
danc 2019-02-02 20:10:39 +08:00 via Android 1
无头模式,要等待页面加载出来,再 click 嘛。有头模式,会阻塞住直到页面渲染完了才能 click。
|
2
Nick2VIPUser OP @danc 不管是不是无头,应该都是要自己捕获相关元素加载出来才能继续动作吧?
|
3
tikazyq 2019-02-09 19:53:50 +08:00 via iPhone 1
感觉应该是页面请求卡住了,ajax 没有加载,建议 screenshot 调试
|
4
Nick2VIPUser OP @tikazyq 卡住之前的 screenshot 没有问题。。。
|
5
lau52y 2021-09-17 09:19:46 +08:00
这个问题,我也遇到过,巧的是我有两台电脑,一台正常运行, pyppeteer 是 0.2.5 另一台版本要低于 0.2.5,然后升级之后,这个问题就解决了(最新版是 0.2.6)
|