想要爬取亚马逊美国站的所有商品,但是没有途径
临时的解决办法是按照他的目录爬取,但是这样有一个问题,每一个最低级目录智能显示前 7 页的商品,按照价格最高排列和最低排列页只能获取 14 页的商品,超过 14 页的就抓不到了,这种应该怎么整呢
1
RockShake 2021-05-20 16:59:30 +08:00
对速度没有要求就 selenium 大法吧
|
3
chenzheyu 2021-05-20 19:30:56 +08:00
你们有什么爬的,我的 curl 直接就被识别成爬虫
|
7
kerwenard OP @chenzheyu 'USER_AGENT': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36'
|
8
xrkorz 2023-05-05 13:21:28 +08:00
大佬,你好,我是查询你的 ID 来到这里的,我在这个帖子下面看到你的发言,不知道你现在是否已经解决这个问题了。https://answers.microsoft.com/zh-hans/windows/forum/all/%E5%85%B3%E4%BA%8E%E8%BE%93%E5%85%A5%E6%B3%95/5411865a-2a25-469b-86be-3643ff34749e
我同样遇到了这个问题,我已经找到了解决方案, "HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Keyboard Layout" 把值设置为 1 就可以了 |