This topic created in 4174 days ago, the information mentioned may be changed or developed.
有个客户联系我,要抓淘宝的数据,其实我就想问一下大家,你们最近抓过淘宝的数据么?
如果抓取量较大会被封IP吗?
要先确保这个问题,才敢回复对方是否能接这个活呢,所以来v2ex问问,以免答应了客户最后发现抓不了。
作为回报,前十位有效回答者均发送感谢,确定答案后我会主动下沉帖子。
回答时请多一些说明,说说你的案例。 类似“可以”、“不可以”、“不会”这种非常简单的回复一律视为无效回复。
15 replies • 2014-12-31 22:31:35 +08:00
 |
|
1
laozhao0 Dec 31, 2014 1
可以。我们用来抓取淘宝、天猫的商品类目、标题、价格(最难)等数据,用阿里云。完全没问题,因为相当于内网。
|
 |
|
2
BlueFly Dec 31, 2014
那些比价APP都有抓取淘宝的价钱,肯定是有法子的
|
 |
|
3
flynaj Dec 31, 2014 via Android 1
看你的频率跟量了,频率调慢点就没有事
|
 |
|
4
crab Dec 31, 2014 1
有限制的,会出现验证码让你输入。
|
 |
|
5
Dannytmp Dec 31, 2014 1
不要没完没了就没事,现在做淘客用的代码还不是靠抓,人工的话早累死了
|
 |
|
8
alay9999 Dec 31, 2014
会,记得以前有个帖子就是研究如何范屏蔽的
|
 |
|
9
imn1 Dec 31, 2014 1
要说清楚淘宝什么数据,淘女郎的图片我抓了300+G,然后删了280+G 价格没兴趣抓
|
 |
|
10
allen3921 Dec 31, 2014 1
一般没啥事,但是有些需要登录抓取的,抓太频繁了会被封禁。
|
 |
|
12
blakefan Dec 31, 2014 via Android 1
会,限制你,看你的频率和量了
|
 |
|
13
humiaozuzu Dec 31, 2014 1
我们抓的很厉害,没封。 抓 html 解析出数据这样,频率在 1w+/h
|
 |
|
14
Linxing Dec 31, 2014
之前爬豆瓣都被封,淘宝也会吧
|
 |
|
15
s2555 Dec 31, 2014 1
我也在抓,每天也就几千,中间会有一两次连接不了
|