1
levan 2014-03-10 13:39:56 +08:00 via iPhone
这个应该去ruby china 发 他们应该在那
|
3
loading 2014-03-10 13:44:31 +08:00
太可耻了。
|
4
Mihuwa 2014-03-10 14:01:28 +08:00
|
5
yanng OP @Mihuwa 原来不止我一个人的网站被抓取,个人觉得抓取作为个人使用没问题的,搜索引擎都不会全文拿去,商业网站更不能这么做。
|
6
hadoop 2014-03-10 14:28:58 +08:00
还有一个 博客聚合站也是,巨讨厌,抓了之后还会把里面一些链接换成自己的
|
7
FarBox 2014-03-10 19:56:39 +08:00
@yanng 很抱歉,这个我们甚至都帮不上忙。原本想增加一个用户自定义的user-agent过滤,但我在nerdyang.com的访问日志里,找了半天,没有找到tuicool的user-agent……
|
10
kernel1983 2014-03-11 16:53:16 +08:00
|