- 爬虫频率设置的很低 10 分钟一次 不对源站造成性能问题
- 抓取标题 URL 本地存储 用户点击跳转到源站 是否构成侵权
- 我知道这个是 百度(蜘蛛) 的做法，但是他们是大厂 个人这样做是否有问题
- 麻烦大家帮我科普一下
This topic created in 2164 days ago, the information mentioned may be changed or developed.
 |
1
咋都是进来瞄一眼就跑的啊，没人帮忙解答一下吗？
之前 RSS 很多被下架 原因都是什么 |
 |
natashahollyzDec 3, 2020
2
个人觉得不构成。
流量还是回到源站的话，这没什么问题。 转载注明出处也没啥问题。源站注明拒绝转载除外。 |
|
3
@natashahollyz 我也是这么想的 但是 RSS 类的为啥被下架那么多呢 是因为不受控 有外网内容？
|
|
natashahollyzDec 3, 2020
4
@baijiahei 苹果说有违反中国法律的内容。。。大概能猜到是什么了
|
 |
jr55475f112iz2tuDec 3, 2020
5
10 分钟一次，这个频率挺高了其实
只抓标题，理论上肯定比抓全文风险更低 |
|
natashahollyzDec 3, 2020
6
@baijiahei 抓全文可能涉及到版权，抓标题应该不涉及。如果源站不让抓，通知你一下，你不抓就是了。法律风险微乎其微
|
 |
ztxccccDec 3, 2020
7
看 robot.txt 做事
频率合理 只爬公开页面 不直接盈利 至少被告的时候还能抗诉下 |
 |
8
通用搜索引擎并不是定向爬取+定向利用
定向爬取定向利用是有争议的， 对方是有机会搞你的 feed 是平台主动把数据展示给你 几个性质不一样的 |
1 |
9
@natashahollyz 大概是想象的样子 毕竟 rss 是用户自定义 不可控
|
|
10
@natashahollyz 是的
|
|
natashahollyzDec 3, 2020 via iPhone
11
@baijiahei 时政别碰，搞不好喝茶。其它的不要怕
|
|
12
@natashahollyz 没这想法 很多东西是红线
|
 |
opengpsDec 3, 2020
13
爬虫现在没有明确边界，除了已经想到的问题，多关注这一行里的新闻及时调整吧
|
|
opengpsDec 3, 2020
14
文中有看到类比百度，这是个不太合适的类比，毕竟百度给源站带去流量，可能是源站期望的效果。
|
 |
jones2000Dec 3, 2020
15
找个律师事务所咨询下不就可以了。
|
 |
2088TXTDec 3, 2020
16
百度也是 看 robot.txt 协议吧
|
Select Language