1
tftk 2014-11-24 11:07:19 +08:00 1
网络 io。
|
2
lecher 2014-11-24 11:44:53 +08:00 1
网络请求方面的业务,瓶颈在网络io的居多。
这个业务cpu基本没负载,磁盘10分钟1k*10M的写入数据量也可以负担得起。 内存看vsftpd设置多大的内存缓冲区,有可能会爆内存。 |
3
AntiGameZ 2014-11-24 12:36:53 +08:00 1
瓶颈在ftp协议,个人建议rsync
|
5
likuku 2014-11-24 13:50:55 +08:00
@shanks ftp 要登录要交互...rsync 可以用 ip 白名单就简单搞定。rsync 貌似也有不进行比对就直接上传的选项。
|
6
ctexlive 2014-11-24 14:08:05 +08:00
应该可以测试吧。如果只有一个日志文件应该比较快。
ftp最大的问题是多个小文件传输极慢。 |
7
lhbc 2014-11-24 15:04:33 +08:00 via iPhone
取中间值,15分钟,5M大小,1000台机器。
那15分钟要传5G文件,需要带宽45M,算上开销要50M以上 如果文件更大,需要带宽更高 磁盘应该问题不大,CPU完全没问题 |
8
herozzm 2014-11-24 15:11:45 +08:00
我感觉vsftpd不太稳定,经常无故断开,0KB
|
9
AntiGameZ 2014-11-24 17:37:28 +08:00
|
10
Theo14 2014-11-24 17:48:49 +08:00 1
问题肯定会出在网络IO上,同样觉得用rsync更合适,rsync有很多参数可以使用,限速的参数也有
|
11
bertram 2014-11-24 18:26:42 +08:00 1
用rsync比vsftp靠谱。既然是日志收集的活儿,怎么不用rsyslog, syslog这些专门工具呢
|
12
msg7086 2014-11-24 22:50:36 +08:00 via iPhone
我会建议用nfs?
|
13
ryd994 2014-11-24 23:23:12 +08:00 via Android
客户端加随机延迟,打散开
|