V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
lsk569937453
V2EX  ›  程序员

多线程分段下载文件时,为什么不下载到同一个大文件中?而是要分别下载到单独的文件然后再合并。

  •  
  •   lsk569937453 · 197 天前 · 11429 次点击
    这是一个创建于 197 天前的主题,其中的信息可能已经有所发展或是发生改变。

    https://gist.github.com/lsk569937453/e0496754cf3ebe740a33a7759516015e

    我自己写了个 demo ,假设开 50 个线程下载,每个线程下载时间为 10s 钟,可以看到最后写入文件的时间才 1s 不到。

    所以下载文件时,瓶颈是网络 IO 吧,操作文件 IO 的时间可以忽略不计了。所以是不是下载到一个文件中更优?

    103 条回复    2024-05-13 17:05:24 +08:00
    1  2  
    huixia0010
        101
    huixia0010  
       195 天前
    哦~~~~~~涨姿势了,谢谢 @AsAsSaSa

    你说的对,这个不知道最终尺寸,两个确实都不适用。 @guo4224
    augustheart
        102
    augustheart  
       195 天前
    @GrayXu 不做配置文件,分段下载情况下断点续传的时候确实会有问题。
    下载软件必须考虑断点续传啊。
    playboy0
        103
    playboy0  
       195 天前
    @monkeyWie #43 您好,请问您说的`单线程高性能网络开发的(epoll 、eventloop )`这两点可以给个关键字吗 ,我想学习一下这方面,谢谢
    1  2  
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1854 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 16:20 · PVG 00:20 · LAX 08:20 · JFK 11:20
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.