V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
s609926202
V2EX  ›  问与答

AWS ALB 负载均衡下,子机器如何同步执行一条命令 ?

  •  
  •   s609926202 · 2018-12-29 16:12:37 +08:00 · 1405 次点击
    这是一个创建于 2156 天前的主题,其中的信息可能已经有所发展或是发生改变。

    情况是这样了,用了 AWS ALB,其实就是负载均衡。 由于目前网站运行比较慢,所以我开启了 nginx 的 fastcgi cache,然后 QPS 由 2 -> 8000,这...

    所以我想在每个子机器下的 nginx 都开启 fastcgi cache,但是这会有一个问题:清除缓存不能同步。

    目前有几个解决方案:

    1. 只允许自动清除,设置 fastcgi cache 的有效期,比如 60m,过了一个小时就自动失效了(用户可能会奔溃);
    2. 给机器 a 发送删除缓存命令,a 收到命令后给 b 机器发命令(但是这个我不知道怎么实现,只是设想);
    3. 使用同步工具,当删除 a 机器的文件后,同步删除 b 机器的文件,添加则不操作;

    大家是怎么做的?

    办法肯定是有的,比如分布式 CDN,厂家都有清除缓存的功能,也会同步清除,但是原理不得而知。。

    第 1 条附言  ·  2018-12-29 16:44:25 +08:00
    标题改不了了,其实可以改为分布式缓存如何一块删除?
    10 条回复    2018-12-31 11:04:06 +08:00
    whileFalse
        1
    whileFalse  
       2018-12-29 16:32:13 +08:00
    我不太了解 fastcgi 缓存的过期规则,能解释下吗?
    这个过期是由程序触发的还是由管理员手动触发的?
    如果是程序触发,是何种方式触发?
    s609926202
        2
    s609926202  
    OP
       2018-12-29 16:40:43 +08:00
    @whileFalse

    http://nginx.org/en/docs/http/ngx_http_fastcgi_module.html#fastcgi_cache_valid
    你可以看这个,我也是刚接触这个,
    目前了解到,他会设置一个缓存页面的过期时间,比如 60m ( 60 分钟),等用户 60 分钟后再次请求时,ngxin 会请求源站重新生成缓存文件覆盖旧的,新的文件又会有 60m 的有效时间。

    国外的 kinsta 把这个设置了 1 天,可以说很感人了,
    whileFalse
        3
    whileFalse  
       2018-12-29 17:14:40 +08:00
    @s609926202
    你是用国际版 AWS 吗?是的话可以使用 Cloudformation 作为缓存层。
    每个机器有自己的缓存过期时间是合理的。不过这会导致一个小问题,可能多台服务器上的缓存页面有差别,用户在访问这个页面的时候不断刷新,可能每次看到的内容不一样。
    可以通过启用目标组粘性解决这个问题。
    whileFalse
        4
    whileFalse  
       2018-12-29 17:18:03 +08:00
    这是自动删除的情况。手动删除的话就是自己或者代码到每台机器上执行清楚缓存操作。

    如果,你特别在意缓存的同步删除这个事儿,几个办法:
    1. 通过 cron 做定时任务,每台机器同时调用删除指令
    2. 使用 redis 等做多机同步。
    whileFalse
        5
    whileFalse  
       2018-12-29 17:29:04 +08:00
    还有啊,如果你 QPS 只有 2 的话,还是从业务层面解决下吧。
    s609926202
        6
    s609926202  
    OP
       2018-12-29 17:34:44 +08:00 via iPhone
    @whileFalse 用的 wordpress,插件用多了自然执行就慢了了,用缓存最容易解决问题
    s609926202
        7
    s609926202  
    OP
       2018-12-29 17:37:37 +08:00 via iPhone
    @whileFalse 倒不是必须同步,一前一后也可以。
    你说的代码到每台机器怎么实施,负载均衡下,每次到达机器都是根据当时机器负载随机的,并不能指定吧。
    whileFalse
        8
    whileFalse  
       2018-12-29 17:39:09 +08:00
    @s609926202 直接通过 ssh 访问目标机器
    julyclyde
        9
    julyclyde  
       2018-12-31 09:34:03 +08:00
    CDN 并不是同步清除的
    s609926202
        10
    s609926202  
    OP
       2018-12-31 11:04:06 +08:00 via iPhone
    @julyclyde 这方面有啥推荐的文章吗
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   919 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 21:43 · PVG 05:43 · LAX 13:43 · JFK 16:43
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.