V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
zooo
V2EX  ›  机器学习

16G 显存 GPU 有什么 AI 模型可以部署玩玩的?

  •  
  •   zooo · 2023-07-29 21:08:41 +08:00 · 1806 次点击
    这是一个创建于 417 天前的主题,其中的信息可能已经有所发展或是发生改变。

    如题,大家在本地搭建过什么模型呢?

    5 条回复    2023-10-17 16:44:33 +08:00
    Back2life
        1
    Back2life  
       2023-07-30 02:20:41 +08:00   ❤️ 3
    如果你是说语言模型,我最近在用的比较喜欢的是这几个:
    nous-hermes-13b.ggmlv3.q4_K_S.bin
    airoboros-7b-gpt4.ggmlv3.q4_0.bin
    pygmalion-6b
    因为只有 8G 显存,我跑的是如上低配版。
    killkstheme
        2
    killkstheme  
       2023-08-19 08:30:04 +08:00   ❤️ 1
    llama 2-7B ,github 上有可视化教程
    lmkyl
        3
    lmkyl  
       2023-08-21 14:07:23 +08:00 via iPhone   ❤️ 1
    stable diffusion
    EagerTo
        4
    EagerTo  
       342 天前
    @lmkyl #3 有链接么老哥.
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5558 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 01:38 · PVG 09:38 · LAX 18:38 · JFK 21:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.