V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
senlinmuvs
V2EX  ›  OpenAI

是否有 AI 能实现投喂某本书之后再让它把所有关于 XXX 的描写列出来?

  •  
  •   senlinmuvs · 243 天前 · 1433 次点击
    这是一个创建于 243 天前的主题,其中的信息可能已经有所发展或是发生改变。

    要能用户自己导入书籍 甚至可以导入很多本书,然后让它从所有这些书里找,能实现不?

    第 1 条附言  ·  242 天前
    kimi 试了下感觉还是效果不大行 回答有很多错 即使是不需要上下文推理 人眼一看就知道的答案 如问它某个游戏是哪个公司发布的 文中就在一句话里写明了 XXX 公司的 XXX 游戏 也答不了
    第 2 条附言  ·  242 天前

    第 3 条附言  ·  213 天前
    更新:
    minimax 海螺 AI 能回答到上面那问题,当时没找到用户界面入口
    2023 年就有很多人在用家用电脑跑本地 AI 了
    24 条回复    2024-04-06 19:17:37 +08:00
    183387594
        1
    183387594  
       243 天前
    现在很多支持文档上传的 都支持了,kimi,minimax,讯飞
    向量搜索+ai 解读
    senlinmuvs
        2
    senlinmuvs  
    OP
       243 天前
    @183387594 OK 谢谢
    senlinmuvs
        3
    senlinmuvs  
    OP
       243 天前
    @183387594 minimax 像没看到针对普通用户的界面
    讯飞也是针对开发者的吧
    kimi 之前倒是试过 老是说人太多
    183387594
        4
    183387594  
       243 天前
    @senlinmuvs 3l ,是的 有向量化的接口 可以本地做知识库 再结合他们的接口
    senlinmuvs
        5
    senlinmuvs  
    OP
       243 天前
    @183387594 要是有能完全在本地跑的就好了 就一个单机软件 导入 然后分析
    MapleEve
        6
    MapleEve  
       243 天前
    @senlinmuvs 本地可以,训练千亿级大模型先准备几百万的设备就行。就算花钱云上微调训练也要大几千上万
    senlinmuvs
        7
    senlinmuvs  
    OP
       242 天前
    @MapleEve 把那些训练好的模型打包进单机软件 再用来分析固定的文本 就不需要这么复杂吧
    MapleEve
        8
    MapleEve  
       242 天前
    @senlinmuvs 你先明白本地要跑起来训练好的模型需要多大的显存,然后再搞明白 finetune 需要多大的显存。本地不是不能跑,是你的电脑跑不了。
    senlinmuvs
        9
    senlinmuvs  
    OP
       242 天前
    @MapleEve 哦 那不了解 跑起来大概是要多大配置呢
    ywkk
        10
    ywkk  
       242 天前
    @senlinmuvs 你不了解,你以为打包的仅是这本书的内容,其实你需要打包的是理解这本书的大脑,也就是大模型本身,千亿大模型需要什么配置,你的本地化就需要什么配置。
    senlinmuvs
        11
    senlinmuvs  
    OP
       242 天前
    @ywkk 我说的就是打包大脑要多大配置呢 有固定场景的大脑应该比那些通用智能的大脑需要的应该是简化些的 现在没有 以后应该会出现
    senlinmuvs
        12
    senlinmuvs  
    OP
       242 天前
    @ywkk 那个啥文生图的不是就有本地的方案吗
    MapleEve
        13
    MapleEve  
       242 天前
    @senlinmuvs 得了吧,什么都不懂,能跑得动千亿大模型的集群硬件成本就是大几百万。
    本地能跑的那些都是玩具。
    senlinmuvs
        14
    senlinmuvs  
    OP
       241 天前
    @MapleEve 现在那些线上的不也是玩具 世界上第一台电脑还有房子那么大呢
    MapleEve
        15
    MapleEve  
       239 天前 via iPhone
    @senlinmuvs 是的你说得对,所以你去造一台出来吧
    senlinmuvs
        17
    senlinmuvs  
    OP
       238 天前
    @MapleEve 看你博客了 啥都往网上放
    MapleEve
        18
    MapleEve  
       238 天前
    @senlinmuvs 笑了,7B 模型有锤子用,Grok 跑起来要 200G 显存也是个垃圾。
    你先看明白电脑跑 100B 模型要什么配置再说吧,什么都不懂,别人指出你的理解有问题还杠。
    你说的都对,你自己去部署了试试吧。
    senlinmuvs
        19
    senlinmuvs  
    OP
       238 天前
    @MapleEve 行吧 想必你是想得这么个回复:“你厉害呢”
    ruike2
        20
    ruike2  
       238 天前
    这就不得不提及这个 AI 工具网址大全了: https://aitool8.com/
    MapleEve
        21
    MapleEve  
       238 天前
    @ruike2 太不全了,Claude 、PoE 、Openrouter 一类的没有,国内的深度求索、Kimi ,GLM4 也没有

    贴主想要的就是白嫖那种几百万字知识库微调的模型,不过各大厂商也不是傻子,就算你用阿里云、智谱的微调训练,以几百万字来算的话,也是要几千块的。
    senlinmuvs
        22
    senlinmuvs  
    OP
       238 天前
    @ruike2 先收藏以备后用
    ruike2
        23
    ruike2  
       238 天前
    @MapleEve 好的,会逐步添加上去的
    mmdsun
        24
    mmdsun  
       233 天前 via iPhone
    @MapleEve 这种就是 RAG 。书本地存向量数据库,提问先搜向量数据库,返回相似度高的结果喂给 AI 就行。本地完全可以。看好几个 v 友都是这么玩的。跑向量数据库不需要太好配置。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1100 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 19:09 · PVG 03:09 · LAX 11:09 · JFK 14:09
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.