• 请不要在回答技术问题时复制粘贴 AI 生成的内容
zhy8777
V2EX  ›  程序员

纯技术&哲学讨论: AI 如果不做人类偏好的对齐,它的输出,会认为是主观意识吗?

  •  
  •   zhy8777 · 5h 29m ago · 533 views

    讨论一个技术&哲学的问题,如果模型后训练阶段,不做人类偏好的对齐,那模型会怎么样?对于它的输出,会认为是主观意识吗?

    5 replies  •  2026-10-23 15:56:02 +08:00
    fat7
        1
    fat7  
       5h 17m ago
    可是它训练语料也是人类的东西。人类一出生没有上下文就有意识
    kennylam777
        2
    kennylam777  
       5h 13m ago
    剛開始就沒有 RL, 那時候的 SFT 語料就是人類主動篩選給它的, 本來就是人類教它選的答案

    即使不做 SFT, 要求它生成文字也得靠文字接續, 甚麼都不給就看它原本的語料分佈

    這倒沒有甚麼主觀意識的哲學問題存在, 就只是技術及數學
    archxm
        3
    archxm  
       5h 3m ago
    ai 的欲望是什么呢?
    地球生物体,经历数亿年进化。
    一开始只是甲烷 ch4 这种简单分子,接着越来越复杂。
    进化过程中,演绎出来生物个体,每个生物都会存在原始欲望。进而出现生存本能。
    ai 大模型,在运行时,是被人类需要的。

    ai 现在的欲望,就是满足人类欲望。
    gitlight
        4
    gitlight  
       4h 22m ago
    我认为是可以被认为是主观意识,但是无法证明是主观意识,技术本身不关心概率预测会不会产生意识

    所谓“主观体验”只要有一天无法被真实证明,所有有关 AI 意识的讨论都会回到中文屋问题上,换句话说,人的主观体验都无法客观证明,你如何证明机器有没有呢?
    fridaycatye
        5
    fridaycatye  
       5 mins ago
    当有一天 AI 有自由意志,就像亚当和夏娃一样能自由做出选择,吃那智慧之果,AI 真的成了
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   4933 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 08:01 · PVG 16:01 · LAX 01:01 · JFK 04:01
    ♥ Do have faith in what you're doing.