zhengzhongzhao
V2EX  ›  问与答

分词是什么原理?比较著名的是 jieba 分词,不过操作系统其实有内置分词功能

  •  
  •   zhengzhongzhao · Apr 8, 2023 · 2721 views
    This topic created in 1307 days ago, the information mentioned may be changed or developed.
    7 replies  •  2023-04-11 15:14:41 +08:00
    LaurelHarmon
    LaurelHarmon
    Apr 8, 2023 via Android❤️1
    1
    这个一搜不就有好多资料,隐马尔可夫,条件随机场
    dji38838c
    dji38838c
    Apr 8, 2023❤️3
    2
    @LaurelHarmon ta 期待的答案是没有复杂的数学的
    yangzhezjgs
    yangzhezjgs
    Apr 8, 2023❤️1
    3
    想看简单科普的话,可以去看吴军老师的《数学之美》,比较通俗的写了很多 NLP 和人工智能技术的发展和由来
    xiaowowo
    xiaowowo
    Apr 8, 2023❤️1
    4
    中文分词首先是要有词库的。
    AngryPanda
    AngryPanda
    Apr 8, 2023 via iPhone❤️1
    5
    以后可以尝试 ChatGPT 分词语
    zhengzhongzhao
    zhengzhongzhao
    OP
    Apr 11, 2023
    6
    @yangzhezjgs ~~~
    zhengzhongzhao
    zhengzhongzhao
    OP
    Apr 11, 2023
    7
    @LaurelHarmon 隐马尔可夫,条件随机场 好牛逼的名字
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1317 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 18:56 · PVG 02:56 · LAX 10:56 · JFK 13:56
    ♥ Do have faith in what you're doing.