主体功能流程
- 前置工作：古诗词向量化
- 用户上传照片，后台通过多模态接口分析图片主体和意境，格式化输出
- 根据上面的输出去向量库中匹配，返回 Top N 诗句
- 根据诗句反查得到整诗返给前端
- 前端呈现 小程序
- AI：Gemini 、LangChain 、m3e 、chroma 通义千问视觉理解大模型 Qwen-VL
技术原理：是把古诗词通过大语言模型翻译成可以理解的现代词。然后搭建一个视觉理解大模型 Qwen-VL 理解图片的内容。通过 chroma 向量化我们的古诗词数据库（包含全部的古、近、现代诗、词、小调）然后反查结果同一内容返回给前端用户。
小程序名称叫做图生成诗，目前免费供大家使用。👇下面是二维码
10 条回复 • 2024-11-26 00:57:18 +08:00
 |
1
v2maxwell 10 天前 via Android
感觉好像前几天有坛友发过类似的。。。
|
 |
3
Thecosy OP 后面加上朋友圈文案分享功能，然后还可以方便的调用手机摄像头。
|
 |
4
savian666 10 天前
|
 |
9
jefferyH 9 天前 via iPhone
你是把所有诗都翻译了一遍吗用大模型？
|
Select Language