我意思是,把我们很多 FAQ 问题和答案,以及更多的资料喂给 ChatGPT ,然后你去问 ChatGPT ,它就给你回复了
但我怎么把自己的那么多资料喂给 ChatGPT 呢?
总不能每次你问一次,我先把资料喂给 ChatGPT 一次吧?那多费劲,更何况 GPT-3.5 只能接受 3000 个 token 的输入,GPT-4 也只能接受 32000 个 token
我意思是,把我们很多 FAQ 问题和答案,以及更多的资料喂给 ChatGPT ,然后你去问 ChatGPT ,它就给你回复了
但我怎么把自己的那么多资料喂给 ChatGPT 呢?
总不能每次你问一次,我先把资料喂给 ChatGPT 一次吧?那多费劲,更何况 GPT-3.5 只能接受 3000 个 token 的输入,GPT-4 也只能接受 32000 个 token
|
malusamaApr 4, 2023
1
find tune
|
|
SolixApr 4, 2023 via iPhone
2
自己搭一个知识库,再结巴分词,再把问题根据相似度选择最相关的片段处理。
|
|
3
@malusama gpt 3.5 和 4 还没有开放 fine-tuning 的 API
用 https://platform.openai.com/docs/guides/embeddings 当然现在有很多成熟的库,比如 llama_index 和 langchain |
|
106npoApr 4, 2023 via Android
5
|
|
admin9Apr 4, 2023
6
内容数字化,使用 cosine similarity 算法找出跟问题最相关的内容,作为 prompt 传给 GPT
https://github.com/openai/openai-cookbook/blob/main/examples/Question_answering_using_embeddings.ipynb |
|
RoshanWuApr 4, 2023
7
|
|
fg990Apr 4, 2023
8
服务机器人是需求最明确。
|
|
lowerApr 4, 2023
9
chatgpt 肯定是希望其他的公司、产品、服务全都以插件的形式接入在它平台被集成和调用……
|
|
SmiteChowApr 4, 2023
11
请参考 chatpdf.com
|
|
aCodingCatApr 4, 2023
12
我也有这个疑问
如果是聊天场景,难道用户每次发送,都要附带之前全量的聊天记录吗?那 token 岂不是很容易就爆了 |
|
duffercnApr 4, 2023 via iPhone
13
Embeddings
|
|
alanhe421Feb 17, 2024
14
嗯 此类需要本质是拓展 AI 模型知识库,so ,embedding 合适
|