除了 Cloudflare Workers AI 还有能提供免费的大语言模型 API 调用的服务吗？

This topic created in 666 days ago, the information mentioned may be changed or developed.

CF 的词嵌入只支持英文，有中文就好了。

Cloudflare

免费

中文

3 replies • 2024-07-26 23:23:46 +08:00

catchmeup

Jul 26, 2024

对中文用户来说，llama3.1 相较 3.0 的较大提升就是用中文提问可以得到中文相应。https://groq.com/ 可以免费使用 llama3.1 的 70b 和 8b, 405b 现阶段只开放给付费用户测试。groq 兼容 openai sdk:https://console.groq.com/docs/openai 。付请求限制：

sunzhuo

Jul 26, 2024

@catchmeup 不提供词嵌入模型吗？

catchmeup

Jul 26, 2024 via Android

@sunzhuo 没有，较少云厂商提供 embedding ，一般本地就够用，都是兼容任意 llm 的，我一般用 huggingface 上的