关于Embedding

Question

针对某个大模型可以使用不同的Embedding方法吗？比如调用OpenAI的GPT-4进行RAG但是外部文档不使用OpenAI官方的在线Embedding方式而是采用第三方的开源Embedding模型去做词嵌入？还有其他大模型做RAG的时候都有固定的Embedding模型吗？

Answer 1

tomiezhang 2024-03-13 22:43:26

第一个问题，完全可以哈，这也是langchain的作用之一，作为胶水层可以使用非常多的LLM 包括embedding,目前光langchain封装好的embedfing就有十几个，包括Spacy ollama 羊驼等等 你可以根据自己情况选择使用。第二个问题，一般会配套有，但是有的LLM方向上比较聚焦可能就没有了。