4.3搭建知识库

文档摘要

4.3 搭建知识库  4.3.1 Embedding模型选择  在搭建知识库时，常用的embedding model可选择： Embedding API：如OpenAI，Cohere，Mistral等的API服务，适用于项目或工程中需要方便直接的使用嵌入且不介意数据隐私的情况 Open Embedding Model：适用于对数据隐私有要求或需要自定义模型本地部署的情况以上两者的区别可以等价的理解成大语言模型API和开源本地LLM的区别。在HuggingFace的排行榜上可以看到各种各样开源好用的embedding模型。在具体研究和工程问题的选择中，其实没有一个明确的好坏评价标准，适合自己的数据处理场景才是最好的。