BGE on Hugging Face
HuggingFace上的BGE模型是最好的开源嵌入模型之一。 BGE模型由北京人工智能研究院(BAAI)创建。
BAAI
是一个从事人工智能研究和开发的私营非营利组织。
本笔记本展示了如何通过Hugging Face
使用BGE Embeddings
%pip install --upgrade --quiet sentence_transformers
from langchain_community.embeddings import HuggingFaceBgeEmbeddings
model_name = "BAAI/bge-small-en"
model_kwargs = {"device": "cpu"}
encode_kwargs = {"normalize_embeddings": True}
hf = HuggingFaceBgeEmbeddings(
model_name=model_name, model_kwargs=model_kwargs, encode_kwargs=encode_kwargs
)
API Reference:HuggingFaceBgeEmbeddings
请注意,您需要为 model_name="BAAI/bge-m3"
传递 query_instruction=""
,请参阅 FAQ BGE M3。
embedding = hf.embed_query("hi this is harrison")
len(embedding)
384