Skip to main content

BM25

BM25 (维基百科) 也称为 Okapi BM25,是一种用于信息检索系统的排名函数,用于估算文档与给定搜索查询的相关性。

BM25Retriever 检索器使用 rank_bm25 包。

%pip install --upgrade --quiet  rank_bm25
from langchain_community.retrievers import BM25Retriever

创建新检索器与文本

retriever = BM25Retriever.from_texts(["foo", "bar", "world", "hello", "foo bar"])

使用文档创建新的检索器

您现在可以使用您创建的文档来创建新的检索器。

from langchain_core.documents import Document

retriever = BM25Retriever.from_documents(
[
Document(page_content="foo"),
Document(page_content="bar"),
Document(page_content="world"),
Document(page_content="hello"),
Document(page_content="foo bar"),
]
)

使用检索器

我们现在可以使用检索器了!

result = retriever.invoke("foo")
result
[Document(page_content='foo', metadata={}),
Document(page_content='foo bar', metadata={}),
Document(page_content='hello', metadata={}),
Document(page_content='world', metadata={})]

相关


此页面是否有帮助?


您还可以留下详细的反馈 在 GitHub 上