langchain_community.document_loaders.wikipedia.WikipediaLoader¶
- class langchain_community.document_loaders.wikipedia.WikipediaLoader(query: str, lang: str = 'en', load_max_docs: Optional[int] = 25, load_all_available_meta: Optional[bool] = False, doc_content_chars_max: Optional[int] = 4000)[source]¶
从`Wikipedia`加载。
目前查询长度的硬限制为300。
每个维基页面代表一个文档。
初始化WikipediaLoader类的新实例。
- 参数：
query（str）：要在Wikipedia上搜索的查询字符串。 lang（str，可选）：Wikipedia语言版本的语言代码。默认为”en”。 load_max_docs（int，可选）：要加载的最大文档数。默认为100。 load_all_available_meta（bool，可选）：指示是否加载每个文档的所有可用元数据。默认为False。 doc_content_chars_max（int，可选）：文档内容的最大字符数。默认为4000。
Methods
__init__(query[, lang, load_max_docs, ...])初始化WikipediaLoader类的新实例。
一个用于文档的惰性加载器。
aload()将数据加载到文档对象中。
将来自维基百科的查询结果加载到文档列表中。
load()将数据加载到文档对象中。
load_and_split([text_splitter])加载文档并分割成块。块作为文档返回。
- Parameters
query (str) –
lang (str) –
load_max_docs (Optional[int]) –
load_all_available_meta (Optional[bool]) –
doc_content_chars_max (Optional[int]) –
- __init__(query: str, lang: str = 'en', load_max_docs: Optional[int] = 25, load_all_available_meta: Optional[bool] = False, doc_content_chars_max: Optional[int] = 4000)[source]¶
初始化WikipediaLoader类的新实例。
- 参数：
query（str）：要在Wikipedia上搜索的查询字符串。 lang（str，可选）：Wikipedia语言版本的语言代码。默认为”en”。 load_max_docs（int，可选）：要加载的最大文档数。默认为100。 load_all_available_meta（bool，可选）：指示是否加载每个文档的所有可用元数据。默认为False。 doc_content_chars_max（int，可选）：文档内容的最大字符数。默认为4000。
- Parameters
query (str) –
lang (str) –
load_max_docs (Optional[int]) –
load_all_available_meta (Optional[bool]) –
doc_content_chars_max (Optional[int]) –
- lazy_load() Iterator[Document][source]¶
将来自维基百科的查询结果加载到文档列表中。
- 返回：
一个表示已加载的维基百科页面的文档对象列表。
- Return type
Iterator[Document]
- load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document]¶
加载文档并分割成块。块作为文档返回。
不要覆盖此方法。应该被视为已弃用！
- 参数：
- text_splitter: 用于分割文档的TextSplitter实例。
默认为RecursiveCharacterTextSplitter。
- 返回：
文档列表。
- Parameters
text_splitter (Optional[TextSplitter]) –
- Return type
List[Document]