langchain_community.document_loaders.lakefs
.LakeFSLoader¶
- class langchain_community.document_loaders.lakefs.LakeFSLoader(lakefs_access_key: str, lakefs_secret_key: str, lakefs_endpoint: str, repo: Optional[str] = None, ref: Optional[str] = 'main', path: Optional[str] = '')[source]¶
从`lakeFS`加载。
- Parameters
lakefs_access_key (str) – [required] lakeFS服务器的访问密钥
lakefs_secret_key (str) – [required] lakeFS服务器的秘密密钥
lakefs_endpoint (str) – [required] lakeFS服务器的端点地址, 例如: https://example.my-lakefs.com
repo (str) – [optional, default = ‘’] 目标仓库
ref (str) – [optional, default = ‘main’] 目标引用(分支名称、标签或提交ID)
path (str) – [optional, default = ‘’] 目标路径
Attributes
repo
ref
path
Methods
__init__
(lakefs_access_key, ...[, repo, ...])- param lakefs_access_key
[required] lakeFS服务器的访问密钥
一个用于文档的惰性加载器。
aload
()将数据加载到文档对象中。
一个用于文档的惰性加载器。
load
()将数据加载到文档对象中。
load_and_split
([text_splitter])加载文档并分割成块。块作为文档返回。
set_path
(path)set_ref
(ref)set_repo
(repo)- __init__(lakefs_access_key: str, lakefs_secret_key: str, lakefs_endpoint: str, repo: Optional[str] = None, ref: Optional[str] = 'main', path: Optional[str] = '')[source]¶
- Parameters
lakefs_access_key (str) – [required] lakeFS服务器的访问密钥
lakefs_secret_key (str) – [required] lakeFS服务器的秘密密钥
lakefs_endpoint (str) – [required] lakeFS服务器的端点地址, 例如: https://example.my-lakefs.com
repo (Optional[str]) – [optional, default = ‘’] 目标仓库
ref (Optional[str]) – [optional, default = ‘main’] 目标引用(分支名称、标签或提交ID)
path (Optional[str]) – [optional, default = ‘’] 目标路径
- load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document] ¶
加载文档并分割成块。块作为文档返回。
不要覆盖此方法。应该被视为已弃用!
- 参数:
- text_splitter: 用于分割文档的TextSplitter实例。
默认为RecursiveCharacterTextSplitter。
- 返回:
文档列表。
- Parameters
text_splitter (Optional[TextSplitter]) –
- Return type
List[Document]