langchain_community.document_loaders.athena.AthenaLoader

class langchain_community.document_loaders.athena.AthenaLoader(query: str, database: str, s3_output_uri: str, profile_name: str, metadata_columns: Optional[List[str]] = None)[source]

从`AWS Athena`加载文档。

每个文档代表结果的一行。 - 默认情况下,所有列都写入文档的`page_content`中, 而没有列写入文档的`metadata`中。 - 如果提供了`metadata_columns`,那么这些列将被写入 文档的`metadata`中,而其余列将被写入文档的`page_content`中。

要进行身份验证,AWS客户端使用此方法自动加载凭据: https://boto3.amazonaws.com/v1/documentation/api/latest/guide/credentials.html

如果应该使用特定的凭据配置文件,则必须传递 要使用的`~/.aws/credentials`文件中的配置文件名称。

确保使用的凭据/角色具有访问Amazon Textract服务所需的策略。

初始化 Athena 文档加载器。

参数:

query: 在 Athena 中运行的查询。 database: Athena 数据库 s3_output_uri: Athena 输出路径 metadata_columns: 可选。写入到文档“metadata”的列。

Methods

__init__(query, database, s3_output_uri, ...)

初始化 Athena 文档加载器。

alazy_load()

一个用于文档的惰性加载器。

aload()

将数据加载到文档对象中。

lazy_load()

一个用于文档的惰性加载器。

load()

将数据加载到文档对象中。

load_and_split([text_splitter])

加载文档并分割成块。块作为文档返回。

Parameters
  • query (str) –

  • database (str) –

  • s3_output_uri (str) –

  • profile_name (str) –

  • metadata_columns (Optional[List[str]]) –

__init__(query: str, database: str, s3_output_uri: str, profile_name: str, metadata_columns: Optional[List[str]] = None)[source]

初始化 Athena 文档加载器。

参数:

query: 在 Athena 中运行的查询。 database: Athena 数据库 s3_output_uri: Athena 输出路径 metadata_columns: 可选。写入到文档“metadata”的列。

Parameters
  • query (str) –

  • database (str) –

  • s3_output_uri (str) –

  • profile_name (str) –

  • metadata_columns (Optional[List[str]]) –

async alazy_load() AsyncIterator[Document]

一个用于文档的惰性加载器。

Return type

AsyncIterator[Document]

async aload() List[Document]

将数据加载到文档对象中。

Return type

List[Document]

lazy_load() Iterator[Document][source]

一个用于文档的惰性加载器。

Return type

Iterator[Document]

load() List[Document]

将数据加载到文档对象中。

Return type

List[Document]

load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document]

加载文档并分割成块。块作为文档返回。

不要覆盖此方法。应该被视为已弃用!

参数:
text_splitter: 用于分割文档的TextSplitter实例。

默认为RecursiveCharacterTextSplitter。

返回:

文档列表。

Parameters

text_splitter (Optional[TextSplitter]) –

Return type

List[Document]

Examples using AthenaLoader