langchain_community.document_loaders.csv_loader.CSVLoader

class langchain_community.document_loaders.csv_loader.CSVLoader(file_path: Union[str, Path], source_column: Optional[str] = None, metadata_columns: Sequence[str] = (), csv_args: Optional[Dict] = None, encoding: Optional[str] = None, autodetect_encoding: bool = False)[source]

将`CSV`文件加载到文档列表中。

每个文档代表CSV文件的一行。每一行被转换为键/值对,并输出到文档的page_content中的新行。

从CSV加载的每个文档的源默认设置为`file_path`参数的值。 您可以通过将`source_column`参数设置为CSV文件中的列名来覆盖此设置。 然后,每个文档的源将设置为指定在`source_column`中的列的值。

输出示例:
column1: value1
column2: value2
column3: value3

参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。

Methods

__init__(file_path[, source_column, ...])

参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。

alazy_load()

一个用于文档的惰性加载器。

aload()

将数据加载到文档对象中。

lazy_load()

一个用于文档的惰性加载器。

load()

将数据加载到文档对象中。

load_and_split([text_splitter])

加载文档并分割成块。块作为文档返回。

Parameters
  • file_path (Union[str, Path]) –

  • source_column (Optional[str]) –

  • metadata_columns (Sequence[str]) –

  • csv_args (Optional[Dict]) –

  • encoding (Optional[str]) –

  • autodetect_encoding (bool) –

__init__(file_path: Union[str, Path], source_column: Optional[str] = None, metadata_columns: Sequence[str] = (), csv_args: Optional[Dict] = None, encoding: Optional[str] = None, autodetect_encoding: bool = False)[source]

参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。

Parameters
  • file_path (Union[str, Path]) –

  • source_column (Optional[str]) –

  • metadata_columns (Sequence[str]) –

  • csv_args (Optional[Dict]) –

  • encoding (Optional[str]) –

  • autodetect_encoding (bool) –

async alazy_load() AsyncIterator[Document]

一个用于文档的惰性加载器。

Return type

AsyncIterator[Document]

async aload() List[Document]

将数据加载到文档对象中。

Return type

List[Document]

lazy_load() Iterator[Document][source]

一个用于文档的惰性加载器。

Return type

Iterator[Document]

load() List[Document]

将数据加载到文档对象中。

Return type

List[Document]

load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document]

加载文档并分割成块。块作为文档返回。

不要覆盖此方法。应该被视为已弃用!

参数:
text_splitter: 用于分割文档的TextSplitter实例。

默认为RecursiveCharacterTextSplitter。

返回:

文档列表。

Parameters

text_splitter (Optional[TextSplitter]) –

Return type

List[Document]

Examples using CSVLoader