langchain_community.document_loaders.csv_loader
.CSVLoader¶
- class langchain_community.document_loaders.csv_loader.CSVLoader(file_path: Union[str, Path], source_column: Optional[str] = None, metadata_columns: Sequence[str] = (), csv_args: Optional[Dict] = None, encoding: Optional[str] = None, autodetect_encoding: bool = False)[source]¶
将`CSV`文件加载到文档列表中。
每个文档代表CSV文件的一行。每一行被转换为键/值对,并输出到文档的page_content中的新行。
从CSV加载的每个文档的源默认设置为`file_path`参数的值。 您可以通过将`source_column`参数设置为CSV文件中的列名来覆盖此设置。 然后,每个文档的源将设置为指定在`source_column`中的列的值。
- 输出示例:
column1: value1 column2: value2 column3: value3
参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。
Methods
__init__
(file_path[, source_column, ...])参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。
一个用于文档的惰性加载器。
aload
()将数据加载到文档对象中。
一个用于文档的惰性加载器。
load
()将数据加载到文档对象中。
load_and_split
([text_splitter])加载文档并分割成块。块作为文档返回。
- Parameters
file_path (Union[str, Path]) –
source_column (Optional[str]) –
metadata_columns (Sequence[str]) –
csv_args (Optional[Dict]) –
encoding (Optional[str]) –
autodetect_encoding (bool) –
- __init__(file_path: Union[str, Path], source_column: Optional[str] = None, metadata_columns: Sequence[str] = (), csv_args: Optional[Dict] = None, encoding: Optional[str] = None, autodetect_encoding: bool = False)[source]¶
参数: file_path:CSV文件的路径。 source_column:CSV文件中用作源的列的名称。可选。默认为None。 metadata_columns:要用作元数据的列名称序列。可选。 csv_args:要传递给csv.DictReader的参数字典。可选。默认为None。 encoding:CSV文件的编码。可选。默认为None。 autodetect_encoding:是否尝试自动检测文件编码。
- Parameters
file_path (Union[str, Path]) –
source_column (Optional[str]) –
metadata_columns (Sequence[str]) –
csv_args (Optional[Dict]) –
encoding (Optional[str]) –
autodetect_encoding (bool) –
- load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document] ¶
加载文档并分割成块。块作为文档返回。
不要覆盖此方法。应该被视为已弃用!
- 参数:
- text_splitter: 用于分割文档的TextSplitter实例。
默认为RecursiveCharacterTextSplitter。
- 返回:
文档列表。
- Parameters
text_splitter (Optional[TextSplitter]) –
- Return type
List[Document]