langchain_community.document_loaders.parsers.generic.MimeTypeBasedParser

class langchain_community.document_loaders.parsers.generic.MimeTypeBasedParser(handlers: Mapping[str, BaseBlobParser], *, fallback_parser: Optional[BaseBlobParser] = None)[source]

使用`mime`类型来解析blob的解析器。

这个解析器适用于简单的流水线,其中mime类型足以确定如何解析blob。

要使用,根据mime类型配置处理程序,并将它们传递给初始化程序。

示例:


from langchain_community.document_loaders.parsers.generic import MimeTypeBasedParser

parser = MimeTypeBasedParser(
handlers={

“application/pdf”: …,

}, fallback_parser=…,

)

定义一个解析器,使用 mime-types 来确定如何解析一个 blob。

参数:

handlers: 从 mime-types 到函数的映射,这些函数接受一个 blob,解析它并返回一个文档。 fallback_parser: 如果在 handlers 中找不到 mime-type,则使用的 fallback_parser 解析器。如果提供了此解析器,它将用于解析在 handlers 中找不到的所有 mime-types 的 blobs。

如果未提供,则在 handlers 中找不到 mime-type 时将引发 ValueError。

Methods

__init__(handlers, *[, fallback_parser])

定义一个解析器,使用 mime-types 来确定如何解析一个 blob。

lazy_parse(blob)

从一个 blob 中加载文档。

parse(blob)

将blob急切地解析为一个文档或多个文档。

Parameters
Return type

None

__init__(handlers: Mapping[str, BaseBlobParser], *, fallback_parser: Optional[BaseBlobParser] = None) None[source]

定义一个解析器,使用 mime-types 来确定如何解析一个 blob。

参数:

handlers: 从 mime-types 到函数的映射,这些函数接受一个 blob,解析它并返回一个文档。 fallback_parser: 如果在 handlers 中找不到 mime-type,则使用的 fallback_parser 解析器。如果提供了此解析器,它将用于解析在 handlers 中找不到的所有 mime-types 的 blobs。

如果未提供,则在 handlers 中找不到 mime-type 时将引发 ValueError。

Parameters
Return type

None

lazy_parse(blob: Blob) Iterator[Document][source]

从一个 blob 中加载文档。

Parameters

blob (Blob) –

Return type

Iterator[Document]

parse(blob: Blob) List[Document]

将blob急切地解析为一个文档或多个文档。

这是一个用于交互式开发环境的便利方法。

生产应用程序应该更倾向于使用lazy_parse方法。

子类通常不应该覆盖这个解析方法。

参数:

blob:Blob实例

返回:

文档列表

Parameters

blob (Blob) –

Return type

List[Document]

Examples using MimeTypeBasedParser