数据加载

在 LlamaIndex 中，数据摄取的关键在于加载和转换。一旦您加载了文档，就可以通过转换处理它们并输出节点。

一旦您在我们的“理解”部分中了解了加载数据的基础知识，您可以继续阅读以下内容了解更多：

加载

• SimpleDirectoryReader，我们内置的加载器，用于从本地目录加载各种文件类型
• LlamaParse，LlamaIndex 的官方 PDF 解析工具，作为托管 API 提供。
• LlamaHub，我们的数据加载库注册表，可从任何来源摄取数据

转换

这包括常见操作，如文本拆分。

• 节点解析器使用模式，向您展示如何使用我们的节点解析器
• 节点解析器模块，展示我们的文本拆分器（句子、标记、HTML、JSON）和其他解析器模块。

将所有内容整合在一起

• 摄取管道，允许您建立一个可重复、缓存优化的加载数据过程。

抽象化

• 文档和节点对象，以及如何为更高级用例自定义它们