AstraDB
DataStax Astra DB 是一个基于Cassandra构建的无服务器向量数据库,通过易于使用的JSON API方便地提供。
概述
AstraDB 文档加载器从 AstraDB 数据库返回一个 Langchain 文档列表。
加载器接受以下参数:
api_endpoint
: AstraDB API 端点。看起来像https://01234567-89ab-cdef-0123-456789abcdef-us-east1.apps.astra.datastax.com
token
: AstraDB 令牌。看起来像AstraCS:6gBhNmsk135....
collection_name
: AstraDB 集合名称namespace
: (可选)AstraDB 命名空间filter_criteria
: (可选)用于查找查询的过滤器projection
: (可选)在查找查询中使用的投影find_options
: (可选)用于查找查询的选项nb_prefetched
: (可选)加载器预取的文档数量extraction_function
: (可选) 一个将AstraDB文档转换为LangChainpage_content
字符串的函数。默认为json.dumps
以下元数据被设置为LangChain文档元数据输出:
{
metadata : {
"namespace": "...",
"api_endpoint": "...",
"collection": "..."
}
}
使用文档加载器加载文档
from langchain_community.document_loaders import AstraDBLoader
API Reference:AstraDBLoader
from getpass import getpass
ASTRA_DB_API_ENDPOINT = input("ASTRA_DB_API_ENDPOINT = ")
ASTRA_DB_APPLICATION_TOKEN = getpass("ASTRA_DB_APPLICATION_TOKEN = ")
loader = AstraDBLoader(
api_endpoint=ASTRA_DB_API_ENDPOINT,
token=ASTRA_DB_APPLICATION_TOKEN,
collection_name="movie_reviews",
projection={"title": 1, "reviewtext": 1},
find_options={"limit": 10},
)
docs = loader.load()
docs[0]
Document(page_content='{"_id": "659bdffa16cbc4586b11a423", "title": "Dangerous Men", "reviewtext": "\\"Dangerous Men,\\" the picture\'s production notes inform, took 26 years to reach the big screen. After having seen it, I wonder: What was the rush?"}', metadata={'namespace': 'default_keyspace', 'api_endpoint': 'https://01234567-89ab-cdef-0123-456789abcdef-us-east1.apps.astra.datastax.com', 'collection': 'movie_reviews'})