Skip to main content

DeepInfra

DeepInfra 让我们能够轻松运行最新的机器学习模型。DeepInfra负责处理所有与运行、扩展和监控模型相关的繁重工作。用户可以专注于应用程序,并通过简单的REST API调用集成模型。

DeepInfra提供了与LangChain集成的示例

本页面介绍了如何在LangChain中使用DeepInfra生态系统。它分为两部分:安装和设置,以及特定DeepInfra包装器的参考。

安装和设置

  • 从这个链接获取你的DeepInfra API密钥。

  • 获取DeepInfra API密钥并将其设置为环境变量 (DEEPINFRA_API_TOKEN)。

可用模型

DeepInfra提供了一系列准备部署的开源LLM。

您可以查看支持的模型,包括

文本生成

嵌入

您可以查看请求和响应参数列表

聊天模型遵循OpenAI API

LLM

查看使用示例

from langchain_community.llms import DeepInfra

嵌入

查看使用示例

from langchain_community.embeddings import DeepInfraEmbeddings

聊天模型

查看使用示例

from langchain_community.chat_models import ChatDeepInfra

Was this page helpful?


You can leave detailed feedback on GitHub.