Skip to main content

DeepInfra

DeepInfra 让我们能够轻松运行最新的机器学习模型。DeepInfra负责处理所有与运行、扩展和监控模型相关的繁重工作。用户可以专注于应用程序,并通过简单的REST API调用集成模型。

DeepInfra提供了与LangChain集成的示例。

本页面介绍了如何在LangChain中使用DeepInfra生态系统。它分为两部分:安装和设置,以及特定DeepInfra包装器的参考。

安装和设置​

  • 从这个链接获取你的DeepInfra API密钥。

  • 获取DeepInfra API密钥并将其设置为环境变量 (DEEPINFRA_API_TOKEN)。

可用模型​

DeepInfra提供了一系列准备部署的开源LLM。

您可以查看支持的模型,包括

文本生成 和

嵌入。

您可以查看请求和响应参数列表。

聊天模型遵循OpenAI API。

LLM​

查看使用示例。

from langchain_community.llms import DeepInfra

嵌入​

查看使用示例。

from langchain_community.embeddings import DeepInfraEmbeddings

聊天模型​

查看使用示例。

from langchain_community.chat_models import ChatDeepInfra

Was this page helpful?


You can leave detailed feedback on GitHub.