解锁Databricks Lakehouse:如何利用DatabricksLLM进行AI应用开发
引言
Databricks Lakehouse 平台汇聚数据、分析与AI功能于一身,提供了强大的工具和资源来实现高效数据处理及智能应用开发。本文旨在帮助您快速入门Databricks LLM模型的使用,助力生成式AI的应用开发。我们将通过实例演示如何将LLM模型服务作为LangChain应用程序中的LLM来使用。
主要内容
DatabricksLLM 概述
DatabricksLLM
类封装了一个完成端点,可以通过两种方式部署:
- Databricks Model Serving:建议用于生产和开发环境。
- Cluster driver proxy app:建议用于交互式开发环境。
注意:
DatabricksLLM
类为旧版实现,具有一定的功能兼容性限制。仅支持同步调用,不支持流式或异步API,以及批量API。如果需要这些功能,请使用新的ChatDatabricks
类。
环境设置
访问权限配置
要访问Databricks模型,首先需要创建Databricks账户,并设置访问凭据(如果您在Databricks工作区外)。可以通过环境变量DATABRICKS_HOST
和DATABRICKS_TOKEN
进行配置。
import getpass
import os
os.environ["DATABRICKS_HOST"] = "https://your-workspace.cloud.databricks.com"
os.environ["DATABRICKS_TOKEN"