sql-llama2

此模板使用户能够使用自然语言与 SQL 数据库进行交互。

它使用由 Replicate 托管的 LLamA2-13b，但可以适配任何支持 LLaMA2 的 API，包括 Fireworks。

该模板包括 2023 年 NBA 名单的示例数据库。

有关如何构建此数据库的更多信息，请参见 这里。

环境设置

确保在您的环境中设置了 REPLICATE_API_TOKEN。

使用方法

要使用此软件包，您首先需要安装 LangChain CLI：

pip install -U langchain-cli

要创建一个新的 LangChain 项目并将此软件包作为唯一的包安装，您可以执行：

langchain app new my-app --package sql-llama2

如果您想将其添加到现有项目中，可以直接运行：

langchain app add sql-llama2

并将以下代码添加到您的 server.py 文件中：

from sql_llama2 import chain as sql_llama2_chain

add_routes(app, sql_llama2_chain, path="/sql-llama2")

（可选）现在让我们配置 LangSmith。 LangSmith 将帮助我们跟踪、监控和调试 LangChain 应用程序。 您可以在 这里 注册 LangSmith。 如果您没有访问权限，可以跳过此部分。

export LANGCHAIN_TRACING_V2=true
export LANGCHAIN_API_KEY=<your-api-key>
export LANGCHAIN_PROJECT=<your-project>  # 如果未指定，默认为 "default"

如果您在此目录中，则可以直接通过以下命令启动 LangServe 实例：

langchain serve

这将启动 FastAPI 应用程序，服务器在本地运行，地址为 http://localhost:8000。

我们可以在 http://127.0.0.1:8000/docs 查看所有模板。 我们可以在 http://127.0.0.1:8000/sql-llama2/playground 访问游乐场。

我们可以通过代码访问模板：

from langserve.client import RemoteRunnable

runnable = RemoteRunnable("http://localhost:8000/sql-llama2")