一款自然语言到SQL生成的大型语言模型。

7B

1,043 拉取 更新于5个月前

自述文件


许可:cc-by-sa-4.0

更新通知

模型权重在2024年2月7日UTC早上7点更新。新的模型权重带来了一个性能更优的模型——尤其是对连接操作。

如果您在此之前下载了该模型,请重新下载权重以获得最佳性能。

SQLCoder-7B-2 模型卡片

一款自然语言到SQL生成的大型语言模型。

image/png

模型详细信息

模型描述

这是已上传到Hub的🤗 transformers模型卡片。此模型卡片已自动生成。

  • 由: Defog, Inc
  • 模型类型: [文本到SQL]
  • 许可: [CC-by-SA-4.0]
  • 微调自模型: [CodeLlama-7B]

模型来源(可选)

用途

该模型旨在供非技术用户理解SQL数据库内部数据。它被用作分析工具,而不是数据库管理工具。

该模型未训练以拒绝对数据库具有写入访问权限的用户恶意请求,并且仅应供具有只读访问权限的用户使用。

如何开始使用模型

使用此处的代码开始使用模型。

提示

请使用以下提示以获得最佳结果。请记住使用do_sample=Falsenum_beams=4以获得最佳结果。

### Task
Generate a SQL query to answer [QUESTION]{user_question}[/QUESTION]

### Database Schema
The query will run on a database with the following schema:
{table_metadata_string_DDL_statements}

### Answer
Given the database schema, here is the SQL query that [QUESTION]{user_question}[/QUESTION]
[SQL]

评估

此模型在Defog开发的用于测试和校准模型功能的基于PostgreSQL的评估框架SQL-Eval上进行了评估。

您可以在这里了解更多关于SQLEval背后的方法。

结果

我们将生成的每个问题分类到六个类别中的一个。表格显示了每个模型在每个类别中正确解答问题的百分比。

日期 group_by order_by ratio join where
sqlcoder-70b 96 91.4 97.1 85.7 97.1 91.4
sqlcoder-7b-2 96 91.4 94.3 91.4 94.3 77.1
sqlcoder-34b 80 94.3 85.7 77.1 85.7 80
gpt-4 72 94.3 97.1 80 91.4 80
gpt-4-turbo 76 91.4 91.4 62.8 88.6 77.1
natural-sql-7b 56 88.6 85.7 60 88.6 80
sqlcoder-7b 64 82.9 74.3 54.3 74.3 74.3
gpt-3.5 72 77.1 82.8 34.3 65.7 71.4
claude-2 52 71.4 74.3 57.1 65.7 62.9

模型卡片联系方式

在X上通过@defogdata联系我们,或通过电子邮件在founders@defog.ai联系。