一款自然语言到SQL生成的大型语言模型。
7B
1,043 拉取 更新于5个月前
更新于5个月前
5个月前
f339d21ffef9 · 2.5GB
模型
架构llama
·
参数6.74B
·
量化Q2_K
2.5GB
参数
{"stop":["<|endoftext|>"]}
37B
自述文件
许可:cc-by-sa-4.0
更新通知
模型权重在2024年2月7日UTC早上7点更新。新的模型权重带来了一个性能更优的模型——尤其是对连接操作。
如果您在此之前下载了该模型,请重新下载权重以获得最佳性能。
SQLCoder-7B-2 模型卡片
一款自然语言到SQL生成的大型语言模型。
模型详细信息
模型描述
这是已上传到Hub的🤗 transformers模型卡片。此模型卡片已自动生成。
- 由: Defog, Inc
- 模型类型: [文本到SQL]
- 许可: [CC-by-SA-4.0]
- 微调自模型: [CodeLlama-7B]
模型来源(可选)
用途
该模型旨在供非技术用户理解SQL数据库内部数据。它被用作分析工具,而不是数据库管理工具。
该模型未训练以拒绝对数据库具有写入访问权限的用户恶意请求,并且仅应供具有只读访问权限的用户使用。
如何开始使用模型
使用此处的代码开始使用模型。
提示
请使用以下提示以获得最佳结果。请记住使用do_sample=False
和num_beams=4
以获得最佳结果。
### Task
Generate a SQL query to answer [QUESTION]{user_question}[/QUESTION]
### Database Schema
The query will run on a database with the following schema:
{table_metadata_string_DDL_statements}
### Answer
Given the database schema, here is the SQL query that [QUESTION]{user_question}[/QUESTION]
[SQL]
评估
此模型在Defog开发的用于测试和校准模型功能的基于PostgreSQL的评估框架SQL-Eval上进行了评估。
您可以在这里了解更多关于SQLEval背后的方法。
结果
我们将生成的每个问题分类到六个类别中的一个。表格显示了每个模型在每个类别中正确解答问题的百分比。
日期 | group_by | order_by | ratio | join | where | |
---|---|---|---|---|---|---|
sqlcoder-70b | 96 | 91.4 | 97.1 | 85.7 | 97.1 | 91.4 |
sqlcoder-7b-2 | 96 | 91.4 | 94.3 | 91.4 | 94.3 | 77.1 |
sqlcoder-34b | 80 | 94.3 | 85.7 | 77.1 | 85.7 | 80 |
gpt-4 | 72 | 94.3 | 97.1 | 80 | 91.4 | 80 |
gpt-4-turbo | 76 | 91.4 | 91.4 | 62.8 | 88.6 | 77.1 |
natural-sql-7b | 56 | 88.6 | 85.7 | 60 | 88.6 | 80 |
sqlcoder-7b | 64 | 82.9 | 74.3 | 54.3 | 74.3 | 74.3 |
gpt-3.5 | 72 | 77.1 | 82.8 | 34.3 | 65.7 | 71.4 |
claude-2 | 52 | 71.4 | 74.3 | 57.1 | 65.7 | 62.9 |
模型卡片联系方式
在X上通过@defogdata联系我们,或通过电子邮件在founders@defog.ai联系。