---

许可证：cc-by-sa-4.0

更新通知

模型的权重于2024年2月7日凌晨7点UTC更新。新的模型权重使得模型性能大幅提升——尤其是对于连接操作。

如果您在此之后下载了模型，请重新下载权重以获得最佳性能。

SQLCoder-7B-2 模型卡

一种强大的自然语言到SQL生成的语言模型。

模型详细信息

模型描述

这是被推送到Hub的可用于转换器的模型卡。此模型卡是自动生成的。

• 开发： Defog, Inc
  
• 模型类型： [文本至SQL]
  
• 许可证： [CC-by-SA-4.0]
  
• 从模型微调： [CodeLlama-7B]
  

模型来源[可选]

• HuggingFace
  
• GitHub
  
• 演示
  

用途

该模型旨在由非技术用户使用，以理解其SQL数据库内部的数据。它被视为分析工具，而不是数据库管理员工具。

该模型未接受训练以拒绝具有写入数据库权限的用户发起的恶意请求，因此只应由具有只读访问权限的用户使用。

如何开始使用模型

使用以下代码此处开始使用模型。

提示

请使用以下提示以获得最佳结果。请记住使用do_sample=False和num_beams=4以获得最佳结果。

### Task
Generate a SQL query to answer [QUESTION]{user_question}[/QUESTION]

### Database Schema
The query will run on a database with the following schema:
{table_metadata_string_DDL_statements}

### Answer
Given the database schema, here is the SQL query that [QUESTION]{user_question}[/QUESTION]
[SQL]

评估

该模型在Defog为测试和模型能力对齐开发的基于PostgreSQL的评估框架SQL-Eval上进行了评估。

您可以在这里阅读更多关于SQLEval背后的方法这里。

结果

我们将生成的每个问题分类到6个类别之一。表格显示了每个模型在每个类别中正确回答的问题百分比。

	日期	分组	排序	比率	连接	where
sqlcoder-70b	96	91.4	97.1	85.7	97.1	91.4
sqlcoder-7b-2	96	91.4	94.3	91.4	94.3	77.1
sqlcoder-34b	80	94.3	85.7	77.1	85.7	80
gpt-4	72	94.3	97.1	80	91.4	80
gpt-4-turbo	76	91.4	91.4	62.8	88.6	77.1
natural-sql-7b	56	88.6	85.7	60	88.6	80
sqlcoder-7b	64	82.9	74.3	54.3	74.3	74.3
gpt-3.5	72	77.1	82.8	34.3	65.7	71.4
claude-2	52	71.4	74.3	57.1	65.7	62.9

模型卡联系

在X上联系我们在@defogdata，或在founders@defog.ai发送电子邮件。