大语言模型时代Text-to-SQL 更准确的评估指标

  • 打印
  • 收藏
收藏成功
微博 QQ空间 微信


打开文本图片集

摘要：大型语言模型（LLM） 已成为推进 Text-to-SQL 任务的强大工具。研究发现，基于 LLM 的模型在不同评估指标下，其性能表现与经过微调的模型存在显著差异。因此，文章分析了测试套件执行准确度（EXE） 和精确集匹配准确度（ESM） 在评估基于 LLM 的 Text-to-SQL 模型时的不足，并提出了改进指标 EESM（Enhanced Exact Set Matching） 。（剩余7769字）

试读结束

目录
monitor