Tlines 全球机构情报
EN
TechRxiv每日精选快讯0 阅读

研究评估Oracle SELECT AI:NL2SQL准确率95.5%,端到端延迟3906毫秒

来源doi.org

Sanjay Kumar Mishra发表预印本,对Oracle Autonomous Database 26AI的SELECT AI功能进行独立实证评估,该功能借助OpenAI GPT-4将自然语言转换为可执行SQL。据该论文,作者使用自建评估框架和22条TPC-H基准查询(覆盖简单、中等、复杂三个难度层级),测量SQL生成准确率与端到端延迟。结果显示整体准确率为95.5%,其中精确SQL匹配为90.9%;平均端到端延迟为3906毫秒,其中94.5%归因于大模型生成开销。论文称模型表现出智能查询优化行为,倾向选择目标列而非宽泛的COUNT(*)模式,而这一行为未体现在精确匹配指标中。作者称上述结果为企业级NL2SQL部署建立了可复现基线,并将大模型生成列为首要优化目标。

更多TechRxiv每日精选 → · 全部新鲜事 →