跳到正文
热点事件持续更新

研究发布结构化输出失败分类体系

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Amit Verma 发布一项实证研究，提出针对大模型结构化输出中 schema 一致性失败的细粒度分类体系，以及一个确定性分类器；该分类器根据模型响应和 Pydantic 校验错误为失败归类。 研究覆盖九个 OpenAI 与 Anthropic 模型/API 配置，基于 HotpotQA 和 FinanceBench 的问题共进行 3,997 次生成尝试，考察提示词强制 Pydantic schema 时的符合性失败。分类体系与分类器由作者提出，其有效性以论文所述实验为据。

AI 根据报道生成 · 1 小时前更新

最新进展10月27日 12:00
结构化输出为何失败：九种 LLM 上提示词强制 Pydantic schema 的实证研究

报道时间线

沿着报道，了解事件的不同侧面。

10月27日
  1. arXiv cs.SE
    结构化输出为何失败：九种 LLM 上提示词强制 Pydantic schema 的实证研究

    该论文提出一套 schema 一致性失败的细粒度分类体系和确定性分类器，在九个 OpenAI 与 Anthropic 模型/API 配置上、基于 HotpotQA 和 FinanceBench 的问题做了 3,997 次生成尝试。

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。