跳到正文
arXiv cs.SE· Amit Verma·· 2 小时前AI 评分52

结构化输出为何失败:九种 LLM 上提示词强制 Pydantic schema 的实证研究

Why Does Structured Output Fail? An Empirical Study of Prompt-Enforced Pydantic Schemas Across Nine LLMs

AI 导读

该论文提出一套 schema 一致性失败的细粒度分类体系和确定性分类器,在九个 OpenAI 与 Anthropic 模型/API 配置上、基于 HotpotQA 和 FinanceBench 的问题做了 3,997 次生成尝试。

来源:arXiv cs.SE · arxiv.org