arXiv cs.SE· Bhawani Shankar Leelar, Pawan Chorasiya, Davin Hill, Robert E. Tillman, Tamer Soliman·· 4 小时前AI 评分32
可见推理并非通用优化器：分析代码生成中的人设与思考依赖效应
Visible Reasoning Is Not a Universal Optimizer: Persona- and Thinking-Dependent Effects in Analytics Code Generation
AI 导读
一项基于 SQL-pandas 匹配查询基准的研究发现，可见 CoT 并不带来普遍准确率优势，让推理表示匹配目标语言（如"用 SQL 思考"）也无一致收益。效果取决于人设、目标语言、模型配置与内部推理设置，控制消融实验进一步区分了推理内容与提示词格式的影响。研究认为推理策略应针对模型、人设、目标和内部推理配置联合选择，而非作为通用默认。
来源：arXiv cs.SE · arxiv.org