跳到正文
arXiv cs.SE· Somin Kim, Robert Feldt, Shin Yoo·· 3 小时前AI 评分38

Foreword:用 Jacobian Lens 在生成前预测并刻画 LLM 测试失败

Foreword: Pre-Generation Prediction and Characterisation of LLM Test Failures using the Jacobian Lens

AI 导读

论文提出 Foreword 框架,用于在生成前预测 LLM 测试失败并刻画失败原因。该框架同时学习通过与失败的参考输入,并用 Jacobian lens(J-lens)把中间激活读成词表 token 上的分数作为输入表征,再搭配稀疏逻辑回归探针或双高斯混合模型两种估计器。

来源:arXiv cs.SE · arxiv.org