AIが書いた単体試験、失敗の15.6%は期待する結果の誤りと研究

4種のAIが書いたJavaの単体試験1万4320件を調べた査読前の論文。試験の失敗の15.6%は、正しい結果として書いた値そのものが誤っていた。空の値や負の数など境目の入力を確かめる試験は少なく、普通の入力に偏る傾向も見つかった。

写真: Balcer~commonswiki / Wikimedia Commons, CC BY 2.5 (cropped)

出典

• 研究 arXiv（査読前）（2026-10-23）
  Beyond Coverage and Mutation: A Blind-Spot Analysis of LLM-Generated Unit Tests

編集方針 ・ 利用規約