Melissa Pan 氏、コーディングエージェントのハーネス選択は精度よりコストに影響すると指摘

UC Berkeley の Sky Computing Lab の博士課程学生で、元 Arena インターンの Melissa Pan 氏は、コーディングエージェントの Claude Code、Codex、Pi を比較し、「harness tax」、すなわち AI モデルを取り巻くシステムがそのコストと性能にどう影響するかを検討した。

同氏は3つの知見を報告している。ここで述べられているのは、ハーネスの選択は精度よりもコストに大きく影響するという点である。詳しい分析は動画にある。