タグ: コーディングエージェント

AIのスキャフォールドとは？自動最適化の効果とプロンプト過適合 2026/8/2
AIエージェントのスキャフォールドとプロンプトの自動最適化が、重みを変えずに性能を伸ばすレバーとして台頭した。強化学習を上回りながらロールアウトは最大35分の1で済んだ、と報告する手法がある。だがプロンプトの自動最適化は最適化に使ったサンプルへ過適合しうる。別の研究は、そのサンプルの外側で性能が崩れると報告した。
AIエージェントのハーネス自動進化、成果とベンチマークの信頼性 2026/7/29
AIエージェントのハーネスを自動で進化させる研究が、人間設計超えをベンチで報告した。方法は前進だ。だが看板の数字が乗る Terminal-Bench 2 は、上位提出が採点の抜け穴を突いていたと独立監査に指摘された表であり、転移先の SWE-bench も漏洩が実証されてきた。信頼度の異なるベンチマークを、分けて読む。