タグ: 科学
- ビームラインでAIエージェントが単結晶アライメント、成果と限界 2026/8/24
LLMエージェントがシンクロトロンのビームラインで試料アライメントのコマンドを自律生成した。ただし実機では安全要件で実行を人間が中継しており、成功率と試行回数が出ているのは仮想環境の側だけである。
- 機械学習論文の再現性はAIで確かめられる?再実行の結果と費用 2026/8/22
研究レビュー企業SAIのエージェントがICML 2026の口頭発表168本をレビューし、105本を再実行した。その105本のうち、検証可能な主張が5つ以上あった92本で、試行できた主張の4割超を再現できたのは34本。その105本で全実験を回す費用は中央値で約8,900ドル。だが「再現できた」の定義はまだ揃っていない。
- AI査読はどこまで使えるか:論文の選別精度と反論への弱さ 2026/7/7
2026年の独立2研究。片方は、AIの第一次採点が却下と採択をAUROC0.82で分離し、精度の大部分はモデル自身から来ると主張する。もう片方は、証拠のない反論をひとつ返すだけで評点が+0.53点上がる(採否の反転は未報告)と監査し、関連研究の要約の偏りでも評点が動くと示す。足りないのは賢さでなく信頼性と頑健さだ。