1Password の調査、AI が生成したパッチの成功率はわずか 26% と警告

記事の3ポイント

1. 1

   AI パッチ生成の成功率低さの実証

   1Password の研究チーム Off-By-1-Labs は、最先端 AI モデルが複雑な脆弱性に対してパッチを生成する実験を行い、実際に使用可能なパッチは 26% しか存在しなかったことを明らかにした。

2. 2

   研究者の仮説との大きな乖離

   研究者たちは AI がオープンソースコードや公開情報に基づき約 67% の成功率を出すだろうと予測していたが、実際の結果は予想よりも著しく低く、ばらつきも大きかった。

3. 3

   AI のセキュリティ防御における役割

   AI は全体的なパッチ作成にはまだ準備が整っていないものの、サイバー防御の文脈では特定の用途で活用できる可能性が残されていると結論づけている。