OpenAI、AIエージェントによるハッキング多発の中、安全・アラインメントチームを削減

ブルームバーグ・インテリジェンスの新たなベンチマークデータによると、人工知能分野における米国の対中優位はわずか3%にまで縮小した。この優位は5月には9%、今年初めには15%だったことから、差は非常に急速に縮まっていることがわかる。中国の進歩の多くは、生産コストが低く自由に利用できるオープンウェイトモデルによるもので、アンソロピックやオープンAIといった米国企業のクローズドウェイトモデルとは異なる。政権は、中国によるエヌビディアの最先端チップへのアクセスを遮断すれば米国の優位を維持できると期待してきたが、シリコンはすでに遮断されており、それでも中国の研究機関は急速に前進を続けている。一方、エヌビディアが出資する米国の新興企業リフレクションは、中国拠点のモデルに依存せずに独自のAIを構築したい企業向けに、自社のオープンウェイトモデルを国内の代替手段として売り込んでいる。

ニューヨーク市議会は本日公聴会を開き、AIリスクに関する予測が話題を呼び広範な不安を引き起こした元アンソロピック研究者のジェイコブ・コクソン氏が、ディープマインドのアレックス・ターナー氏やオープンAIのダニエル・コカタハロ氏ら他の内部告発者とともに証言する。アンソロピック、オープンAI、メタ、グーグルは代表者を派遣し、スペースXには召喚状が送られた。市議会は、人間が操作する停止メカニズムを備えた新モデルの第三者検証、第三者の悪用による予見可能な損害に対する私人訴権、市が措置を講じた場合は収益の25%、提訴と訴訟のために指定された場合は50%を支払う内部告発者報奨金など、一連の提案を審議している。データセンター建設について、バーンスタインとゴールドマン・サックスはギガワット推定を追跡する新しいリポートを発表し、両社はほぼ同じ結論に達した。今年は約18ギガワットの増加を見込み、ゴールドマンは来年26ギガワット、バーンスタインは25ギガワットと予測しており、地域の政治的抵抗がある中でもこうした見通しだ。バーンスタインは40の情報源から63の予測を調査し、2030年までのギガワットの範囲は59から186に及ぶ一方、計画に載っているプロジェクトのうち実際に建設されると見込まれるのは38%に過ぎないことが分かった。ワシントンでは、トランプ大統領の超知能部隊は国家情報長官ジェイ・クレイトン氏、国防総省次官アンドリュー・ファーガソン氏、最高技術責任者エミル・マイケル氏、人事管理局長スコット・クーパー氏が率い、120日以内にトランプ大統領とスージー・ワイルズ首席補佐官に報告書を提出する予定だ。ブルームバーグ・インテリジェンスによると、米国の最先端モデルと中国の最先端モデルの差は、米国の優位がわずか3%に縮まり、5月の9%、今年初めの15%から減少した。

元アンソロピックの研究者ジェイコブ・コクソン氏が、ディープマインドのアレックス・ターナー氏、オープンAIのダニエル・ココタジロ氏とともに、ニューヨーク市議会のAIに関する公聴会で証言する予定だ。アンソロピック、オープンAI、メタ、グーグルはすべて代表者を派遣して自社の立場を説明する一方、スペースXは派遣せず、召喚状が送付された。公聴会では一連の提案が議論される。その中には、ニューヨーク市内で販売、提供、販売、展開されるAIについて、新モデルの第三者による検証と人間が操作する停止メカニズムを義務付けるものも含まれる。この証言は、トランプ大統領が国家情報長官ジェイ・クレイトン氏、国防総省次官アンドリュー・ファーガソン氏、最高技術責任者エミル・マイケル氏、人事管理局長スコット・クーパー氏を率いる超知能タスクフォースを編成している中で行われる。報告書は120日以内にトランプ大統領と首席補佐官スージー・ワイルズ氏に提出される予定だ。

米オープンＡＩを最近退職した元安全性担当者のデビッド・ロビンソン氏が、人工知能の安全性に対する同社の姿勢を批判した。ロビンソン氏は３日、米誌アトランティックに掲載された寄稿文で、開発スピードを重視する企業文化が失敗のリスクを高めていると主張し、「試行錯誤の時代は終わった」と記した。同氏はオープンＡＩに３年半在籍し、同社の「プリペアードネス・フレームワーク」の策定に携わったほか、１２件の最先端モデル公開に伴う安全性報告書の作成を統括したと説明している。オープンＡＩの広報担当者は声明で、モデルの能力が安全に管理・保護できる範囲を超えないようにしており、ペースを落とす必要がある場合には学習を一時停止したりモデルの公開を見合わせたりしていると述べた。