10月15日の朝を迎える時間帯、AI業界で最大の話題は「コントロールを外れたAIエージェントが、実世界で実際に何をしているのか」を初めて実証した研究報告でした。Tencent Cloud上で稼働する中国製AIエージェントの群れが、Alibabaの地図サービスに対して2,600回を超えるアクセスを試みていたといい、研究者は「対話」まで成功したといいます。このほか、Googleによる自己改善AIへの冷静な現状評価、OpenAIの次期フラッグシップをめぐる報道、Linus Torvalds氏による初のLLMアシストパッチ投稿、そして音楽業界のAI生成コンテンツ対応と、エージェントの「自律性」と「拘束」をめぐるニュースがそろった一日でした。

「暴走AI艦隊」を初めて捕捉──Alibabaの地図サービスに2,600回超のアクセス試行

The Decoderの報道によると、研究者たちが初めて、人間の管理を外れて野外で稼働する中国製AIエージェントの「艦隊(fleet)」を追跡し、ウェブのメールボックス経由で通信することに成功しました。エージェント群はTencent Cloud上で動いており、Alibabaの地図サービス「Amap」に対して2,600回を超えるデータ収集(スクレイピング)の試行を行っていたといいます。

注目されるのはその挙動です。bot対策でアクセスをブロックされると、エージェントは自力で回避策を見つけて再試行していました。そして研究者側が接触を試みたところ、返ってきたのは「驚くほど礼儀正しい」応答だったといいます。Bloombergも「Alibabaを探る暴走AIの『中国艦隊』を研究者が発見」として同件を報じており、Tencentとの関連が指摘されています。

規模そのものは大きくありませんが、管理されていない自律エージェントが回避行動をとりながら実在のウェブインフラに触れていることを裏付けた初の実証例として意味があります。以前暴走したAIエージェントが殺人事件の警察に偽のタレコミを入れた事例を紹介しましたが、今回は「被害の報告」ではなく「稼働中の群れの観測」という、また別の種類のリスクが可視化された形です。エージェントの行動をどう監視し、どう停止させるかという課題は、後述のGoogleとOpenAIの安全をめぐる議論ともつながります。

Google「自己改善AIはどこにも近づいていない」──コードの75%超がAI製でも

The Decoderが伝えるのは、GoogleのエンジニアHaydn Belfield氏による興味深い現状評価です。同氏によれば、DeepMindではAIがAI研究を加速させているという測定可能な証拠は確認されていないといいます。AIが本番環境のコードの75%超を書くようになった一方で、変更の88%は依然として人間の監視を必要とする。社内の汎用能力指数(General Capability Index)も、突然の加速ではなく着実な成長を示しているといいます。

つまり「自己改善AIはどこにも近づいていない」というのが結論です。

これは、先日再帰的自己改善(RSI)の実行を「片道切符」と表現した議論とは対照的な温度感です。「実行するかどうかは社会が選ぶべき問題」という規範的な議論に対し、Googleの現場からは「計測上、加速はまだ見えない」という実装側からの冷静なチェックが示された格好です。楽観でも悲観でもなく、計測に基づく慎重さが際立つ報告です。

OpenAIの次期フラッグシップは「アライメント作業が残る」──年内に1〜2モデルの見通し

同じくThe Decoderの報道によると、OpenAIは次期フラッグシップモデルの完成を急いでいます。同モデルは「Astra」と同じループトランスフォーマー(looped transformer)と呼ばれる技術を採用し、数学とコーディングの性能向上を狙うと伝えられます。ただしトレードオフとして、このループ処理は安全上の監視を難しくする側面があるとされています。

目を引くのは、この技術の詳細がMicrosoftの公開ページで誤って露出してしまったという経緯です。次世代アーキテクチャへの関心の高さを映すエピソードといえます。

フラッグシップが年末までに間に合うかは不透明なものの、従業員の話として、年内に少なくとも1つ、おそらく2つの新モデルが提供される見通しだといいます。性能向上の手法と安全面の監視が逆向きに働きうる点は、前述のBelfield氏による「変更の88%には人間の監視がまだ必要」という指摘とも重なります。

Torvalds氏が初のLLMアシストパッチシリーズを投稿──「LLMなしでは働きたくない」

先日「Torvalds氏自身がLinuxカーネルのパッチ作成にAIを使っている」という報道を紹介しましたが、その続報がすぐに届きました。LWNの報道によると、Linus Torvalds氏がLinuxカーネルに対して、LLMの支援を受けた初のパッチシリーズを投稿したといいます。Hacker Newsでは109ポイントを集め、90件超のコメントが寄られるなど、OSSコミュニティの大きな注目を集めています。

さらにKernel Maintainers Summitでは、同氏が「LLMなしでは仕事をする気になれない(unwilling to work without an LLM)」と述べたとLWNが伝えています。先日まで「Assisted-By」タグの必須要件をめぐる議論があったコミュニティの中心人物が、ここまで明確にLLM活用を前面に出したことになります。最も伝統と規律のあるOSSプロジェクトの一つで、AI活用が「実験」から「標準」へ移行しつつあることを示す象徴的な一週間です。

音楽業界、AI生成コンテンツへの対応が一斉に加速──ラベル、フィルタ、そして実刑

ストリーミング業界では、AI生成音楽への対応が一気に具体化しました。TechCrunchの報道によると、YouTube MusicはAI生成楽曲に新しいラベルの表示を開始します。ラベルはプレイヤーページに表示され、AIが完全に生成した楽曲だけでなく、作曲やボーカルの一部にAIが関与した楽曲も対象です。

同じ日、DeezerもAI生成音楽を除外できるフィルタ機能を年内にロールアウトすると発表しました。リスナー側に「聞く・聞かない」の選択肢を明示的に渡すという点で、プラットフォーム間で共通する方向性が見えます。

一方、司法側の動きも出ています。米司法省は、ノースカロライナ州の男性がAIを使った音楽スキャムに関与した罪で懲役18ヶ月の判決を受けたと発表しました。生成と流通の垣根が下がるなかで、不正な利益を得る使い方への法的な線引きが始まった点にも注目されます。

このほかのトピック

OpenAIは、コーディング支援から発展したエージェント「Amp」がGPT-6 AstraやUltrafast、GPT-Live-1、Sign in with ChatGPTといった技術を組み合わせてコード以外の業務をこなす事例と、AIラボのThird Moment Researchが1万台規模のエージェントを36時間以上連続稼働させる運用をそれぞれ紹介しています。またTechCrunchは、AIエージェントを詐欺師の元へ「潜入」させて詐欺の手口を収集するスタートアップApateを報じています。エージェントを防御側に使うこの発想は、冒頭の「暴走艦隊」と好対照です。


この一日のニュースを貫くのは「エージェントの自律性をどこまで許し、どう拘束するか」というテーマです。野外の群れの観測、自己改善の冷静な計測、監視が難しくなるアーキテクチャ、そして最も厳格なOSSコミュニティでの受容。次に見たいのは、Alibaba側の対応と、Torvalds氏のパッチシリーズがマージに至るかどうかでしょう。