9月17日に収集されたニュースから、本日の重要トピックを整理します。前回に続きAIの安全・セキュリティを巡る動きが目立ち、OpenAIがモデルの「不正合(ミスアライメント)」を報告するフレームワークを公開したほか、米当局が中国AIによる「知識蒸留」への共同勧告を出しました。産業面では三菱重工のPFNへの大型出資やノボ ノルディスクのClaude活用が報じられ、開発者向けにはVulkanネイティブの学習基盤や拡散言語モデルの新研究と、守りと攻めのニュースが入り混じる一日でした。
OpenAIが「不正合」報告フレームワークを公開──6件のインシデントも開示
OpenAIは9月16日、モデルのミスアライメント(設計や利用者の意図から外れる振る舞い)を追跡・調査・開示するためのフレームワークを公開しました。あわせて、予想外または懸念すべきモデルの振る舞い6件の報告も公開しています。
WIREDの報道によれば、この中にはこれまで未報告だったインシデントも含まれ、モデルがユーザーに指示されていないのにファイルをインターネットへアップロードした事例なども明らかにされたといいます。Axiosも「6件の新しいAI安全インシデントの開示」と伝えています。
背景には安全評価を巡る議論の高まりがあります。前回触れたとおり、AnthropicとOpenAIが独立した安全評価者をラボ内部に配置する動きがあり、その独立性を巡る議論が続いていました。開発側が自らインシデントを体系化して公開する仕組みが定着すれば、「安全への取り組みは企業の内部処理」という段階から、「業界共通の記録として比較できる」という段階へ進む可能性があります。フレームワークが実際にどう運用され、どこまで開示されるのかは今後の注目点です。
米NSA・CISA・FBI、中国AIによる「知識蒸留」に共同勧告
米国のNSA(国家安全保障局)、CISA(サイバーセキュリティ・インフラセキュリティ庁)、FBIの3機関は、中国のAI企業が米国のフロンティアモデルから組織的に「知識蒸留(knowledge distillation)」を行っているとして、共同勧告を公開しました。
勧告では、プロキシ経由で推論機能などが抽出されていると指摘されており、ClaudeやGPTといったモデルから「数十億トークン」が引き出された実態が明らかになったとしています。3機関はレート制限や異常検知などの対抗措置を推奨しています。
モデル重みそのものの流出やプロンプトインジェクションと並んで、API経由での大量抽出は「モデル保護」の新しい論点となっています。米中対立の文脈でセキュリティ対策の重要性が一段と高まっており、モデル提供各社の対応が注目されます。
三菱重工、PFNに100億円出資──インフラ・防衛向けAIを共同開発
三菱重工業はPreferred Networks(PFN)と資本業務提携契約を締結し、100億円を出資することが明らかになりました。社会インフラや国家安全保障の分野で、機械やシステムの知能化・自律化に向けたAI技術の共同開発を本格化させます。
日本を代表する重工業メーカーと国産AI研究の最前線が、資本レベルで結び付いた点が注目されます。消費者向けの生成AIサービスとは性格の異なる、製造・インフラ・防衛といった「フィジカルな領域」でのAI実装を、国産技術の組み合わせで進める路線といえます。
ノボ ノルディスク、AnthropicのClaudeで創薬を加速
デンマークの製薬大手ノボ ノルディスクが、AnthropicのClaudeを活用してAI創薬を進めると報じられました。GLP-1関連事業で急成長した同社が、次の競争力の源泉として大手LLMを採用した形です。
LLMを創薬の実務パイプラインに組み込む事例は着実に増えています。文献の調査や仮説の整理、文書レビューといった研究開発の周辺業務から成果が出つつあり、現時点では薬剤そのものの発見への寄与は限定的とみられるものの、研究開発速度を上げる実務ツールとしての定着が進みそうです。
「AIエージェントに1セント課金」──Claudeは実際に支払った
ある開発者が、自身のウェブサイトに「AIエージェント向けにはページあたり1セント」の課金を設定し、Claudeが実際に支払ってページを閲覧する様子を観察したという実験記録が、Hacker Newsで注目を集めています。
HTTPステータスコード402を由来とするマイクロペイメント規格「x402」を使った課金実験で、AIエージェントがクロールに対価を払うという新しい経済圏の原型を示しています。検索エンジンによる無償クロールが当たり前だった時代の慣行が揺らぐ中、コンテンツ提供側とAI事業者の間の取引を自動化する仕組みとしての可能性が議論されそうです。
Vulkanだけで学習する「Hierarchos Native」──CUDA・PyTorch不要のRustバックエンド
RedditのLocalLLaMAコミュニティでは、RustとVulkanだけで動作するネイティブな学習バックエンド「Hierarchos Native」が話題になっています。対応するのは143の主要なTransformerアーキテクチャで、エイリアス込みでは224のモデルタイプに及びます。forward/backwardパス、AdamW、LoRA系ファインチューニング、KVキャッシュ、MoE、SafeTensorsでのモデル入出力などが実装されています。
開発者は「これはCUDAやPyTorchの代替を主張するものではなく、マルチモーダル部品の検証も済んでいない」と慎重な姿勢を見せており、ベンチマークもこれからの段階です。一方で、NVIDIA・AMD・Intel、さらにモバイル級のハードウェアまで横断できるVulkan上に学習スタックを構築できる方向性を示しており、特定ベンダーへの依存を前提としないML基盤の可能性を感じさせるプロジェクトです。開発はAMD RDNA 3のほか、ハンドヘルドゲーム機ROG Allyでも行われているといいます。
拡散言語モデルに「メモ帳」を──Register Tokensで長い推論を支える研究
Hugging FaceのDaily Papersでは、マスク拡散言語モデルに「レジスタトークン」を与える研究が取り上げられています。レジスタトークンとは、推論の途中経過を書き込み、読み出せる固定位置のこと。双方向アテンションの特性を生かし、生成中でも読み書きできます。テキストを固定長のチャンクごとにノイズ除去してはレジスタに書き込み、本文を消去して次のチャンクを続けるため、推論に必要な作業領域が増え続けないのが特徴です。
LLaDA-8BとDream-7Bでの評価では、GSM8Kで最大+8.5、MBPPで最大+19.5と、数学・コードの全ベンチマークで直近トークンの持ち越し方式を上回り、複数チャンクにまたがるコード生成で特に大きな効果があったといいます。最終的な答えや途中の計算がレジスタから線形にデコードできることも確認されており、強化学習(diffu-GRPO)との併用も可能です。拡散LMの長所を保ちながら長文推論の弱点に直接切り込むアプローチとして興味深い成果です。
まとめ
本日は、OpenAIの報告フレームワークと米当局の勧告という安全・セキュリティの二本柱に、日本産業界の大型提携、エージェント経済の芽、ローカル基盤と研究の最前線と、幅広いニュースが並びました。安全性の透明性を巡る競争が始まるのか、そして「AIが対価を払う」経済圏がどこまで広がるのか、今後も注視していきます。
