アンソロピックとNNSA、クロードの核兵器関連の悪用を検知する分類器を共同開発
Anthropicは、米国家核安全保障局(NNSA)およびエネルギー省(DOE)傘下の国立研究所と協力し、Claudeとの会話の中で核関連の懸念すべきやり取りを検知する分類器を開発したと発表した。
ひとことで言うと
アンソロピックは、AIに関する核安全保障についてどのような発表をしたのか。
アンソロピック社によると、同社は米エネルギー省(DOE)の国家核安全保障局(NNSA)およびDOE傘下の国立研究所と提携し、核関連の懸念すべき会話と問題のない会話を判別する分類システムを共同開発した。予備テストでは96%の精度を達成したという。同社はすでにこの分類システムをClaudeのトラフィックに導入しており、今後この手法をフロンティアモデルフォーラムと共有する計画だとしている。
要点
- アンソロピックは4月から米国家核安全保障局(NNSA)と提携し、自社モデルによる核拡散リスクの評価を進めていると発表した。
- Anthropicは、NNSA(米国家核安全保障局)およびエネルギー省(DOE)傘下の国立研究所と共同で、核関連の懸念すべき会話と無害な会話を識別する分類器を開発したと発表した。予備テストでは96%の精度を記録したという。
- アンソロピック社によると、この分類システムは不正利用を検知する広範な仕組みの一環として、すでにClaudeのトラフィックに導入されているという。
- Anthropicによると、初期の運用データから、この分類器は実際のClaudeとの会話においても良好に機能していることがうかがえるという。
- Anthropicは、他のAI開発企業もNSA(米国家核安全保障局)と同様の安全対策を導入できるよう、この取り組みをフロンティア・モデル・フォーラムで共有する方針だ。
Anthropicは、米エネルギー省(DOE)の国家核安全保障局(NNSA)およびDOE傘下の国立研究所と共同で、自社のClaudeモデルが核関連の悪用に使われていないかを検知する分類器を開発したと発表した。
Anthropicによると、同社は昨年4月からNNSAと協力し、自社モデルが核拡散リスクをはらんでいないかの評価に取り組んできたという。核技術は本質的にデュアルユース(軍民両用)であり、原子炉を稼働させるのと同じ物理原理が兵器開発にも転用されかねない。しかも核兵器に関する情報はとりわけ機微であるため、民間企業単独ではリスク評価が難しいとAnthropicは説明している。
分類器の役割
Anthropicはこの分類器について、コンテンツを自動的に分類するAIシステムであり、懸念すべき核関連の会話と問題のない会話を区別するために構築されたと説明する。予備テストでは96%の精度に達したという。
同社によれば、この分類器はすでにClaudeの通信トラフィックに導入され、モデルの悪用を検知する広範なシステムの一部として機能している。導入初期のデータからは、実際のClaudeとの会話に対しても分類器が良好に機能していることがうかがえるという。
手法の共有
Anthropicは、フロンティアAI企業による業界団体「Frontier Model Forum」ともこの手法を共有する計画だとしている。今回の連携が、他のAI開発企業がNNSAと協力して同様の安全対策を導入する際のひな型となることを期待しているという。
同社は、この取り組みについて、フロンティアAIモデルに関わるリスクに対処するため、業界と政府それぞれの強みを組み合わせた官民連携の一例だと位置づけている。
Anthropicは、NNSAとの連携や安全対策開発の詳細を、自社のFrontier Red Teamブログ(red.anthropic.com)で公開しているとしている。同社はこのブログを、フロンティアAIモデルが国家安全保障に与える意味についての研究拠点と位置づけている。
出典:Anthropic「Developing nuclear safeguards for AI through public-private partnership」、2025年8月21日公開。
よくある質問
- 今回の取り組みで、Anthropicはどこと提携したのですか。
- アンソロピック社によると、同社は米エネルギー省(DOE)の国家核安全保障局(NNSA)およびDOE傘下の国立研究所と提携したという。
- その提携は何を生み出したのか。
- アンソロピック社によると、この提携によって開発された分類器(コンテンツを自動的に分類するAIシステム)は、予備テストにおいて核関連の会話を懸念すべきものと無害なものとに96%の精度で識別できるという。
- その分類器はすでに実用化されていますか。
- アンソロピック社によると、同社はモデルの不正利用を検知する広範な仕組みの一環として、この分類システムをすでにClaudeのトラフィックに導入しているという。
- Anthropicは次に何を計画しているのか。
- アンソロピックは、この取り組み方針をフロンティアAI企業の業界団体であるフロンティア・モデル・フォーラムと共有する意向を示している。これにより、今回の提携がNNSAと連携する他のAI開発企業にとっての指針となることを目指す。