Skip to content
安全・倫理

Anthropic、最先端AIモデルのセキュリティ対策を詳説

Anthropicは、最先端AIモデルを保護するために導入しているサイバーセキュリティ管理策を示すとともに、政府調達の要件や官民連携を提言した。

DigitalNeuron Desk約1分

ひとことで言うと

Anthropicは、最先端AIモデルの開発と展開に向けて、どのようなセキュリティ対策を発表したのか?

Anthropicは、二者による管理、NISTのセキュア・ソフトウェア開発フレームワーク、ソフトウェア成果物のサプライチェーン・レベルなどのサイバーセキュリティ対策を導入していると説明した。また、政府調達要件の設定、官民連携の拡大、高度なモデルやモデルの重み、開発に用いる研究成果に対する保護の強化も提言した。

要点

  • Anthropicは、二者による管理、SSDF、SLSAなどのサイバーセキュリティ対策を導入していると説明した。
  • 同社は、最先端AIモデルの開発、訓練、ホスティング、展開に使用するシステム全体で、複数当事者による承認を導入するよう提言した。
  • Anthropicは、NISTのセキュア・ソフトウェア開発フレームワークをモデル開発にも適用できるよう拡張することを促した。
  • 同社は、政府がまず、AI企業やクラウド事業者に対する調達要件を通じて、提案した管理策を導入できると説明した。
  • Anthropicは、官民連携と情報共有において、最先端AI研究機関を重要インフラ企業と同様に扱うよう提言した。

Anthropicは、最先端の人工知能モデル、その重み、および開発に用いる研究成果を保護するため、一連のサイバーセキュリティ対策を導入していると明らかにした。同社はさらに、政府調達の要件を設け、AI研究機関と公的機関の連携を強化することも提案した。

Anthropicが示した対策には、二者による管理、SSDFとして知られるNISTのセキュア・ソフトウェア開発フレームワーク、SLSAとして知られるソフトウェア成果物のサプライチェーン・レベルが含まれる。同社は、モデルの能力が高まるにつれて、より強力な保護が必要になると指摘し、この取り組みを政府と産業界が関与する反復的なプロセスと位置付けた。

複数当事者による承認

Anthropicは、最先端AIモデルの開発、訓練、ホスティング、展開に関わるシステムに二者による管理を適用するよう提言した。この方式を「AIの重要インフラ設計に対する複数当事者による承認」と呼んでいる。

Anthropicが説明した設計では、いかなる個人も本番環境の重要領域に恒常的にはアクセスできない。アクセスを求める者は、同僚の承認と業務上の正当な理由を得たうえで、期限付きの権限を付与される必要がある。同社によると、新興のAI研究機関でも、大企業並みの資源がなくてもこうした管理策を導入できるという。

Anthropicは、この対策を高度な脅威主体や内部関係者によるリスクへの防御策として提示した。また、二者による管理を適切に実施するには、より幅広いサイバーセキュリティ対策が不可欠だと説明した。

安全なモデル開発

Anthropicはさらに、最先端モデルを扱う環境全体に、安全なソフトウェア開発の手法を適用するよう提言した。モデル開発とそれに関連するソフトウェアに転用できる基準として、SSDFとSLSAを挙げた。

同社によると、この二つのフレームワークを組み合わせることで、展開済みのAIシステムについて一貫した管理・追跡の連鎖を構築できる。Anthropicは、これにより展開済みモデルとその開発企業を結び付け、来歴を確立できるとしている。

Anthropicは、この組み合わせを「安全なモデル開発フレームワーク」と呼んでいる。同社はNISTに対し、標準策定プロセスを通じてSSDFを拡張し、モデル開発を明示的に対象に含めるよう促した。

調達と規制

Anthropicは、政府との契約を求めるAI企業やクラウド事業者に対する調達要件として、複数当事者による承認と安全なモデル開発を定めることが可能だと述べた。これらの措置は、企業に適用されるほかのサイバーセキュリティ要件と併せて導入されることになる。

同社は、米国のクラウド事業者を対象とする調達規則について、多くの最先端モデル企業がそのインフラを利用しているため、市場全体への規制と同様の効果を持ち得ると説明した。Anthropicは、規制要件に先立って機能し得る措置として調達制度を提案した。

Anthropicによると、多くのセキュリティ対策は自主的な取り決めとして始めることができる。ただし将来的には、政府が調達権限や規制権限を用いて順守を義務付けるべきだと判断する可能性もあるという。

官民連携

Anthropicは、最先端AIの研究機関が、金融サービスなどの重要インフラ分野の企業と同様の形で官民連携に参加するよう提言した。また、最先端AIを既存の情報技術分野における特別な下位分野に指定する案を示した。

Anthropicによると、こうした指定は、AI研究機関と政府機関の間で情報共有と協力を拡大する支えとなり得る。同社は、この仕組みが、豊富な資源を持つ悪意あるサイバー攻撃者から研究機関を守る一助になるとしている。

出典:Anthropicが2023年7月25日に公表した「最先端モデルのセキュリティ」に関する発表。

よくある質問

Anthropicは何を導入しているのか?
Anthropicは、二者による管理、NISTのセキュア・ソフトウェア開発フレームワーク、ソフトウェア成果物のサプライチェーン・レベルなどのサイバーセキュリティ対策を導入していると説明した。
Anthropicがいう二者による管理とは何か?
Anthropicは、いかなる個人も本番環境の重要領域に恒常的にはアクセスできない設計と説明している。アクセスするには、同僚に期限付きの権限を申請し、業務上の正当な理由を示す必要がある。
Anthropicはどのような政府の措置を提言したのか?
Anthropicは、政府と契約するAI企業やクラウド事業者を対象とした調達要件を提案した。まずは自主的な取り決めから始め、その後、調達制度や規制による義務化に移行する可能性があるとしている。
Anthropicは官民連携をどのように組織することを提案しているのか?
Anthropicは、最先端AI研究機関が重要インフラ分野と同様の形で政府と連携すべきだと述べた。また、最先端AIを既存の情報技術分野における特別な下位分野とする案を示した。

出典

  1. Frontier model security \ AnthropicAnthropic
タグanthropicclaudeai-securitycybersecurityfrontier-modelsai-policy

あわせて読みたい

Anthropic、AIシステムのレッドチーミング手法を詳説

Anthropic detailed several methods it has used to test AI systems, including expert-led, automated, multilingual, multimodal, crowdsourced and community testing. The company also described converting qualitative findings into automated evaluations and urged policymakers to fund standards, support independent testing bodies, certify professional services and facilitate vetted third-party access.

約3分

アンソロピック、米大統領選を前にClaudeの安全対策を公表

アンソロピックは、Claudeが選挙関連の不正利用に使われることを防ぐための対策を明らかにした。選挙運動やロビー活動、誤情報の流布を禁じる利用制限のほか、人による審査を伴う自動的な取り締まり、標的を絞ったレッドチーム演習、大規模な評価を実施しているという。同社はまた、選挙関連の質問については最新の投票情報へ誘導し、システムプロンプトにClaudeの知識の基準日を明示している。

約3分