Breaking
CNHuang Renxun dated a Chinese female spy! New York Times reveals: Rubio warned before Trump’s visit to ChinaCNKaty Perry’s ex-husband jailed for sexual assault! The inmates were watching and shouting, "Here comes the pedophile!" He was so frightened that he shivered.AUBreaking: 15yo boy stabbed multiple times outside Sydney high schoolTRDriver trapped in burning truck diesUSArrest made in deadly shooting during Winston-Salem State homecoming weekendKRInternational conference on semiconductor manufacturing technology in Busan... AI innovation and cooperation discussionKRFranchise Startup Fair opens in Busan on the 12th... Over 100 brands participatingARA "drone" attack paralyzes one of the largest gas fields in Iraqi Kurdistan and threatens electricity suppliesCNRandom shooting in Poland kills 6 and injures 16. Internet celebrity photographer Ander condemnsAULive: Victoria's Big Build royal commission gets underwayCNHuang Renxun dated a Chinese female spy! New York Times reveals: Rubio warned before Trump’s visit to ChinaCNKaty Perry’s ex-husband jailed for sexual assault! The inmates were watching and shouting, "Here comes the pedophile!" He was so frightened that he shivered.AUBreaking: 15yo boy stabbed multiple times outside Sydney high schoolTRDriver trapped in burning truck diesUSArrest made in deadly shooting during Winston-Salem State homecoming weekendKRInternational conference on semiconductor manufacturing technology in Busan... AI innovation and cooperation discussionKRFranchise Startup Fair opens in Busan on the 12th... Over 100 brands participatingARA "drone" attack paralyzes one of the largest gas fields in Iraqi Kurdistan and threatens electricity suppliesCNRandom shooting in Poland kills 6 and injures 16. Internet celebrity photographer Ander condemnsAULive: Victoria's Big Build royal commission gets underway
Back[ITmedia エンタープライズ] 「AIセキュリティをやれ」と言われたIT部門へ 100点を目指さず、“見る”ことから始めよう
[ITmedia エンタープライズ] 「AIセキュリティをやれ」と言われたIT部門へ 100点を目指さず、“見る”ことから始めよう
Developing
ITmedia1 hour agoTech4 min readJapanView translation

[ITmedia エンタープライズ] 「AIセキュリティをやれ」と言われたIT部門へ 100点を目指さず、“見る”ことから始めよう

上から降りてきた指示に苦しむIT部門へ、段階的な導入アプローチを提案

Quick Look

経営層からの上から目線の指示に苦しむIT部門に対し、AIセキュリティは「100点の対策」を最初から目指さず、シャドーAIやシャドーエージェントの可視化から段階的に始めるべきだと著者が提言する。既存のセキュリティ基盤を活用し、リスクの状況変化に合わせて機敏に対応するアプローチを推奨する。

AI-generated summary

Why It Matters

約10年前のクラウド移行時と同様に、経営層から「AIセキュリティを確保せよ」という指示がIT部門に下りているが、具体的な導入方法や設定方法が決まらず苦労している状況。国内で相次いだ大規模なランサムウェア被害をきっかけに対策を見直す企業が増えたが、AIエージェントについても大きな被害をきっかけに対策が進む可能性が高い。

Font size

最近お客さまと話していて強く感じるのは、AIセキュリティの取り組みが「上から降ってきている」ケースの多さです。インシデントが報じられる。自社もAIを導入しようとしている、あるいは従業員がセキュリティ部門の承認を得ないまま、既にAIを試しているかもしれない。そう気付いた経営層が、後れを取るわけにはいかないと判断し、指示を出すのです。その指示は「何とかしてくれ」という程度のこともあります。

ただし、そうした指示は「AIセキュリティはこうあるべき」という原則や、準拠すべき標準・フレームワークの名前にまでは落とし込まれても、実際の導入にまで落とし込まれることはほとんどありません。IT部門は方向性こそ理解できても、具体的に何を導入し、どう設定し、どう進めるのかを決めるところで苦労しています。

筆者はこの状況に既視感を覚えています。約10年前、「クラウドに移行し、そのセキュリティを確保せよ」と経営層から言われたものの、何から手を付けていいか分からない。そんなIT部門の方々と、当時も数多く議論しました。経営層が思い描く姿と、IT部門が現実に実現できることの間に大きな隔たりがある点も当時とよく似ています。

「大きな事故が起きたら動く」でよいのか

現場では「大規模なインシデントが起きれば、対策は一気に進むだろう」という声もよく耳にします。実際、国内で相次いだ大規模なランサムウェア被害は、多くの企業に対策を見直すきっかけを与えました。AIエージェントについても、大きな被害をきっかけに対策が一気に進むという同じ流れになる可能性は高いと思います。

しかし、国内のどこかの企業が被害に遭うのを待ってから動くという姿勢は、決して健全ではありません。その企業は自社かもしれないからです。

しかも、エージェントの失敗は人間の失敗とは形が違います。エージェントは存在しない手順を作り出したり、不完全な情報を基に行動したり、攻撃者が仕込んだ指示に従ったりします。与えられた範囲を超えて動いたり、人間ならしないような操作を次々につなげたりすることもあります。事故が起きてから初めてこうした振る舞いに向き合うのでは、原因を突き止めることさえ難しいでしょう。

最初から「100点の対策」を求めない

AIアプリやモデル、エージェントを横断して、可視化、データ保護、アクセス制御を一元的に担う包括的なAIセキュリティ基盤は、既に存在します。では、そうした包括的なソリューションを今すぐ導入すべきなのでしょうか。筆者の答えは「否」です。

日本企業には、特に上から降りてきた指示の場合、初日から完璧で最も網羅的な枠組みを目指す傾向があるように感じます。しかし、完璧を目指せばそれだけ重い計画プロセスが必要になり、取り組みや導入そのものが遅れてしまいます。その間にも、AIのリスクは速いペースで変化し続けます。筆者の経験では、最も効果的な導入は段階的に進めるものです。そうすれば、リスクの状況の変化に合わせて、より機敏に対応できます。

大切なのは、方向性は決めつつ、中身を100点で固めてしまわないことです。現実的な最初の一歩を決め、小さく始めて、変化に合わせて修正していく。経営層への説明も「完璧な対策」ではなく「今どこまで見えていて、次に何をするか」を軸にした方が、費用対効果も示しやすくなります。

最初の一歩は「可視化」

では、その最初の一歩とは何か。筆者は、迷わず「可視化」だと考えています。何が使われていて、何が行われているのか。クラウドのときもそうでしたが、見えないものは守れません。

出発点は、従業員がIT部門の把握していない生成AIを使う「シャドーAI」の把握です。どの部署の誰が、どのAIサービスに、どんなデータを渡しているのか。これが見えなければ、リスクの大きさも評価できません。

その先にあるのが、従業員や部門が独自に導入するAIエージェントやAIモデル、いわば「シャドーエージェント」や「シャドーモデル」です。自律的に動くエージェントは、一見すると把握が難しそうに思えます。しかし、エージェントのアクセス先も、その多くはクラウドのリソースやAIサービスです。その通信を押さえられれば、振る舞いを観察することはできます。自律的に動くものをどう制御するかは、その次の段階の課題です。

可視化の際には、少なくとも次の4点を把握したいところです。

どのAIサービスやエージェントが、社内で使われているか

それぞれが、誰の(どの)IDで動いているか

どのデータやシステムにアクセスできるか

どんな判断や操作を許されているか

この棚卸しがなければ、どれだけ高度な対策を入れても守る対象が定まりません。逆に言えば、ここが見えれば、アクセス範囲の広過ぎるエージェントなど、優先して手を打つべきポイントが自然と浮かび上がります。

新たに買う前に今ある基盤を見直す

可視化のために、必ずしも新しい製品を一から導入する必要はありません。多くの企業は既に、クラウド利用の管理やWebアクセスの制御、エンドポイント対策などの仕組みを持っています。その基盤にAI利用の可視化機能が備わっていないか、追加で有効にできないかを、まず確かめてみてください。

実際、筆者が見る限り、現時点でAI対策のためだけに一から仕組みを導入する企業は多くありません。既存のセキュリティ基盤の延長線上で、できるところから始めるのが現実的です。

可視化はあくまで出発点です。エージェントが本格的に業務を担うようになれば、いずれ予期せぬ振る舞いや事故は避けられません。そのとき、「何が起きたのか」を経営層に説明できるでしょうか。次回は、事故に備えた記録と体制の在り方、そしてAIエージェントがIT部門の組織をどう変え得るかを考えます。

What to Watch

AI outlook — possibilities, not facts

  • AIエージェントに関する大きな被害をきっかけに、企業のAIセキュリティ対策が一気に進む

    Likely · Within months

  • 次回の記事では、事故に備えた記録と体制の在り方、そしてAIエージェントがIT部門の組織をどう変え得るかについて言及される

    Very likely · Within weeks

Open Questions

  • 可視化の具体的なツールや手法は何か
  • シャドーエージェントの検知方法は何か
  • 事故発生時の記録と体制の在り方はどうあるべきか
  • AIエージェントがIT部門の組織をどう変えるか

Related Topics

This article was originally published by ITmedia.

Related Stories

[ITmedia News] Has it changed to phishing due to a series of information leaks? Concerns about the emergence of “fraudulent emails exclusively for that person”
Developing·

[ITmedia News] Has it changed to phishing due to a series of information leaks? Concerns about the emergence of “fraudulent emails exclusively for that person”

Since the end of September, there has been a series of unauthorized accesses targeting companies, resulting in the leakage of personal information. According to research conducted by the Anti-Phishing Council, Check Point Technologies, Tobira Systems, and others, the number of reported phishing emails is on the rise, and the risk of targeted attacks that exploit leaked information is increasing. Companies are calling for measures such as introducing multi-factor authentication and avoiding direct access to URLs in emails.

ITmedia
3 min read
[ITmedia News] NVIDIA investigates independent investigation into Chinese spying allegations against CEO Huang, admits extramarital affair and apologizes
BREAKING·

[ITmedia News] NVIDIA investigates independent investigation into Chinese spying allegations against CEO Huang, admits extramarital affair and apologizes

NVIDIA announced on November 8 that its board of directors will launch an independent investigation into the company's founder and CEO Jensen Huang, following reports that he was the target of an operation by a foreign intelligence agency. U.S. intelligence officials had learned that Alice Huang, a Chinese businessman who had a close relationship with CEO Huang, was suspected of cooperating with China's intelligence agency, the Ministry of State Security. Allis is a former executive at Megaspeed, a Singapore-based AI cloud company that is also being investigated for its involvement in acquiring advanced AI semiconductors whose exports to China are restricted. Three U.S. House of Representatives committees on November 5th asked Huang to give a private explanation on the 18th. NVIDIA said, ``There is currently no reason to believe that U.S. national security or NVIDIA's confidential information has been compromised,'' but the company plans to review all information. On the same day, CEO Huang acknowledged his relationship with a woman other than his wife in a message to employees, apologized, and expressed full cooperation with the independent investigation. At this point, it has not been confirmed that Alice is suspected of cooperating or that confidential information has been leaked.

ITmedia
2 min read
[ITmedia Mobile] Docomo completes emergency maintenance of ahamo site because "site safety has been confirmed"
Developing·

[ITmedia Mobile] Docomo completes emergency maintenance of ahamo site because "site safety has been confirmed"

On November 8th, NTT Docomo completed emergency maintenance of the ahamo site and resumed service. Due to the leak of personal information due to unauthorized access to Docomo Online Shop and My Docomo, the service was temporarily suspended as a precautionary measure from around 17:26 on November 6th. As of 13:00 on November 18th, docomo online shop and My docomo are still under maintenance.

ITmedia
1 min read
More on this topicaiセキュリティ