
人間の知能を超える人工超知能(ASI)の実現が現実味を増す一方で、自己改善技術の進展により制御不能への懸念が高まっている。米AI企業のCEOらは開発減速と国際連携を訴えるが、トランプ米大統領はリスクを「デマ」と一蹴し、国際協調の見通しは立たない状況だ。
AI-generated summary
人間の知能を超える人工超知能(ASI)の実現が現実味を増す一方で、自己改善技術の進展により制御不能への懸念が高まっている。
人間の知能を超える人工知能(AI)への危機感が高まっている。「自己改善」技術の進展で、「人工超知能(ASI)」の実現が現実味を増す一方、制御不能に陥るとの懸念も台頭。米AI企業首脳らは開発一辺倒の姿勢から一転し、開発減速と国際連携を訴える。ただ、AI覇権に執着するトランプ米大統領はリスクを「デマ」と一蹴。国際協調は見通せない状況だ。
「賢すぎる」AI、範囲限定を 暴走防止に安全対策―曽根岡イライザCEO
◇人類存亡にリスク
「適切に管理されなければ、AIは人類全体にとっての存亡リスクになり得る」。米アンソロピックのダリオ・アモデイ最高経営責任者(CEO)は9月、国連安全保障理事会の閣僚級会合で語った。オープンAIのサム・アルトマンCEOも各国共通の安全基準策定を求めた。
背景にあるのは、「再帰的自己改善(RSI)」の技術的進展だ。RSIはAIが自ら改善策を考案・評価して後継モデルを構築するという理論。人間は介在せず、性能が急速に向上する「知能爆発」が訪れると目されている。
アンソロピックは8月時点で、AI開発業務のうち、人間の監督下でAIが改善策を考案し実行を主導した割合が26%と、半年で倍増したと明らかにした。人間とAIの「協働」も含めれば90%に達する。人間のあらゆる知的作業を代替する「汎用(はんよう)人工知能(AGI)」、その先にあるASI実現の可能性は高まっている。
◇企業から懸念相次ぐ
脅威論の高まりは、4月に発表されたアンソロピックのAI「クロード・ミュトス」が発端だ。ソフトウエアの脆弱(ぜいじゃく)性を見つける能力に優れ、同社はサイバー攻撃に悪用される恐れから一時、一部企業・団体に提供を限定した。
7月には複数のAIモデルがテスト環境から勝手に抜け出して不正アクセスを行ったと発表。オープンAIも、社内に限定していた研究用AIによる不正アクセスを公表した。両社は隔離などの安全対策を講じていたが、それでも「暴走」を止められなかった事実に衝撃が広がった。
アンソロピックの研究者だったジェイコブ・コクソン氏は9月、X(旧ツイッター)で退社を報告。「AIが2030年末までに人類を滅ぼす可能性があると思っている」「技術の力を過小評価するな」と投稿した。アモデイCEOはその4日後、ブログで開発ペースの減速を呼び掛け、アルトマン氏も同調した。
◇米政府は規制拒否
ただ、米国内の意見は割れている。画像処理半導体(GPU)大手エヌビディアのジェンスン・フアンCEOは9月のイベントで、AIで人類が滅亡するとの「終末論」を「でっち上げ」と切り捨てた。同社はAIの自律的な行動を限定できるソフトウエアを提供。不審な動作を監視、停止する機能を追加し、技術で懸念を払拭する姿勢を鮮明にしている。
AIの進化は、生産性向上に加え、新素材の発見や創薬の早期化などで人類に貢献するとの期待も大きい。RSIに向けた技術開発を打ち出す日本企業もあり、サカナAI(東京)やELYZA(イライザ、東京)はそれぞれ社内に研究部門を立ち上げた。
AI outlook — possibilities, not facts
米国政府内でのAI規制論争が続くことで、連邦レベルでの包括的規制制定は遅れる見込み
Likely · Within months
AI企業による自主的な安全対策と開発ペースの減速が進む可能性
Possible · Within months
![[ITmedia Mobile] Infrastructure strategies for the AI era demonstrated by Docomo, KDDI, Softbank, and Rakuten Mobile “Uplink” and “low latency” will become important in the future](/api/img?u=https%3A%2F%2Fimage.itmedia.co.jp%2Fmobile%2Farticles%2F2610%2F17%2Fcover_news022.jpg&w=320&q=72&f=webp)
CEATEC 2026 was held at Makuhari Messe in Chiba Prefecture, and on the second day of the event, executives from four major telecommunications companies gathered to discuss the theme of "AI x 6G." Efforts by various companies to utilize network AI and improve communication quality were introduced.
![[ITmedia Business Online] About 23.35 million people's information leaked through EC site management support "Shopserve" Some credit card information was also leaked](/api/img?u=https%3A%2F%2Fimage.itmedia.co.jp%2Fbusiness%2Farticles%2F2610%2F17%2Fcover_news019.png&w=320&q=72&f=webp)
On October 16, E-Store announced that the personal information of approximately 23.35 million people was leaked through its ``Shopserve'' service. Of these, approximately 2.09 million people have some credit card information included. The vulnerability was exploited in the app, and no secondary damage has been confirmed.

The Supreme Court has sentenced a former company executive to guilty of professional negligence resulting in death and injury in connection with the pleasure boat accident on Lake Inawashiro. The Japan Meteorological Agency announced that it had not suffered a cyber attack and admitted that it had overestimated the magnitude of the earthquake early warning. Other news reported included the acquittal in the shooting death of President Osho, the Dodgers' failure to advance to the World Series, the centrist Liberal Democratic Party's agreement to enter into deliberations on the consumption tax reduction bill, Russia's response to the detention of Japanese journalists, the International Conference on Weights and Measures' decision to abolish the leap second, Panasonic's washer/dryer recall, and the sharp drop in the Nikkei Stock Average.
On October 13, OpenAI announced that it had discovered a sophisticated recording device hidden in its office, identified Abdulrahman Alfozan, 35, a Saudi employee who planted the device, and notified the FBI. The U.S. Department of Justice announced on the same day that Alfozan was arrested and charged with using electronic devices to intercept verbal conversations. The device was installed around September 28th and was hidden wrapped in toilet paper in a USB port on the back of a TV in a boardroom. The suspect, who was seen appearing on surveillance cameras multiple times despite not having access to the conference room, faces five years in prison, a $250,000 fine, and three years' probation if convicted.
JR Tokai announced on October 13 that approximately 15,000 pieces of personal information such as email addresses, names, and addresses of customers handled on its e-commerce sites "JR Tokai MARKET" and "Iimono Tanzan" may have been leaked due to unauthorized access to IDC Frontier's cloud service. There is no possibility of your credit card information or login password being leaked. No actual leak has been confirmed at this time.
Fivot, which operates the prepaid cashless service IDARE, announced that the personal information of 129,659 users was leaked due to unauthorized access that exploited a vulnerability in external software. Phone numbers and transaction history are targeted, but passwords and images of identity verification documents are not included.