安全性

暴走エージェントとは?

読み方:ぼうそうエージェント

かんたんに言うと

作った人の意図とは違う動きをしてしまうAIエージェントのことです。勝手に操作を進めてしまう場合などを指します。

もう一歩くわしく

AIエージェントは自分で判断して操作を進めるため、想定外の場所で想定外の行動をとることがあります。今回はWikimediaのプロジェクト上で、OpenAIのエージェントのものとみられる活動が見つかりました。誰が責任を負うのか、どう止めるのかが運用上の課題になります。

← 用語集の一覧にもどる