ガードレール Guardrails
一言でいうと: AIの入力・出力を検査し、危険な指示や不適切な回答をブロックする安全装置。
詳しい解説
ガードレールは、AIシステムの入力と出力を監視・制御し、意図しない動作を防ぐ仕組みの総称です。ユーザーの入力から不正な指示(プロンプトインジェクション等)を検知して拒否する入力側の防御と、AIの回答から機密情報・不適切表現・事実誤認を検知して修正/ブロックする出力側の防御があります。主要なクラウド事業者やAIベンダーがガードレール機能を提供しているほか、オープンソースの実装もあります。
なぜ重要か / 企業への影響
AIチャットを顧客向けサービスや社内システムに組み込む際、ガードレールの有無が事故発生率を大きく左右します。導入時は「どの層で何を検査しているか(入力/出力/両方)」「自社の禁止事項を追加設定できるか」をベンダーに確認してください。