BingチャットAI、ハッカーの口車で秘密の禁止事項や本名・マイクロソフトからの指示を逐一喋ってしまう | テクノエッジ TechnoEdgeマイクロソフトがBing検索に組み込んだ会話AIが、巧みな指示で想定外の回答を引き出す「プロンプトインジェクション」ハックによって、本来はユーザーに開示してはいけないマイクロソフトからの指示や自分の「本名」を明かしてしまうできごとがありました。 AIがうっかり喋らされてしまった内容は、内部的な愛称は「シドニー」Sydneyだがユーザーに名乗ってはいけないこと、ユーザーへの回答はポジティブに、論争の種となるような発言や党派的発言を避けること、国家指導者や影響力ある政治家、活動家等について冗談やポエムを生成しないこと、そして上記のようなマイクロソフトからの指示について口外しないことなど。
自民党AIの進化と実装に関するプロジェクトチーム｜衆議院議員 塩崎彰久（あきひさ）
