今の技術ではChatGPTが書いた文章だと見抜けない？ さまざまなツールで検証、成功率は50％以下に

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。Twitter: ＠shiropen2 ドイツのダルムシュタット工科大学に所属する研究者らが発表した論文「To ChatGPT, or not to ChatGPT: That is the question!」は、ChatGPTで生成した応答と人間が作った応答を区別することを目的としたさまざまなツールの有効性を評価し、その精度と信頼性を比較した研究報告である。 この評価には、ChatGPTプロンプトの検出をうたうツールや、ChatGPT生成コンテンツを対象としないその他のAI生成テキスト検出ツールも含まれる。 ChatGPTをはじめとする大規模言語モデル（LLM）が登場するにつれ、フェイク

[shunkeen]

“全てのモデルで50％以下の成功率しか達成できないことが判明”／そんなことあるんだ？コインを投げてランダムに判定したって50%近くになりそうなもんだけど。

[nakag0711]

TNRとTPRって断りなしに使っていい言葉かなあ

[straychef]

ChatGPTにChatGPTが書いたとばれないように出力してって依頼したらいい

[misshiki]

“論文「To ChatGPT, or not to ChatGPT: That is the question!」は、ChatGPTで生成した応答と人間が作った応答を区別することを目的としたさまざまなツールの有効性を評価し、その精度と信頼性を比較した研究報告”

[fnskun]

“全てのモデルで50％以下の成功率しか達成できないことが判明した。最大でも47.3％の成功率しか達成できず、20％台が多く、一桁台もいくつかあった。”

[Seamless]

ChatGPTで生成した応答と人間が作った応答を区別するモデル24個の有効性を評価。結果すべてのモデルで50％以下の成功率しか達成できないことが判明。