TPRが0.666に達した時点では,ROC曲線では(0.250,0.666)という座標に位置し,そこまででは全体の面積のうちせいぜい1/4しか担当していません. したがって,(0.250,0.666)に至る手前でどれだけ下手な予測をしても,AUCへの影響は小さいもので済みます. 一方PR曲線では(0.666,0.666)という座標に位置し,その座標まででなんと全体のAUCの2/3を担当しています. ですので,(0.666,0.666)に至る手前で下手をこいてしまうと,ROC曲線に比べて8/3倍もの影響力があります. 実際,1位と2位を入れ替えたときのROC曲線とPR曲線のAUCは次のとおりです. ※ROC-AUCは0.750(10%劣化). ※PR-AUCは0.514(33%劣化). 実験的検証 論より証拠,実験で示してみました. 実験手順は以下のとおりです. 使用したプログラムはPyth
![ROC曲線とPR曲線の違いについての考察 - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/b673144ea5ab75f1d402e17f7793822973e6f953/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-412672c5f0600ab9a64263b751f1bc81.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTk3MiZoPTM3OCZ0eHQ9Uk9DJUU2JTlCJUIyJUU3JUI3JTlBJUUzJTgxJUE4UFIlRTYlOUIlQjIlRTclQjclOUElRTMlODElQUUlRTklODElOTUlRTMlODElODQlRTMlODElQUIlRTMlODElQTQlRTMlODElODQlRTMlODElQTYlRTMlODElQUUlRTglODAlODMlRTUlQUYlOUYmdHh0LWFsaWduPWxlZnQlMkN0b3AmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT01NiZzPTcyZTJhYjZiYjJmODA4ODFiMjJkMjkwZDM2Yzk5MzY2%26mark-x%3D142%26mark-y%3D57%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZoPTc2Jnc9NzcwJnR4dD0lNDBza3lzaGsmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT0zNiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPWRmNjVjMWE3ZTE0NzI2MzNiOTFjZWNlYWJhMmVlZjgw%26blend-x%3D142%26blend-y%3D486%26blend-mode%3Dnormal%26s%3D7903b2ddd2e527f1498397ed24b6b3dd)