食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー（井上明人） - エキスパート - Yahoo!ニュース

久しぶりのyahoo個人への投稿となりますが、この記事を公開するのは、正直、気が重いな、と思いつつ、公開します。 というのも、今、食べログに対して非常にネガティブな解釈が広がっているわけですが、何かしらポジティブな材料を提供するとなると、確実にいろいろ言われるだろうなあと思って気が重くて仕方がないのですが、ただ、人生の一時期、食べログにハマっていた人間として、論点として提供されるべきポイントが、提供されていないと感じましたので、本記事を公開する次第です。 ◆食べログの評価点数分布の「不自然さ」 さて、近年、食べログの点数評価アルゴリズムは、頻繁にその不正を疑われ議論になっています。 2016年には、評価アルゴリズムのリセットがあった際には、いくつかの店舗がいきなり3.0の点数にリセットされるなどといったことがあり、記事にもなりました。 そして10月8日に、藍屋えんさんという方が、ご自身のブ

[fishma]

この記事で分かることは「数字は加工されていて、点数で店の良し悪しを判断する事はできない。ただのノイズでしかない」という、以前と変わらぬ悲しい事実しかないと思うんだが

[richest21]

『3.6が最頻値になるのは、足切り件数の設定次第』←なら食べログの営業が「会費を払えば3.8に点数戻しますよ」的なことを言ったらしいという件の信憑性は高まるな。有料会員なら足切り件数の設定を変えて貰える訳だ

[manatus]

「不正があっても無くてもあれじゃ使う気にならない」ってデータが示された面もある。食べログは不正に対してはリリース出したけど「食べログの星の当てにならない感」には言明するのかな

[sds-page]

・足切り解除条件のトリガーが上級レビュアー　・代理店が上級レビュアーを把握してる　・代理店が上級レビュアーに有料会員店を評価させる　みたいな事やってるんじゃないかな。食べログSEO界隈

[karaage]

食べログのアルゴリズムの説明読む限り、この記事の説明が妥当な気がする。元データがないから、どこまでいっても想像になっちゃうけど

[knok]

評価関数が近似できることと、その評価自体が公正かは別問題では/DLで公正さを調べるのはむしろ難しいと思う。決定木とか重回帰の方が適切そう

[GRA]

これはかなり説得力あるなぁ。食べログが階段状のフィルタにしてなきゃこんな騒ぎにならなかったのかもなぁ。

[natsutan]

自分たちが1～5点の評価をつけて、お店の評価が0～100点だったらイメージ変わると思う。付けた評価がそのままお店の評価になってると思うと、期待と違う点になり悪意をかんじてしまうのでは。（使ったこと無いけど）

[uzuky]

最も重要な美味いか不味いかの評価は個人の主観によるところが大きいし、単純な評価算出式だと Amazon みたいなことになるからね

[bob3]

レビュー件数での足切りラインと最頻値の関係は興味深い。

[simomm]

ちょっとした人気店なら3.2、もっと人気の店なら3.6、超人気店なら3.8が壁。恐らく0.2ポイントぐらいごとに強めのふるい落としフィルターがあり、その手前に最頻値が形成されやすい

[lifehackcat]

言ってる事は分かる。ECのSEOもフィルターありきだよ。ただ、それは俺ら店舗の運営側や食べログ自身が目を光らせるべきであってユーザーは無関係。信頼を売るサービスの点数に疑念が出た時点で終わりだよねってお話。

[asakura-t]

食べログを批判するのにGoogleを批判しないのはダブスタな気はする。

[ookitasaburou]

“さらに検証として出てきた記事がkonkonさんによる10月10日の記事「データ解析を駆使して食べログ3.8問題が証明できなかった話」です。こちらでは、食べログ3.6のスコア付近にいる店舗が本当に「食べログにお金を払って

[shimmering]

案外？納得させるという意味では公平に見える不公平なアルゴリズムが必要かもしれない

[kei_1010]

統計的には会員と非会員の店で違いはないという事で良いのかな？次は食べログの営業が言ったという怪しい言葉について追求したいかな。会費という仕組みを無くせたら良いのに。

[kamm]

検証結果は証拠にはならないけど、わざわざポジティブに見る必要も無いよね。第三者に検証してもらうなり、食べログ側が自ら健全性をアピールしなきゃいけないのにしてないわけで。ガチャ問題と同じ

[enemyoffreedom]

「おそらく0.2ポイントぐらいごとに強めのふるい落としのフィルターがかかっているために、その手前に最頻値が形成されやすい」　説得力があるが、そういうアルゴリズムなら点数は0.2点かその倍数刻みで表示すべきか

[SasakiTakahiro]

不正対策のためのアルゴリズムが、不正のように見えてしまっている可能性がある。

[tigercaffe]

操作してる事自体が悪だと確信してる者にとっては、これを読んでも何の解決にもならない。個人的には無秩序な情報の中で信用できるレビューを見つけるのがやはり最適解だと思うが。

[IGA-OS]

ヘビーレビュアーだけの評価も併記するプレミアムサービス始まったら使うかもしらんな・・・今より点数を信じられる🤔

[NOV1975]

丁寧な記事だけど、食通レビュアー仮説だと口コミサイトというにはバイアスがかかってる気がしない？

[raebchen]

とても公正中立かつ冷静な分析と思う。何でも印象で「悪」と決めつけるのは簡単だけど、自分なりに分析する力を自分たちが持たなければ、「悪」で思考停止する。これが、左右問わず政治に一番利用されやすい。

[securecat]

内容とまったく関係がないが、yahoo個人は、個人記事とはいえ影響力が大きなものと思うので、投稿頻度も加味してオーサーを管理したほうがいいんじゃなかろうか。ふと思った。

[tetsu23]

3.2や3.6で意図的に足切りされてそこに評価が固まっている情報の価値とは。/せっかくアルゴリズム考えたなら、10例じゃなくて100例ぐらいで出してほしい。/評価者によってコントロールされている可能性。

[amamiya1224]

あぁなるほどね、と割と腑に落ちる感じではあるな。ていうかこれ、味覚っていう主観的な感覚を素人が点数付けて回るっていう仕組みがそもそももはや成り立たんのかもね。

[triggerhappysundaymorning]

実態は藪の中というのはその通りなんだけど,実際の感覚として食べログの評価が実際の印象と乖離してるから疑われてるってのはあるかも.ソーシャル点数付けサービスはもう成り立たない時代になったのかもね.

[nori__3]

正直、点数はあまり気にしてないんだが、地図上で検索したとき課金店が優先され、画面範囲内の店を全部表示するというのができなくなったっぽいのでもう切ろうかなと思ってる。

[amino_acid9]

一連の解析では一番腑に落ちる。そして「写真」しか参考にしてない自分はなかなか正しかったんだなあとも

[chabooooo]

「食べログの点数アルゴリズムは悪」って結論ありきで語ってる人は無法地帯のAmazonとか互助会まみれだった時代のはてブホッテントリは良いと思っているのか？

[bn2islander]

結局、われわれが知りたいのは「食べログがなにか悪いことをしているか」ではなく、「食べログの点数が店の評価にどこまで関係しているのか」という事なので、このエントリーもその意味では期待に応えていないですね

[fashi]

スパムフィルターでレビュアーの実績が加味されるために「『人気はあるけど、食べログヘビーユーザーがあつめられない店』というのが、3.6手前に集まってしまう」という予測

[gcyn]

『この点をブラックボックスにせざるを得ないため、食べログが悪いことをやっているのか、いいことをやっているのか』『公正な努力の結果なのかは、全くわからない』『このふるい落としが〜「秘伝のタレ」』

[khwarizmi]

ドメイン知識重要的なところに落ち着きそう

[vecter]

最初に統計を出した記事で正規分布になってないから不正だ！と息巻いてたブコメが、統計わかる人の記事が出るごとにどんどんトーンダウンしてるのを見るに、はてブも感情的でいっちょかみしたい人が多いこと多いこと

[namisk]

常連レビュワーで集まって食事会して皆でレビュー書くのはやはり効果あるってことね。。。3.6超えてる店でそういうレビューたまに見かけるけど、行ってみると「自分の行きつけの3.4の店と変わらんな」ってなること多い

[kash06]

人気記事の https://b.hatena.ne.jp/entry/s/huyukiitoichi.hatenadiary.jp/entry/2019/10/13/080000 と並べて考えてしまった。評判をハックしようとする輩がいる限り、技術側は身を削る防衛しか出来ない。科学は時間を超えるが店は越え難い。

[ibadora]

3.8点以上の課金していない店舗が存在すれば反証される？たくさんあると思うが。。。

[nisatta]

有用性がなくなっていくのは、コミュニティの一生（https://dic.nicovideo.jp/id/4615916）と同じで、陳腐化の表れのひとつだと思う。ここも