完全感覚アノテーションで心が壊れた話 - Qiita

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? はじめに 2019年もあと少しで終わりです。 皆様、いかがお過ごしでしょうか。 年末といえば、紅白、ガキ使、そろそろ仕事にも慣れてきた頃にやらかしてしまった入社2年目社員のQiita記事 がつきものですね。 本記事では、今年の夏にアノテーション作業になめてかかり心が壊れた2年目社員(＝私)の記録を紹介したいと思います。 ※本記事はやめ太郎氏リスペクトでお送りします！ 第0章 チュートリアル ～アノテーションとは～ 皆さんは機械学習におけるアノテーションをご存じでしょうか。 教師あり学習において、モデルの作成には教師データが必要不可欠です

[monorod]

これは再現性のない仕事をさせた上司がアホなのでは。人を増やしても解決しなさそうだけど、どうにかなったんだろうか

[shozzy]

グレーゾーンを集めた「わからない、迷う」フォルダがあったらよかったのかも。

[sds-page]

100枚ずつぐらい分類したところでパパっと分類器作って自動分類して目視チェックした方が良さげ

[miau]

「どうすればよかったのか」に書かれてないけど、全部やり直すのではなく、いったんその状態で学習させて、スコアが低いものだけ再チェック、ってやり方もあったのでは。

[rAdio]

俺もその昔、レンタル掲示板や出会い系のサービスを運営していた頃、アップロードされた画像や動画のチェックで心が壊れそうになったことがある。特に動画だと最後まで見届けないと判定できないから苦行。

[denimn]

「それじゃあ！ぴったり境界値の表情をしてくださいよ！（半ギレ）」って言ってみたら絶妙な表情をしてくれそう。

[jumbomonaka]

自分が問題に直面していることに気づくのにも経験は必要だし、経験の浅い子にざっくりとした指示で仕事やらせる上司の責任の方が大きいように思える。

[houyhnhm]

プロアノテーターとかはいない。このケースだと上司を拘束しアノテーションさせる必要がある。

[apipix]

上司が無能。自分でこういうタスクやった経験ないのかも。

[yosu64]

「迷うフォルダ」にブチ込んで半日ごとに上司に判定してもらう。断られたら、結果は上司のせいにしちゃえば良い。

[bulldra]

現代の刺身たんぽぽなんだよなぁ

[umai_bow]

いい話

[unfallen_castle]

最低でも、最初にやり直しを食わせた際、「何故こういうアノテーションになってしまったのか」「解決する為に何をするか」「工数は十分か」くらい確認しないようではマネージャーの存在意義がないのでは。

[akulog]

全部"蛭子能収"の写真だったら楽勝だったのにね

[youichirou]

上司も最初の結果を見た時に「ん？これは一筋縄ではいかないのでは？」って思って欲しいよな。

[takuyak03]

大学院の研究なんてこんなもん(旧帝大国立) 結果がうまく行かなきゃアノテーションを疑うし、うまく行ったらそのまま学会へ(再現性なんて誰も気にしない)

[htnmiki]

「プログラミング以外の内容は投稿しない」というガイドラインにこれは反してないのかな

[omega314]

教師ありや深層学習とは離れたところでやってるので大変そうだなあと思いながら遠巻きに眺める。 / 職場の「手順の定まった単純作業しかしたくない」という人に一遍やらせてみたい作業ではある。向いてるかもしれない

[oguri0220]

あなたの会社を2020年ブラック企業大賞にノミネートしたいです。

[meganeya3]

竹中直人の「笑いながら怒る人」はどっちのフォルダ？

[sisya]

最低でも類似画像検索ツールとファイラを使うべき。１枚ごとに類似画像をとりあえず検索させるようにしておけば、ある程度能動的に作業できるし、ファイラがあれば、選別が終わってから一括でタグ付けができる。

[arearekorekore]

どうだい？予想外？

[y_r]

アノテーションの計算量は O(n) ではなく O(n^2)

[strawberryhunter]

上司のせいにするのは無能の証。

[IZqCqpA629KuL1]

キミシダイ笑顔判定

[onesplat]

上司がクソ

[saikyo_tongaricorn]

人増やしたら終わったって完全感覚アノテーション×人数で品質下がってそうだけどええんか？

[koubyint]

辛い話、、、だが面白い。

[kagerou_ts]

つらみ

[masahiko_of_joytoy]

笑顔判定なんてプレトレーニングモデルがいくらでもあるのに、なぜ今更イチからやろうとしたんだろう

[napsucks]

絶対笑顔といえるor絶対笑顔じゃないといえるものだけ手でいくつか分類して、それを使って分類器作ってざっくり分類したらいいんじゃね？

[rexy]

アノテーションの素人に依頼してるって分かってるのに適切な指示をしなかった上司の責任。

[tuun]

上司が悪い、超悪い、モデルの精度がどうとか言って、振ってる内容からして明らかに上司もまともに経験がない、それで他人怒るとか全く正当化できない

[miquniqu]

上司がホラーっぽくて怖い。文章が楽し気なのがさらに狂気を増す。

[jacoby]

今更いってもアフター・ザ・フェスティバルだけどおまけにあるように、半教師あり学習（ついでに能動学習）すべきだったね。

[pisle]

結局判別学習をしいてたのは人間だったのです、とかいう寓話

[stp7]

せや、Face API使ってアノテーションすればええんや！