機械学習案件は本運用乗せきってからが本当の勝負、みたいなところあるので気をつけて - Qiita

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 『機械学習案件を納品するのは、そんなに簡単な話じゃないから気をつけて』を読みました。 つまづきから得られた知見の共有は貴重だと思います 実際、機械学習とか最適化とか自律的なシステムの開発は、罠が多いです。 研究や試作では成功していても、様々な事情により実用化できず消えていくものを沢山見てきました。 そのため、本運用に乗せてユーザの受け入れも上々というところまで辿りつければ、それはそれは本当に喜ばしいことなのですが、そこから始まる試練も色々とあったりします ということで、運用後に体験したり見聞きしたことをいくつか、私も共有してみたいと思い

[bohemian916]

これが機械学習は技術的負債があっという間に貯まる、高利子クレジットカードと呼ばれる所以。ようやく理解されてきた感がある。一度は目を通しておこう http://atl.recruit-tech.co.jp/blog/2745/

[ydf]

“ブラックボックスが敬遠された。” 精度を求められる高額な案件だとブラックボックスは許されないことが多かった。なので現時点では機械学習は客寄せパンダで実際はルールベースが無難。

[mkataigi]

機械学習に限らず、システム全般でこういうことあるよね。機械学習やAIが残念なのは、システムだと運用が当たり前に考えられてるのに、それが考えられてないことがよくあること

[chimerast]

機械学習使うシステムを一回納品&検品して終わりっていうのはあり得ないのでは。そもそも受託で扱うべき案件ではない気が。 なんとかなるのは前提条件があまり変わらない組み込みの画像認識ぐらいじゃないのかなぁ。

[mojimojikun]

元ネタがバズった事などをトリガーにして？こういう知見が増えているの、良い

[tmatsuu]

機械学習に限らず運用を考慮してないってのは現場としてはよくある話ではある

[field_combat]

運用フェーズについて

[muddydixon]

お、おう

[filinion]

入力されるデータの前処理や、周囲の環境が変わるなどなどの結果、事後的におかしなことが起きる可能性がある、と。

[RabbitBit]

技術的負債。

[kisei6767]

確かに簡単に負債になるよね

[mizchi]

最高のブラックボックス作る技術なのにブラックボックスがだめとは

[toyama0919]

機械学習の運用はワークフローエンジンがキーポイントだと思う

[Dicer]

一度導入したら、データ更新が必要ない機械学習システムだったらこんなことは起こりにくそうだが、そんなものはあるのだろうか？

[shogo_okamoto]

機械学習の運用が凄い辛そうだぞ問題

[santo]

技術的負債がトイチ利子レベルで溜まって行く。走り続ける体力と決意がないなら手を出してはいけない世界かと。

[kisa12012]

Rules of Machine Learning: Best Practices for ML Engineering http://martin.zinkevich.org/rules_of_ml/rules_of_ml.pdf にも、機械学習の現場導入時の問題点が明快にまとめられている

[wyukawa]

コストパフォーマンスちゃんと考えないとね。そうじゃないと運用コストが軽くメリットを上回りそう。

[airj12]

本運用乗せてこそ得られる知見は大変ありがたい

[psfactory]

機械学習案件は本運用乗せきってからが本当の勝負、みたいなところあるので気をつけて - Qiita

[cocodemi]

いろいろ切ない

[uturi]

機械学習に限らないあるあるネタばかりだが、『常に一定数のサンプルを必要とする』ということによるトラブルは機械学習特有の問題かな。

[BuchuntaGo]

n

[shikiarai]

本当に運用したくない。基幹システムだけ触ってたいわ。

[takamoriii]

“ ええと、「こんなんやってられっか」なんて、げんなりしないでくださいね べつに機械学習とか関係なく、どんなシステムであろうと障害は日々起こりうるものですし、全てに備えることはできません。”

[gyu-tang]

まあそうだと思います

[rryu]

学習状況の監視みたいなのが無いと厳しい感じ。

[lyiase]

"せつなさ炸裂～"さてはお前何かを知ってるな。最初の二つは発生すると辛いね…。自分の性じゃないのに調べないと行けなくなるし…。