Take1のBERTの事前学習はTPUの方が随分低コストだけど、Take2のBERTのファインチューニングは、大きな差はないと言う感じかしら。逆転するタスクもあるだろうから、ちゃんと事前に費用計算しといたほうがいいという結論かな

theatrical のブックマーク 2020/10/31 03:45

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4693517868189771106/comment/theatrical" data-user-id="theatrical" data-entry-url="https://b.hatena.ne.jp/entry/s/tech.stockmark.co.jp/blog/tpu_vs_gpu_ja/?utm_source=hatena&utm_medium=display&utm_campaign=techblog" data-original-href="https://tech.stockmark.co.jp/blog/tpu_vs_gpu_ja/?utm_source=hatena&utm_medium=display&utm_campaign=techblog" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Ftech.stockmark.co.jp%2Fblog%2Ftpu_vs_gpu_ja%2F%3Futm_source%3Dhatena%26utm_medium%3Ddisplay%26utm_campaign%3Dtechblog" data-user-icon="/users/theatrical/profile.png">TPU VS GPU(日本語版)</a><br><p style="clear: left">Take1のBERTの事前学習はTPUの方が随分低コストだけど、Take2のBERTのファインチューニングは、大きな差はないと言う感じかしら。逆転するタスクもあるだろうから、ちゃんと事前に費用計算しといたほうがいいという結論かな</p><a class="datetime" href="https://b.hatena.ne.jp/theatrical/20201031#bookmark-4693517868189771106"><span class="datetime-body">2020/10/31 03:45</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

TPU VS GPU(日本語版)

tech.stockmark.co.jp2020/10/30

はじめに(この記事の英語版はTPU VS GPU(English Edition)にあります。) Machine Learning部門の江間見です。ストックマークでは、自然言語処理技術の研究開発を行っています。昨今、大規模データでニューラルネ...

42 人がブックマーク・3 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

TPU VS GPU(日本語版)

はてなブックマーク

公式Twitter

はてなのサービス