tqdmの検索結果1 - 2 件 / 2件

• あとで読む

  【notion-tqdm】どこでもPythonの進捗状況がわかるライブラリをつくった【Notion】 - Qiita

  • 22 users
  • qiita.com/syunyo
  • テクノロジー
  • 2020/12/19

  Web系の企業でデータサイエンティストをしている者です。 今回はどこでも進捗状況が見れる「notion-tqdm」というPyPIライブラリを作ったので、そのお話をします。 🤔 処理はどこまで完了したのか？ DSの人間なら、以下のようなことを思ったことはないでしょうか？ あの重たいデータ整形どこまで終わってるかな？？ あのモデルの学習はどこまで完了してるかな？？ 軽い処理ならtqdmを仕込めばその場で確認できますが、重たい処理ではそうはいきません。 例えばJupyterで処理を実行する場合、コネクションが切れたりすると再度ノートブックを開いてもtqdmの反映はそこで止まってしまいます。 そのため、重たい処理の進捗を確認する場合によく取られるケースは以下です slack, line 等の botで通知 実験管理系のライブラリ（tensorboard, Naptune.ai, MLFlow）等

  • python
  • あとで読む
  • js
  • qiita
  • データ
  • メモ
  • *あとで読む

  
• あとで読む

  pandasのapplyの進捗をtqdmで表示 - iMind Developers Blog

  • 3 users
  • blog.imind.jp
  • テクノロジー
  • 2019/11/10

  概要 pandasで大きめのDataFrameに対してapplyすると、いつまで待てば結果が返るのか不安になることがあるのでtqdmで進捗を表示したい。 バージョン情報 Python 3.6.8 tqdm==4.31.1 pandas==0.23.4 サンプルデータ ランダムな数値で1万行のDataFrameを作成しておく。 import numpy as np import pandas as pd # 適当なDataFrameを生成する df = pd.DataFrame(np.random.random([10000, 2]), columns=['a', 'b']) df.head() 実行結果 a b 0 0.748046 0.457551 1 0.657718 0.628164 2 0.395166 0.623360 3 0.610704 0.236926 4 0.576350