GitHub - hellock/icrawler: A multi-thread crawler framework with many builtin image crawlers provided.
Documentation: http://icrawler.readthedocs.io/ Try it with pip install icrawler or conda install -c hellock icrawler. This package is a mini framework of web crawlers. With modularization design, it is easy to use and extend. It supports media data like images and videos very well, and can also be applied to texts and other type of files. Scrapy is heavy and powerful, while icrawler is tiny and fl
Pythonの機械学習用Docker imageのサイズ削減方法の紹介 - エムスリーテックブログ
エムスリーエンジニアリンググループ AIチームの笹川です。 バスケと、ロードバイクが趣味なのですが、現在、NBAのplayoffと、Tour de Franceが同時に開催されていて大変嬉しい毎日を過ごしています。 特にNBAのplayoffは、連日overtimeとなるような激戦や、giant killingがあったりのアツい戦いが繰り広げられていて最高です。 そういう状況なので（？）、今回は先日取り組んだ、Pythonの機械学習バッチを実行するdocker imageのサイズ削減についてのアツい戦いについて紹介したいと思います。 膝の上に登って寝る為に、筆者がデスクに戻るのを机の下で待ち構える犬氏（かわいい） 今回の取り組みでは、もともと3GB程度だったPythonのML用のimageを、約2.0GBに削減することができました（それでもなかなかのサイズ。MLのimageは特に大きい印象
PythonでGoogle Drive API v3を利用して画像のアップロード - Yura YuLife
PythonでGoogle Drive API v3を利用して、 GoogleDriveにフォルダを作成し、ローカルのフォルダ内の画像をアップロードするスクリプトです。 環境 Python 2.7 Mac OSX / Debian Google Drive APIの有効化と認証情報の取得 プロジェクトの作成 https://console.developers.google.com/start/api?id=drive のページから、新しいプロジェクトを作成するか、既存のプロジェクトを選択して「続行」をクリックします。 Google Driveが有効化されました、と表示されたら「認証情報に進む」をクリックします 認証情報の作成 「新しい認証情報」から「OAuth クライアントID」をクリックします アプリケーションの種類は「その他」を選択し、適当な名前を入力します 「作成」をクリックし、次
Chromeでフルサイズのスクリーンショットを撮るためのパッチ - Qiita
次のようにページ全体のサイズがブラウザーの縦横ともに大きいと想定します。 この時、scroll_width, scroll_height, row_count, col_count = 0に初期化します。 ページの右端に当たるまでスクリーンショットを撮って画面の横幅の分スクロールするのを繰り返していきます。 横にスクロールする度にcol_countを増やします。 必須うではないですがtmp_imageのファイル名はtmp_{row_count}_{col_count}.pngとかにすると後でファイルだけ見た時にわかりやすいです。 tmp_imageをstitched_imageにscroll_widthとscroll_heightの位置に貼り付けます。 スクロールサイズがページの残りサイズを超えたら残りの分だけ切り出してtmp_imageに保存しstitched_imageに貼り付けます。
MOONGIFT: » オープンソースのメディアアーカイバ「mediatum」:オープンソースを毎日紹介
業務上では実際に使う作業用ファイルのほかに、皆で参考にする系統のファイルが存在する。PDFや画像、動画といった類のファイルだ。写真を扱うサイト等は特に多いだろう。 そうした情報をうまく管理できれば、業務の効率化が進められるはずだ。まずは一元管理からはじめよう。 今回紹介するオープンソース・ソフトウェアはmediatum、メディアを一元管理するためのプラットフォームだ。 mediatumはLinuxまたはWindowsで動作する。Windowsの場合インストーラーを使うだけで完了し、Webサーバも付属するので手軽だ。 扱えるファイルの種類は動画、またはPDF、PSそして画像（JPEG/PNG/TIFF/SWF）になっている。これらを登録すると、全文検索がインデックスを作成してくれるので後から容易に検索できる。 各ユーザ単位にアクセス権限を細かく指定できるのがmediatumの売りだ。チーム単
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://www.automatingosint.com/blog/2016/12/vacuuming-image-metadata-from-the-wayback-machine/
404 Not Found
