高速化のためのPython Tips - のんびりしているエンジニアの日記
皆さんこんにちは お元気ですか？私は元気です。 Pythonにおける高速化手法を掲載してみます。 簡単なコード並びに索引のような感じで引けるようなイメージで作成しました。 本日の目次です。 Pythonにおける高速化の必要性 Pythonの高速化 高速化の手順 Profiling 基本的な条件 計測コード Pythonの基本的な書き方部分 rangeよりxrangeを（Python2.7） リストの生成 文字列結合 Import文のコスト 関数呼び出しのコスト ドットを避ける yieldを使う Numpyに関するTips Numpyを使用して基本演算を高速化する Numpyの要素にアクセスする演算をしない Numbaで手早く高速化 その他高速化ツール Cython Dask PyPy 感想並びに展望 参考文献 Pythonにおける高速化の必要性 PythonはC++やJavaと比較すると非
Pythonを高速にするTips集
この記事は，Pythonを少しでも高速に実行するための方法をまとめたTips集です． 随時更新予定です． グローバル名前空間で大きな処理を書かない Pythonではメソッド内に処理を書かずにグローバル名前空間に処理を書くこともできます。 Pythonは変数アクセスを名前空間ごとの辞書（ハッシュマップみたいなもの）で検索することで実現しています。 グローバル名前空間の辞書にはデフォルトの状態でいくつかの要素が追加されているので、メソッド内でローカル変数にアクセスする場合に比べて変数アクセスのコストが重くなります。 なので、グローバル名前空間でforループなどを回すと変数アクセスのコストが無視できなくなるので、forループを回すなどの大きな処理を行う場合はメソッド内に処理を書くようにしましょう。 グローバル名前空間にforループの処理をべた書きした場合と、メソッド内に同じ処理を書いた場合での実
Jupyter Notebook の Tips をまとめてみた | AI tech studio
こんにちは、AI Lab の馬場です。 このブログは CyberAgent Developers Advent Calendar 2016 の11日目の記事です。 昨日は sitotkfm さんの「ログを集める時に気をつけたいポイント」という記事でした。 この記事では、僕が仕事でデータ分析をやっていく上で大変お世話になっている Jupyter Notebook の Tips をまとめてみます。Jupyter Notebook では便利な機能がたくさんあるので、ちゃんと使うと無駄作業の削減になります。僕もこれまで分析途中で「あーこれができたらなあ」と検索しては時間をつぶしてきたので、ここでまとめて記憶にとどめておきたいと思います。 図表・可視化系 notebook 内に図を表示したい 単純に jupyter notebook を起動して、pyplot などでグラフを描画しようとしても、図は
【保存版】Mac好きなら絶対に押さえておくべき設定・アプリ・ショートカットキー130選 - ボクシルマガジン
2018年最新版！Mac好きなら知っておきたい初期設定、アプリ編、ショートカットキー、メンテナンス、バッテリー編の5つに分けて、本当に役に立つものだけを紹介していきます。使っていて便利だったものはどんどん追記していきます。 MacユーザーによるMacユーザーのためのMacの紹介 「初めてMacを使うことになって右も左もわからない」 「Macをもっと使いこなしたい、活用したい」 「調べているけど色んなサイトがあってわからない、めんどくさい」 と、考えているそこのあなた、朗報です！ 初期設定、おすすめアプリ、ショートカットキーからメンテナンス術、バッテリーを長持ちさせる方法まで1記事でぜーんぶ紹介しているのはこの記事だけですよ！ 本記事では、実際にやってみて or 使ってみてよかった設定やアプリ、ショートカットキー、メンテナンス術を「やさーしく」「丁寧に」「Mac初心者でもわかるように」解説し
物理サーバを選定する際のポイント – Eureka Engineering – Medium
Eureka EngineeringLearn about Eureka’s engineering efforts, product developments and more.
Mac標準「プレビュー」の意外と知られていないTips - Qiita
※ "意外と知られていないか"の基準は筆者の主観です。 ※ 動作確認環境は、MacOSX Yosemite、プレビュー v8.0です。 ※ MacOSX Sierra, プレビュー v9.0で動作確認しました。 ※ mac OS Mojave, プレビュー v10.1 で動作確認しました。 更新履歴 2019/03/06 macOS Mojave 10.14.1 での動作を確認 2017/05/01 Mac OS Sierra での動作を確認 2016/10/12 7. クリップボードから開く 2016/09/27 6. 画像を回転させる 2016/09/27 5. PDFを暗号化する 2016/09/27 4. PDFのファイルサイズを圧縮する 1. インスタントアルファ😄 同じような色のエリアを選択し透過してくれる機能 これを何回かやってみると？ ポテトチップスの袋もあっという間にで
YouTubeをラジオ化するChrome Extensionを作りました
YouTubeをラジオ化するChrome Extension(拡張機能) 「Listen Tube」 を作ってみたので、その流れを書こうと思います。 こんな風にYouTubeで動画を表示させずに音だけを流せるようになります。 公開したChrome Extensionはこちら。 Listen Tube – Chrome ウェブストア 作業用BGMを聴くためにYouTubeを開いたのに、気がついたら関係ない動画を観ちゃってる問題 作業中にBGMを聴きたい時はYouTubeをよく利用する方は結構多いと思います。 簡単に曲が探せますし、勝手に次の曲が流れてくれますし便利ですよね。 ただ、使う上で一個問題が… それは、 ＿人人人人人人人人人人＿ ＞ 気が散ってしまう ＜ ￣Y^Y^Y^Y^Y^Y^Y^Y^Y￣ ということ。 BGMを探しにYouTubeを開いたつもりが、ちょっと気が緩んでプ
Python: Scrapy と BeautifulSoup4 を使った快適 Web スクレイピング
前回 BeautifulSoup4 を単独で使ってスクレイピングする方法について記事を書いた。 Web スクレイピングは主にクローリングとスクレイピングの二つのパートに分かれていて、BeautifulSoup4 は後者に特化したパッケージだった。 今回は、Scrapy というフレームワークを使って、前者のクローリングも含めてやってみよう。 まずは今回使用する Scrapy と BeautifulSoup4 をインストールする。 ちなみに Scrapy は現時点で Python 3 対応が完了していないので、ここからの作業は全て Python 2.x 系の環境が必要になる。 また、今回の内容には不要だけど、いちいち出る警告を消したいので service_identity も一緒にインストールしておく。 $ pip install scrapy beautifulsoup4 service_i
エクセル（Excel）関数で文字列を抽出する方法とは？ 文字列抽出の極意｜マイナビ転職
応募企業の探し方や履歴書の書き方、面接のポイントから円満退職の 秘けつまで。あなたの転職を成功に導くためのノウハウを紹介！ 《この記事で扱う関数・ショートカット》 一つのセルから、ある条件を満たす文字列を抽出する：IF関数・MID関数・LEFT関数 一つのセルの途中から文字列を抽出する：MID関数・LEN関数 異なるセルの文字列を結合する：CONCATENATE関数 不要な列を削除する：値貼り付けのショートカット 文字列操作関数の活用【1】 文字を検索してデータを抽出する：FIND関数・LEFT関数 文字列操作関数の活用【2】 アルファベットを大文字・小文字に統一する、頭文字のみ大文字に変換する：UPPER関数・LOWER関数・PROPER関数 文字列操作関数の活用【3】 文字数を指定して削除する：REPLACE関数 文字列操作関数の活用【4】 文字をまとめて置換する：SUBSTITUTE
一歩進んだRとの付き合い方 - Qiita
どうも、R歴４年目にしてR初心者勢です。こちらは2015年にRをはじめたい、更に知識を高めたい人に向けた記事と自分の抱負になります。 都度、参考になる本やURLを書いているので詳しくはそちらをご覧ください。 これからRをはじめる、ほとんどR使っていない人向け はじめに: どうしてRなのか よく言われることですが、 オープンソースでの開発 -> どういう機能をもっているか、どのように処理されるかがわかる マルチプラットフォームでの利用 -> 環境を選ばずどこでも同じように作業できるというのは大事 機能拡張（パッケージ、ライブラリ）に優れる -> 必要は発明の母の精神。俺がこういう機能欲しいから作るぜ★ ということを私は挙げます。 海外でもRは人気ですね -> TIOBE Software: Tiobe Index（これからはじめたいプログラミング言語としてRとSwiftへの注目が高まっている
Sublime Text のプロジェクトを閉じる方法 - 情報系大学院生のWebメモ
この記事は Sublime Text Advent Calendar 2014 - Adventar の15日目の記事です。 11日目の id:mermaid1112 さんの記事を読んでいたら Sublime Text のプロジェクトについて困っていたので、その対処方法を書きます。 プロジェクトの作成方法 問題1：Sublime Text 3 では開いているプロジェクトを閉じることができない 問題2：Sublime Text 3 ではプロジェクトの一覧に作成したプロジェクトが表示されない Sublime Text のプロジェクトの構成 原因：sublime-workspace ファイルが作成されない 対処方法：sublime-workspace ファイルを作成する 対処方法1：Save Workspace as... で sublime-wokspace ファイルを作成する 対処方法2：S
⭐️RStudioと一緒に学ぶStan - cucumber flesh
先日開催された「基礎からのベイズ統計学入門」輪読会に参加し、そこでLTをしてきました。スライドが未完成な状態で乗り込んでしまった反省がありますが、スライドの内容について、補足を含めてこの場で紹介したいと思います。 Stanコードを書くならRStudioで決まり！というような内容です。知っている人には当たり前な内容ですが、知らない人もいるかな、という感じで発表させていただきました。 RStudio内で.stanファイルを開く RStudioとStanの開発チームは仲がいいのか、結構コミュニケーションをとっているっぽい。そのせいか、RStudioはStanをR上で実行する {rstan}パッケージやstanファイルに対する扱いが優遇されている、気がする。.stanファイルをRStudioで開いた際に、以下の機能が有効になります。 シンタックスハイライト コードスニペット 入力補完 構文チェック
JavaScriptの配列の使い方まとめ。要素の追加,結合,取得,削除。 - Qiita
はじめに ここではJavaScriptの配列である、Arrayの基本的な使い方をまとめました。主な内容としては、要素の追加、結合、取得、削除となります。 JavaScriptの最新情報などの技術系のみをつぶやくTwitterをはじめました。 Twitter: @takeharumikami RSSはこちら RSS: http://qiita.com/takeharu/feed Feedly: フォロー
インフォグラフィックとは？視覚で情報を伝える技術を理解しよう
この記事は2016年9月1日に更新しました。 突然ですが、皆さんはインフォグラフィックという言葉を聞いたことはありますか？ インフォグラフィックとは情報を視覚的に表現した資料を指し、ここ数年、多用する企業が増えています。 インフォグラフィックが多用される背景には、世の中に流通している情報量が多くなり、ひと目で言いたいことが分かるように工夫された「インフォグラフィック」に対する需要が高まったことがあるでしょう。インフォグラフィックは基本的にイラストや図形と数字から成り立っているものがほとんどです。 言語がわからなくてもある程度意味を理解できるのでクオリティの高いものは世界的に広がりやすい傾向にあります。 今回は、インフォグラフィックの基礎知識から、実際に自分で作るときに使える無料の作成ツールの紹介、そして実際に大手企業などの事例を紹介します。 プレゼン資料作成やホームページ掲載用の画像作成な
Mac を使い始めたら真っ先に覚えてほしいキーボードショートカット10項目
周りで Mac を使い始める人が増えてきた。 Mac OS といえば 多彩なキーボードショートカットも魅力のひとつですね。 ちょっと検索したら大量の情報が出てきます。 でも、お勧めしたいショートカットが多すぎて 教える方はついついあれもこれもと詰め込んでしまいがち。 結果、コンピュータの操作に慣れてない人はそれらを見て 「そんなに覚えられないよ」と諦めちゃったりもするんじゃないかな。 というわけで 「まずは最初にこれだけ覚えてほしい」と思うものを 10の項目にわけて挙げてみます。 便利なショートカットはたくさんあるから もちろん異論はあると思うんですけど 目の前にいる人を想定して書きますね。 OS の機能 特定のアプリケーションではなく、 Mac OS の基本機能から2つ。 command + tab でアプリケーションを切り替える 複数のアプリケーションを起動している状態で comman
やたらと重い「Firefox」を、馬鹿みたいに高速化する方法まとめ。
結構Firefoxが好きなので、ちょこちょこ改造していたんですが、管理するPCごとに新しいこと試したり前やってたことをやめたりしてるうちに何が何だかわからなくなってきてしまったので、そろそろまとめようかなー？ってことでまとめてみました。 ちなみに、ここに書いてある改造は完全に自宅マシン用です。 会社のマシンでここまでやると・・・ちょっと動作とかアドオンの不都合とか色々検証してないことも多いので、出来るだけご自身の責任でお願いいたします。 とりあえず手始めに入れるアドオン SQLiteOptimizerアドオンを入れる Firefoxの重たくなる一番の原因となる、SQLiteの計量最適化を図ってくれるアドオン。 Faster Fox Liteアドオンを入れる 設定は「ターボチャージャー」に。 かつ、アドバンス設定で「Disable IPv6 DNS lookup」にチェック。 MemoryF
iPhone/ iPad でブレーンストーミングができるアプリ『iBrainstorm』 | ライフハッカー・ジャパン
モバイルバッテリーとは呼べない。「ほぼポタ電」なコレ1台で有事の時もアウトドアも大活躍!【AmazonスマイルSALE】
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Amazon Elastic MapReduceやSparkを中心とした社内の分析環境事例とTips