Pythonで並列処理をするなら知っておくべきGILをできる限り詳しく調べてみた - Qiita
最近Pythonでオーケストレーション層(BFF)のアプリケーションを書く機会がありました。 Python3.4からはasyncioが導入され、I/Oバウンドな処理はシングルスレッドでも効率的に捌けるようになったものの、依然としてCPUバウンドな処理はGILが存在することで、シングルプロセス下では並列処理が制限されます。 このことから言語特性として、CPUバウンドよりもI/Oバウンドな処理を複数捌くことに適していると見ることができます。言語選択の意思決定をする際に重要なファクターとなりますが、そのためにはGILの仕組みを改めて知る必要があると思い、調べてみました。 GIL(グローバルインタプリタロック)とは そもそもGILとは何のことでしょうか。 正式にはGlobal Interpreter Lock(グローバルインタプリタロック)といい、PythonやRuby等の言語に見られる排他ロック
雰囲気で利用しないためのAndroidにおけるKotlin-Coroutineメモ - Qiita
内容 自分がKotlin-Coroutinesを雰囲気で使っていたので調べたメモ。 Coroutineとは Coroutineとは軽量のThreadであり、非同期処理やノンブロッキング処理を行うためのアプローチの一つ。 軽量なスレッドとはどういうことか 以下のような違いがあるよう。 ※理解にはシステムアーキテクチャの知識が若干必要なので、ここは無視でいいかもしれない。 Threadはシステム的に以下の特性を持っている Thread一つにつきプロセス上に対象Thread専用のメモリリソースを確保する必要がある 実行Threadをシステムスケジューラが切り替えるのでオーバーヘッドが発生する Coroutine プロセス上のメモリを利用するので、個別にメモリを確保する必要がない 切り替えタイミングをプログラマが指定するので、オーバーヘッドが発生しない 登場人物一覧 Coroutine利用時の登場
【Swift】Grand Central Dispatch (GCD)とOperationQueue まとめ - Qiita
経緯 普段使っているのに全体像があまり見えていないものとして Grand Central Dispatch (GCD)とOperationQueueが 自分の中にあり色々と調べてみました。 調べていけばいくほど新しいことがどんどん出てきて収拾がつかなくなってきたのですが、現時点までの部分でまとめてみたいと思います。 概念の紹介 最初にいくつかの概念について紹介します。 Concurrency 複数のスレッドを用いて行われる同時並列処理のことです。 iOSでは１つのプロセス(アプリケーション)の中で１つ以上のスレッドを用います。 シングルコアの場合 時間で動かすスレッドを切り返す、 コンテキストスイッチという方法を使ってConcurrencyを実現しています。 マルチコアの場合 parallelism(並列処理)を使って同時に複数のスレッドを動かします。 Task(タスク) 実行される１まと
Python3 Advent Calender 3日目 - New GIL を理解する - methaneのブログ
2011 Pythonアドベントカレンダー(Python3) - connpass の3日目を担当します。 Python 3 がリリースされてから、 Python の進化は主に Python 3 で行われ、そこから Python 2 にバックポートできるものがバックポートされています（例: GCのチューニング、辞書の内包表記など）。 しかし、 Python 2 は 2.7 で新規開発を終了しており、 2.7 にバックポートされなかった機能はもう Python 3 に移行しないと利用することができません。今日は、そんな機能のひとつである New GIL を紹介します。 なお、今日紹介する内容のほとんどは UnderstaindingGIL で紹介されている内容を僕なりに要約したものです。（ただし、翻訳ではありません） 著作権の扱いがわからなかったのと、代わりに自分で図を書き起こすのが面倒だっ
Pythonの並列処理・並行処理のための標準モジュールの比較 - minus9d's diary
Pythonで並列処理・並行処理を提供する標準モジュールは数多くあり、初めてだと違いを理解するのは困難です。この記事では、それぞれの違いについて調べました。 threadモジュール(Python 2), _threadモジュール(Python 3) かつてPython 2にはthreadモジュールという複数のスレッドを扱うためのモジュールが存在していましたが、Python 3でdeprecated扱いになりました。一応_threadモジュールという名前で残っています。公式でも述べられているように、一般には、thread/_threadモジュールではなく、より高レベルなthreadingモジュールの使用が推奨されるようです。 threadingモジュール threadingモジュールは、先述の通り、複数のスレッドを扱うためのモジュールです。thread/_threadモジュールより高レベルと
SLF4J Mapped Diagnostic Context (MDC) with play framework
I'd like the share with this post one solution I found to use a Mapped Diagnostic Context (MDC) in an asynchronous environment like the play framework. Edit (September 2014) Based on one implementation from James Roper, I added one solution based on Akka Dispatcher. tl;dr This post provides two solution to propagate the MDC context in an asynchronous Play application: using a custom Akka Dispatche
あなたとスレッドダンプ - スレッドダンプ入門 - この国では犬が
去る 9 月 20 日（土）に、第八回 #渋谷java というイベントで LT してきました。（第八回 #渋谷java でスレッドダンプについてお話ししました - この国では犬が） あとあと自分で参照したり、スレッドダンプを知らない人に見せたりしたい内容でもあるので、ブログとしてまとめておきます。 スレッドダンプとはなにか スレッドダンプは、ひとことで言うと「Java のスレッドのスナップショット」ということになります。 スレッドダンプを取得することで、取得した瞬間に JVM 上でどのような処理が実行されているのかを一覧して、調査することができます。 具体的には、その瞬間に存在している各スレッドの名前、状態、スタックトレース等を見ることができます。 スレッドダンプはなんの役に立つのか プログラムが遅いとき・フリーズしたとき 一つには、プログラムが遅いとき・フリーズしたときの原因調査に役立ち
iOS(Xcode6とSwift)におけるマルチスレッド処理の実装方法その1[NSThreadクラスの簡単な利用例]
前回はObjective-CにおけるNSThreadクラスの簡単な利用例を取り扱いましたが今回は、ほぼ同じ内容で言語をSwiftに変えたエントリーとなります。 言語が変わっただけでは面白くないですので、今回は画面上に存在するボタンを押したらスレッドが起動するとの例にしたいと思います。 前回はXCTestフレームワークを利用してマルチスレッドの検証を行ったので、メインスレッドを意識した検証ができませんでしたので、今回はこの点についても記載できたらと思います。 あとはマルチスレッドと言えば排他処理が避けて通れない処理であると言えますので、この点についても記載させていただきたいと思います。 本エントリーではSwift-CにおけるNSThreadクラスの簡単な実装サンプルとその説明を記載させていただきます。 利用しているXcodeは6.1です。 検証を行うためのプロジェクトの作成と準備 今回はiP
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://jp.xlsoft.com/documents/intel/python/2018/greeneltch_fastpython.pdf