PyPy Advent Calendar 5日目 - PyPyとCPythonの違いを知ろう - Keep on moving
このエントリは PyPy Advent Calendar 2011 の5日目として書いています. 前日の @cocoatomo さんからバトンを受け取りました。 みなさん、PyPyを楽しまれていますでしょうか。 PyPyはよくCでのPython処理系に比べて早い(こともある)という点 *1 が有名ですが、他に違いはあるのでしょうか？ 本日は実装系としてのPyPyはCPythonとどの辺が違うかを見ていきます。 本家ドキュメント 本家にドキュメントがあります。 Differences between PyPy and CPython 私の方で翻訳中のものはこちらです。1.5のときに翻訳したものなので、最新版には追随できてません。 @cocoatomo さんのところで公開されてましたので参照下さい。 https://bitbucket.org/pypyja/pypy/src/0a428637c
pysetup3のご紹介 - そこはかとなく書くよ。
python2ではsetuptoolsやdistutilsがありますが、python3では "packaging"という新しいパッケージ用ライブラリが搭載されます。 pysetup3はこのpackagingを使うためのコマンドです。これは、setuptoolsやdistutilsを使うためのコマンドがpipやeasy_installである、という関係と同じです。 まとめるとこういう関係になります。(正確にはちょっとずれていますがまあこんなものかと) ライブラリ ツール python3.2まで distutils/setuptools/distribute easy_install/pip/buildout python3.3〜 packaging pysetup3 なお、packagingはpython2.4〜3.2ではdistutils2という名前でバックポートされ、サードパーティパッケ
Python3 Advent Calender 3日目 - New GIL を理解する - methaneのブログ
2011 Pythonアドベントカレンダー(Python3) - connpass の3日目を担当します。 Python 3 がリリースされてから、 Python の進化は主に Python 3 で行われ、そこから Python 2 にバックポートできるものがバックポートされています（例: GCのチューニング、辞書の内包表記など）。 しかし、 Python 2 は 2.7 で新規開発を終了しており、 2.7 にバックポートされなかった機能はもう Python 3 に移行しないと利用することができません。今日は、そんな機能のひとつである New GIL を紹介します。 なお、今日紹介する内容のほとんどは UnderstaindingGIL で紹介されている内容を僕なりに要約したものです。（ただし、翻訳ではありません） 著作権の扱いがわからなかったのと、代わりに自分で図を書き起こすのが面倒だっ
Who moved my SPAM? - Python3 Advent Calendar 二日目 - What is ABC?
Python3 Advent Calendar 二日目 - What is ABC? ということで、@shomah4aさんから引き継ぎました、@jbkingです。 ABCって何だ? 三行で。 AbstractBaseClassesの略でPEP 3119に仕様があります。 組み込み関数であるisinstanceやissubclassに作用を与える紳士協定的(Pythonらしい!)フレームワークです。 動的言語に静的言語のメリットの一部を取り込んだかんじ。 論よりコード ということで、動きを見てみましょう。 % ipython3 Python 3.2.2 (default, Sep 6 2011, 16:21:14) Type "copyright", "credits" or "license" for more information. IPython 0.11 -- An enhance
PyPy Advent Calendar 二日目 - ebnfparse を使ってみた - プログラマのネタ帳
みなさん処理系作ってますか? PyPy 楽しいですよね! というわけで昨日とは打って変わって PyPy Advent Calendar 二日目を担当する [twitter:@shomah4a] です。 他の人が翻訳ネタでエントリを書く宣言をしている中、空気を読まずに開発系エントリです。 PyPy って そもそも PyPy ってなによ? ってのはきっと昨日 pypy-ja 総帥であるところの [twitter:@rokujyouhitoma] 氏が書いていると思うのですっ飛ばします。 と思ったら総帥が忙しいらしく、 [twitter:@Surgo] 氏が代打でした。 Kosei Kitahara's Blog: PyPy! - PyPy Advend Calendar なので、 PyPy については slideshare に上げた PyPy 紹介 を見てください。 なんのためのネタ? このエ
Pythonでスリープソート書いてたら multiprocessing の最小構成サンプルになった - mizchi log
Pythonなら短く書ける。スリ〜プソ〜トはネタとして面白いが実用性は皆無。 だけど、multiprocessingはガチで実用的なモジュール。(Python2.6以降の標準ライブラリ) #!/usr/bin/env python from time import sleep from multiprocessing import Pool from random import randint num = 20 def sleep_sort(n): sleep(n) print(n) Pool(num).map( sleep_sort, [randint(1, num) for i in xrange(num)] ) Pool#mapの返り値はそれぞれの実行結果のリストなんだけど、sleep sortでは役に立たないので割愛 常識を覆すソートアルゴリズム！その名も"sleep sort"！
C/APIで文字列操作をして色々ハマったこと - YAMAGUCHI::weblog
はじめに こんにちは、Python界の情弱です。最近C/APIを使ってモジュールを書くブームがきているわけですが、まあPythonで文字列を扱うのが大学3年の嫌々やった演習以来ということで全然出来ない。というわけでハマったところをメモしました。特にメモリ周りはC/APIならではのポイントも有りました。 危険なコード 次のコードが色々と危険をはらんでいるのでキチンと対応する必要があると教わった。 buffer = realloc(buffer, old_size * 2); reallocに関する注意 失敗する可能性 reallocは失敗するとNULLになってしまい、その時realloc前にmallocされた領域は解放されないままになってしまうので、freeする術がなくなってしまう。必ず戻り値をチェックすること。まして上記のようなコードにしてしまうと、もとのアドレス触れなくなってしまうので絶
メソッドオブジェクトの不思議とid()の落とし穴 - atsuoishimoto's diary
さて、@aroma_blackさんがこんなスクリプトで悩んでおられたのである。 class C(object): def foo(self): pass c = C() print id(c.foo) == id(c.__class__.foo) print c.foo is c.__class__.foo @aroma_blackさんはメソッドオブジェクトがどこに隠れているのか調べていたようだ。この二つのprint文で出力される結果はおわかりだろうか。 c.foo is c.__class__.foo まず、二番目のprint文から見てみよう。 c.fooは見た通り、Cクラスのインスタンス c からメソッド foo を取得する式である。 >>> c.foo <bound method C.foo of <__main__.C object at 0x02A8B3B0>> c.fooでは、
Python でファイルを直接イテレータとして使うのが適切でない場合 - methaneのブログ
Pythonでサブプロセスと対話する - 西尾泰和のはてなダイアリー Python のファイルは、通常のファイルの読み込みの効率を考えて大きめ(8192バイト)のバッファリングを行っているので、ソケット通信やパイプで問題になるケースがある。 問題になるケースの一つがファイルオブジェクトをイテレータとして使って行単位の処理をする場合で、 for line in fileobj: do_something(line) のようなコードを書くと、実際には fileobj の中にあるCのFILEから一気に読み込み、その中から改行文字を探して切り出していくので、8192バイト読み出せるかファイルの終端に到達するまでブロックしてしまう。 一方、 file.readline() は、改行を見つけるまで getc() を繰り返すか、(UnixでUniversal Newlineを使わない場合は)fgets
is演算子のふしぎ - atsuoishimoto's diary
Pythonには、二つのオブジェクトが同じオブジェクトかどうか判定する is演算子というのがある。==演算子とちょっと似ているが、==演算子は二つのオブジェクトの値が等しいかどうかを判定し、is演算子は値に関わらず異なるオブジェクトが指定されればFalseを返す。 >>> list1 = [1,2,3] >>> also_list1 = list1 >>> list2 = [2,3,4] >>> equal_to_list1 = [1,2,3] >>> list1 is also_list1 # list1 と also_list1 は同じオブジェクト True >>> list1 is list2 # list1 と list2 は異なるオブジェクト False >>> list1 == list2 # list1 と list2 は異なる値を持つ False >>> list1 is
Python 2からPython 3への移行 - YAMAGUCHI::weblog
はじめに こんにちは、Python界のNintendo 3DSです。結婚式２次会で当たりました。さてPython 3.2がリリースされて、Python 3.3のリリーススケジュールが発表され、いよいよPython Language Moratoriumも終了が近づいてきました。 PEP 3003 -- Python Language Moratorium 「Python 3.1が出てから最低２年間は言語仕様やビルトインは変更しませんよ」というPEP。Python 3.3からは再び更新あり。 Python 3.1 Release Python 3.3 finalは2012年8月18日リリース予定 C/APIではもうモラトリアムは破られているということなので、ぼちぼちPython 3への移行を考えていたらいくつか記事があったのでご紹介します。 参考 zzzeek : zzzeek's Guid
Pythonで学ぶ「詳解 UNIXプログラミング」(その12) 第12章 高度な入出力 - atsuoishimoto's diary
12.1 ブロックしない大量のwrite import os, sys, fcntl buf = sys.stdin.read() print >>sys.stderr, "read {0} bytes".format(len(buf)) wrote = 0 fno = sys.stdout.fileno() val = fcntl.fcntl(fno, fcntl.F_GETFL, 0) fcntl.fcntl(fno, fcntl.F_SETFL, val | os.O_NONBLOCK) # set nonblocking while True: try: n = os.write(fno, buf) except OSError, e: print >>sys.stderr, "errno: {0}".format(e.errno) continue else: print >>s
nose まとめ3 (nose のsetup/teardown) - kuma8の雑記帳
はじめに nose の基本的な使い方その２です。 setup/teardown の動作についてです。 役割 テストを行う上で、あらかじめデータを用意しておく必要あったり、 テスト後に作成したデータを削除するときに利用します。 詳しくは、他のブログなどをみましょう。 書き方 nose では、パッケージレベル、モジュールレベル、関数レベルで定義することができます。 パッケージレベルでは、 __init__.py に setup/teardown を定義します。 モジュールレベルでは、テスト用モジュールに setup/teardown を定義します。 関数レベルでは、 nose.tools.with_setup に関数ごとに呼び出したい、setup/teardown をデコレータに渡します。 呼び出し順 テストパッケージ内に上の3つのレベルで、 setup/teardown が定義されていると呼
Pythonで学ぶ「詳解 UNIXプログラミング」(その10) 第10章 シグナル - atsuoishimoto's diary
10.1 SIGUSR1とSIGUSR2を捕捉する簡単なプログラム import signal def sigusr(signo, frame): # one signal handler for both signals print "received", "SIGUSR1" if signo == signal.SIGUSR1 else "SIGUSR2" signal.signal(signal.SIGUSR1, sigusr) signal.signal(signal.SIGUSR2, sigusr) while True: signal.pause() 10.2 シグナルハンドラからの再入不可能な関数の呼び出し import signal, pwd def my_alarm(signo, frame): print "in signal handler" rec = pwd.ge
Python Insider
It’s 🪄 finally 🪄 the final 3.14 release candidate! https://www.python.org/downloads/release/python-3140rc3/ Note: It’s another magic release. We fixed another bug that required bumping the magic number stored in Python bytecode (.pyc) files. This means file .pyc files created for rc2 cannot be used for rc3, and they’ll be recompiled. The ABI isn’t changing. Wheels built for rc1 should be fine fo
Pythonで学ぶ「詳解 UNIXプログラミング」(その8) 第8章 プロセス制御 - atsuoishimoto's diary
8.1 fork関数の例 import sys, os, time glob = 6 buf = "a write to stdout\n" STDOUT_FILENO = sys.stdout.fileno() def main(): global glob var = 88 # automatic variable on the stack os.write(STDOUT_FILENO, buf) # we don't flush stdout print "before fork" pid = os.fork() if pid == 0: # child glob += 1 # modify variables var += 1 else: # parent time.sleep(2) print "pid={0}, glob={1}, var={2}".format(os.getp
[python] 優れた Python プログラマを見分ける10+1の質問 - methaneのブログ
お詫びと追記 この記事は 「優れたPerlプログラマを見分ける27の質問」の日本語訳 - Islands in the byte stream を見て書いたものですが、僕が Perl について無知なのとタイトルに釣られたために、で元の問題の意図を汲み取れていませんでした。 その言語に取って重要な基本事項を理解しているかのチェックリストとしては、以下の質問は不適切です。 お詫びに、真面目に Python の基本事項に対するチェックリストをつくろうと思います。 質問 一般 バージョン管理をしているか テストを書いているか 1つ以上のオープンソースプロジェクトのコミッタであるか Python言語について list, tuple, dict, deque, heapq, bisect がどういう場面に適しているか説明しなさい ジェネレータの利点を説明しなさい Python 2 プロジェクトの Py
![[python] 優れた Python プログラマを見分ける10+1の質問 - methaneのブログ](https://cdn-ak-scissors.b.st-hatena.com/image/square/5ff51f2ad0894c65eb167d7712a3112cda8bf889/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F12704591929890341541%2F12704591929890341604%2F1348037597)
シンプルで覚えやすい仕様，パワフルなPythonのWebアクセスモジュール request | TRIVIAL TECHNOLOGIES on CLOUD
みんなのIoT/みんなのPythonの著者。二子玉近く160平米の庭付き一戸建てに嫁/息子/娘/わんこと暮らしてます。月間1000万PV/150万UUのWebサービス運営中。 免責事項 プライバシーポリシー Pythonには「後方互換性を大切にする」というモットーがあって，時にはそれが裏目に出ることがある。PythonでWebにリクエストを送る時の手法は，目的に応じて複数存在するが，これも後方互換性を守るがために起こっている現象といえる。当初はシンプルな機能を持つモジュールが利用されていて，その後より高度な機能を持つモジュールが追加されたのだが，後方互換性を守るために古いモジュールが残されているのだ。 たとえば，普通にhtppでGETリクエストを送って結果を取得するなら簡単で from urllib import urlopen src = urlopen('http://www.exam
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://www.freia.jp/taka/blog/753
https://www.freia.jp/taka/blog/752