Python 3で絵文字を羅列する - minus9d's diary
Python3を使って、Unicodeに登録された絵文字を羅列して遊んでみました。この記事ではPython 3でのみ動作確認をしています。 コードポイントから文字への変換 Pythonの組み込み関数であるchr()を使うと、Unicodeのコードポイント（日本語では符号点）から文字への変換ができます。 import unicodedata print(chr(97)) # 'a' print(chr(12354)) # 'あ' Unicodeのコードポイントは現時点でU+10FFFFまで存在するので、これを総当りするとすべての文字が羅列できます。 for i in range(0, 0x110000): ch = chr(i) カテゴリ別に文字を分類 標準ライブラリであるunicodedataを使うと、文字の名前やカテゴリーなどを取得できます。 import unicodedata pri
DjangoのQuerySetが発行するSQLを確認する - メモ置き場
django-debug-toolbarを入れるのが簡単ですが、１つのクエリだけちょろっと確認したいなんて場合は、printデバッグでも十分かと。 qs = Model.objects.filter(name='test') print qs.query ちなみにdjango-tool-barを使う場合は、pipなりeasy_installなりでインストールして、settings.pyの 1. MIDDLEWARE_CLASSESに以下を追加 'debug_toolbar.middleware.DebugToolbarMiddleware', 2. INSTALLED_APPSに以下を追加 'debug_toolbar', 3. INTERNAL_IPSを追加 # for django debug toolbar INTERNAL_IPS = ('127.0.0.1',) それだけ
Django ORM の select_related, prefetch_related の挙動を詳しく調べてみた - akiyoko blog
Django ORM の QuerySet には、select_related および prefetch_related というメソッドがありますが、イマイチ使い勝手がよく分からなかったりします。 公式ドキュメントにはこう書いてありますが、 select_related works by creating an SQL join and including the fields of the related object in the SELECT statement. For this reason, select_related gets the related objects in the same database query. However, to avoid the much larger result set that would result from joining a
久しぶりにdjangoのORMのことについて書いてみる 主に `prefetch_related()` の話 - podhmo's diary
[django][python] 久しぶりにdjangoのORMのことについて書いてみる はじめに djangoのORMは正直好きじゃない。そもそも挙動が正確には把握しづらくてなんだか覚えにくいと感じる所がある。また、ドキュメントに書かれたとおりの書き方では不足することもあったりして、結局生のSQLを書かなければいけなかったりする場合もある。とは言え、ORMでできることはORMの機能を使ってやったりすると良い。 queryのチューニングについて select_related() と prefetch_related() について queryのチューニングについて書いてみようと思う。queryのチューニングと聞いて真っ先に思い浮かぶのは「N+1クエリーの除去」かもしれない。関連オブジェクトの取得が対象となるオブジェクトの個数だけ実行されるようなもののこと。これには、 select_relat
Django ORM の SQL を出力する方法まとめ - akiyoko blog
Django ORM を使っていると、どういった SQL が発行されているか、クエリの内容を出力したいときが多々あります。 SQL を出力する方法についてはいくつか方法がありますが、今回はその方法を思いつく限りピックアップしてみようと思います。 １）QuerySet の query を print する ２）DefaultConnectionProxy の queries を出力する ３）django-debug-toolbar の SQL Panel を使う ４）django-debug-toolbar の debugsqlshell を使う ５）django-extensions の shell_plus を --print-sql オプションで起動する ６）django.db.backends のログレベルを動的に変更 ７）settings.py の LOGGING を設定 まとめ
Pythonでクローリング・スクレイピングに使えるライブラリいろいろ - orangain flavor
2016-12-09追記 「Pythonクローリング&スクレイピング」という本を書きました！ Pythonクローリング&スクレイピング -データ収集・解析のための実践開発ガイド- 作者: 加藤耕太出版社/メーカー: 技術評論社発売日: 2016/12/16メディア: 大型本この商品を含むブログを見る これはクローラー／スクレイピング Advent Calendar 2014の7日目の記事です。 Pythonでクローリング・スクレイピングするにあたって、いろいろなライブラリがあるので一覧でまとめてみます。 以下の4つのカテゴリにわけて紹介します。 Webページを取得する Webページからデータを抜き出す Webページの自動操作 総合的なフレームワーク なんでこれが載ってないの？この説明はおかしい！などありましたらお気軽にお知らせください。なお、この記事はいろいろなライブラリを紹介することを目
How can I mock requests and the response?
I am trying to use Pythons mock package to mock Pythons requests module. What are the basic calls to get me working in below scenario? In my views.py, I have a function that makes variety of requests.get() calls with different response each time def myview(request): res1 = requests.get('aurl') res2 = request.get('burl') res3 = request.get('curl') In my test class I want to do something like this b
range()で生成したリストの逆順を得る - にたまごほうれん草アーカイブ
for文でrangeをインデックスにして使うときにちょっとハマったのでメモ。（Python 2.5.5） ハマってたこと リストを逆順にするreverse()メソッドを使おうとして、 a = range(10) a.reverse() #=> [9, 8, 7, 6, 5, 4, 3, 2, 1, 0] となるのに、 a = range(10).reverse() #=> None となってしまう。そのため、for文で使いにくくて困っていた。 解決方法 結局、やり方としては3種類ぐらいあるみたい。 rangeの第3引数に-1を指定 reversed(list)を使う スライスを使う rangeの第3引数に-1を指定 rangeの第3引数は生成する配列の数値の間隔。 ただし、range(10)の逆順を得ようとすると、第1,2引数もそれぞれ1引かないといけないので使いづらい。 range(10
Pythonのthreading.Timerで定期的に処理を呼び出すサンプル
Pythonはほとんど使いませんが、友人のコードを見ていて変な箇所を見つけて調べて問題にあたりました。 http://bty.sakura.ne.jp/wp/archives/71 の例で import threading def hello(): print "helohelo" t=threading.Timer(5,hello) t.start() というものがあります。5秒後に別スレッドでhello()を実行します。これは納得です。つづいて一定時間ごとに処理を繰り返すサンプルとして import threading def hello(): print "helohelo" t=threading.Timer(1,hello) t.start() t=threading.Thread(target=hello) t.start() これに違和感を覚えます。hello()の中でまた5
モデルに複数のForeignKeyを指定する - 偏った言語信者の垂れ流し
UserMessageというモデルにdjango.contrib.auth.models.UserをForeignKeyで2つ持たせたかったんだけど、単純に、 class UserMessage(models.Model): user_from = models.ForeignKey(User) user_to = models.ForeignKey(User) としたらエラーになる。親クラス側でのマッピングで名前が重複するからだろうか。 Django-jaで聞いたら即解決した。 class UserMessage(models.Model): user_from = models.ForeignKey(User, related_name='user_from') user_to = models.ForeignKey(User, related_name='user_to') とすれば
__init__.pyの役割 - Python, web, Algorithm 技術的なメモ
今，Instant Flask Web Development でflaskの勉強をしています．その本で，__init__.pyはpythonのディレクトリを表すために用いますと書かれていて，他に意味があるのかなと思い，調べました． 今回は__init__.pyの意味について軽くまとめます． __init__.pyの役割 __init__.pyの主な役割は２つあります． まず，１つ目は__init__.pyはpythonスクリプトがあるディレクトリを表す役割をなします．２つ目の役割としては必要なモジュールをimportするなどの初期化処理を記載し，初期化の役割を担う役目があります． ですが，基本はpythonスクリプトがあるディレクトリを表すだけに使われるので，空のファイルです． __init__.pyのメリット __init__.pyのメリットは異なるディレクトリのファイルをインポートす
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
