BigQueryをpythonから利用する。 - Qiita
bigqueryのOauth認証を生成して、p12の鍵を手に入れる。 Googleのデベロッパーコンソールの認証のところから、クライアント鍵を作る。p12という鍵ファイルができるのでそれを利用する。 pythonを利用してのアクセス。 こちらのstack over flowを参考にした。 同期(sync)と非同期(async)両方をメソッドを試した。試した環境は自分のニコニコ動画データセットの環境で試したのであまり一般性は無い。見たところ、日本語(utf-8)を用いても正常にマッチするようだ。 # !/usr/bin/python # -*- coding:utf-8 -*- import httplib2 import logging import time from apiclient.discovery import build from oauth2client.client im
スペル修正プログラムはどう書くか
Peter Norvig / 青木靖 訳 先週、2人の友人(ディーンとビル)がそれぞれ別個にGoogleが極めて早く正確にスペル修正できるのには驚くばかりだと私に言った。たとえば speling のような語でGoogleを検索すると、0.1秒くらいで答えが返ってきて、もしかして: spelling じゃないかと言ってくる(YahooやMicrosoftのものにも同様の機能がある)。ディーンとビルが高い実績を持ったエンジニアであり数学者であることを思えば、スペル修正のような統計的言語処理についてもっと知っていて良さそうなものなのにと私は驚いた。しかし彼らは知らなかった。よく考えてみれば、 別に彼らが知っているべき理由はないのだった。 間違っていたのは彼らの知識ではなく、私の仮定の方だ。 このことについてちゃんとした説明を書いておけば、彼らばかりでなく多くの人に有益かもしれない。Googleの
Web アプリケーションにおいては Python 3 への移行は簡単だという話 - methaneのブログ
Python 2 / 3 両対応のライブラリをメンテナンスしている人にとって、 Python 3 の メリットは享受できずメンテナンスコストだけが上がるつらい状況がずっと続いています。 しかし、「Python 3 への移行が大変」というのは、Python 2 を捨てるのが大変、 Python 2/3 両対応の ライブラリをメンテナンスするのが面倒という意味です。 アプリケーションであれば、 Python 2 対応のプロジェクトを Python 3 に対応させると同時に Python 2 への対応を切れるのでずっと楽ですし、さらに新規プロジェクトを Python 3 で始めるのは もっと楽です。 特に Web 系では、 (Google App Engine などの例外はあるものの)自分で Python のバージョンを 選べることが多いし、主要なライブラリも Python 3 対応ができている
Pythonを退職します - Line 1: Error: Invalid Blog('by Esehara' )
Pythonが嫌いになったの? Pythonについて嫌気が差したとか、Pythonが嫌いになったわけではありません。これからも一番好きな言語は恐らくPythonですし、実際のところ、機会があればPythonは書こうと思います。ですので、決して言語としてPythonが嫌いになったわけではありません。 そもそも、職業プログラマとして、ちゃんとしたオブジェクト志向を教えてくれたのはPythonでした。Pythonは、その言語仕様からして、出来るだけ簡潔かつ、綺麗に書けるし、Pythonについて深く知れば、プログラミングとはどういうことなのかについて、詳しく知れるほどの、わかりやすい言語であることは事実ですし、初心者向け言語として、Pythonは強く押したいという気持ちは今も変わりませんし、ずっとPythonならびにそのコミュニティに関して感謝の気持ちはずっと忘れないでしょう。 また、近年ではPy
Pytestをvim-quickrunで走らせようとしたらハマった - Blank File
PytestはPythonのテストランナーです。今まではnoseを使っていましたが、pytestの方がエラー箇所のレポートがいい感じだったので乗り換えました。 あと@pytest.mark.parametrizeが便利そうだったので。 pytestについては以下のブログなどで。 参考 pythonのテストにpytestを使ってみた - I Will Survive Python - pytestを実戦投入してみた - Qiita データ駆動テストを nose と pytest でやってみた - forest book VimでPytestを使う設定 というわけで、Vimでテストを書いてvim-quickrunで走らせられるように以下の設定を行いました。 let g:quickrun_config['python.pytest'] = { \'command': 'py.test', \'c
wsgi, Bottle, Flask の速度差 - Qiita
ISUCON の季節ですね。 ISUCON では慣習的に各言語で代表的なマイクロフレームワークが使われるのですが、 Python では今のところ Flask がずっと使われています。 Flask は確かに、簡単なサンプルアプリを書くときの見た目はマイクロフレームワークになっています。 しかし、構造的には沢山のフック、シグナルがあったりしていて、重量級の設計になっています。 Flask 本体と Werkzeug を合わせると数万行のサイズです。単なる Hello World アプリでも、数十の関数呼び出しが裏で動いています。 Bottle も、 Flask と同じくマルチスレッド対応で、スレッドローカルを使ったコンテキストスタックがある、拡張機能もあるフレームワークですが、構造は Flask よりも大分質素です。 ソースコードも1ファイル3000行代で、その分フレームワークのオーバーヘッドも
Python - ソケットとネットワーキング: 127.0.0.1という場所はない(同時接続, クライアントごとにプロセスをforkする(os module, fork method)) | Kamimura's blog
Python - ソケットとネットワーキング: 127.0.0.1という場所はない(同時接続, クライアントごとにプロセスをforkする(os module, fork method))
Metaprogramming — Python 3 Patterns, Recipes and Idioms
Note This chapter is written using Python 2.6 syntax; it will be converted to Python 3 at a later date. Objects are created by other objects: special objects called “classes” that we can set up to spit out objects that are configured to our liking. Classes are just objects, and they can be modified the same way: >>> class Foo: pass ... >>> Foo.field = 42 >>> x = Foo() >>> x.field 42 >>> Foo.field2
ディスクリプタ HowTo ガイド — Python 3.3.6 ドキュメント
概要¶ ディスクリプタを定義し、プロトコルを要約し、ディスクリプタがどのように呼び出されるか示します。カスタムのディスクリプタや、関数、プロパティ、静的メソッド、クラスメソッドを含む、いくつかの組み込み Python ディスクリプタを考察します。等価な pure Python 版やサンプルアプリケーションを与えることにより、それぞれがどのように働くかを示します。 ディスクリプタについて学ぶことにより、新しいツールセットが使えるようになるだけでなく、 Python の仕組みや、洗練された設計のアプリケーションについてのより深い理解が得られます。 定義と導入¶ 一般に、ディスクリプタは “束縛動作 (binding behavior)” をもつオブジェクト属性で、その属性アクセスが、ディスクリプタプロトコルのメソッドによってオーバーライドされたものです。このメソッドは、 __get__(),
Python を支える技術 ディスクリプタ編 #pyconjp - Qiita
Python では、特定の性質を持つオブジェクトが実装すべき一連のメソッドのことをプロトコルと呼びます (代表的なプロトコルとして イテレータプロトコル などがあります)。ディスクリプタはそのようなプロトコルの一種です。 プロパティや、メソッド(静的メソッド、クラスメソッド、インスタンスメソッド)、 super など、 Python の基本的な機能の背後にはこのディスクリプタが使われています。また、ディスクリプタは汎用的なプロトコルなので、ユーザが定義することも可能です。 ディスクリプタには大きく分けて2つの種類があります。 データディスクリプタ __get__ と __set__ の両方を定義しているディスクリプタ 非データディスクリプタ __get__ だけを定義しているディスクリプタ データディスクリプタは通常の属性アクセスと同じような振る舞いをするもので、プロパティがその典型です。
asyncio internals
May 9, 201417 likes8,285 viewsAI-enhanced description This document summarizes an introductory talk on the asyncio module in Python. It discusses the main components of asyncio including: - The event loop which acts as an implicit scheduler, putting callbacks in a queue to be run. - Coroutines, futures and tasks - coroutines are generator functions used for asynchronous code, futures represent val
)
次世代標準非同期I/Oフレームワーク asyncio (Tulip) - methaneのブログ
Python Advent Calendar 2013 の4日目です。 Python 3.4 で標準ライブラリに追加される asyncio を触ってみます。 なお、 Tulip とは asyncio のリファレンス実装のプロジェクト名です。 背景 Python はよく非同期 I/O プログラミングに使われます。 Twisted, Tornado, gevent, eventlet, pyuv などのフレームワークがあります。 これらのフレームワークの問題点として、ライブラリの再利用性の低さが挙げられます。 たとえば Twisted 用に書かれた XMPP ライブラリは、そのままでは Tornado で 利用することができません。 この問題の解決策として、良くイベントループの乗り入れが行われます。 GUIアプリケーションに組み込む場合などを考えて、多くのフレームワークが最初から イベントルー
pathlibはファイル操作の新標準！ - None is None is None
Python Advent Calendar 2013の13日目です。 Python 3.4ではasyncio functools.singledispatchなど画期的なライブラリがいくつも追加されています。それはアドベンドカレンダーで皆さんが紹介されている通りです。 そして！その中で最も重要で画期的と言えるのがpathlibなのです！ 11.1. pathlib ― Object-oriented filesystem paths ― Python v3.4.0b1 documentation まずは、主な使用例を御覧ください パスの結合（演算子オーバーロードだ！） >>> from pathlib import Path >>> p = Path('/etc') >>> q = p / 'init.d' / 'reboot' >>> q PosixPath('/etc/init.d/
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
reddit – Trac
PyCon JP 2014 - 資料一覧 - connpass
Pythonへの型アノテーション導入を目指すGuido van Rossum氏
How to automatically build your Pelican blog and publish it to Github Pages | Andrea Zonca's blog
http://www.gembook.org/ages_of_python2.html
Pyramid入門
剣と魔法のログレス いにしえの女神 〜スマホ時代の MMORPG を支える技術
