[B! http][Python] Automatorのブックマーク

http-parser と picohttpparser との比較 - methaneのブログ

h2o Advent Calendar 2014 の記事です。 Minefield は http-parser (nginx のパーサーと基本的に同じもの) を利用しているのですが、これを picohttpparser に置き換えてみます。最初は libh2o に置き換えるつもりだったのですが、まだ API が unstable でアプリに組み込む手順も確立されてないので parser だけを置き換えることにしました。まだ完成していないのですが、 Hello, World くらいは問題なく動くレベルになったので、ここまでで気づいた http-parser と picohttpparser の違いを紹介し、ベンチマーク対決もやってみます。特に置き換えを始める前は、 perf top で execute_http_parser という http-parser の関数が2%程度しかCPUを

Automator 2015/06/10

Python
http

リンク

BaseHTTPServer – base classes for implementing web servers - Python Module of the Week

BaseHTTPServer uses classes from SocketServer to create base classes for making HTTP servers. HTTPServer can be used directly, but the BaseHTTPRequestHandler is intended to be extended to handle each protocol method (GET, POST, etc.). HTTP GET¶ To add support for an HTTP method in your request handler class, implement the method do_METHOD(), replacing METHOD with the name of the HTTP method. For e

Automator 2015/01/08

リンク

Python2系でもPython3系でも簡易Web鯖をワンライナーで立てる - tututenの備忘録

背景 jsakamotoさんのMarkdownPresenterにて、 Update readme.md to work with current version of python by AlanKavanagh · Pull Request #8 · jsakamoto/MarkdownPresenter · GitHub ということに首を突っ込んでPython2系でもPython3系でも動くように模索しました。 ↓発端（英語はワカリマセン）まさか自分が Python の 2 と 3 のバージョン違いに悩まされる羽目になるとは想像もしてなかった。 2014-01-08 12:54:46 via web Can I write "One" Python code that lauching http server ("python -m SimpleHTTPServer" or "py

Automator 2014/02/09

リンク

httplib2.Httpでtimeoutを指定した場合のエラー処理 - スコトプリゴニエフスク通信

httplib2でタイムアウトを指定するには、 import httplib2 client = httplib2.Http(timeout=5) client.request("http://example.com/") のようにhttplib2.Httpの引数でtimeoutを指定する。デフォルトではリクエストがタイムアウトするとsocket.timeout例外になる。なので、例外を適切に処理するには、 import httplib2 import socket try: client = httplib2.Http(timeout=5) headers, content = client.request("http://example.com/") except socket.timeout, e: # do something pass のように書かないといけない。せっかくhttp

Automator 2009/10/04

リンク

LinkChecker

New Homepage: http://wummel.github.io/linkchecker/ Linkchecker features: - recursive and multithreaded checking and site crawling - output in colored or normal text, HTML, SQL, CSV, XML or a sit emap graph in different formats - HTTP/1.1, HTTPS, FTP, mailto:, news:, nntp:, Telnet and local file links support - restrict link checking with regular expression filters for URLs - proxy support - usernam

Automator 2009/02/03

リンク

Python/HTTP - やる気向上作戦

HTTPでデータを読み込む (gzip対応) 参考: http://www.diveintopython.org/http_web_services/gzip_compression.html import urllib2, gzip, socket, StringIO # ソケットタイムアウト時間を設定 socket.setdefaulttimeout(30) # リクエストオブジェクトを構築 req = urllib2.Request('http://example.com/') # ヘッダを追加 req.add_header('Accept-encoding', 'gzip') req.add_header('User-agent', 'MyUserAgent (+http://example.com/robot.html)') # リクエストを送信し、レスポンスを読み