ØMQ(zeromq)について調査する。
ØMQ(zeromq)について簡単に調査したのでメモ。元ネタはØMQ - The Guide。 概要 N-N通信を実現する、socket API風軽量メッセージングライブラリ。 自動的な再接続や、メッセージのキューイングを行ってくれる。 複数のメッセージングパターンと呼ばれるものを組み合わせることによって、柔軟なメッセージ配信を行うことができる。 ライブラリについて socket APIライクなC APIを持つ。以下socketは、zeromqのsocketを指す。 zeromqはコンテキストというものを通じて使う。1コンテキストに、I/Oスレッドが1つ割り当てられる。基本1プロセスに1コンテキストでOK。複数のcontextを持つことはできるし、その場合は同じ個数のI/Oスレッドが走る。 zeromqのsocketは、プロセス内通信(スレッド間通信など)、プロセス間通信、TCP、UDPマ
urllib.URLopenerのエラーを詳しく検出する - Pythonを書く
タイムアウトの設定についてはPython 2.6以降urllib.urlopenerのオプション引数でサポートされるようになりました。後ほど書き直します。 urllib.URLopenerはすべてのエラーをIOErrorで返します。except文はひとつで済むのですが、DNSのエラー、タイムアウト、URLの不正形式からHTTPサーバにおけるNotFound、認証要求、リダイレクトまで全部一緒に扱われてしまいます。エラーの内容によって処理を振り分けたい場合、error valueを取って調べることになります。 e.errno e.strerror e.args ============== ========== ========================================= 'url error' '...' ('url error', '...') 'socket er
python urllib2でタイムアウトのハンドリング | Go for it!
ここ数日blog.mitsukuni.org（このサイトのことです）の調子が悪い。httpdは立ち上がってるのに応答しないことがしばしばあるようで、Google Analyticsのpage viewが下方向に張り付いたままになっていた。 自作の死活監視プログラムを書いて置いて数分起きに実行しているのだが、どうもうまく機能していない模様。 ↓こんなの。 #!/usr/bin/env python import os import urllib2 url='http://blog.mitsukuni.org' try: urllib2.urlopen(url) except Exception, e: print 'Restart httpd cause hanged up' os.system('/etc/init.d/httpd restart') 実は、これだとソケット
Programming UNIX Sockets in C - Frequently Asked Questions: クライアントとサーバ(TCP/SOCK_STREAM)両方に関する質問
Previous Next Table of Contents 2. クライアントとサーバ(TCP/SOCK_STREAM)両方に関する質問 2.1 相手側のソケットが閉じられたことをどうやって知ることができますか? Andrew Gierth 氏 ( andrew@erlenstar.demon.co.uk) より: 私の知る限り… 相手側が (SO_LINGER を使ったややこしいことをしないで) close() するか終了したとすると、こちらの read() の呼び 出しは 0 を返すはずです。同じ場合で、write() 呼び出しで何が 起こるかは、もうちょっとわかりづらいです。直後の呼び出し時ではな く、その次の呼び出し時にEPIPE が返るでしょう。 もし相手が再起動するか l_onoff = 1, l_linger = 0 を設定して から閉じたとすると、read() からは(
UDP hole punching*1 - うっくつさん本を読む。
pythonで書いてみた。 普通のFW越しのクライアント(C)・サーバ(S)通信では、C-->|FW|-->Sというように、クライアントからサーバへ通信するところから始まる。その際、FWはCとSの該当ポート間での通信を通すよう設定される。 ここまでは当たり前。TCPとは違いUDPではコネクションを持たないため、UDPでC-->|FW|-->Sと繋いだ場合、FWはCの該当ポートへの全ての通信を通すよう設定される。つまり、C-->|FW|-->Sというように、クライアントがサーバへ通信している間ならば、C<--|FW|<--Xというように、S以外の外部ノードからの通信を受け付けることができる。 これをUDP hole punchingと呼ぶ。*1 サンプルコードは以下に。 import select import random import time import sys import re
2009/09/18 おおたに@アリエルネットワーク PythonとTwistedで始める 非同期プログラミング プログラミングはそれ自体が楽しい 自己紹介 ✤ アリエルネットワーク：http://www.ariel-networks.com/ ✤ あ��
2009/09/18 おおたに@アリエルネットワーク PythonとTwistedで始める 非同期プログラミング プログラミングはそれ自体が楽しい 自己紹介 ✤ アリエルネットワーク：http://www.ariel-networks.com/ ✤ あすなろblog：http://blog.pasonatech.co.jp/ootani/ ✤ 個人のblog：http://blog.liris.org/ ✤ Mac好き ✤ Python好き コンピュータは待ちが一杯 ほとんどが待ち状態 スレッドにより効率化 状態が変化したときだけ処理 Network Programing Style 同期型 非同期型 •ブロッキングIO •処理が完了するまで待つ •ノンブロッキングIO •イベント駆動 •APIをコールするとすぐに 処理が戻る。 •ChromeやWeaveは非同期 処理が高速化に寄与 同
ソケット通信をスレッドで処理してみる - 二十代は模索のときブログ
Python Memo以前に作った簡単なソケット通信を改造して、サーバー側の処理をスレッドに処理させることにする。こうすることで、複数のクライアントからの要求を同時に受け付けることができる。simpleserver.pyを改造したthreadserver.pyを作成する。clientは引き続きsimpleclient.pyを作成する。simpleserver.pyの実行結果を見ると、途中から新たなクライアントが接続してきているのが分かる。各スレッドは、クライアントから空白文字列を受信すると廃棄されるようにする。threadserver.py import socket, threading, time host = '' port = 15000 s = socket.socket(socket.AF_INET, socket.SOCK_STREAM) s.setsockopt(socke
Python/Snippet/ネットワーク – アクセンスのおまけ
import socket sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM) sock.settimeout(10) try: r = sock.connect(('127.0.0.1', 12345)) sock.send('test message') except socket.error, e: print 'Error: %s' % e import socket sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM) sock.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1) sock.bind(('127.0.0.1', 12345)) sock.listen(1) try: while True:
PHP: file_get_contents - Manual
file_get_contents( string $filename, bool $use_include_path = false, ?resource $context = null, int $offset = 0, ?int $length = null ): string|false この関数は file() と似ていますが、 offset で指定した場所から開始し length バイト分だけ ファイルの内容を文字列に読み込むという点が異なります。 失敗した場合、file_get_contents() は false を返します。 file_get_contents()はファイルの内容を文字列に読み込む 方法として好ましいものです。もしOSがサポートしていれば パフォーマンス向上のためにメモリマッピング技術が使用されます。 注意: 空白のような特殊な文字を有する URI をオー
Pythonã®ã‚½ã‚±ãƒƒãƒˆã‚’利用ã—ã¦ãƒ—ãƒã‚シサーを介ã—ã¦RESTã‚ - WABI
Pythonã®ã‚½ã‚±ãƒƒãƒˆã‚’利用ã—ã¦ãƒ—ãƒã‚シサーを介ã—ã¦RESTã‚
ＣＧＩ（Perl）でHTTPのＰＯＳＴ型で他サイトにアクセスして、内容を取得する方法 - ウィリアムのいたずらの、まちあるき、たべあるき
ウィリアムのいたずらが、街歩き、食べ物、音楽等の個人的見解を主に書くブログです（たま～にコンピューター関係も） ＰＯＳＴ型でＷｅｂアプリとしてアクセスするということについて、かなり書いているけど、ＰＨＰについては、ここにかきましたけど、Perl（ＣＧＩ）では？というのについては、書いてないので、今日取り上げてみました。 なお、JAVAでやる場合については、ウィリアムのいたずらのホームページの ここ http://www.geocities.jp/xmldtp/jv_post.htm VC++は、あ、Ｇｅｔ型しかかいてないけど、それについてはここ 今回、ここに書いてあることにインスパイアされて、作ってみました。 こんなかんじ。 #!c:/perl/bin/Perl.exe use Socket; $HOST = '127.0.0.1'; $PORT = '80'; $PATH = '/cgi
socket+selectを使った多重IOサーバ - Konnichiwa, A doumo
Echoサーバ/クライアントを通してサーバプログラミングを極める select module Pythonライブラリリファレンスにはselectモジュールの紹介はありますが、簡単なスクリプト例や詳しい使い方がありません。 selectは多重IOをサポートする機構で並行サーバでは欠かせないテクニックのひとつです。ですので、簡単な例をここで示したいと思います。 Pythonのselect.select()はCのAPIと若干異なっています。戻り値にディスクリプタ数を返すのではなく、書き込み、読み込み、例外、それぞれのディスクリプタをリストとして返します。Cより少しだけ扱いやすいです。 ↑ this script いまのところかなり手抜きをしてます。受信側しか多重化してません。 （はじめはuserを使って、データを管理しようとしていたのですが、めんどくさくてやめました。なのでいまのところuser使
ソケットプログラミング HOWTO — Python v2.6.2 documentation
概要 ソケットはそこかしこで使われているが、最大級に誤解されている技術でもある。 この文書はソケットの全体像を俯瞰しており、チュートリアルとしてはあまり役に立たない。 実際に動くモノを完成させるには、他にもやらなければいけないことがあるからだ。 この文書はソケットの微妙なところ (たくさんある) まではカバーしていないが、 恥ずかしくない使い方ができるようになる程度の情報は得られるはずだ。 ソケット¶ ソケットはそこかしこで使われているが、最大級に誤解されている技術でもある。 この文書はソケットの全体像を俯瞰しており、チュートリアルとしてはあまり役に立たない。 実際に動くモノを完成させるには、他にもやらなければいけないことがあるからだ。 この文書はソケットの微妙なところ (たくさんある) まではカバーしていないが、 恥ずかしくない使い方ができるようになる程度の情報は得られるはずだ。 INE
17.2 socket -- 低レベルネットワークインターフェース
17.2 socket -- 低レベルネットワークインターフェース このモジュールは、PythonでBSD ソケット インターフェースを利用する ために使用します。最近のUnixシステム、Windows, MacOS, BeOS, OS/2な ど、多くのプラットフォームで利用可能です。 注意: いくつかの振る舞いはプラットフォームに依存します。これはオペレーティングシステム のソケットAPIを呼び出しているためです。 C言語によるソケットプログラミングの基礎については、以下の資料を参照して ください。 An Introductory 4.3BSD Interprocess Communication Tutorial (Stuart Sechrest), An Advanced 4.3BSD Interprocess Communication Tutorial (Samuel J. Le
Pythonでネットワークプログラミング(5) - 理想のユーザ・インターフェイスを求めて
TCP/IPプロトコルでのネットワークプログラムをPythonで書くための練習。 今回の検討項目 前回（http://d.hatena.ne.jp/Megumi221/20110412 ）までに、クライアント-サーバ型の簡単な計算プログラムを作成した。計算プログラムでは、サーバプログラムは、送られてきた数式をevalして値を送信するだけだったが、今回はもう少しサーバ側の処理が重い場合の実装を考えてみる。 具体的には、サーバプログラムで数十分かかる計算を実行することにする。計算プログラムはあらかじめ別に作成しておき、その実行モジュールを外部プロセスとしてPythonプログラムから起動する。 外部プロセスの起動方法としては以下を参考に。 参考サイト 試験運用中なLinux備忘録 Pythonで外部プロセスを起動して出力と戻り値を処理する 外部プロセス実行プログラム 前回の計算プログラムをベース
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
SocketServer – ネットワークサービスを作成する - Python Module of the Week
programming/python/socket,select - PukiWiki