Pythonでスクレイピング - Yahoo!ファイナンスから投資信託の基準価格を取得する - Qiita
この記事について Pythonとlxmlを使って、webスクレイピングでYahoo!ファイナンスから投資信託の基準価格を取得する方法を解説します。 [追記] Yahoo!ファイナンスからのデータスクレイピングは規約上禁止されているようなので、代わりの方法を利用ください。 Pythonでスクレイピング - 投信協会webから投資信託の基準価格を取得する 環境 Windows10 x64 Python 2.7.11 lxml 3.5.0 変更履歴 2016/1/16 lxml.html.parse()にurlを直接渡すようにした。urllib2のimportを無くした。 url生成の際に引数をdictに取ってからformat()で展開するようにした。 forの回し方を変更 ElementTreeからXPathで取得した要素に.encode('utf-8')する処理をあらかじめmap()でやって
5分でわかる Python を知らない人が Python の便利さを学べる記事をかいたよ | Act as Professional
昨日はJavaScript版が出たので、あまり書いたことのない Python を勉強がてら書いてみました。 Python を知らない人に Python の話をして欲しいと言われてないけど、ブログを書きました。(*1) 難しい話は抜きにしたいんだけど、抜きにしちゃうとまったく訳わかんないから簡単に説明する。 今回は Python の psp ってのを使って元ネタ同様のことを実現する。 mod_python や CGI が動くサーバなんて自分でつくらないとないだろうけど、その辺はどうにかしてもらう。 そんなこんなで、どうにかしてもらったら、 <%= と %> で囲めば動きます。 import ではじまるコードの部分とか事前に処理するところは <% と %> で囲んでください。 どうにかしてもらったサーバで example.html というファイルの拡張子を example.psp すれば良いだ
pythonのCGIでHTTP POSTの生データを取得する - とある誰かの覚え書き
バイナリ形式で送られたHTTPの生データ(Body)を取得したい場合、cgiモジュールから取得できないようなので代わりの方法を調べてみました。 結論としては、sys.stdinの内容を読み込むことで生データにアクセスすることができました。 サンプルコード import sys file = open("../test.jpg","wb") file.write(sys.stdin.read()) file.close() sys.stdin.close() # とりあえず200のステータスコードを返す print "Content-Type: text/plain" print print "Hello!" これを/cgi-bin/test.pyなどにおくと、http://localhost:8000/cgi-bin/test.pyに送信したバイナリをファイルに落とすことができます。 仕組
WSGIで作る簡単ローカルHTTP Proxyサーバ - ヒビノキロク
前提としては、 社内のWiki(仮にintra.example.comとする)には外部から直接アクセスできない ゲートウェイ(仮にgw.example.comとする)にはssh接続できる ノートPCを使っていて、頻繁にLANの内部と外部を行き来する という状況で、どこからでも社内のWikiが見られるようにしたい。 SSHのポートフォワーディングだけだと、http://localhost:8088/みたいなURLでアクセスすることになるので、リンクを辿れなかったり、VirtualHostを使っている場合はhostsを書き換える必要があったりして面倒。 SOCKSとかDynamicDNSとか調べたけどよくわからず、既存のHTTP Proxyサーバではちょうど良いものがなかったので、自分で作ることにした。 幸いWSGIには必要な部品は揃っているので、あとはそれを組み合わせるだけ。 virtual
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
