[MySQL][Python]8000万レコードをInsertする | Momentum
概要 ・とある物件で8000万弱のレコードを新規のDBに効率的にぶち込む方法を考える必要に ・MySQL(Amazon RDS) + Python(mysql.connector)を想定 ・mysql.connector + pythonについては拙文ながら(http://nekopuni.holy.jp/?p=927)に書いております。 ・コミットの位置には気をつけよう + Multiple Insert最強ねというお話。 方法その1 まずは最初にやった方法。1レコードごとにInsertしてコミットしていく方法。 今までDB関連でやったコードはレコード量も大したことなかったので以下の方法でも特に問題なかった。 具体的な環境としてはテキストデータ(csv)を読み込み、それをDBにInsertしていくというもの。 csvの中身は日付(DATE)とデータ値(VALUE)がカンマ区切りになってい
デザインが出来ないエンジニアのAndroid-Bootstrap利用方法 - Qiita
Androidアプリ作成時、毎回、アイコン関連で苦悩しています。フリーのアイコン探しやライセンス確認、多機種に合わせたリサイズ作業に疲れ果てています。 もう悩みたくない。 アイコン探ししたくない。 PhotoShop使いたくない。 そんな自分が、Androidで Font Awesomeの約369個のアイコンを簡単に利用する事ができる Android-Bootstrap を導入した時のtipsです。 したいこと Androidアプリで毎回使える汎用的なアイコンが欲しい(ランチャーアイコン以外で) 全機種・解像度共通でアイコンを利用したい(画像リサイズ作業を極力避けたい) 最終的な目標 Android-Bootstrapを利用してアプリをリリースする(した) EveryEver(エブリー・エバー) 圏外でも快適なEvernoteライフを。 利用するライブラリ https://github.c
ViewPager で Volley の NetworkImageView を使うときの注意点
ViewPager の子要素は、ページが変わったときにも onLayout() が呼ばれます。 整理すると、ページが切り替わると ・新しく生成されたページ（PagerAdapter の instantiateItem() が呼ばれるところ）では onLayout(true, ...) が呼ばれる ・現在の子要素全てで onLayout(false, ...) が呼ばれる Volley の NetworkImageView （2013年11月11日）では、 @Override protected void onLayout(boolean changed, int left, int top, int right, int bottom) { super.onLayout(changed, left, top, right, bottom); loadImageIfNecessary(tru
Nexus5(Android 4.4)にはバッテリー残量をパーセント表示に変更する隠し機能があることが判明(Root化不要)。 - アンドロイドラバー
Nexus5(Android 4.4)にはバッテリー残量をパーセント表示に変更する隠し機能があることが判明(Root化不要)。 バッテリー残量のパーセント表示はカスタムROMでは当たり前のように採用されていますが、AOSPの素なAndroidではいまだに標準機能としてサポートされていません。 ところが、Android 4.4ではこの機能が隠されていて、この隠された機能はRoot化不要で使うことができるので、設定方法を紹介します。 必要な環境はadbコマンドが使える環境です。adbコマンドを手っ取り早く使うには、http://www.androidfilehost.com/?fid=9390355257214632011からplatform-toolsをダウンロードすればOKです。 ダウンロードしたzipファイルを展開して、platform-toolsフォルダを開きます。 開いたスペースでS
Nexus 5にカスタムROM Cataclysmを導入。バッテリー100%表示、ナビゲーションバーの高さ変更、起動中アプリ全終了ボタンなどカスタム多数の完成度の高いROM。 - アンドロイドラバー
Nexus 5にカスタムROM Cataclysmを導入。バッテリー100%表示、ナビゲーションバーの高さ変更、起動中アプリ全終了ボタンなどカスタム多数の完成度の高いROM。 注意事項 ブートローダーアンロックやカスタムリカバリ導入、カスタムROMの導入によって、メーカーの補償は一切きかなくなります。 また、作業中にデータが消えたり、端末が起動しなくなってしまったとしても、当方では一切責任は負えません。 全て自己責任で作業を行ってください。 準備しておくこと 1.Nexus 5にカスタムリカバリを導入しておく。私はTWRPを使っています。TWRPの導入方法はNexus5にカスタムリカバリ TWRPを導入する方法。を参照してください。 2.カスタムリカバリ導入後、現在の状態をまるごとバックアップしておく。アプリとアプリデータだけであればTitanium Backupがおすすめです。 3.RO
DELL Venue 8 Proを購入、Lenovo Miix 2 と一緒に。（個人輸入の記録）
DELL Venue 8 ProとLenovo Miix2を米Amazonで注文しました。個人輸入の記録を残したいと思います。 Venue 8 Pro ＆ Miix 2 同時購入した話 「DELL Venue 8 Pro」と「Lenovo Miix2」はともに米国で販売開始されている8インチのWindows8.1搭載タブレットPCです。 もともと日本発売を待っていたのですが、先日、日本での発売日がアナウンスされた『Acer Iconia W4-820』は、まさかの「12月中旬」（NTT-Xでは12月20日と記載）ということで、今回タブレット2機種を米Amazonで注文しました。 ちなみにキッカケをくれた「W4-820」ですが、米Amazonの商品ページが消され注文できない状態で、TOSHIBA Encoreは予約注文の状態と、いずれも購入できませんでした。 DELL Venue 8 Pro
ViewPagerで上下左右にスワイプできる画面を作ってみた - 算譜王におれはなる!!!!
久しぶりにAndroidの話題。 上下にもスワイプできるViewPagerってあるのかなーと思って探してたらドンピシャなのがあった。 https://github.com/JakeWharton/Android-DirectionalViewPager 日本語でメモを残してくださった方もいらっしゃるみたい。 ViewPagerを縦で利用する。 | 僕、Corder。 導入は簡単。jarをつっこむだけ。 で、このDirectionalViewPagerを使ってタイトルのとおり上下左右にスワイプできる画面を作ってみた。 方法：DirectionalViewPagerのスワイプ方向が異なるやつを2枚重ねる これだけです。 イメージとしてはこんな感じにしてみた。 DirectionalViewPager持ったActivity (左右にスワイプ) ├──適当なFragment ├──Directio
Android + docomo MVNO データ通信専用 SIM のセルスタンバイ＆アンテナピクト問題対策 Xposed モジュール
http://ryutaroh-yamashita.blogspot.jp/2013/12/simcell-id.html Xposed モジュールについてはこちらを参照するとわかりやすいです。 あと全然 Java 書いたことなかったですがモジュールも簡単にかけました。 まつもさんありがとうございました。 これで上手く行かなかったらまつもさんのモジュールか今までの方法で頑張ってください。 手元の環境では上手く行ってるものの、あまりテストしてません。気が向いたら試します。 まだ実験中です。 思い出話を含む経緯 自分が Android スマートフォンを使おうかなと思ったのは Galaxy Nexus が最初で、それでデータ通信専用 SIM を挿したらなんか変だから色々やってきた（ということにしておきたい）のだが Android 4.2.1 の時点で config_voice_capable が
Best Python Resources for Beginners and Professionals - Yasoob Khalid
Source Best Python Resources for Beginners and Professionals September 01, 2013 Beginner’s Delight Beginner’s guide to Python The Hitchhiker’s guide to Python Learn Python the hard way Google’s Python class Python for Beginners Python tracks at Codecademy Python Monk Best way to learn python Python Tips, tools and resources Python Koans: Learn Python through TDD LearnStreet Python course Beginner
HTTPSを使ってもCookieの改変は防げないことを実験で試してみた
寺田さんのブログエントリ「他人のCookieを操作する」には、通信路上の攻撃者がいる場合は、SSLを使っても、Cookieの盗聴を防ぐことはできるが、Cookieの改変を防ぐことはできないと指摘されています。いかにも寺田さんらしい簡にして要を得たエントリで、これに付け加えることはあまりないのですが、残念ながらまだ読んでいない人が多そうだと言うことと、より広い読者に向けて具体的に説明した方がよいだろうと考えました。 そこで、通信路上に攻撃者がいる典型例として、公衆無線LANの偽AP（アクセスポイント）があるケースを題材として、「HTTPSを使ってもCookieの改変は防げない」ことを説明します（Secure属性使うと盗聴は防げますが、改変は防げません）。長いエントリなので結論を先に書いておきます。 Secure属性がないCookieはHTTPSでも盗聴できる Cookieの改変についてはSe
dnsmasqをインストールして少し試した - 偏った言語信者の垂れ流し
内向きのDNSサーバーでdnsmasqが手軽って聞いたので、少し試していた。 環境はUbuntu12.04 Server LTS。 インストール aptでインストールする。 $ sudo aptitude install dnsmasq 起動/再起動/リロード serviceコマンドから実行すればよさそう。 $ sudo service dnsmasq {start|stop|restart|force-reload|status}/etc/hostsを編集したらforce-reloadしないと反映されないっぽい。 ホスト名の正引き デフォルトだと上位のリゾルバはresolv.confを参照してくれるのかな。 /etc/hostsにホスト名があると、それが優先される。 例えば、/etc/hostsに以下のように書かれている状態. 10.0.0.1 hogeこの状態で別のマシンからnsloo
pythonでnatsort（自然順ソート） - Python仲間募集中
python以前の記事でリストのメソッドのsortを試していたとき、自然順ソートができればいいのになぁと思っていました。自然順ソートとは、人間が見て自然なソートであり、HumanSortとかいうらしいです。 ls = ["a15", "a1", "a2"] ls.sort() print ls 通常のソートだと、辞書順に並べるので、「a1, a15, a2」という順に並びます。コンピュータ的にはこれが自然なのでしょうが、人間としては「a1, a2, a15」と並んでほしい。それが自然順ソートです。PHPだとnatsortという組み込み関数があるようですが、pythonにはありません。そこで見かけたのが、Coding Horror: Sorting for Humans : Natural Sort Orderの簡潔なスクリプトでした。以下に引用します。 import re def sort
Androidでパスワード付きZipファイルを展開する方法
2013/11/09 In-Memoryで捌く方法を追記 ライブラリ Zip4jというライブラリを使用します。 Zip4j - Java library to handle Zip files http://www.lingala.net/zip4j/ Zip4jのライセンスはApache License, Version 2.0。 Zip4j - About http://www.lingala.net/zip4j/about.php プロジェクトにライブラリを追加 buildscript { repositories { mavenCentral() } dependencies { classpath 'com.android.tools.build:gradle:0.5.+' } } apply plugin: 'android' repositories { mavenCentr
特許を出願してみた
何か便利そうな物を作ったり考えたりした人に「それ特許とったらいいよ！」と言う事があります。しかし、実際に特許を取りに行くにはどうしたらいいか分からない人が多いはず。 先日便利な物を作ったので、実際に特許を出願してみました。 1972年生まれ。元機械設計屋の工業製造業系ライター。普段は工業、製造業関係、テクノロジー全般の記事を多く書いています。元プロボクサーでウルトラマラソンを走ります。日本酒利き酒師の資格があり、ライター以外に日本酒と発酵食品をメインにした飲み屋も経営しているので、体力実践系、各種料理、日本酒関係の記事も多く書いています。（動画インタビュー） 前の記事：ミルクティーで煮た水餃子がうまい ＞ 個人サイト 酒と醸し料理 BY 工業製造業系ライター 馬場吉成 website
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Acer、Android クアッドコアプロセッサ Tegra 4 搭載 WQHD 解像度の27インチスマートディスプレイ「TA272HUL」発表（情報更新）
adakoda.com
スマフォやタブレット向けのCSSフレームワーク・CLANK
これはスゴイ！HTML5でリメイクされたスーパーマリオブラザース
IDEA * IDEA
Android開発に使える「generator（ジェネレータ）」を探す
