[MySQL][Python]8000万レコードをInsertする | Momentum
概要 ・とある物件で8000万弱のレコードを新規のDBに効率的にぶち込む方法を考える必要に ・MySQL(Amazon RDS) + Python(mysql.connector)を想定 ・mysql.connector + pythonについては拙文ながら(http://nekopuni.holy.jp/?p=927)に書いております。 ・コミットの位置には気をつけよう + Multiple Insert最強ねというお話。 方法その1 まずは最初にやった方法。1レコードごとにInsertしてコミットしていく方法。 今までDB関連でやったコードはレコード量も大したことなかったので以下の方法でも特に問題なかった。 具体的な環境としてはテキストデータ(csv)を読み込み、それをDBにInsertしていくというもの。 csvの中身は日付(DATE)とデータ値(VALUE)がカンマ区切りになってい
[jQuery]日付・時刻のフォーマット・整合性をチェックするプラグインを作ったよ » TECH Matari
申し訳ございません。 只今メンテナンス中です。
Pythonでの日付関連処理
pythonの日付関連の操作メモです。 pythonは、標準でdatetimeモジュール、calendarモジュール、timeモジュールに日付関連の操作が提供されています。まずは、pythonの標準モジュールでの日付処理をまとめてみます。 １．標準モジュールを使った日付処理 現在の日付を得る from datetime import date date.today() # datetime.date(2009, 7, 8) from datetime import date import time date.fromtimestamp(time.time()) # datetime.date(2009, 7, 8) 現在日時を得る from datetime import datetime datetime.now() # datetime.datetime(2009, 7, 8, 22,
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
