Python で Twitter から情報収集 (MySQL と Python の連携) - Qiita
取得したデータを DB に格納 集めてきた Tweet データを DB に格納する部分。 MySQL 用のドライバを利用して、Python から MySQL を操作する。 Python で Twitter からの情報収集 (環境構築編) 環境構築等はこちら MySQL 用ドライバ 環境構築時にインストールしたものを利用する。 サンプルコード 実際の使用法はサンプルコードを見てもらう方が早いはず。 サンプル中の execute_sql() 関数のようにしてやると、指定したDBでSQLを実行できる。 mysql_tools.py #!/usr/bin/env python # -*-coding:utf-8-*- import MySQLdb ### Functions def main(): local_db = { "host": "localhost", "user": "root",
Facebook, Twitter, Instagram等がどうやってIDを生成しているのか まとめ - Qiita
まえがき データにIDを持たせたいとき、単純な方法としては、DBの提供するauto incrementを使う場合やUUIDを利用することがある。それぞれの方法の利点欠点は以下の通り。 データベースのauto incrementを使う場合 利点: 特別な実装が必要ない 欠点: DBを1台で運用するとデータベースがパフォーマンス・障害のボトルネックになる DBを二台にするとIDのユニークさや順序の保証が困難 UUID(v4)※1を利用する場合 利点: 分散環境で各々がIDを生成しても衝突しない IDを公開したくない場合に、推測されにくいIDを生成できる 欠点: 128ビット必要、DBのインデクシングやプログラミング言語で扱うときに不利なことがある IDから時間の情報が失われる、例えば2つのIDを比べてどちらが古い投稿か判断できない 世界の大企業がどうしてるか 調べてみると多くの企業がブログなど
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://x.com/hdtkkj/status/1869308637182939497
Kenn Ejima on Twitter: "1秒間に100万件以上INSERTするような超大量の時系列データを扱うPostgreSQLのラッパー、TimescaleDB。1ノードあたり1000億行をさばける。なるほど、久々にスカッとするセンスのいいアイデアを見た。 https://t.co/vz6NwrCc22"
Yukihiro Matz on Twitter: "「MySQLは作者の娘の名前にちなんで名付けられた」というのは知識として知ってたけど、ムーミンに出てくる「ちびのミィ」が「Little My」だと知って、いろいろ繋がった。「ミィ・シーケル」。"
GitHub - twitter-archive/gizzard: [Archived] A flexible sharding framework for creating eventually-consistent distributed datastores![GitHub - twitter-archive/gizzard: [Archived] A flexible sharding framework for creating eventually-consistent distributed datastores](https://cdn-ak-scissors.b.st-hatena.com/image/square/854238ed66c9d85b992bff605a2bcb3de632ad59/height=288;version=1;width=512/https%3A%2F%2Fopengraph.githubassets.com%2Ffef2c272383b76243fb79c00feec265d183a98d0ce815fca57be7d9140d2d0a4%2Ftwitter-archive%2Fgizzard)
Firebase - Build Extraordinary Apps
