1000万件オーバーのレコードのデータをカジュアルに扱うための心構え - joker1007’s diary
自分が所属している会社のメンバーの教育用資料として、それなりの規模のデータを扱う時に前提として意識しておかなければいけないことをざっくりまとめたので、弊社特有の話は除外して公開用に整理してみました。 大規模データ処理、分散処理に慣れている人にとっては今更改めて言うことじゃないだろ、みたいな話ばかりだと思いますが、急激にデータスケールが増大してしまったりすると環境に開発者の意識が追い付かないこともあるかと思います。 そういったケースで参考にできるかもしれません。 弊社は基本的にAWSによって運用されているので、AWSを前提にした様なキーワードやサービス名が出てきます。後、句読点があったり無かったりしますが、ご容赦ください。 追記: 社内用の資料の編集なのでかなりハイコンテキストな内容だから誤解するかもしれませんが、これらはそもそもRDBの話ではありません。(関係無くは無いけど) 1000万オ
御社の事業の立ち上げの経緯や意思決定や試行錯誤のプロセスについて、もしご存知でしたら、なるべく詳しく教えてください
仕事は思い通りにいかなくて当然。失敗とカジュアルに付き合うための「絶対悲観主義」 #ミーツキャリアbyマイナビ転職 - ミーツキャリアbyマイナビ転職
「GRIT（やり抜く力）」や「レジリエンス（困難を乗り越える力）」。近年、ビジネス書を賑わせるこうした意識の高い思想に、違和感を覚えてしまう人もいるのではないでしょうか。 そんな中、「たいていの仕事は失敗する。だからこそ淡々と取り組もう」と、何とも軽やかなメッセージを発信するのが、数々の起業家たちと向き合ってきた経営学者の楠木建さんです。 楠木さんはそれを「絶対悲観主義」と称し、“普通の人向けの仕事哲学”として提唱しています。 「思い通りにならない」を前提とすることで、成功の呪縛から逃れ、心安らかに仕事ができる。 自分には野心も根性もない……と感じているあなたにこそ読んでほしい、仕事への向き合い方にまつわるお話を楠木さんに伺いました。 ▼この記事の一部は「ながら聞き」もできます。 https://voicy.jp/channel/4565/1116044 楠木建さん。1964年、東京都生ま
アラサー女子が5秒に1回はつぶやく魔法の呪文「結婚したい」。 これは「疲れたやばいマッサージ行かないと死ぬ」「ハワイ行きたい」「ぬこかわいい」「プードル飼いたい」と同義、つまりは「ストレスから解放されたい」という意味ですが、「結婚＝ストレスフリー」なわけではもちろんありません。 アラサーともなると離婚案件がぼろぼろ周りに出始めます。さくっと離婚をキメる子たちの離婚理由は「不倫」「モラハラ」がツートップですが、「いやそれ離婚すれば？」と周りが思うにもかかわらず離婚に発展しづらいのが「夫が家事をやらなすぎ問題」。 共働きの子と専業主婦の子から、夫の家事への非協力ぶりに嘆く声を立て続けに聞き、「まだ21世紀なのにこれなのか！！」と大っっっっっ変にやるせなくなったので供養したいと思います。 サプリの1巻で放置したままの洗い物をやる終電帰りの女の図。「うわーあるある」となりすぎて胃が痛くなりました。
シェルからでも重い処理というのはちょこちょこあって、例えば超デカいログファイルを移動して圧縮したりというお仕事は世界中のあらゆる場所で毎日行われていたりする。コマンドラインからでも大量の圧縮済みログファイルをいっぺんに展開したい、とか。 あるディレクトリ以下に存在するたくさんのファイルを(圧縮済みのものを除いて)全部 bzip2 圧縮したい！と思ったら、とりあえずさくっと次のようにコマンドラインで叩けばいい。 $ find . -not -name '*.bz2' | xargs bzip2 これで、まあそんなに問題なく効率的にbzip2圧縮ができる。だがしかし。 最近は複数コアのCPUが普通に転がってるし、あまつさえHyperThreadingが有効になってたりしてOSから見える論理CPU数がハンパない。普通に8とかある。その一方で複数コアを使用してくれるコマンドというのはあんまりなくて
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
カジュアル面談 逆質問テンプレ - yuiseki
女たちはもっとカジュアルに「家事離婚」すればいいよ - 妖怪男ウォッチ
ビジネスカジュアル（ビジカジ）って何？選ぶべき基本の9アイテムと参考コーデ10選
xargs を使ってカジュアルに並列処理 - たごもりすメモ
英語にも敬語がある！英語のカジュアルな表現と丁寧な表現を徹底比較！ | English Plus
