1000万件オーバーのレコードのデータをカジュアルに扱うための心構え - joker1007’s diary
自分が所属している会社のメンバーの教育用資料として、それなりの規模のデータを扱う時に前提として意識しておかなければいけないことをざっくりまとめたので、弊社特有の話は除外して公開用に整理してみました。 大規模データ処理、分散処理に慣れている人にとっては今更改めて言うことじゃないだろ、みたいな話ばかりだと思いますが、急激にデータスケールが増大してしまったりすると環境に開発者の意識が追い付かないこともあるかと思います。 そういったケースで参考にできるかもしれません。 弊社は基本的にAWSによって運用されているので、AWSを前提にした様なキーワードやサービス名が出てきます。後、句読点があったり無かったりしますが、ご容赦ください。 追記: 社内用の資料の編集なのでかなりハイコンテキストな内容だから誤解するかもしれませんが、これらはそもそもRDBの話ではありません。(関係無くは無いけど) 1000万オ
『100日後に死ぬワニ』が完結した。本編自体は割と楽しく読んでいて、ラストもよい終わりかただったなと思っていたのだが、その直後に発表された怒涛のグッズ展開を見て完全に覚め、配偶者が「家の空気が汚れるから黙れ」と怒りだすくらいの大批判を繰り広げてしまうこととなった。 ということで昨日からブクマにやさぐれたコメントを投下していたのだけど、一方で「コンテンツで儲けるのの何が悪いんだ」的な話も出てきている。増田でも当選していた。 anond.hatelabo.jp せっかくご指名いただいたので、何が気に食わないかを以下に書く。 死を利用して金儲けをする浅ましさ のっけから例え話で危なっかしい限りだけども、例えばずっと見てきた猫のブログがあり、その猫の名前がミーちゃんだとして、ある日その子が死んだとする。こちらは哀しみにくれて、いままで読者として積み重ねてきた記憶を振り返り、猫の冥福を祈り、その死を
ソフトウェアエンジニアとしての能力を高める方法について考えてみた - joker1007’s diary
早朝の寝る前ぐらいの時間にぼやっと下記の様なツイートしたらちょっと反応を貰ったので、取り留めは無いが自分なりに考えていることを書いてみる。 人を育てるのも仕事の内というのは完全にその通りなんだが、そこにドキュメントや本があるから読みます、触って作ってみます、生きたコードを読みます、以外に学ぶ方法なんかねえし、知らねえよ。ただやればいいだけの事に説明も何も無いんだよな……。マジ分からん……。— joker1007 (アルフォートおじさん) (@joker1007) March 2, 2023 タイトルは雑に書いたけど、能力を高めるというと範囲が広過ぎるので、技術的な意味でできる事が増える、ということをテーマとして話をしていこうと思う。基本的に自分の考え方の話なのでそこは御留意ください。 ツイートした通りで、状況や対象に依って割合は変わるかもしれないが基本的にそのためにやることは3つしかないと
NHKと私 十年ほど前、引っ越しをした新居でNHKの集金人に居座られたことがある。 当時の私は一人暮らしで、オートロックつきのマンションに住んでいたのだが、集金人は何らかの方法でエントランスを突破してきたのか、突然玄関前に現れた。眼鏡をかけた真面目そうな中年男だった。受信機があるなら契約をしてくれと言われたが、テレビは当時持っていなかったし、車も売ったばかり、とある事情で携帯電話も持っていなかったので、受信設備はカーナビワンセグ含め何も持ってない。が、これを集金人は嘘だと判断したようだった。携帯がないと言ったあたりで、目の色が変わった。 「いまどきあなたのような若い人が携帯電話もないなんて、信じられない。テレビも本当は持ってるんじゃないの？」 そこから先は押し問答である。何も持っていないと説明する私と、本当はあるはずだ、嘘をつくなという集金人。一人暮らしだと分かって高をくくりだしたのか何か
パーフェクトRails著者が解説するdeviseの現代的なユーザー認証のモデル構成について - joker1007’s diary
最近、パーフェクトRuby on Railsの増補改訂版をリリースさせていただいた身なので、久しぶりにRailsについて書いてみようと思う。 まあ、書籍の宣伝みたいなものです。 数日前に、noteというサービスでWebフロント側に投稿者のIPアドレスが露出するという漏洩事故が起きました。これがどれぐらい問題かは一旦置いておいて、何故こういうことになるのか、そしてRailsでよく使われるdeviseという認証機構作成ライブラリのより良い使い方について話をしていきます。 (noteがRailsを使っているか、ここで話をするdeviseを採用しているかは定かではないので、ここから先の話はその事故とは直接関係ありません。Railsだったとしても恐らく使ってないか変な使い方してると思うんですが、理由は後述) 何故こんなことが起きるのか そもそも、フロント側に何故IPアドレスを送ってんだ、という話です
増田へのお返事（Mrs.GREEN APPLEの『コロンブス』について） - lady_jokerのはてなブログ
前段 Mrs. GREEN APPLEの『コロンブス』のMVが炎上したのを機に、以下の増田が書かれた。 anond.hatelabo.jp それに私は以下のコメントをした。 【追記2】Mrs.GREEN APPLEの MV炎上はおかしい ラス・カサスの『インディアスの破壊〜』辺りを読んでればコロンブス以降の入植者がどれほどおぞましい虐殺を行ったかが分かるし、人類全員が考えるべき暗部を能天気なPVにして上げている姿勢は私は心底不快だったよ 2024/06/13 23:12 b.hatena.ne.jp それに対し、増田で以下のコメントが書かれているのを発見した。 anond.hatelabo.jp 入植者の連中がおぞましかったら人類全員が「考えるべき」なのはなぜ？ 「考えるべき」ってのは具体的に何についてどんな思考をすることなの？ 結論としてどんなアウトプットを得るの？ 抜粋部分は一部であり
MacBook Proを捨ててThinkpad T460sを買ってgentooを入れた - joker1007’s diary
英字キーボード配列にできて開発ユースに耐えうるノートPCがとても選択し辛い昨今、なんとなく安牌ポジションだったMBPについにさよならしました。 元々、Macを好んで使っていたというより、解像度が高くて英字配列にできて電池の持ちが良いというノートPCがMBPだっただけで使ってたのですが。 一番大きな要因がコンテナの利用頻度が増えて開発環境も含めてDockerを使う様になったので、Macだとどうにも面倒だという点です。 docker-machineのデフォルトとかdocker for Macのデフォルトが遅過ぎて話にならないし、dinghy使ってもdocker-sync使っても微妙でかつ面倒くさい。 普通にLinux上で直接動かせるなら、無駄な苦労だと思って、まず開発用PCをLinuxにしようと決めました。 そしたら新しいMBPが30万越えるのに、一世代前のCPUとメモリでドヤ顔してくるわ、キ
開発環境がLinuxに戻ってそれなりにこなれてきたので現在の環境について書く - joker1007’s diary
Macを捨ててThinkpadにGentooを入れて開発環境としてから2ヶ月が過ぎた。 世の中にはMacから離れようとしてThinkpadを買ったら、矢印キーボード押しにくいとかタッチパッドがクソなので、Macに戻っていった人も居るみたいですが、私としては至極快適に過ごしております。 そもそもThinkpadのタッチパッドは基本無効化するものなのでどうでもいい。まあそのスペース邪魔なんだよ、とは思いますがw Wi-Fiの無効化キーを誤爆するという危険があるらしいが、Gentooだと頑張って設定しないとそういう特殊なキーはそもそも動かないので、そんな危険もなく安全ですね。 Gentoo入れてタッチパッドを無効化すれば、Windows10というOSも使わなくていいし、全て解決するんではないでしょうか。 前置きはこのぐらいにして、色々と使うものが安定してきたので今の環境について書いていきます。
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
『100日後に死ぬワニ』に激怒 - lady_jokerのはてなブログ
NHKとN国と私 - lady_jokerのはてなブログ