「はてな流大規模データ処理」を見てきた - もぎゃろぐ
KOF2008：関西オープンソース2008というイベントに来ています。 はてなの伊藤さんの講演があったので、講演メモを公開。 ＃ボクがメモした内容であって、100%言ったとおりに書いてあるわけじゃないので、参考としてご覧ください。 (続き) アジェンダ 大規模なデータ OSのキャッシュ MySQLの運用 大規模データアプリケーションの開発 データの例 はてなブックマークのデータ量：五千万件くらいのデータ量 このデータに対して何百万人がアクセスしてくる状況でどういう作りにするか レコード数 1073万エントリー 3134万エントリー 4143万タグ データサイズ エントリー2.5GB 何の工夫もなく普通にアクセスすると...200秒待っても結果が帰ってこない 大規模データの難しいところ 開発サーバで開発者が作っている時は快適に動いていても、多数の人間がアク
swap領域の拡張 - FreeStyleWiki
Linux Kernel 2.4.xにて、メモリサイズの２倍のスワップ領域がないと、 kernel:Unable to handle kernel paging request at virtual address... のようなエラーメッセージが「/var/log/messages」に吐き出され、しばらくするとシステムが不安定になることがあります。原因がこれかは分かりませんが、出会ったことがあります。 この場合は、スワップ領域を拡張します。以下を入力します。 dd if=/dev/zero of=/swapfile bs=1024 count=1600K この場合、「/swapfile」に（ファイルとして）1.6GBのスワップ領域を作成することになります。 その後、 mkswap -c /swapfile を指定することにてスワップファイルを確定させます。 swapon /swapfil
linux サーバ上のメモリの ECC 訂正回数を確認する方法 - kazuhoのメモ置き場
メモリのエラー訂正はサーバでは必須だよという話もあるけど、じゃあ実際どのくらい訂正が発生しているのか。確認するには、/sys/devices/system/edac/mc/mc*/csrow*/edac_mode が S.?ECD.?ED になっていることを確認した上で /sys/devices/system/edac/mc/mc*/csrow*/ce_count を見ればいいっぽい。 $ cat /sys/devices/system/edac/mc/mc*/csrow*/edac_mode S4ECD4ED S4ECD4ED S4ECD4ED S4ECD4ED S4ECD4ED S4ECD4ED S4ECD4ED S4ECD4ED $ cat /sys/devices/system/edac/mc/mc*/csrow*/ce_count 0 0 0 0 0 0 0 0 普段作業している
手軽にRAMディスク：SSDを超える超高速ストレージを無料で手に入れる――「RamPhantom3 LE」を試す - ITmedia D PC USER
アイ・オー・データ機器の「RamPhantom」は、メインメモリを高速ストレージとして転用するソフトウェアだ。10月8日に公開された「RamPhantom3 LE」では、32ビットWindowsが扱えない約3～3.5Gバイト以上の領域をRAMディスクとして利用できるようになり、OSの上限を超えるメモリを搭載した環境では特に有用なツールとなっている。RAMディスクの高速性を生かして、画像編集時の作業フォルダやWebブラウザのテンポラリフォルダに設定すれば、より快適な環境を実現できるはずだ。 同様の機能を提供するものとして、ERAM改やGavotte Ramdiskなど、すでに複数のソフトウェアが存在しているものの、RamPhantom3 LEは煩雑な設定をする必要がなく、初心者ユーザーでも簡単に導入できる。例えば、スライドバーでRAMディスクの容量を変更したり、IEとFirefox用に専用の
Google Chromeマルチプロセスの功罪、メモリ使用編 | エンタープライズ | マイコミジャーナル
Chromium - News and developments from the open source browser project Google Chromeを常用するようになったユーザはあるポイントに気がついたかもしれない。ChromeはFirefoxなどのブラウザと比べると多くのメモリを消費する。Chromeの特徴であるマルチプロセスアーキテクチャというブラウザとレンダリングエンジンを別のプロセスで動作させるという仕組みが、大量のメモリを消費するという状況を生み出している。 Google Chromeがシングルプロセスのブラウザよりも多くのメモリを消費することはGoogle Chrome Memory Usage - Good and Badにも説明がある。しかし計測方法に注意する必要があるほか、マルチプロセスアーキテクチャならではの利点もあるようだ。たとえばWindows X
現状では販売は不可!?禁断のメモリSPD情報書き換えアイテムが登場！
メモリモジュールのSPD情報を書き換えられるというユニークかつ危険な香りが漂うセンチュリーマイクロ製「SPD PROGRAMMER」のサンプル版がT-ZONE.PC DIY SHOPに入荷、明日から展示が始まる予定だ。 マザーボード上のメモリスロットを切り取ったような本体にはDDR/DDR2/DDR3と3本のDIMMスロットを装備。PCとの接続はUSBで、SPD情報の読み書きには同社専用のSPD編集ソフトを使用する。編集ソフトを起動するといきなり数字の羅列(SPDデータ)が表示されるため、ある程度の知識が必要となるのはもちろん、書き換えた場合は製品保証が効かなくなり、最悪動作しなくなる場合も考えられる。 なお実際にいくつかのメモリモジュールのSPD情報読み出しを試したところ、センチュリーマイクロ製はもちろんOK。UMAX製メモリモジュールはダメ、Hinix純正はOKという結果に。ただし現状
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
アキハバラ自腹日記 Part2.1 - AMDとelixirって本当に仲が悪いんだね・・・
キングストン、Phenom用に特別設計したDDR2-1066MHzのメモリーを発売