ErrorOops something went wrong! Either the site is offline or an unhandled error occurred. We apologize and have logged the error. Please try your request again or if you know who your site administrator is let them know too.
memory-configuration-scalability-blog-series
frankdenneman Follow Frank Denneman is the Chief Technologist for AI at VMware by Broadcom. He is an author of the vSphere host and clustering deep dive series, as well as a podcast host for the Unexplored Territory podcast. You can follow him on Twitter @frankdenneman Processor speed and core counts are important factors when designing a new server platform. However with virtualization platforms,
How to receive a million packets per second
Last week during a casual conversation I overheard a colleague saying: "The Linux network stack is slow! You can't expect it to do more than 50 thousand packets per second per core!" That got me thinking. While I agree that 50kpps per core is probably the limit for any practical application, what is the Linux networking stack capable of? Let's rephrase that to make it more fun: On Linux, how hard
JNuma Library
1. Silk Weaver: A Scalable Data Processing Platform JNuma library Java/ScalaでNUMA aware アクセスを実現するためのライブラリ 2012年11月に作成・公開済み https://github.com/xerial/jnuma JavaからJNI経由でNUMA APIを呼び出す 機能 特定のNUMA node （メモリ）でバッファを確保 GCの管理対象外領域なので、Numa.freeを実行した瞬間に解放される (JVMがメモリを食い尽くすのを防ぐ） Threadを特定のCPU(s)に固定する Javaにはない機能 1 3. Silk Weaver: A Scalable Data Processing Platform NUMA-Aware Data Output 実験
Riak, Elasticsearch and numad walk into a Red Hat
What starts like a joke is really a serious post about large distributed systems. This is what we run at meltwater - and while there is a lot of fun designing and administering these systems, we run into odd problems from time to time. In this case: some well-meant Red Hat memory optimisations interfering with Riak performance. There is a lot of talk around “Big Data” in the industry - and here at
Intel，Haswell世代のサーバー向け新CPU「Xeon E5 v3」ファミリーを発表。最大CPUコア数は18基に
Intel，Haswell世代のサーバー向け新CPU「Xeon E5 v3」ファミリーを発表。最大CPUコア数は18基に ライター：塩田紳二 Intelの資料にあったXeon E5 v3のダイ写真 2014年9月9日1：00，Intelは，Haswell世代のマイクロアーキテクチャを採用するサーバー＆ワークステーション向けCPU「Xeon E5 v3」ファミリー計32製品を発表した。開発コードネーム「Haswell-EP」とも呼ばれていたもので，内蔵するCPUコア数が最大18基に達するほか，DDR4メモリに対応するといった特徴を備える。 XeonブランドのCPUは，ゲーマーが積極的に選ぶような製品ではないが，2014年8月30日に発表されたハイエンドデスクトップPC用CPU「Core i7-5000番台」（開発コードネーム Haswell-E，以下同）と共通する部分もあり，ここでは概要をま
DMM inside
日本アニメ初の快挙！海外アニメ賞を受賞した『スキップとローファー』海外ライセンス部長&プロデューサーが語る、奮闘の舞台裏
Kvm performance optimization for ubuntu
This document discusses various techniques for optimizing KVM performance on Linux systems. It covers CPU and memory optimization through techniques like vCPU pinning, NUMA affinity, transparent huge pages, KSM, and virtio_balloon. For networking, it discusses vhost-net, interrupt handling using MSI/MSI-X, and NAPI. It also covers block device optimization through I/O scheduling, cache mode, and a
Linux packet-forwarding
続・PFN のオンプレML基盤の取り組み / オンプレML基盤 on Kubernetes 〜PFN、ヤフー〜 #2
サーバーさんに本気を出してもらうために憶えておきたい設定項目
cpuspeed がオンだと.... — はせがワン (@hasegaw) 2014, 5月 29 ミドルウェアのスループットを測ろうと思ったのですが cpuspeed などの設定をぜんぜんやっていませんでした。。。 経験上、チューニング過程でいじりたくなるようなパラメータを思い出してみます。 パワーマネジメントに関する設定はオフにする UEFIやBIOSにはパワーマネジメント設定がありますが、これらを無効にするとプロセッサなどが無条件で定格クロックで走り続けます。ピーク性能を高めたり瞬発力を上げるためにはパワーマネジメントはオフにします。当然ながらベースの消費電力やファンの騒音は増えますが、かわりにいくらかピーク性能の向上が見込めます。 Hyper Threading はレイテンシーとスループットのトレードオフ Hyper Threadingは、たぶん、コア内でパイプラインを取り合うから
NUMAアーキテクチャとネットワーク性能（２）－実践編 - Blog
前回、NUMAアーキテクチャがネットワーク性能に与える影響についての技術的な背景を説明した。 (前回記事) NUMAアーキテクチャとネットワーク性能（１）－説明編 - Interconnect Your Future - InfiniBand and RoCE 本稿では、実際にLinux環境でネットワーク性能を測定し、NUMAが与える影響についての事例とノウハウを紹介したい。 本稿では、最終的には下記測定例をまとめている。NUMA構成が異なる場合、性能が全く異なってしまう。極端な話、40GbE NICなのに4-5Gbpsしか出ないことになってしまう。実際には性能出ます。注意。 NUMA構成上遠い構成でのiperf性能：1プロセス(1コア) 2.00Gbps、12プロセス(6コア) 4.84Gbps NUMA構成上近い構成でのiperf性能：1プロセス(1コア) 14.7Gbps、12プロセ
NUMAアーキテクチャとネットワーク性能（１）－説明編 - Blog
NUMA(Non-Uniform Memory Access)とは Non-uniform memory access - Wikipedia, the free encyclopedia NUMA - Wikipedia NUMA（Non-Uniform Memory Access、ヌマ）とは、共有メモリ型マルチプロセッサコンピュータシステムのアーキテクチャのひとつで、複数プロセッサが共有するメインメモリへのアクセスコストが、メモリ領域とプロセッサに依存して均一でないアーキテクチャである。 複数CPUがある場合、近いメモリと遠いメモリが構成上存在し、データが置かれる場所によって、性能に差が出てしまうアーキテクチャである。 ネットワーク性能を測定する場合も、NUMA構成上不利な状態で性能測定をしてしまうと、思うような性能が出ない場合があるため、注意が必要である。本稿では、NUMA及びCPU
High Performance I/O with NUMA Systems in Linux
Fusion-io Confidential—Copyright © 2013 Fusion-io, Inc. All rights reserved. Fusion-io Confidential—Copyright © 2013 Fusion-io, Inc. All rights reserved. High Performance I/O with NUMA Systems in Linux Lance Shelton How prevalent is NUMA? ▸ All major vendors • HP, Dell, IBM, Cisco, SuperMicro, Hitachi, etc. ▸ As small as 1U ▸ 2, 4, and 8 socket systems ▸ 2 to 10 cores per socket ▸ Number of cores
Gc and-pagescan-attacks-by-linux
GC-stall and Page Scan Attacks by Linux The document discusses GC attacks and page scan attacks by the Linux kernel that can cause long GC pauses. It provides examples of GC attacks due to I/O starvation and memory starvation. Solutions proposed include configuring Linux to flush disk writes more frequently and protect JVM heap memory from swapping. Page scan attacks are caused by Transparent Huge
Dual Socket な PC の割り込みに付いて
デュアルソケット、つまりCPUを２個搭載するマザーボード限定で自作PCを楽しむ筆者の様子を晒してゆきます。 今回は、PCの割り込み（Interrupt）処理に付いて、基本的な所から Dual Socket での割り込み処理までを簡単にまとめてみます。（基本的には自分用メモで、現在編集中です） 筆者の知る割り込み処理には大きく分けて３タイプ（ソフト割り込み、ハード割り込み、NMI(強制割り込み)）が有りますが、今回の記事の対象はI/Oデバイスのハード割り込みに付いてです。余談ですがソフト割り込みは例外処理とも言われ代表的なものにNullPointerExceptionなどが有ります。 発端は 先日の記事 です。 例えば下図の様なNUMA構成でCPU1で動作しているアプリがCPU2のI/Oバスに接続されたデバイスを利用する場合、割り込みの経路やドライバとの関係に付いて詳しく調べようと思った訳で
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Intel Xeon E5 Version 3: Up to 18 Haswell EP Cores
Production Notes for Self-Managed Deployments - MongoDB Manual v7.0
lanceshelton/irqstat · GitHub - A better way to watch /proc/interrupts, designed for NUMA systems with many processors.
qpstudy 2014.04 ハードウェア設計の勘所
» Of Penguins, Rabbits and Buses Brain Matters