AWS CLIがS3とのトラフィックを帯域制御できるようになりました | DevelopersIO
AWS CLI単体でS3とのトラフィックを帯域制御出来るようになったため、早速使ってみました。 3行まとめ クライアント OS に依存せず AWS CLI 単体で帯域制御可能 インバウンド・アウトバウンドで同じ値を適用 設定コマンド $ aws configure set default.s3.max_bandwidth 50MB/s やってみた 環境 EC2(m4.xlarge)のAmazon Linux AWS CLI:1.14.8 S3転送に利用するオブジェクトの作成 1 GB のオブジェクトを作成します。 $ fallocate -l 1G test.dat AWS CLIの初期設定値 帯域制御用に追加された s3.max_bandwidth を除き、AWS CLI の設定値はデフォルトのままとします。 特に、s3.multipart_threshold は 8MB のため、今回試
Intel® Memory Latency Checker v3.11
Contributors Vish Viswanathan, Karthik Kumar, Thomas Willhalm, Sri Sakthivelu, Sharanyan Srikanthan Introduction An important factor in determining application performance is the time required for the application to fetch data from the processor’s cache hierarchy and from the memory subsystem. In a multi-socket system where Non-Uniform Memory Access (NUMA) is enabled, local memory latencies and cr
プログラマが知っておくべき、メモリ/ディスク/ネットワークの速度まとめ - Qiita
注: 無線ネットワークは干渉などによりこの数値より遅くなる状況も十分ありえます。 ポイント メモリからの読み込みとディスクからの読み込みはランダムアクセスで1000倍程度違う とは言え、最近はディスクも結構速い きちんと繋がれた有線ネットワークからの読み込みは、ディスクより速い つまり、ディスクから読むより、同じデータセンターのマシンのメモリから読んだほうが速い モバイルネットワークだと100キロバイトのデータでも1秒以上かかることがある メモリからの読込速度の遅さは、CPUのクロック数も10G/s程度なのと、本来はL1/L2キャッシュなどがあることを考えると通常意識しなくて良い 何故この参考値をまとめたか プログラミングをする際、どのくらいの時間でどのくらいのサイズ感の処理が出来るのかを考えられることが、ある一定規模以上のサービスを開発するときは必須条件になってくると思います。 なにより
Trickleを使って帯域制限をする - aptheia.info
ネットワーク経由で大量のデータをやりとりしたいが、メインのサービスには影響を与えたくないという場合がよくある。rsyncやscp など、大きなファイルの転送を考慮されたコマンドではネットワーク帯域を制限するオプションが用意されていることも多いが、自作のツールなどに帯域制限を実装するとなるとかなり面倒くさいことになる。 Linux で帯域制限をしたい場合、tc や cgroup を使う方法がよく知られている。ただ、「あるコマンドにネットワークが占領されないように穏やかに実行したい」というニーズに対しては大げさで、またオプションが難解だったり管理権限が必要だったりといったことから二の足を踏む感じのものだった。もっと普段使いに適したツールがないものかと探していたところ、こういったシーンではTricleがかなり有効だと言うことがわかった。 インストール Debian, Ubuntu なら公式からパ
Latency and Bandwidth
レイテンシとバンド幅 SODA Noriyuki <soda@NetBSD.org> <soda@sra.co.jp>
Synsem.com is for sale | HugeDomains
Working with hugedomains.com was a quick and easy process. We got to speak to multiple real people located in Colorado without having to wait on hold! Our only complaint was we felt we had to overpay more than this particular domain was worth, and we weren't able to negotiate it down to a level that we felt was fair. However, payment and delivery were seamless, and within a few hours we had all of
AWS インスタンス別ネットワーク帯域・InstanceStore IOPS測定 - Qiita
#!/bin/sh INSTANCE_TYPE=$(curl -s http://169.254.169.254/2014-11-05/meta-data/instance-type) yum install fio -y umount /media/ephemeral0 time dd if=/dev/zero of=/dev/xvdb bs=1M sudo mkfs.ext4 /dev/xvdb mount /media/ephemeral0 for i in `seq 0 3`;do time fio -name=random-write \ --output=/home/ec2-user/${INSTANCE_TYPE}-${i}.txt \ -ioengine=libaio \ -rw=randrw \ -rwmixread=0 \ -bs=16k \ -numjobs=16 \
Selecting a NAT Instance Size on EC2 | Azavea
We’ve been using the Amazon Web Services (AWS) Virtual Private Cloud (VPC) functionality to create an isolated and secure hosting environment for our SaaS product, HunchLab. When EC2 servers in a VPC with only private IP addresses need access to S3 (or to the Internet) the network traffic must be routed through a NAT instance. This architecture provides increased security by reducing the externa
Intel Haswell
Intel i7-4770 (Haswell), 3.4 GHz (Turbo Boost off), 22 nm. RAM: 32 GB (PC3-12800 cl11 cr2). L1 Data cache = 32 KB, 64 B/line, 8-WAY. L1 Instruction cache = 32 KB, 64 B/line, 8-WAY. L2 cache = 256 KB, 64 B/line, 8-WAY L3 cache = 8 MB, 64 B/line L1 Data Cache Latency = 4 cycles for simple access via pointer L1 Data Cache Latency = 5 cycles for access with complex address calculation (size_t n, *p; n
北森瓦版 - Crucial サーバー・デスクトップ向けのDDR4を8月より出荷
北森瓦版 - Northwood Blog (Author : 北森八雲. Since July 10, 2006.) Crucial ships DDR4 for servers, desktop modules coming in August（The Tech Report） Crucial DDR4 Server Memory Now Available（techPowerUp!） Crucial Ballistix Elite DDR4 Memory（Guru3D） Micron、コンシューマ向けを含むDDR4 SDRAMを8月より出荷（Impress PC Watch） 新Crucial Ballistix Elite DDR4メモリがゲーミング性能を劇的に向上（Crucial） Crucial DDR4 サーバーメモリ発売（Crucial） CrucialはComputex
北森瓦版 - PCI-Express 4.0のスループットはPCI-Express 3.0の2倍となる
PCIe 4.0 should see throughput increased to 64GB/sec from 32GB/sec（TweakTown） 現行のPCI-Express 3.0が32GB/secであるのに対し、PCI-Express 4.0は64GB/secとなる。 今回の話題はPCI-Expressの次世代規格―PCI-Express 4.0についての話題である。 冒頭でも述べたとおり、現行のPCI-Express 3.0のスループットは最大32GB/secであるが、PCI-Experss 4.0では最大64GB/secとなる。つまりデータリンクあたり16Gbpsの速度を有することになる。現在の所、この帯域を最大に使うのはGPUではなく、PCI-Experss接続のSSDである。SSDは帯域増大の要求が貪欲であり、ComputexでOCZがRAID 0を構築したPCI-E
02_kumon.PDF
2008 8 26 2008 1 IT 1. 2000 ( ) LSI IBM 1999 Power4 1 2 2006 Intel AMD CPU CPU X86 SMP(Symmetrical Multi Processors) 1 SMP 1 SMP CPU GPU 2. CPU 2.1. = 1960 40 Moore 1 PC CPU X86 Intel Netburst AMD CPU Netburst 2000 Pentium4 1.5GHz ( Willamet) 2004 Presscot 3.8GHz 10GHz Netburst 2006 Netburst CPU Xeon Dempsey Core2 Core2 Core2 Woodcrest 3GHz Netburst 1.5 Netburst 3.8GHz CPU 2/3 1/2 ( 1) Netburst Pe
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NVMe uses PCI Express to finally unleash the true power of NAND flash memory
How Far Can You Go With HAProxy and a t2.micro - :HIPSTER_DEV_BLOG
Blog
【パワレポ連動企画】 実測1GB/sec超! M.2 PCI Express x4接続のSSD「Samsung XP941」を試す ～システム起動は要注意
【Haswell Refresh徹底紹介(4)】M.2の実力は？ ～PCI Expressネイティブ接続SSDの時代へ～
B21 DBエンジニアのための最新HW講座 (Deep Insight About Database and Hardware) by Masaya Ishikawa
qpstudy 2014.04 ハードウェア設計の勘所
ストレージ高集積化、ネットワーク高速化の最新技術動向