Apache Spark™ - Unified Engine for large-scale data analyticsApache Spark™ is a multi-language engine for executing data engineering, data science, and machine learning on single-node machines or clusters.
AfterMarket.pl :: domena openinfo.co.uk
Domena openinfo.co.uk została zarejestrowana w serwisie AfterMarket.pl. Zainteresowany tą domeną? Jeśli chcesz skontaktować się z abonentem domeny openinfo.co.uk, naciśnij poniższy przycisk aby wysłać wiadomość: Kontakt z abonentem domeny » Czym jest AfterMarket.pl? To: Jeden z największych rejestratorów domen w Polsce. Dla naszych 100000 klientów utrzymujemy ponad 300000 domen. — Zarejestruj swoj
cloudpackブログ - ELBのリスナーに関するまとめ
ELBを介した場合、デフォルトでログに出力される接続元IPアドレスはELBのものになります。 しかし、大元のIPアドレスを出力したいケースに備え、その手順をまとめてみます。 1）設定したいListenerが80→80や443→80の場合 mod_extract_forwardedを導入する。 ※「MEFaccept all」の追記を忘れないようにします。 2）設定したいListenerが443→443の場合 mod_extract_forwardedを導入しても、ログに大元のIPアドレスが出力されません。 そこで、mod_remoteip-httpd22を導入します。 ※mod_remoteip-httpd22は「ttkzw / mod_remoteip-httpd22」を使わせていただきました。 ※導入の仕方は、上記サイトで示されている通りにコンパイルし、Apacheを再起動します。 2
Twitter: Slave Recoveryで再起動時にタスクを継続する - ワザノバ | wazanova.jp
https://blog.twitter.com/2013/slave-recovery-in-apache-mesos Twitterがエンジニアブログで、Apache Mesos version 0.14.1 の新機能Salve Recoveryを紹介しています。Slave Recoveryを利用すると、スレーブのプロセスが落ちてもタスク/エクゼキュータが稼働を続けることができ、また、再起動したスレーブプロセスが実行中のタスク/エグゼキュータと再接続できます。 1) Why it matters? Stateful Services 本番環境でステートフルサービスがフル稼働に時間がかかる場合があります。（例えば、キャッシュが数時間かかるなど。）また、一つのタスクが完了まで何時間もかかることも。それらのケースは、クラッシュやアップグレードによるスレーブの再起動の影響を受けます。また、シャ
The Apache Software Foundation Announces Apache™ Hadoop™ 2 - The Apache Software Foundation Blog
Foundation of next-generation Open Source Big Data Cloud computing platform runs multiple applications simultaneously to enable users to quickly and efficiently leverage data in multiple ways at supercomputing speed. Forest Hill, MD –16 October 2013– The Apache Software Foundation (ASF), the all-volunteer developers, stewards, and incubators of nearly 150 Open Source projects and initiatives, toda
Apache HTTPD: `Options -FollowSymLinks` は不完全 - ダメ出し Blog
シンボリックリンク攻撃を防ぐための Apache HTTPD モジュールの解説はこちら: Apache HTTPD: mod_allowfileowner https://fumiyas.github.io/apache/mod-allowfileowner.html 背景 ロリポップの共有 Web サービス下のサイト改ざん事件で、 攻撃手法の一つとして 「他ユーザー所有のファイルへのシンボリックリンクを自分のコンテンツディレクトリ下に作り、Apache HTTPD 経由でアクセスする」手順が利用されたらしい。 参考: http://blog.tokumaru.org/2013/09/symlink-attack.html 当社サービス「ロリポップ！レンタルサーバー」ユーザーサイトへの第三者による大規模攻撃について http://lolipop.jp/info/news/4149/#090
Apache Sparkってどんなものか見てみる（その１ - 夢とガラクタの集積場
こんにちは。 Kafkaを試している最中で微妙ですが、最近使えるのかなぁ、と情報を集めているのが「Apache Spark」です。 MapReduceと同じく分散並行処理を行う基盤なのですが、MapReduceよりも数十倍速いとかの情報があります。 ・・・んな阿呆な、とも思ったのですが、内部で保持しているRDDという仕組みが面白いこともあり、 とりあえず資料や論文を読んでみることにしました。 まず見てみた資料は「Overview of Spark」（http://spark.incubator.apache.org/talks/overview.pdf）です。 というわけで、読んだ結果をまとめてみます。 Sparkとは？ 高速でインタラクティブな言語統合クラスタコンピューティング基盤 Sparkプロジェクトのゴールは？ 以下の2つの解析ユースケースにより適合するようMapReduceを拡張
SpotInstanceとJMeterを使って400万req/minの負荷試験を行う | DevelopersIO
Apache JMeterのMaster/Slave構成 シナリオを用いた負荷試験といえばJMeterということで、使ったことがある方も多いかと思います。しかし、ほとんどの方は自分のPCを使ってやっている程度ではないでしょうか。最近は、スマホ連動のシステムが多くなってきていますので、1台のPCから負荷を掛けたとしても大した負荷試験になりません。そこで、今回はJMeterをMaster/Slaveのクラスター構成にしてドカーンと同時アクセスを行いたいと思います。 クラスメソッドの負荷試験の歴史 創業時から業務系のシステム開発が多かったことから、レスポンスは3秒以内でOKとか、ピーク時の同時ユーザは100名といった、緩い条件をクリアすれば良かったことが懐かしく思います。今は、ユーザ数・データ量・トランザクション数・トラフィック等が爆発的に増える可能性のあるプロジェクトも多く、負荷試験は必須項目
Apache Gora™ - Welcome to Apache Gora™
The Apache Gora™ open source framework provides an in-memory data model and persistence for big data. Gora supports persisting to column stores, key value stores, document stores, distributed in-memory key/value stores, in-memory data grids, in-memory caches, distributed multi-model stores, and hybrid in-memory architectures. Gora also enables analysis of data with extensive Apache Hadoop MapReduc
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch | Startup and Technology News
http://nerdanswer.com/answer.php?q=146804