HBaseの開発者がHadoop、BigTable、分散データベースについて語るSpring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...
全文検索サーバ: これからSolrを始める人のためのApache Solr概要と便利な情報リスト集
はじめまして。 プロダクト&サービス事業部 リーダーの久保です。 今日は、当社で利用しているOSSの全文検索アプリケーションであるApache Solrについてご紹介したいと思います。 GoogleでSolrを検索しても、日本語圏のコンテンツはまだまだ少ないようです。 当社がSolrを使い始めた昨年は現在よりもさらに少なく、結構苦労しました。 今回はやや雑多な内容となりますが、新しくSolrを使う際に必要と考えられる情報をまとめてみました。 本エントリーでは、Solr1.3を対象としています。 Solr1.3が現在の安定版で、Solr1.4-devが開発版となります。 目次 Solrとは 機能一覧 実績/事例 Solrを使ったシステムの開発方法 おすすめする方 データ量/性能とハードウェア マルチコア構成 様々な検索 スケールアウト 検索と更新 Solrを始めるための情報リスト 全
Hadoopとは？｜Littel-hadoop
Hadoop（ハドゥープ）とは、Googleの分散ファイルシステムを応用して オープンソース化したプラットフォームです。 分散ファイルシステムとは、複数のマシンのディスクを組み合わせて 1つのファイルシステムとして見せる技術です。 これは1つのディスクで保存しきれないような大量のデータを並列化することで 非常に高速に効率良く処理することができるのです。 Hadoopプラットフォームは安全です。 分散ファイルシステムにより、同じファイルを異なるマシンに重複して持たせることで、 一台のマシンが故障した場合でもファイルが失われません。 つまり、耐障害性の高い・安全性の高いとプラットフォームであると言えるのです。 Hadoopプラットフォーム、始まりはGoogleから・・・ グーグルが独自に開発したMapReduceは、 同社の検索エンジンを支える中核技術であるため詳細は未公開ですが、
blogeyeの実装に学ぶ、Amazon EC2/S3でのHadoop活用術：CodeZine
はじめに こんにちは。Hadoop連載 第4回は太田さんに代わって大倉が担当します。 これまでの連載で、Hadoopによるデータ処理の概略については理解されていると思います。今回はHadoopを利用したシステムの実例ということで、ブログ分析を行う「blogeye」システムの概略と、その中でのHadoop利用法を紹介します。 また、blogeyeはAmazonが提供しているEC2（レンタルサーバ）、S3（ストレージ）をHadoopと組み合わせて利用しているので、その辺りの導入方法についても紹介します。これまでの連載Hadoop、hBaseで構築する大規模分散データ処理システムHadoopのインストールとサンプルプログラムの実行複数マシンへHadoopをインストールする blogeyeとは 「blogeye」（ブログアイ）は日本語のブログをクロール、リアルタイムに分析して、流行語と思われるもの
Amazon Elastic MapReduceを使ってみた - moratorium
Amazon Elastic MapReduceを使ってみた 2009-04-03 (Fri) 3:06 Amazon EC2 連日のEC2ネタです。本日、AmazonからElastic MapReduceというサービスがリリースされました。大規模データ処理技術が一気に民間の手に下りてくる、まさに革命的なサービスだと思います。 Amazon Elastic MapReduce Amazon ElasticMapReduce 紹介ビデオ With Hadoop, Amazon Adds A Web-Scale Data Processing Engine To Its Cloud Computer by techcrunch.com Elastic MapReduceは、Googleの基盤技術の一つであるMapReduceを時間単位課金で実行できるサービスです。MapReduceについては以
ITmedia エンタープライズ：Google検索の秘訣――第7回 教えてもらったあのサイト、何だっけ？
第7回目はWebページ上の検索する箇所と、Webページの更新日付に関する検索の秘訣です。（特集：顧客満足度ナンバーワンSEの条件） 調べたい箇所を指定する Webページはどのような構成になっているでしょうか。いろいろな分け方があるかと思いますが、Googleでは、タイトル、本文、URL、アンカーテキスト、と分類した上で、それぞれの部分を指定して検索することができます。 「intitle:」コマンド Webページのタイトルに限定して検索します。タイトルとはtitleタグで囲まれた範囲で、ブラウザのウィンドウ最上部に表示される文字列です。 「allintitle:」コマンド 指定されたすべてのキーワードがタイトルに含まれるページを検索します。 「inurl:」コマンド WebページのURL文字列に限定して検索します。 「allinurl:」コマンド 指定されたすべてのキーワードがURL文字列に
Network/BIG-IP - Memo
プロダクト ラインナップ†[edit] BIG-IP ボックス型 VIPRION シャーシ型 LTM [Local Traffic Manager] 負荷分散 GTM [Global Traffic Manager] 広域負荷分散 APM [Access Policy Manager] リモート アクセス 旧 Firepass ASM [Application Security Manager] WAF AFM [Advanced Firewall Manager] ファイアウォール ↑ 用語†[edit] Virtual Server BIG-IP がバランシングするサービス IP アドレスとポート番号の組み合わせでマッチング Pool Member バランシング対象の IP アドレス、ポート番号 Node バランシング対象の IP アドレス (Pool Member を設定すれば自動で
ORACLE RAC PACK
1 2 3 ORACLE RAC PACK 簡単にできるデータベース・ストレージ設計 Nitin Vengurlekar RAC/ASM Development 4 本書は、弊社の一般的な製品の方向性に関する概要 を説明するものです。また、情報提供を唯一の目的と するものであり、いかなる契約にも組み込むことはでき ません。本書は、マテリアルやコード、機能の提供を確 約するものではなく、また、購買を決定する際の判断 材料とはなりえません。オラクルの製品に関して記載さ れている機能の開発、リリース、および時期について は、弊社の裁量により決定いたします。 5 プログラム概要 • 重要な用語および定義の確認 • I/O設計手法 • I/Oコンポーネントの概要 • Oracle ASMの概要および影響 • 全体像の把握 • 構成の検証 • まとめ 6 セッションの目標 • アプリケーシ
Google、次世代広告プラットフォーム「DoubleClick for Publishers」を発表
Google、次世代広告プラットフォーム「DoubleClick for Publishers」を発表 大規模パブリッシャー向け「DoubleClick DART」を「DoubleClick for Publishers（DFP）」に、小規模向けの無料サービス「Google Ad Manager」を「DFP Small Business」に、それぞれアップグレードする。 米Googleは2月22日、次世代広告プラットフォーム「DoubleClick for Publishers（DFP）」を発表した。広告配信管理ツールの「DoubleClick DART」と「Google Ad Manager」に代わるサービスで、大企業向けの有料サービス「DFP」と、小規模なパブリッシャー向けの無料サービス「DFP Small Business」の2種類を提供する。DARTのユーザーは向こう1年のうちに、
AWS ToolkitでTomcatクラスタをAmazon EC2上に楽々構築
AWS ToolkitでTomcatクラスタをAmazon EC2上に楽々構築：ユカイ、ツーカイ、カイハツ環境！（12）（1/3 ページ） 「AWS Toolkit for Eclipse」でツーカイAmazon EC2操作 クラウドプラットフォームの代表格であるAmazon EC2（Elastic Compute Cloud、以下、「EC2」）をEclipseから利用するプラグインとして、「AWS（Amazon Web Service） Toolkit for Eclipse」（以下、「AWS Toolkit」）がAmazonから提供されているのをご存じでしょうか（参照：Eclipse中でAmazon EC2向けJava開発が完結）。 AWS Toolkitを利用すると、Eclipse上で作成したWebアプリケーションを簡単にEC2上にデプロイできます。また、これにより複数のWebサーバ
Javaパフォーマンスチューニングのルール
本記事は、HP-UX Developer Edgeに掲載された記事を株式会社アットマーク・アイティおよび本記事の筆者が独自の判断のもとに加筆・修正したものです。 この連載では、Javaアプリケーションのパフォーマンスチューニングについて、さまざまなテクニックやツールの使い方を紹介していきます。連載の第1回では、パフォーマンスチューニングにおける基本的ルールや、HPが提供する各種のJavaパフォーマンス・ツールの使い方を説明します。なお、今後の連載では、JVMレベルにとどまらず、OSのカーネル・パラメータやネットワーク・パラメータのレベルでのチューニング方法も解説します。また、より高度なチューニング技法として、JVMのガベージ・コレクションやスレッド競合に注目する方法も紹介する予定です。 連載予定 第1回 Javaパフォーマンスチューニングのルール 第2回 Javaのガベージ・コレクション
2009-07-22
何の絵かわからんけどw。アンパンマンかお魚かたまごか。。。それともドキンちゃんかな？ 良すぎるキャッシュヒット率に注意 一部のデータにしかアクセスしない場合、全データがキャッシュに載り、良すぎるキャッシュヒット率が計測される。 キャッシュの状態を適切に再現する キャッシュの状態を適切に再現するためにテスト手順、テストデータ、テスト環境のスペックについて注意する必要がある。 オンライン時間帯にアクセスしない表に対して検索する夜間バッチ処理の場合、DB／OS／ストレージのキャッシュをクリアしてからパフォーマンステストを実施する。 オンライン時間帯に頻繁に参照されるマスタ表の場合、テストアプリケーションを空回しし、本番稼動時のキャッシュ状態を再現してから測定を開始する。 テストデータのサイズはキャッシュサイズに比例して用意する キャッシュサイズ、データサイズが本番環境と異なる環境でテストを実施す
OutOfMemoryError が出た時の解決へのアプローチ
java.lang.OutOfMemoryError は、Java VM がヒープメモリ不足により、オブジェクトに メモリを割り当てることが出来ず発生するエラーです。 Java VM 起動時にヒープメモリサイズを指定しますが、指定したヒープメモリサイズを使いきって しまったときに発生します。 OutOfMemoryErrorが発生した場合のアプローチとJava VMパラメータチューニングによる安定動作の運用事例についてご紹介 します。 （1）OutOfMemoryError が出た時のアプローチ OutOfMemoryError はメモリの使用量がヒープメモリサイ ズの指定を超えると発生します。 OutOfMemoryError に陥るケースは二つあります。 (A) 不要なオブジェクトが無駄にメモリに残っている場合 (B) ヒープサイズの絶対量が不足している場合 以下にそれぞれの対処を記し
“Don’t”Stop the World――Full GCへの対策
Full GCの発生は、ミッションクリティカルなWebシステムでは許容できない問題である。発生の抑止方法について順を追って検討してみよう。 Webシステムの安定動作には、メモリ使用量の適切な見積もりが不可欠であることをは前回に説明した。しかしJavaの特性上、しっかりとサイジングしてもある程度のFull GCの発生は避けられない。Full GC実行中には、Webシステムが一時停止して応答がない「Stop the World」と呼ばれる現象が発生する。これはミッションクリティカルなシステムでは許容することができない問題である。その原因と対策方法を、改めて紹介する。 業務システムが一時停止したようにみえる「Stop the World」はなぜ起こるか 一般にGCでは、不要になったメモリ域の破棄と同時に、メモリ域の再編成(コンパクション)が実行される。これによってメモリ域の断片化(フラグメンテー
「メモリーを意識してみよう」第2回 GCの仕組みを理解する
皆さんは，ご自分で作成されたアプリケーションでどのくらいの頻度でガーベジ・コレクション（GC）が発生しているか認識されていますか。まずは，このGCの発生頻度から調べてみましょう。 GCの発生頻度を調べるにはjavaの起動オプションに-verboseを使用します。-verboseだけだとクラスローディングやネイティブライブラリの使用に関する情報も表示されてしまうので，GCだけに特化したいときには-verbose:gcとします。 先週も使用した，JDKのサンプルのJava2Demoでやってみましょう。 > java -verbose:gc -jar Java2Demo.jar [GC 512K->216K(1984K), 0.0089257 secs] [GC 726K->486K(1984K), 0.0281309 secs] [GC 997K->635K(1984K), 0.0097482
ガーベジ・コレクション：GC ( Garbage Collection ) についての簡単な説明と調査方法
Java の GC について簡単に説明いたします。 GC はヒープやヒープサイズと密接な関連があります。以下のページも合わせて参照ください。 「Java のヒープサイズ」についての簡単な説明 Java プログラムが動作するとオブジェクトはメモリ上にロードされます。 大きなオブジェクトを使用したり、また、使用するオブジェクトの数が多ければ、その分メモリの使用領域は増加します。 そのまま、新しいオブジェクトをロードし続けると、Java が使用できるメモリ領域がメモリが一杯になります。 * 「 Java が使用できるメモリ領域 」、これをヒープ領域と言います。( ヒープ領域以外にも Permanent 領域が存在します。) メモリが一杯になると新しいオブジェクトをロードできず、プログラムを実行することができなくなります。 このような状態を回避するための仕組みが ガーベジ・コレクショ
【インフォシーク】Infoseek ： 楽天が運営するポータルサイト
日頃より楽天のサービスをご利用いただきましてありがとうございます。 サービスをご利用いただいておりますところ大変申し訳ございませんが、現在、緊急メンテナンスを行わせていただいております。 お客様には、緊急のメンテナンスにより、ご迷惑をおかけしており、誠に申し訳ございません。 メンテナンスが終了次第、サービスを復旧いたしますので、 今しばらくお待ちいただけますよう、お願い申し上げます。
ファイルアップロード／ダウンロードに潜むわな－ 大容量、高負荷時の注意点 －
今回のワンポイント Webシステムにファイルアップロードやダウンロード処理を取り入れているケースは多い。また、世の中にも、いくつかのサンプルソースや参考文献が出回っており、開発も行いやすいといえる。しかし、利用する場合には、アプリケーションサーバ全体の性能劣化やタイムアウトといったいくつかの問題を考慮することが重要だ。実際に発生したトラブル事例を交え、その問題点や注意事項について解説する。 ファイルアップロード／ダウンロード処理に潜むわなとは？ ファイルアップロードやダウンロードといっても、小さなファイルを扱っている場合は問題になる可能性は低い。しかし巨大なファイルを扱う場合や、通信回線の品質が悪く、ファイルアップロードやダウンロードにかかる時間が長い場合には、注意が必要である。 このような場合、以下の問題が発生する可能性がある。 サーバリソースの問題 無応答問題 タイムアウト問題 以降で
パフォーマンスチューニングの定石を知る
「アプリケーション・サーバを使いJ2EEべースのWebアプリケーションを構築できたのはいいが、どうも本来のパフォーマンスが出ていない」とは、よく聞く話である。本連載では、そういった事態に遭遇した場合に、具体的にどのように対処してパフォーマンスを向上させるかについて解説していく。2回は、「パフォーマンスが出ない！」という場面で、具体的にどのような対処をとったら良いのか、そのオーバービューを紹介しよう。具体的なチューニング手法は、第3回以降で詳細に解説していく。（編集局） （1）ボトルネックを探る パフォーマンスチューニングの実際は、まずはボトルネックとなっている場所を探すことから始めます。はじめにボトルネックの目星を付けますが、どの場面で性能が出ないのかがポイントとなります。性能の評価には、負荷テストとプロファイリングを行います。 ボトルネックの目星を付ける パフォーマンス・チューニングを行
データモデリングは「できるところ」から始めよう
全12回の連載もいよいよ今回で最終回です。最終回では、データモデリングを始めるにあたってのポイントをお話しします。 どこから始める？ データモデリング作業 プロジェクトを発足して「さぁ、やるぞ！」と、気合いを入れてデータモデリングを開始することも必要ですが、なかなかそういうタイミングに巡り会う機会がないこともあります。機会がないからといって、そのまま放置され、データモデリング自体が意識の彼方へ置き去りになってはいけません。 データモデリングは大上段に構えることなく「できるところから始める」という姿勢で取り組むこともできるのです。大切なのはデータの視点でモノを考えるという意識付けです。 日々システム業務を行われている方であれば、「過去5年間の設置場所別の売上実績リストが欲しい」といった、システムに関する改善要望が複数のユーザー部門から数多く寄せられていることと思います。このように改善要求があ
設計レビューが形骸化していませんか？
システムの設計ミスをなくし、上流工程で品質を作り込む上で、設計レビューは大きな役割を果たす。しかし、システム開発のレビューを研究テーマの一つとしている、奈良先端科学技術大学院大学の森崎修司氏（情報科学研究科 ソフトウェア工学講座 助教）は、「設計レビューをうまく実施している開発現場は、全体の3割ほど。多くの現場では、レビューが思うように機能していない」と指摘する。 実際、日経SYSTEMS 3月号の「設計ミスをなくそう――現場を救うレビューの秘訣」という特集で、開発現場を取材したところ、二つの典型的な設計レビューの失敗パターンが浮かび上がった。 欠陥検出件数を満たすだけの“儀式” 一つめは、レビューの「形骸化」あるいは「儀式化」である。これは、レビュー会議が次の工程に進むための形式的な“儀式”と化し、「今さら欠陥をたくさん検出しても修正している時間がない」「次の工程に進むことが先決だ」とい
第3回 知っておきたいスケールアウトの基礎知識 その2 | gihyo.jp
それでもすべきスケールアウト さて、これまでボトルネックの調査について説明をしてきましたが、具体的にどのようにシステム増強の対応をすれば良いでしょうか。最近注目のシステムの増強方法は、スケールアウト型です。しかし、スケールアウト型の増強方法は設計が複雑になるだけでなく、実際にサービスを稼働させてからの運用なども煩雑になる可能性があります。 そのため、スケールアウト型のシステム増強を設計する際は、「簡単に運用することができるか」という点まで考慮をして検討するようにしたほうが良いでしょう。 スケールアウトをさせるときの注意 負荷分散のために、今まで1台で処理していたサーバを分けるとなると、データの確実な保存が課題になってきます。スケールアウトには、複数のサーバでのデータの保持がつきものになるため、避けては通れない問題といってよいでしょう。 実はこの問題に関しては、最適な解決策が場合によって変
【ホワイトペーパー】インフラ管理者のためのクイックサバイバルガイド - ネットワーク事業 - マクニカ
［提供］加オープンテキスト社 コネクティビティソリューショングループ 『UNIX設計環境の4大課題を解決する 設計製造業インフラ管理者のためのクイックサバイバルガイド』 要約 本ホワイトペーパーでは、2009年3月に北米で発表された、設計エンジニアと開発エンジニアを対象とした調査結果をまとめた研究資料「Mind of the Engineer」で明らかになった、エンジニアとそれを取り巻く設計開発環境の傾向についてとりあげ、その効果的な解決策を解説します。 調査結果の中心的な部分を占めたのは、雇用確保、グローバル経済、納期遵守の問題でした。この競争の厳しい業界で優位に立つためには、結局は、仕事をより速く、よりスマートに、そしてより低コストにこなす方法を見つけるしかありません。 これらの課題は、実は単純明快で、しかも効果的な解決策によって解消することができます。OpenText Exceed
Part4 IOPSを理解する
ディスク単体の性能を，1秒当たりに処理できるI/O数で示したものが「IOPS」である。DBサーバーなど頻ぱんにディスクにアクセスする用途では，IOPSが高いディスクほど性能が良い データ転送時間には，ディスクから磁気ヘッドがデータを読み書きする平均メディア転送速度やインタフェースの転送速度，ドライブの信号処理とデータ転送を制御するCPUの処理時間などが加味される。 実は，これらの値は公開されていないため，正確なデータ転送時間は分からない。ただし，4Kバイトや16Kバイトなど，OSの読み書き単位程度の大きさであれば，数10マイクロ秒から長くても1ミリ秒程度であり，誤差の範囲である。 仮に，4Kバイトのデータを書き込むために必要なデータ転送時間を1ミリ秒とする。平均アクセス時間6ミリ秒のディスクにデータを4Kバイト単位で書き込むとする。このディスクのIOPSは，「1/（6ミリ秒+1ミリ秒）=1
会計検査院キッズページ
※注意（大人の方へ） キッズページは、小学生でも概略が分かるように記述しているため、細部について表現に正確さを欠く部分があります。ご了承ください。 〒100-8941 東京都とうきょうと千代田区ちよだく霞かすみが関せき3-2-2【案内地図あんないちず】 会計検査院かいけいけんさいん 総務課そうむか 渉外広報室しょうがいこうほうしつ 電話番号でんわばんごう（代表だいひょう）：03-3581-3251 会計検査院かいけいけんさいんホームページへ
ソーシャルメディアではユーザーが情報を流すべき＝FooMooがTwitter連携 | TechWave（テックウェーブ）
Twitterを初めとするソーシャルメディアの情報伝播の形は、まさにバケツリレーそのものである。そしてそのバケツリレーで流れる情報は、流しているユーザーが他人に伝えたいと思う情報、価値のある情報だけである。 ここがこれまでのマスメディアマーケティングとソーシャルメディアマーケティングの最大の違いだと思う。 Botを使って製品情報を流すのなどもってのほかだし、奇抜なネタを用いた情報伝播は一度しか効き目がない。今までのマスメディア相手のマーケティングの発想では成功しないのだ。 その点リクルートのホットペッパーのグルメサイト「FooMoo」がTwitterと連携する新機能を追加したのは、非常におもしろい取り組みだと思う。（cnetの関連記事） FooMoo掲載店舗は新機能を利用すると、FooMooの広告管理画面を操作するだけでTwitter上に店舗情報やクーポン情報をつぶやけるようになる。たとえ
【インフォシーク】Infoseek ： 楽天が運営するポータルサイト
日頃より楽天のサービスをご利用いただきましてありがとうございます。 サービスをご利用いただいておりますところ大変申し訳ございませんが、現在、緊急メンテナンスを行わせていただいております。 お客様には、緊急のメンテナンスにより、ご迷惑をおかけしており、誠に申し訳ございません。 メンテナンスが終了次第、サービスを復旧いたしますので、 今しばらくお待ちいただけますよう、お願い申し上げます。
今度はしゃべるVOCALOID、ヤマハが新音声エンジンを開発
ヤマハは2月25日、歌声合成ソフト「VOCALOID（ヴォーカロイド）」の合成エンジンソフトを進化させ、歌うだけでなくしゃべることも可能にしたと発表した。「VOCALOID- flex（ヴォーカロイド フレックス）」という名称で提供する。 VOCALOIDは、歌詞とメロディーを入力することで楽曲のボーカルパートが制作できるソフト。クリプトン・フューチャー・メディアの「初音ミク」やインターネットの「がくっぽいど」などで採用されている。 VOCALOID-flexでは、歌声に比べて音の細かな変化が要求されるしゃべり声を実現するため、新たに音素などの音の構成や長さ、音の高さや強さを細かく編集できるようにした。これにより、人間に近い発話ができ、細かいニュアンスや方言などのアクセント、イントネーションもつけられるという。 なお、VOCALOID-flexでは音声ライブラリに新しい音素材を追加する必要
日経の電子新聞は成功するか失敗するか | TechWave（テックウェーブ）
日本経済新聞の電子新聞事業は成功するのか失敗するのか。結論から言うと、何をもって成功、失敗とするのかという定義にかかっている。報道機関のデジタル部署のほとんどは、自分たちの取り組みが成功していると考えている。だがネットユーザーの大半は日本の報道機関のウェブ事業が成功しているとは考えていない。以前の記事に書いた「新聞は氷河期を迎えようする恐竜」という比喩を使えば、新聞関係者の成功の定義は「飢えをしのぐために木の実を見つけること」であるのに対し、一般ユーザーの成功の定義は「哺乳類への進化」なのだ。 「木の実を見つけること」を成功と呼ぶのであれば、日経の電子新聞事業は成功するかもしれない。だが「哺乳類への進化」を成功と呼ぶのであれば、日経の成功はこれからの取り組み方次第だと思う。これが日経の電子新聞事業に対する現時点でのわたしの感想だ。 わたしはこれまで「新聞社の電子新聞事業は間違いなく失敗する
Makuosanデーモンと通信する PHP Extensionを作りました : DSAS開発者の部屋
Makuosanは複数のサーバ間でファイルやディレクトリの同期をするソフトウエアです。 似たようなソフトウェアにrsyncがありますが、rsyncでは同期する対象のサーバ台数に比例し転送時間が増加してしまいます。 Makuosanはファイルの転送にマルチキャストを利用するため、転送先のサーバ台数が増えても転送時間が変わらないという特徴があります。 Makuosanを利用してファイルの転送を行うためにはMakuosanデーモンと通信して命令を送る必要があります。 これまでは Makuosan に付属する msync というコマンドラインを利用しデーモンと通信する事が必要でした。しかし、この PHP Extension を利用することで PHP で書かれたプログラムからでも直接 Makuosan デーモンと通信する事が可能となります。 用途としては、複数台のサーバにまたがる Web アプリケー
はてなブログ | 無料ブログを作成しよう
来年も作りたい！ふきのとう料理を満喫した 2024年春の記録 春は自炊が楽しい季節 1年の中で最も自炊が楽しい季節は春だと思う。スーパーの棚にやわらかな色合いの野菜が並ぶと自然とこころが弾む。 中でもときめくのは山菜だ。早いと2月下旬ごろから並び始めるそれは、タラの芽、ふきのとうと続き、桜の頃にはうるい、ウド、こ…
monojin.com - このウェブサイトは販売用です！ - monojin リソースおよび情報
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
授業に使える「Linuxサーバー構築標準教科書」，LPI-JapanがPDFで無償公開
LPI-Japanは「Linuxサーバー構築標準教科書」の無償公開を開始した。教育機関が授業で実習に利用できる教科書で，PDF形式で公開している。LPI-JapanはLinux技術者認定試験LPIC（Linux Professional Institute Certification）を運営している特定非営利活動法人。「Linux 技術者の育成と技術力向上，およびOSS環境の利用推進」（理事長の成井弦氏）を目的として無償公開した。 「Linuxサーバー構築標準教科書」は120ページ。Linuxをインストールしサーバーを構築，DNS，Webサーバー，メール・サーバーを設定し動作させる実習を行う。想定学習時間は12時間で，6時間×2日または90分間×8コマ。LinuxディストリビューションとしてはCentOSを使用している。 LPI-Japanではすでに2008年9月，基礎編にあたる「Linu
サイト閉鎖のお知らせ | ウブントゥ マガジン ジャパン
ウブントゥ マガジン ジャパンのサイトをご利用いただき、ありがとうございます。 2017年6月28日をもちまして、サイトを閉鎖させていただくことになりました。 今までサイトをご利用いただき、ありがとうございます。 アスキー・メディアワークスを引き続き、よろしくお願いいたします。
伊集院光がゼロから学んだUstream配信 - テレビの土踏まず
22日深夜のTBSラジオ「伊集院光 深夜の馬鹿力」で伊集院光がネットサービスの「Twitter」や「Ustream」について語っていました。 そのトークは一時間以上にも及び、特にUstreamについては自身が生中継での配信を導入したきっかけから、どんな機材を使ってるか、問題点、自身の課題まで、試行錯誤の経過が少しカタいくらいに事細かに説明されています。 今回の更新では伊集院光がそんなUstream配信について学んだ内容について、かいつまんでまとめてみたいと思います。一時間以上のトークなので文字起こしの都合上、語り口を大幅に改変していますがご了承ください。 ○Ustream始めました エレキコミックのやついいちろうさんが、自分の買い物を生中継していたのを見た。 どうやらiPhoneからUstreamの生中継でライブ映像を配信してる。 「おぃUstreamとやらすげーな」と。「オレが放送局」っ
有料自習室 新宿・池袋自習室 写真
※価格は全て税込です。入会金等その他の費用はかかりません（オプションロッカー利用を除く） ※終日利用のお客様は、席に参考書など置いて帰ってもかまいません。 それ以外のお客様は、席にお荷物は置いておくことができません。 ロッカーのご利用料金 有料ロッカー
第11回 パフォーマンス管理・実践編（前編）
Webシステムのパフォーマンスを管理するには，「設計→実装→検証→対処→設計に戻る」というサイクルを回すと説明した。今回と次回ではこのサイクルの中でも特に重要な，「設計」と「検証」の実践法を説明する。具体的には，設計時にネットワーク帯域やサーバー機のスペック，台数などを見積もる「キャパシティ・プランニング」と，検証時にパフォーマンスを実測して確かめる「負荷テスト」のポイントを示す。 キャパシティ・プランニングの実践 「1秒当たり100件のリクエストを処理する」というスループット要件があるとしよう。さて，このWebシステムのネットワーク構成やサーバー構成をどう決めればいいのだろうか？ まずは，アプリケーションの特性を見極めて，「Web層」「AP層」「DB層」のどこでリクエストが完了するかの割合を把握する。DBアクセスを伴うリクエストはAP層を経てDB層で完了するが，静的なHTMLページを返す
PHPのコミュニティ ポータルサイト「PHPプロ！」
平素より「PHPプロ！」をご愛顧いただき、誠にありがとうございます。 2006年より運営してまいりました「PHPプロ！」ですが、サービスの利用状況を鑑みまして、2018年9月25日（火曜日）をもちましてサービスを終了させていただくことになりました。 サービス終了に伴いまして、2018年8月28日（火曜日）を持ちまして、新規会員登録ならびにQ&A掲示板への新たな質問、回答の投稿を停止させていただきます。 なお、ご登録いただいた皆様の個人情報につきましては、サービス終了後、弊社が責任をもって消去いたします。 これまで多くの皆様にご利用をいただきまして、誠にありがとうございました。 サービス終了に伴い、皆様にはご不便をおかけいたしますこと、心よりお詫び申し上げます。 本件に関するお問い合わせはこちらよりお願いいたします。
[Think IT] 一気に覚えるPHP！
オープンソース時代の企業システムポータルサイト。効率的なシステム構築を行うための情報提供をおこないます。
Web情報アーキテクチャ（IA）とツール 記事一覧 | gihyo.jp
運営元のロゴ Copyright © 2007-2024 All Rights Reserved by Gijutsu-Hyoron Co., Ltd. ページ内容の全部あるいは一部を無断で利用することを禁止します。個別にライセンスが設定されている記事等はそのライセンスに従います。
[Think IT] 第1回：lighttpdを知っていますか？ (2/3)
【Webサーバーを極める！】 徹底比較！Apache vs. lighttpd！ 第1回：lighttpdを知っていますか？ 著者：TIS株式会社 並河 祐貴 公開日：2008/8/7（木） lighttpdは「Light footprint + httpd = Lighttpd」が語源で、その名の通り軽量であることが特徴です。 高性能が求められる環境での動作を前提とした設計で、少ないメモリ量でかつCPU負荷を抑えながらも、Webサーバーとして必要な機能は十分に持ち合わせています。 以下に、lighttpdの主な機能を列挙します。 1つ目がバーチャルホスト機能をサポートしていることです。そのため、1台のWebサーバーで、複数のドメインのWebサイトを運用させることが可能です。 2つ目がモジュール機構を採用していることで、必要に応じてモジュールを追加できるので、機能拡張が容易かつ柔軟
【インフォシーク】Infoseek ： 楽天が運営するポータルサイト
日頃より楽天のサービスをご利用いただきましてありがとうございます。 サービスをご利用いただいておりますところ大変申し訳ございませんが、現在、緊急メンテナンスを行わせていただいております。 お客様には、緊急のメンテナンスにより、ご迷惑をおかけしており、誠に申し訳ございません。 メンテナンスが終了次第、サービスを復旧いたしますので、 今しばらくお待ちいただけますよう、お願い申し上げます。
Hammer | Customer experience testing and assurance
Latest CX News! Hammer Newsletter is focusing on all things CX and Contact Center testing and assurance Read Our Newsletter
バッチ処理はSQLの一括処理で行おう！：ベンチャー社長で技術者で：エンジニアライフ
バッチ処理はSQLの一括処理で行うべきです。 しかし、バッチ処理を一括処理で行うときには一括でできる処理量の限界は存在し、それはマシンのスペックによって違います。限界を知っていれば怖くはありません。これまでも何度か、開発ではなく、テストや保守でも、SQLができるかどうかで大幅に工数が違うと書いてきましたが、それも合わせて、限界をみていきましょう。 条件はテストサーバがあって、本番と同じデータが入っているとしましょう。対象となるメインのデータの入っているテーブルをTableAとし、対象の処理は日次バッチだとします。 負荷テストの手順は以下の通りです。 現時点のピークを特定する ピーク時点のリソースの消費量を測り限界を予測する テストデータを作る 予想した限界量のデータでテストする ■ 1．現時点のピークを特定する まずは、本番と同じデータですから最も多くのトランザクションが起きている日を特定
プログラム構造図
１．はじめに ２．構造化の基準 ３．展開の方法 ４．モジュールの構造に関する基準 ５．制御と処理 附．記号とその使い方 １．はじめに TOPへ戻る プログラム開発に先立って最初に行う作業が、作成するプログラムの設計図（プログラム構造図）を書くことです。 一般的にプログラム論理は単一処理を処理順に流線で結合したフローチャートと呼ばれる図で示す事ができます。 ここではプログラム論理を構造化し、作成者も含め誰でもがプログラムの論理構造を把握できるような「プログラム構造図」の書き方を学びます。 ２．構造化の基準 TOPへ戻る 構造化定理（どんな論理でも順次･選択･繰返しの３つの基本的パターンを用いれば記述できる）を適用してプログラミングすれば、プログラムを難解にしていたＧＯＴＯ命令の使用を避けられます。この構造化プログラミング技法に基づき、プログラム全体の処理の流れを、原則と
Í×·ïÄêµÁ¡¦´ðËÜÀß·× - µ»½Ñ¾ðÊóWiki
´ðËÜÀß·× † ¥·¥¹¥Æ¥à¤Î¥ê¥×¥ì¡¼¥¹°Æ·ï¤¬ºÇ¤â´í¸±¤ÊÍýͳ 2008.2.24 ±¿ÍѤ·¤Æ¤¤¤¯¤¦¤Á¤Ë¡¢¥Ð¥°¥Õ¥£¥Ã¥¯¥¹¤äµ¡Ç½Äɲäǡ¢¶²Îµ¤Î¤è¤¦¤ËÇϼ¯¤Ç¤«¤¯¤Ê¤Ã¤¿Ãæ¿È¤Ï¡¢ºÇ¿·¤Î¥ª¥Ö¥¸¥§¥¯¥È»Ø¸þ¸À¸ì¤Ç¡¢Æ±¤¸¤è¤¦¤Ë¤¿¤¯¤µ¤ó¤Î¥Ð¥°¥Õ¥£¥Ã¥¯¥¹¤ò½Å¤Í¤ÆÀѤ߾夲¤¿¤â¤Î¤ËÊѤï¤ë¡£ Ʊ¤¸¥½¡¼¥¹¥³¡¼¥É¤ÎÃÇÊҤϰì¤Ä¤â¤Ê¤¤¤Ï¤º¡£ ¥×¥í¥°¥é¥à¤ÎÊݼéÀ¤ä°Ü¿¢À¡¢ºÆÍøÍÑÀ¤¬¡¢¤É¤Î»þÂå¤Ë¤Ê¤Ã¤Æ¤â¡¢¸À¸ì¤¬¤¤¤¯¤éȯŸ¤·¤Æ¤âÆñ¤·¤¤¤³¤È¡£ Æä˺ÆÍøÍÑÀ¤Ï¡¢¤½¤Î¥
SQLライクにHadoop Hiveを使い倒す!
パーティションを利用する 今回は少し凝ったテーブルを定義をしてみましょう。 郵便番号データは毎月更新されるので、テーブル指定時にバージョンも指定できるようにします。このような場合、Hiveではパーティションを使います。 以下に郵便番号を保存するテーブル「zip」を定義しますが、日付型DATEのパーティションverを設定するようにします。 hive> CREATE TABLE zip (zip STRING, pref INT, city STRING, town STRING) > PARTITIONED BY (ver DATE) > ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' > LINES TERMINATED BY '\n'; OK Time taken: 0.128 seconds
お題目うぉっち:Hadoop Streaming メモ
2010年01月24日 Hadoop Streaming メモ ClouderaのVMで Hadoop-Streaming をいじったときの調べ物＆備忘メモ。 ■処理対象の指定 処理対象ファイルが特定のフォルダの下にある場合は、-input で親フォルダ名を指定するだけで中身のファイルを全て拾ってくれる。 input が2個以上ある場合は -input (対象) -input (対象) というようにして複数回指定すればよい。 inputとして渡されたファイルの拡張子が .gz か .deflate だと、mapperに読み込む前にHadoopが自動的に解凍してくれる（ZIP、JARも可能） ・output も圧縮することも可能（ mapred.output.compress=true） ・ファイルのパスを指定する際に使えるワイルドカードは、「?」」と「*」と {a,b} (←コンマで区切ら
SeeIn開発日誌 - LVSを使ったブローカーの構築：｢keepalived.conf｣についての説明
今回構築から検証までの間で説明を省略していた ｢keepalived.conf｣について私が理解している範疇で説明します。 ※誤り等あればご指摘いただけると助かります。。。 まず、説明の対象となる｢keepalived.conf｣を以下に掲載いたします。 vrrp_instance vip_mysqld { state BACKUP interface eth0 grap_master_delay 5 virtual_router_id 1 priority 100 nopreempt advert_int 1 authentication { auth_type PASS auth_pass secret } virtual_ipaddress { 10.1.100.100/24 dev eth0 } } virtual_server 10.1.100.
keepalived講習会 | feedforce Engineers' blog
ゴール VRRPによる仮想IP持ち回りの仕組みを理解する keepalivedを利用したHAクラスタが構築できる LVS周りはナシで。 基礎知識編 基本的な資料 keepalived 本家 こんなに簡単！ Linuxでロードバランサ (2) - DSAS開発者の部屋 あとは昔まとめた社外秘の資料 keepalivedって何スか LinuxにおけるVRRPの実装のひとつ。HAクラスタを実現するデーモン。 HAクラスタのマスタ機とバックアップ機の両方で動作させることで簡単にHAクラスタができる。 またLVSを利用した負荷分散クラスタの稼動をサポートする機能もある。 VRRP 仮想IPを複数機器で共有し、一番プライオリティの高い機器がそのIPを持つ仕組み。 本来はルータ冗長化のためのプロトコルだが、サーバの冗長化にも使用できる。 つまりHAクラスタが作成可能。 参考 : Virtual Rout
WebアンケートシステムLimeSurvey
MENU メニューを飛ばす Tweet 高機能なWebアンケート Webアンケートに必要な機能を網羅！ブラウザからの操作ですぐにアンケート作成 詳しくはこちら 最高のコストパフォーマンス オープンソース・ソフトウェアのため無料！低コストでの導入・運用が可能 詳しくはこちら 導入～運用まで安心サポート お客様のご要望に合わせて、様々な形のサービスをご提供します！ 詳しくはこちら お知らせ RSS 2011年4月25日 ダウンロードページ更新のお知らせ 2010年10月12日 ダウンロードページ更新のお知らせ 2010年2月24日 ダウンロードページ更新のお知らせ 2010年2月8日 サイト新規オープンしました。 お知らせ一覧 ニュースリリース RSS 2020年5月24日 LimeSurvey3.17の スタートアップガイドの無料配布を開始 2017年11月14日 DIPオンラインサービスシ
Hadoopを用いたクラスタコンピューティング環境の構築 - SourceForge.JP Magazine : オープンソースの話題満載
ペタバイト規模のデータを格納させる分散コンピューティング用プラットフォームを探しているのであれば、そのフレームワークとして Hadoop の使用を検討すべきだろう。HadoopはJavaベースで作成されているため、Linux、Windows、Solaris、BSD、Mac OS Xにて使用できる。こうしたHadoopを実際に採用している組織に共通するのは、安価（特殊なハードウェアが不要）かつ効率的でスケーラビリティと信頼性を兼ね備えたプラットフォームによる、膨大な量のデータ処理を必要としているという点だ。 Hadoopでは、こうした膨大な量のデータを格納するために、Hadoop Distributed File System（HDFS）を採用している。実際、HDFSのマスタ/スレーブアーキテクチャは、Hadoopのクラスタ機能の中核を成している。ここでサポートされているのは、ファイルシステ
可用性を高めるOpen HA Cluster
可用性を高めるOpen HA Cluster：OpenSolarisで始めるブログサーバ構築（5）（1/3 ページ） この連載では、サーバOSとして十数年発展してきた「Solaris」をオープンソース化した「OpenSolaris」を紹介し、ブログサーバ「Roller」と組み合わせて運用していくうえで有用なさまざまな知識を紹介していきます。（編集部） 第2回「Cool Stackで手軽に『SAMP』」から第4回「一瞬でのバックアップを実現するSolaris ZFS」までで、Solaris ContainerやZFSなどといったSolaris／OpenSolarisに備わっているエンタープライズ向けの機能や特徴を紹介し、その技術をブログサーバへ応用する方法について解説しました。 今回は、エンタープライズ向けクラスタリングソフトウェアを導入して、高可用性を備えたブログサイトを構築する方法を紹介
「これは効く！ Web文章作成＆編集術 逆引きハンドブック」刊行記念イベント
Webはさまざまな情報を掲載することのできる媒体ですが、本質的には“読む”メディアです。情報の発信者は、より多くのユーザーを目的とする行動に誘導すべく、テキストコンテンツを作り込む必要があります。 本セミナーでは、宣伝広告に対する消費者心理プロセスとして知られる“AIDA（アイダ）の法則”およびその派生モデルをもとに、Webコンテンツの担当者がまず把握しておかなければならない「構成」「執筆」「編集」の諸原則と、それを具体的な形に落とし込むための基礎的なテクニックの習得を目指します。 ★当イベントの参照書籍『これは「効く！」Web文章作成＆編集術 逆引きハンドブック』の<会場限定>特別価格にての販売もあり！ イベント・セミナー内容 1.AIDAの法則にみる、Webのユーザー行動 2.コンテンツの目的や対象を見定めることの重要性 3.掲載すべき情報、情報の配置の仕方、表現の選び方のメカニズム
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
obsoleted /storage/data_blocking_deploy is redirect to whitepapers/
論証の推進
HadoopとRDBMSの比較｜大量データのバッチ処理時間短縮はHadoop(ハドゥープ)技術で。
浮浪プログラマの始末書:バッチ処理並列化
grandarbre.net
GREE Engineering
新着記事
TechCrunch | Startup and Technology News
Hadoopのインストールとサンプルプログラムの実行
クラウドサービス・レンタルサーバーのホストプロバイダー
システム基盤設計｜株式会社グラント ERP導入 システム基盤設計 GRANT
開発者向けブログ・イベント | GMO Developers
WORKS ONLINE BOOK STOREの移管に関して