Fluentdが流行る理由がいま分かる、10の実践逆引きユースケース集 - Y-Ken Studio
ログデータを活用してビジネスに役立てようという最近のトレンドは理解できる。 しかし、なぜログ収集ソフトウェアのFluentdがこれほどまで話題になるのか、不思議に感じている方もいるのではないだろうか。単にログデータを収集するならばsyslog-ngやrsyslogで十分ではないかという意見もあるだろう。 それらは既存のログシステムを置き換えるプロダクトであり、Fluentdのそれとは根本的に異なる。Fluentdは、既存のログシステムに手を入れることなく新たにログの収集を行い、ストリームデータ処理を実現するプロダクトなのである。 一般的にログデータはサーバの数だけ分散しており、それを定期実行処理で収集するということだけでも、なかなか骨の折れる仕事である。さらに集めるだけでなく、日々増え続けるログデータを活用できる形に加工してしかるべきデータストアに保管するということに挫折した方もいるのでは
柔軟なログ収集を可能にする「fluentd」入門 | ページ 3 | さくらのナレッジ
設定例：Apacheのアクセスログを記録する fluentdの基本的な設定例として、まずはApacheのアクセスログを処理する例を紹介しよう。今回は入力プラグインとして「in_tail」を使用し、Apacheがデフォルトで出力するログはそのまま残したうえでfluentdでログを記録することにする。 in_tailプラグインは、指定したテキストファイルを監視し、ファイルに新たな行が追加されたらその内容をログとして記録するという動作をする。なお、テキスト形式でログを記録する場合、logrotateというツールで一定期間ごとにログを別ファイルに切り替えたり、ログファイルを圧縮する、といった作業を行うことが多いが、in_tailプラグインではlogrotateを考慮したファイル監視を行うようになっているため、logrotateを利用している場合でも特に追加の設定などを行う必要はない。 今回は、以下
柔軟なログ収集を可能にする「fluentd」入門 | さくらのナレッジ
複数台のサーバーやクラウド環境を組み合わせてのサービス運用においては、ログの収集方法に工夫が必要となる。こういった場合に有用なのが、さまざまなログの収集手段を提供するfluentdだ。今回はfluentdのアーキテクチャやそのインストール/設定方法、基礎的な設定例などを紹介する。 さまざまな方法でログを収集できるfluentd 今回紹介するfluentdは、Treasure Dataが開発するログ収集管理ツールだ（図1）。オープンソースで公開されており、Linuxや各種UNIXで動作する。 図1 fluentdのWebサイト ログ収集のためのソフトウェアとしてはsyslogdやsyslog-ngなどが有名だが、fluentdがこれらと異なる点としては、以下が挙げられる。 さまざまなソースからのイベントをさまざまな媒体に出力できる fluentdの大きな特徴としては、ログの収集方法やログの記
KVMの導入と基本的な使い方
使い方に応じたネットワーク構成（続き） ●ケース4：サービス用のゲストOSを複数起動し、外部ノードからゲストOSに簡単にアクセスできるようにする ホストの物理NICとゲストOSが接続するtapデバイスをブリッジのインターフェイスとして設定します。これによりホストOSの接続している物理的なL2ネットワークに、ゲストOSが接続しているように機能します。そのため、外部ホストはもちろん、ゲストOS間の通信も行うことができます。 なお、ケース1〜3までは、kvmグループに所属していれば一般ユーザーで実行できましたが、ケース4で使用するtapデバイスにはroot権限が必要です。ネットワーク構成は図4です。 # ifconfig eth0 0.0.0.0 promisc up ←eth0をプロミスキャスモードにする # brctl addbr br0 ←
VMware vSphere Hypervisor（VMware ESXi5.0）
Dell R310へESXi5.0をインストール。（以前インストールしたESXi4.1はこちらです） 管理はvSphere Clientで行います。 事前にVMwareにてESXi5.0のライセンスを取得しておきましょう。 https://www.vmware.com/jp/tryvmware/?p=free-esxi5&lp=default メールアドレスの登録が必要になり登録後メールにて送られてきます。 インストールするハードウェア 本 体：Dell PowerEdge R310 BIOS：1.6.4 CPU：Intel Xeon X3450 2.67GHz メモリ：6GB（DDR3 RDIMM/1333MHz 1GB×6） HDD：600GB 15,000RPM（6Gbps SAS）×１ RAIDなし NIC：Broadcom NetXtreme 2 BCM5716 Gigabit×
KVMとClonezillaでP2V
老朽化した社内開発サーバの移行を実施したのだけど、 ドキュメントが全くなく試行錯誤したものの新しいサーバ上への再構築を断念。 新しいサーバに仮想環境としてまるっと移すことにした。 最初、P2Vでググったら「virt-p2v」というソフトがヒットしたけど、 開発が終了しているようで配布も終わっていたのですぐにやめた。 次にddコマンドで流し込もうとしたものの上手く行かず、 同期から勧められたclonezillaを使ったらビックリするくらいすんなりいった。 下記はその手順。 移行元：CentOS5 移行先：CentOS6 2つのサーバは同じネットワークにいるものとする。 1.OSインストール(移行先サーバ) ① 言語 Japaneseを選択 ② キーボード 日本語を選択 ③ ストレージデバイス 基本ストレージデバイスを選択 ④ ホスト名 ホスト名とeth0のIPアドレスを設定 ⑤ タイムゾーン
[KVM] 物理サーバからKVMへ移行(p2v) : Edo::World::Blog
5月16 [KVM] 物理サーバからKVMへ移行(p2v) カテゴリ:KVMCentOS6 p2v 環境 サーバ ：ubuntu10.04で実施 ※qemu-kvmがインストールされている事 ディスクドライブ(変換対象データ): /dev/sda ディスクドライブ(ディスクイメージ格納先): /dev/sdb1 ※事前にディスクパーティン(/dev/sdb1)を切りだしてファイルシステムを作成 変換前（形式:raw)のメディアファイル名: testsrv_raw.img(raw形式) ※変換前 変換前(形式:qcow2)のメディアファイル名: testsrv_qcow2.img(qcow2形式)※変換後 物理サーバのイメージディスクを作成 メディアブート（ディスクマウントしない）した状態で、ddコマンドをディスクドライブごとデータをファイル出力。 ※ディスクはマウントせずにメディアブートす
夏の節電に向けてLinux物理サーバーを直接仮想化する - tomo_snowbug’s diary
政府が電気の大口需要者に対して夏のピーク時の電力使用量を前年比25％減らすように言われているようで、うちの会社でも、サーバーの消費電力削減という話がありました。 そこで複数台のサーバーを1つの仮想サーバーにまとめると結構いい節電対策になりますのでやってみます。 移行時に1からインストールして、環境を復元しても出来ますがかなり手間です。 ということで、P2Vします。物理サーバーを直接仮想化することをP2Vとか言ったりします。 VMware vSphere Hypervisor（ESXi）とVMware vCenter Converter Standalone 4.3の環境でLinuxサーバー（CentOS5）をP2Vしてみます。 注意点としてLinux LVMで構成されている物理サーバーをConverterを利用してP2Vすると、問答無用に非LVMなパーティションに変換されてしまいます。 L
VMware ESXiでゲストOSのクローンを作成する
VMware VirtualCenter Serverを導入しないで、単体でESXiを運用している場合、ゲストOSのコピー・複製（クローン）を作成するには少し面倒な手順が必要になる。 VMware Infrastructure ClientのConfigurationタブでStorageを選択し、ストレージのリストを表示させる。その中からゲストOSを格納しているストレージを選択した状態で、右クリック・メニューの先頭のBrowse Datasoreをクリックする。 するとDatastore Browserが立ち上がり、VMゲストのディレクトリがリストされる。今回、コピー元にするvm122のディレクトリを見ると、vm122.vmdkというVirtual Diskファイルやvm122.vmxなどのVirtual Machineファイルがあることがわかる。 ■注意 ・ここで紹介する方法で間違った操
クラウド基盤管理ツール「CloudStack」 - クリエーションライン株式会社
CloudStackは、IaaSクラウド基盤 用 ソフトウェアで 、プライベート クラウド環境 や パブリック クラウドサービスを素早く構築し、提供可能とするソフトウェアです 。 KVM、XenServer、VMware ESXiをサポートしており、異なる複数のハイパーバイザを混在したクラウド環境 も構築 することが可能です。 ユーザ 、 管理者用 にリッチな Web UIを備え、クラウド利用 ・ 運用の オペレーションは ブラウザ上から行うことができます 。 また、 大規模環境に対応可能 なスケーラブルな アーキテクチャとなって おり、NTTコミュニケーションズ「Cloudn」、KDDI「KDDI クラウドプラットフォームサービス」、TaTa Communications、Korea Telecom をはじめとする大規模な導入事例が多数あります。
OS仮想化ソフト「Parallels Desktop 7 for Mac」を使い始めたの巻 - BLO-GENIUS 〜Google先生が教えてくれなかったこと〜
快適 IT, appleAbstractBootcamp削除後のMacBook ProでMac用Windows仮想化ソフトの「Parallels Desktop 7 for Mac」を使い始めたParallelsのインスコおよびWindows7のインスコのプロセス、計12GBを要したParallelsによるWindows7使用は問題なし！ 1. おぃらがBootcampを諦めたわけ Mac用OS仮想化ソフトの「Parallels Desktop 7 for mac」を使い始めた。 Mac機でWindowsを使用する場合には、標準機能として搭載されている「Bootcamp」でWindowsをインストールし、Windows系ソフトウェアなどが使用可能であり、おぃらも手持ちのMacBook ProとMacBook Airそれぞれにインスコして使っていた。 しかし、使い始めでストレージ（ディスク容
ハイパーバイザー選択の戦略
KVMを管理するツールは、非常にたくさん存在しており、どのツールを使えば効率的に管理できるのか迷うところですが、管理ツールの詳細は、こちらのページにまとめられていますので、参考にしてください。 KVM管理ツール1：OpenQRM OpenQRMは、データセンターの業務を一つのアプリケーションで管理するというコンセプトで 設計されています。複雑なデータセンター業務を、コンポーネントごとに分けて、プラグインの組み合わせで業務ができるようになっています。 データセンター業務の中のひとつとして、仮想化という業務が存在し、さらに仮想化の中には、今回紹介するKVMの管理だけでなく、VMwareやXenなどの仮想サーバーも管理できるようになっています。他にも、DNS,Natios,nfs-storageなど、たくさんのプラグインが用意されています。 詳細は、openQRM Pluginsのページを参照し
MacとWindowsを同時使用できる無料の仮想化ソフト「VirtualBox」の使い方 / Inforati
無料の仮想化ソフト「VirtualBox（バーチャルボックス）」をインストールして、Mac OS Xと同時にWindowsを起動する方法を紹介します。 Mac OS Xを使用しながら、Windowsのソフトウエアを使用できます。 無料の仮想化アプリケーション「VirtualBox」 無料の仮想化アプリケーション「VirtualBox」をインストールして、Mac OS X上でWindowsを起動する方法を紹介します。 WindowsのソフトウエアをMac OS X上で使用できます。 無料の仮想化ソフト「VirtualBox」 仮想化ソフトとは VirtualBox（バーチャルボックス）とは 利用する際の注意点 VirtualBoxで仮想環境を作る VirtualBoxをダウンロード 仮想マシンを作成する 仮想ハードディスクを作成する ビデオメモリを指定する 仮想マシンを初回起動する Gues
KVMでサーバ仮想化 インストール編 | 自宅がiDC？
さて今回は、Red Hat Enterprise Linux5.4でも正式採用されたKVMを試して見るべく、CentOS5.4でKVMをインストールしてみました。 Xenのサポートも継続するようですが手薄になっていくんだろうなぁ。。。 まず、KVMをインストールするには重要な前提条件があります。 CPUが仮想化支援機能(Intel Virtualization Technology(Intel VT) / (AMD Virtualization(AMD-V))を搭載している必要があります。 これがないとインストールすらできませんでしたｗ KVMをインストールしてゲストOSをインストールするところまでを簡単に紹介します。 (正直解説がいらないぐらい簡単なんですがｗ) ①ホストOSのインストール いつも通りホストOSをインストールしますが、パッケージの選択でKVMを選択。 あとあと
米グーグルも注目、ネット設計変える「OpenFlow」
出典：日経コンピュータ 2011年7月7日号 pp.36-37 （記事は執筆時の情報に基づいており、現在では異なる場合があります） 各種のクラウドコンピューティング・サービスを筆頭に、既存のコンピューティング技術では短時間で処理することが困難な「ビッグデータ（膨大な量のデータ）」を扱うサービスが増え、その要素技術が一般企業にも身近なものとなりつつある。今回は、米フェイスブックや米グーグルなども注目する最新ネットワーク技術「OpenFlow（オープンフロー）」を扱う。 ITの世界では、コンピュータそのものだけでなく、ネットワーク分野でも大きな革新が起きつつある。それが「OpenFlow」だ。ルーターやスイッチ、ロードバランサー、ファイアウオールなどのネットワーク機器と、LANやWANの回線から成る企業ネットワークの構成変更が手間いらずになる。このため、サーバーやストレージの構成変更や増減、仮
100年企業へ！アイシーズ NS部のR&Dブログ:P2V （Physical to Virtual） - MondoRescue編
オープンソース/Linuxに特化したシステム開発、サーバ構築・運用｜株式会社アイシーズ ネットワークソリューション部のR&Dブログ Linuxや仮想化など技術情報を発信 今回説明するのはMondoRescueを使ったP2V （Physical to Virtual）です。 "VMware vCenter Converter Standalone" からLinuxのP2Vにも対応しました。VMware Converterを使うと、簡単な操作でP2Vを行うことができるので便利ですが、対応しているOSが少ないことが難点です。 RedHatでは2系以降の対応となり、7系や9は対象外となっています。 数は少ないと思いますが、7系や9を使っている古い環境を仮想マシンに移行することもあると思うので、今回はMondoRescueを使ってP2Vを行ってみます。 ※MondoRescueとは・・・バックアップ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
BootCamp領域を仮想化してみた - Takeru-chan日記 2.0n
パスワード認証
CentOS 6 : KVM インストールと設定 : Server World
【仮想化道場】 Linux標準のサーバー仮想化機能「KVM」を試す