オープンソースのバルクデータローダー「Embulk」登場。fluentdのバッチ版、トレジャーデータが支援
オープンソースのバルクデータローダー「Embulk」登場。fluentdのバッチ版、トレジャーデータが支援 何ギガバイトもあるCSVをデータベースに読み込ませるようなバルクデータをバッチ処理するためのツール「Embulk」がオープンソースで公開されました。 コミッターとして開発しているのは、ログ収集ツールとして知られるfluentdなどの開発者として知られる古橋貞之氏、西澤無我氏、中村浩士氏らで、3人が所属するTreasure Dataも開発を支援しています。 古橋氏はEmbulkについて「簡単に言うとfluentdのバッチ版です」と説明。1月27日に行われた「データ転送ミドルウェア勉強会」で、Embulkの紹介を行いました。 Embulkはプラグインベースのバルクデータローダー 古橋氏はまず、例えばCSVファイルをPostgreSQLに読み込ませようとすると、CSVの日付のフォーマットが
富士通もIAサーバ、SSDストレージ、OS、データベースを垂直統合へ。約20倍の性能向上を実現と
ハードとソフトをベンダがあらかじめ最適に組み合わせた製品、いわゆる垂直統合製品がエンタープライズ市場でも1つのトレンドになっています。 オラクルが同社のサーバと仮想化ソフトウェア、OSなどを垂直統合した「Exadata」や「Exalogic」で成功すると、IBMも同社のIAサーバとソフトウェアを組み合わせた「Pure Systems」を今年の4月に発表し、垂直統合に参入してきました。 またある意味ではクラウドも、クラウドベンダによってハードからソフトまで垂直統合されたシステムによってサービスが提供されていると考えることができるでしょう。 垂直統合された製品は、その組み合わせをベンダに委ねる代わりに、製品の性能、安定性がベンダによって保証され、保守やトラブルシュートも一元化できるというメリットがあります。 富士通が垂直統合製品へ参入 その垂直統合された製品を、富士通が発表しました。自社製のサ
［速報］Amazonクラウド、PostgreSQLをDBaaSで提供。Amazon RDS for PostgreSQLをリリース。AWS re:Invent 2013
［速報］Amazonクラウド、PostgreSQLをDBaaSで提供。Amazon RDS for PostgreSQLをリリース。AWS re:Invent 2013 Amazon Web Servicesが主催するイベント「AWS re:Invent 2013」。2日目の基調講演に登壇したのは、同社CTOのWerner Vogels氏です。 Vogels氏はAWSにおいて新サービスや新機能の投入が加速していること、その開発は利用者のメリットをシンプルに表すプレスリリースを書くことが最初のステップであり、チームはピザ2つ分で済む少人数で構成される、といった同社独特の規律について触れた後で、新サービスであるAmazon RDS PostgreSQLを発表しました。 Amazon RDSはクラウド上でデータベースをサービスとして提供するもので、データベースのバックアップ、パッチの適応、自動フ
ニフティクラウドがPaaSとしてMySQL/PostgreSQL、メッセージキュー、DNS、メール配信機能などを発表
ニフティクラウドがPaaSとしてMySQL/PostgreSQL、メッセージキュー、DNS、メール配信機能などを発表 ニフティクラウドは8日、これまでIaaS型のクラウドサービスとして提供してきたサーバやストレージ、ファイアウォール、ロードバランサーなどの機能に加えて、PaaS型クラウドサービスとしてリレーショナルデータベース、メッセージキュー、DNS、メール配信機能などを12月以降順次提供していくと発表しました。 RDB、メッセージキュー、DNS、メール配信 リレーショナルデータベース機能で提供されるのは、MySQL（バージョン5.5/5.6）とPostgreSQL（バージョン9.2）の2つ。GUIもしくはAPIで管理運用の操作ができるほか、アクティブ／スタンバイの冗長構成、リードレプリカによるスケーラビリティの向上、リソースの利用率やモニタリング機能、ストレージへの自動データバックアッ
PostgreSQLのGUI管理ツール「PostgreSQL Studio」、オープンソースで公開
PostgreSQLデータベースのスキーマやインデックスの管理、SQLの実行などをWebブラウザから行えるツール「PostgreSQL Studio」が、オープンソースで公開されました。 PostgreSQL Studioは、データベース内のテーブルのスキーマを参照し、また列やインデックス、ビューや制約、トリガーなどの作成や変更、SQL文の実行などを行う機能としてSchema Brwoser、Detail Browser、SQL Worksheet、Object Wizardsなどを備えています。 Webブラウザから利用できるため、PostgreSQL StudioをPostgreSQLと同じファイアウォールの背後に置いておき、HTTP経由でアクセスすることにより、安全にデータベースを管理できると説明されています。 Javaで記述され、複数のPostgreSQLバージョンに対応 対応するP
PostgreSQL 9.3正式版が公開。1秒以下の高速フェイルオーバー、データチェックサムによる高信頼性、マテリアライズドビューなどの新機能
PostgreSQL 9.3正式版が公開。1秒以下の高速フェイルオーバー、データチェックサムによる高信頼性、マテリアライズドビューなどの新機能 「What's new in PostgreSQL 9.3」のページに並んだ項目から、主な新機能を抜き出してみました。 バルクロードの高速化のためのCOPY FREEZE カスタムバックグラウンドワーカー データチェックサム JSON機能の拡張 ラテラルジョイン イベントトリガー マテリアライズドビュー アップデータブルビュー 書き込み可能な外部テーブル 高速フェイルオーバー 過去のバージョンとの基本的な互換性は維持されています。 1秒以内でレプリカがマスターに昇格 高速フェイルオーバー機能では、レプリカデータベースがマスターへ昇格するのに1秒以内になるとのこと。 データチェックサムはページごとにデータのチェックサムを確認し、ストレージの障害などに
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
