グーグル、BigQueryを正式公開。SQLで大規模データに対して高速処理
BigQueryはカラム型データストアの一種で、テラバイトクラスの大規模データに対して大量の並列処理を行うことで高速に結果を得ることが可能。グーグル 佐藤一憲氏の発言によると、 OLAP/DWH/Data Miningで行われるようなread onlyのad hocクエリをきわめて高速（数秒〜数十秒）に実行します。 とのこと。 SQLによる問い合わせが可能 この高速性に加え、BigQueryではSQLを問い合わせ言語に使えるという点にも大きな特徴があります。数秒程度のレスポンスとSQL文による記述は、大規模データに対するアドホックな処理を行うのに適したサービスだといえるでしょう。 BigQueryのSQLの構文は「Query Reference」で解説されていますが、SELECT文にFROM、WHERE、JOIN、HAVING、GROUP BY、ORDER BY、LIMITなどが使えるため
Firebirdの特徴 (Factsheet)
Firebirdプロジェクトのホームページはこちらです Firebird 1.5は、フル機能を備えたSQLデータベースエンジンです。軽量で、設定や管理に最小限の労力しか必要としないにもかかわらず、大変強力です。シングルユーザーによる単一のデータベース利用から全社規模のエンタープライズ向けシステムまで、容易に拡張可能です。1つのFirebirdサーバは、それぞれが複数のクライアント接続を持っているような、複数の独立したデータベースを扱うことができます。なによりもFirebirdは真のオープンソース製品であり、商業使用も含め一切のライセンス使用料は必要ありません。 A.C.I.D. : FirebirdはRDBMSに必須とされるAtomicity(原子性)、Consistency(一貫性)、 Isolation(分離性) 、Durability(耐久性) を提供します。 MGA: Fireb
Oracle LOVERS 勉強会 第19回 in 青山花見 に行って来た - ablog
感想というかメモ Oracle LOVERS 勉強会 第19回 in 青山花見 2010年4月3日 東京都 | DBならOracleでしょ♪ | mixi 前から参加してみたいと思っていた Oracle LOVERS 勉強会 に初参加してきた。 場所は日本オラクル青山センター13F。 数分遅刻して行ったら、みんなホワイトボードの前で話をしている。参加者の名前を書いて、その横に各自が Oracle Database のサーバプロセス1つあたり消費するメモリサイズを想定で書いていく。なんだろうと思ってたら、各自が書いたメモリサイズの順に席順を決めて、お昼ご飯。さすが Oracle Database の勉強会w 弁当は日本オラクル御用達の1500円の豪華弁当。参加者が増えて、1つ足りなくなったので、弁当箱のふたにみんなの弁当からすこしずつ集めて主催者のもとくんβ(id:mototaker)さんの
今日もきっとどこかで100%たぶん元気 ORA-03136の原因
ORA-03136: インバウンド接続がタイムアウトになりました. WARNING: inbound connection timed out (ORA-3136) 上記ORA-3136がどうやれば出力されるか試してみた。 ちなみに設定はデフォルトなので、60秒でORA-3136が出力される。 ■$ sqlplus ユーザ名/パスワード@サービス名 ①ユーザ名かパスワード間違えた状態で放置 ORA-01017 ユーザー名／パスワードが無効です。ログオンは拒否されました。 上記ORAエラーが出力された状態で、sqlplusを抜けないで60秒放置(3回間違えると抜けてしまう) ⇒ORA-3136出力した ②サービス名間違えた状態で放置 ORA-12162: TNS: 指定されたNetサービス名は正しくありません。 上記ORAエラーが出力された状態で、sqlplusを抜けないで60秒放置(3回間
今夜こそわかる安全なSQLの呼び出し方 ～ 高木浩光氏に聞いてみた
「安全なSQLの呼び出し方」というSQLのセキュリティに焦点を当てたドキュメントが、2010年3月にIPA（独立行政法人情報処理推進機構）から公開された。 これは2006年1月から提供されている、Webサイト開発者や運営者向けのセキュアWebサイト構築のための資料「安全なウェブサイトの作り方」の別冊として書かれたものである。「安全なウェブサイトの作り方」が92ページなのに対して、SQLインジェクションについてだけで40ページもの分量がある。なぜこんなに分厚いのだろうか。 このドキュメント作成に協力したという、独立行政法人産業技術総合研究所 情報セキュリティ研究センターの高木浩光氏にお話を伺うことができた。高木氏は個人ブログ「高木浩光＠自宅の日記」で、セキュリティ関連の問題を追求する論客としても知られている。筆者も以前、この連載の「今夜わかるSQLインジェクション対策」の回（2006年11月
クラウド時代を担うローカルストレージ--注目のウェブ技術「Indexed DB」
古くなったテクノロジと、ウェブをアプリケーション実行基盤として再構築する構想に取り組む各ブラウザメーカーは、クラウドコンピューティングの一見基本的ではあるが非常に重要な要素の下に集まり始めた。 その機能はローカルストレージというもので、その新しいメカニズムは「Indexed DB」と呼ばれる。 Indexed DBはOracleが提唱し、当初は「WebSimpleDB」と呼ばれていた。現段階ではその大部分がプロトタイプでしかなく、まだウェブプログラマーが使用できる状態ではない。しかし、Indexed DBは既にMicrosoft、Mozilla Foundation、Googleからの支持を得ている。そして、「Internet Explorer（IE）」「Firefox」「Google Chrome」のユーザー数を合わせると、今日のネットユーザーの90％以上に相当する。 「Indexed
mysql と drizzle の負荷テストツール「skyload」が凄い！ - kazuhoのメモ置き場
tmaesakaさんがやってくれました。 ずいぶん前からSQLのベンチマークを測定するのに使いやすいプログラムないかなーと思ってました。個人的にはmysqlslapというのを使ってたのですが、幾らか気に入らない所があったりコマンドラインオプションが複雑で毎回 --help を読んだりしていました。余計な機能なんかなくて、指定したSQLを高速にくりかえしてくれる物が欲しいなぁって思ってたんです。 とあるIRCでこの前、tmaesakaさんから「いま作ってる」という話を聞いて、いろいろ要望を言ってたんですが、ついさっきチュートリアルが公開されました。速いw 名前はskyload。とても小さく、実装コードだと800行程度です。しかもオプションが少ないので使い方が単純です。試しに適当な INSERT の速度を測ってみました。 $ skyload --server=localhost --mysql
ALTER TABLEを上手に使いこなそう。
テーブル定義を変更したい。インデックスが壊れてしまったので再作成したい。そんな場合はALTER TABLEを使う。ALTER TABLEはテーブル定義を変更するお馴染みのコマンドであるが、その挙動は意外と知られていない。（エキスパートとおぼしき方々からも度々質問を受ける。）そんなわけで、今日はALTER TABLEについて解説しようと思う。 まず結論から言うと、なんとMySQLのALTER TABLEはテーブルのデータを全てコピーし直すのである。なんて無駄なことを！？と思うかも知れないが、テーブル定義（スキーマ）の変更を動的に行うには、ストレージエンジンによるサポートが必要であり、動的なスキーマ変更をサポートしているストレージエンジンはまだ少ないのである。（動的スキーマ変更をサポートしているのはMySQL Clusterぐらいだ。しかも追加だけ。）デフォルトで利用出来るMyISAMはInn
Ywcafe.net
Ywcafe.net This Page Is Under Construction - Coming Soon! Why am I seeing this 'Under Construction' page? Related Searches: Free Credit Report music videos Migraine Pain Relief Best Mortgage Rates Credit Card Application Trademark Free Notice Review our Privacy Policy Service Agreement Legal Notice Privacy Policy
【YQL 速攻レビュー】米 Yahoo! が SQL っぽく色んなデータを取ってこれるAPIを出した - てっく煮ブログ
米 Yahoo! が Yahoo! Pipes みたいに自由度が高くて、またちょっと毛色が違うサービスが出てきた。題して、Yahoo! Query Language。YQL と呼ぶようだ。SQL 風の言語を REST で投げて、結果を XML や JSON で受け取ることができる。具体的にやってみないと分かりにくいので、とりあえず試してみた。RSS からデータ取得YQL を使って RSS から最新のタイトル10個を取ってきてみる。こんな YQL になるらしい。 select title from rss where url='http://d.hatena.ne.jp/nitoyon/rss' rss テーブルに対して select を発行している。実際にこの YQL を試すには YQL 用の console を利用するとよい。（※要ログイン）console の左上に YQL を入力して
RDBMSの時代の終わりが見えてきた - きしだのはてな
クラウドと一緒にやってきたもの 最近、クラウドが流行ってます。 GoogleのMapResuceから始まって、MicrosoftのAzureまで、大手のクラウド製品が出揃った感じ。 で、そこで、こんなクラウド製品が出ましたというときに、必ずといっていいほどそのクラウド用のデータベースの説明があります。そして、それはRDBMSではありません。 GoogleだとBigTable、MicrosoftだとSQL Data Services、あとはAmazonのSimpleDB。どれも、基本的にはひとつのテーブルにハッシュコードでアクセスするようになっています。 ほかのクラウド製品も、Oracle Coherenceだったり、楽天のRomaだったり、非RDBMSのデータストレージを提供します。 クラウドというわけではないけど、mixiのTokyo TyrantやApache CouchDBも、RDB
窓の杜 - 【REVIEW】SQL文の入力支援やER図作成に優れた高機能なSQL開発環境「A5:SQL Mk-2」
「A5:SQL Mk-2」は、SQL文の入力支援やER図作成などの機能を備えた高機能なSQL開発環境。Windows 98/2000/XP/Server 2003/Vista/Server 2008/Vista x64に対応する寄付歓迎のフリーソフトで、作者のWebサイトからダウンロードできる。 本ソフトは、SQL文の作成・実行を行える汎用のデータベース開発環境。ADOやODBCドライバーを利用して各種データベースに接続可能で、本ソフトで作成したSQL文を実行し、その結果を表示できる。また、SQLの実行計画を取得したり、実行結果を「Excel」へ出力することも可能。 画面はサイドバーと編集画面の2つに分割されており、サイドバーではデータベースおよび関連するスキーマ・テーブル・ビューといった項目がツリー形式で表示される。編集画面はタブ切り替え式になっており、SQL文やテーブルなどを複数開いて
窓の杜 - 【REVIEW】「SQLite」のデータベースをGUIで操作できる高機能管理ソフト「PupSQLite」
「PupSQLite」は、フリーで利用できる軽量データベースエンジン「SQLite」のデータベースをGUIで管理できるソフト。Windows XP/Vistaに対応する寄付歓迎のフリーソフトで、作者のWebサイトからダウンロードできる。なお、動作には.NET Framework 2.0以降が必要。 本ソフトには「SQLite」のライブラリ“sqlite3.dll”が同梱されており、環境の構築作業などが必要なくそのまま利用可能。画面はMDI方式になっており、複数のデータベースをそれぞれ同時に子ウィンドウとして開くことができる。各データベース内のテーブルは、データベースのウィンドウ内にタブ切り替え型のグリッドビューとして表示される仕組み。 機能も充実しており、テーブル内データの閲覧・編集はもちろん、SQL文を発行して結果を表形式で閲覧できる機能、テーブル定義文を出力する機能、2つのテーブルを比
ORACLE_SID を変更する方法 - オラクル・Oracleをマスターするための基本と仕組み
ORACLE_SID(SID の名前) を変更する方法 ORACLE_SID はデータベースの作成時のデータベース名と同じ名前を使用しているため、通常ではあまり違いを意識されていない。 (オラクルで ORACLE_SID とデータベース名、インスタンス名を区別するのは、RAC 構成の場合) ⇒ DBID、データベース名を変更したい場合は、こちら ORACLE_SID(SIDの名前) の変更の手順 作業例 ORACLE_SID=ORCL、データベース名=ORCL.MYDOMAINで作成したデータベースを ORACLE_SID=HOGE、INSTANCE_NAME=IAMHOGE の設定で起動する。 シャットダウン SQL> SHUTDOWN IMMEDIATE サーバーパラメータファイルの複製 # cp $ORACLE_HOME/dbs/spfileORCL.ora $ORACLE_HOME
データベースを特定する名前 - オラクル・Oracleをマスターするための基本と仕組み
データベース名のいろいろ ORACLE_SID、システム識別子、SID、インスタンス名、グローバルデータベース名、ネットサービス名、TNS サービス名、 接続識別子、Oracle のデータベースをあらわす言葉は非常に多い、混乱するほどに多い、それを整理しておく。 DBID、ネットサービス名などのデータベースを特定する名前 インスタンス関連 データベース識別子、DBID(Database IDentifer) データベースの内部の一意データベース識別子。 通常、複数ホスト間でもデータベースを物理コピーしない限り同じ番号になることはない。(100% ないとはいえないだろうが、無視できるほど限りなく少ないと思われる。) RMAN でも一意に識別するための ID として使用している。(他のベンダーから販売されているツールも利用しているらしい。) ということは… 物理コピーでインストールしたデータベ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
忘れっぽいエンジニアのオラクルＳＱＬリファレンス
Oracle Enterprise Managerドキュメント
ゼロから理解する「Oracle RAC」
IDEA * IDEA
PHPでのセキュリティ対策についてのメモ - Liner Note