Transcript 1. 統計学とデータ・マイニングの基礎 2. 背景 3. 2011年頃から急速に普及 "Big Data" という言葉自体は2000年頃に登場 国内でも2012年頃からイベント開催が相次ぐ ビッグデータ時代の幕開け HBR Oct, 2012 Google Trendsによる「Bigdata」のインタレスト移行 ビッグデータExpo 2012の開催 featuring Data Scientist: The Sexiest Job of the 21st Century 4. 従来とは桁外れな「3V」の性質を併せ持つデータ それらのデータを分析・活用するまでのさまざまなプロセス や技術的アプローチまで含む包括的な概念 IBMはもう1つの「V」=Veracity(情報の精密さ)を付け加えることを提唱し ている ビッグデータの一般的な定義 Volu
2. Most of our systems are big “Future transformers” - Marius Eriksen 3. predictable performance is difficult to achieve. In a predictable system, worst-case performance is crucial; average performance not so much. ... predictable performance is difficult to achieve. In a predictable system, worst-case performance is crucial; average performance not so much. - Peter Schuller 4. predictable perform
Transcript 1. ストレージの設計 ストレージは様々な製品がリリースされていて、金額の幅も非常に大きいです。 プロジェクトに依っては、ストレージの選定が重要である事も少なくありません。 では、ストレージの性能はどの様な要素で決定されるのでしょうか。 RAIDの組み方、ディスクの諸元、FC / iSCSI / NAS と言った接続方式について説明しています。 最後に論理的思考を用いたグループワークの演習を載せています。 エンジニアに興味のある人、仕事のご依頼、資料への質問はお気軽に! ※本資料の内容を基にした一切の損害について、責任は負い兼ねますのでご了承下さい。 吉原 和男 フリーのITエンジニア/コンサルタント 2. ストレージ ■大きく分けるとコントローラと、ディスクの2部品で構成されている 演算システム キャッシュ ディスク ディスク ディスク ディスク コントローラ 演算
2. 自己紹介 濱野 賢一朗 (はまの けんいちろう) – 日本Hadoopユーザー会のメンバとして、 イベント Hadoop Conference Japan や 勉強会 Hadoopソースコードリーディング の企画・実施を担当 – 翔泳社 『Hadoop徹底入門』 監修者 – NTT DATA 基盤システム事業本部 OSSプロフェッショナルサービス に所属 – Hadoop 関係者で話題になった 「経産省の報告書」 の実証事業のPM 平成21年度 産学連携ソフトウェア工学実践事業報告書 高信頼クラウド実現用ソフトウェア開発(分散制御処理技術等に係るデータセンター高信頼化に向けた実証事業) http: //www.meti.go.jp/policy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist
2. Agenda はじめに 10分くらいで振り返るSQL Server とデータベース SQL Server ありがちな勘違い 勘違いしたままだと……? 最近のデータベースに求められること 最低これだけはやっておこう 余裕があればこれもやろう まとめ 最後に(おまけ) 3. はじめに このセッションではSQL Serverのことを扱います 本日のハッシュタグ #WinIBDay SQL Serverをこれから使う or 使っているけどよくわかっていない、 なんて人をターゲットにしています ガッチリ使っている人は真新しいことはないかもしれません 重要なキーワードは緑字にします 話している人の自己紹介 SQL Serverを使ってだいたい6年くらい。DBトータルでは10年以上 Microsoft MVP for SQL Se
4. なぜバックアップの前にこの章が? SQL Server バックアップとリストアの基礎 バックアップとリストアを勉強するためには SQL Server のデータベースの構成を理解しておく必要が あります。 データベースの構成とバックアップの取得単位には密接 な関わりがあります。 データ更新の流れを理解することでバックアップ / リストアに影響のある設定の理解が深まります なぜ、そのバックアップを取得する必要があるかの理解 につながります。 4 6. 各構成要素の役割 SQL Server バックアップとリストアの基礎 構成要素 説明 データベース データ ファイルグループ データファイルを束ねるための論理名 PRIMARY というファイルグループが必ず作成される プライマリデータファイルは PRIMARY ファイルグループに配置 データファイル 実際にデータが格納される
1. 僕と契約してセキュアな インフラエンジニアになってよ 〜 Gnukのススメ 〜 2011/04/09 qpstudy1周年記念LT大会 MATSUU Takuto 3. サーバへのログインどうしてる? SSH? 大抵そうですよね 認証方式は? パスワード認証?公開鍵認証? 秘密鍵の管理、どうしてます? ~/.ssh/*に置きっぱなし? ~/.ssh/*をぶっこ抜くウイルスがでてきたらど うします? ~/.ssh/に秘密鍵を置いておくのは怖くね? パスフレーズは設定されてるけど… 5. Gnukとは GNU Privacy Guard(GnuPG)の電子鍵を保管する USBトークンのためのソフトウェア http://www.fsij.org/gnuk/ 開発者はg新部(ぐにゅーべ)さん STM32(ARM/Cortex-M3)搭載の組み込み機器を OpenPGP card互換(Open
2. 高速転送(大容量化)の必要性 — 高速転送によるスイッチ・ルータの大容量化のメリット — コスト削減:装置台数の削減 (ただし,ポート数が問題になる場合は当てはまらない) — コスト削減:インターフェース・伝送装置数の削減 — 低速リンクのLAGではなく,高速リンク1本にすることで,伝送路にかか る費用を削減できる スイッチ・ルータで一層の高速転送(大容量化)が 可能になると,各種コストが下がる場合がある 3. 今後の大容量転送時代に向けて — ハードウェア転送=早い☝( ◠‿◠ )☝ — ソフトウェア転送=遅い☝(◞‸◟)☝ — ( ^o^)「魔法のハードウェアでポポポポ~ンとパケット転送したい」 — ( ˘⊖˘) 。o(ん?ちょっと待てよ…ハードウェア転送ってなんだ?) — |ハードウェア|┗(☋` )┓三 — ( ◠‿◠ )☛よくわからな
6. x86 上で x86 を仮想化して るんだから、命令を直接実 CPU で実行したい! ※ 但し実行しちゃまずい奴はどうにかしてね♥ 6
2. Linux女子部 firewalld徹底入門! 自己紹介 中井悦司(なかいえつじ) – Twitter @enakai00 日々の仕事 – Senior Solution Architect and 「Linux独習書の新定番」 書きました! Cloud Evangelist at Red Hat K.K. 企業システムでオープンソースの活用を希望される お客様を全力でご支援させていただきます。 昔とった杵柄 – 素粒子論の研究(超弦理論とか) – 予備校講師(物理担当) – インフラエンジニア(Unix/Linux専門) 読者の声より ―― 「今はインターネット上に情報が溢れているけど、質の高い入門書が少なく なっているのは不幸なことだと思う。そんな中、この本はすごくいい」 「平易な言葉でありながら、決して足りなくはない。慎重に選ばれています。 脳みそに染みこんで来ます
23. OpenPyXL+BioPython • OpenPyXL – Excel 2007 xlsx/xlsmを読み書きする パッケージ • BioPython – PythonでBioinformatics(ゲノム配列や タンパク質立体構造を扱う) – PubmedのAPI(xmlが返ってくる)にも対 応 25. コード from Bio import Entrez, Medline from openpyxl import load_workbook Entrez.email = ”_____@gmail.com" handle = Entrez.efetch(db="pubmed", id=["21982300"], re"ype="medline", retmode="text") records = Medline.parse(handle) record = list(r
1. Copyright (C) 1999-2013 DeNA Co.,Ltd. All Rights Reserved. 大規模 Perl 初心者研修を支える技術 株式会社ディー・エヌ・エー 玉田 大輔 1 2. Copyright (C) 1999-2013 DeNA Co.,Ltd. All Rights Reserved. 自己紹介 2 • 玉田 大輔 (29) • DeNA 新卒5年目 • エンジニア • 戦国ロワイヤル立ち上げ担当 • 2012 年春に HR に異動 新卒エンジニア採用と 中途エンジニア採用を担当 • 2013 年春 新卒エンジニア研修 Project Manager
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く