Hadoop関連の用語をざっくりまとめる【Hive, Presto, Spark】 - Qiita
はじめに この記事はビッグデータで用いる分散処理関連の用語について初学者向けにまとめたものです。 ある程度詳しい人にとっては退屈な内容かもしれないです。 Hadoop、Hive、Spark、Presto、Mapreduce...ビッグデータ周りはこういった用語が多いです。 自分は初めてこれらに触れたときに訳がわからなくて泣きそうになったのでざっくりとまとめました。 各々の説明はそんなに詳しくはしないので、イメージを掴むくらいを目的としています。 ビッグデータと分散処理 最近ビッグデータって言葉よく聞きますね。 対になる用語としてスモールデータってものあります。 文字通りビッグデータとは容量がクソでかいデータのことなのですが、明確な定義はなく、だいたい数百万レコードまでならスモールデータって呼ばれるみたいです。（数GBくらい） そもそもなぜビッグデータ処理なるものを考えなければいけないのだろ
「昼飲み、いいわけがない」 田村厚労相が自粛呼びかけ：朝日新聞デジタル
","naka5":"<!-- BFF501 PC記事下（中⑤企画）パーツ＝1541 --><!--株価検索 中⑤企画-->","naka6":"<!-- BFF486 PC記事下（中⑥デジ編）パーツ＝8826 --><!-- /news/esi/ichikiji/c6/default.htm -->","naka6Sp":"<!-- BFF3053 SP記事下（中⑥デジ編）パーツ＝8826 -->","adcreative72":"<!-- BFF920 広告枠）ADCREATIVE-72 こんな特集も -->\n<!-- Ad BGN -->\n<!-- dfptag ＰＣ誘導枠５行 ★ここから -->\n<div class=\"p_infeed_list_wrapper\" id=\"p_infeed_list1\">\n <div class=\"p_infeed_list\">
「仕事ができない人」を全員クビにしたNetflixで起きた、驚きの結果
自分の働く会社を思い出していただけると実感としてわかることだが、どんな組織でも「優秀な人」と「そうでない人」がいる。はっきり言うなら「仕事ができる人」と「足を引っ張っている人」である。 では、可能かどうかはひとまず置いておいて、「足を引っ張っている人」を全員解雇し、何割かの「優秀な人」だけで仕事をしたら、会社の業績は上がるだろうか？ 全社員の3割を解雇した会社で起きた驚きの効果 『EXTREME TEAMS—アップル、グーグルに続く次世代最先端企業の成功の秘訣』（ロバート・ブルース・ショー著、上原裕美子訳、すばる舎刊）は、世界に名をとどろかせる最先端の企業で実践されているマネジメントやチーミングの手法を紹介していく。 登場するのはピクサーやザッポス、パタゴニア、アリババなど、急成長とイノベーティブなサービスで知られる企業が並ぶ。いずれも、労働者に大きな裁量が与えられ、労働時間の自由度も高い
5G情報持ち出し容疑 ソフトバンク元社員逮捕、警視庁: 日本経済新聞
日経の記事利用サービスについて 企業での記事共有や会議資料への転載・複製、注文印刷などをご希望の方は、リンク先をご覧ください。 詳しくはこちら 高速通信規格「5G」に関するソフトバンクの技術情報を不正に持ち出したとして、警視庁は12日、ソフトバンク元社員の合場邦章容疑者（45）=横浜市鶴見区=を不正競争防止法違反（営業秘密領得）容疑で逮捕した。合場容疑者は持ち出しがあったとされる直後に同業の楽天モバイルに転職していた。 逮捕容疑はソフトバンクに勤務していた2019年12月31日、社外から自分のパソコンで同社のサーバーにアクセスし、営業秘密にあたる5Gの技術情報などを不正に取得した疑い。警視庁は認否を明らかにしていない。 合場容疑者は同日にソフトバンクを退社し、直後の20年1月に楽天モバイルに転職した。ソフトバンクによると、持ち出されたのは同社の4Gと5Gの基地局設備や基地局同士などを結ぶ固
B-treeインデックス入門 - Qiita
B-treeがMySQLで使用されている背景から、B-treeインデックスの構造、そしてそれに基づいたインデックスの使用方法の入門編です。以下の流れに沿ってまとめていきます。 インデックスってなに？ B-treeってなんでインデックスに使われているの？ B-treeインデックスの構造 インデックスの使用方法 ※ 勉強をかねてまとめていることもあり、間違っている箇所がございましたら教えていただけると嬉しいです。 インデックスってなに？ 全体の内容の中から特定部分を探すために使用する、本の索引のような概念のことです。これを用いることで、検索を高速化することができます。 特定の項目が本のどこに載っているかを確認するために索引を調べることで、全ページを順に調べなくても、その項目が登場するページ番号がわかる MySQLのストレージエンジンでも、インデックスが同様の方法で利用されており、インデックスの
RFC7938 - 大規模データセンター内でのルーティングのためのBGPの利用方法 - show log @yuyarin
はじめに この文書は RFC7938 - Use of BGP for Routing in Large-Scale Data Centers の日本語訳です。 翻訳者はデータセンターネットワークの専門家ですが翻訳の専門家ではありません。技術的な意味を維持した上でなるべく読みやすい日本語になるようにしているため、英文の直訳ではなく一部のニュアンスがかけている場合がありますのでご了承ください。オリジナルの目次、謝辞、参考文献等は省略しています。 免責 いつものやつ 目次 はじめに 免責 目次 概要 1. 導入 2. ネットワーク設計の要件 2.1 帯域とトラフィックのパターン 2.2 CAPEXの最小化 2.3 OPEXの最小化 2.4 トラフィックエンジニアリング 2.5 要件の要約 3. データセンタートポロジーの概要 3.1 従来のDCトポロジー 3.2 Closネットワークトポロジー
「分析SQLスタイルガイド」をかなり真面目に考えた - Qiita
目次 なぜSQLのスタイルガイドが重要なのか この記事の目的 この記事の対象者 分析SQLスタイルガイドの指針 基本ルール 命名規則 インデントルール 別名ルール joinルール クエリ分割ルール ⭐ コメント欄で「いや私はこう思う！」という意見をたくさんいただきました！ぜひそちらも御覧ください！（決して揶揄ではないです） なぜSQLのスタイルガイドが重要なのか SQLはプログラミング未経験者でもとっつきやすい言語と言われ、エンジニアや分析を本業としていない人でもSQLを使う機会が増えてきていると思います。 そんなSQLですが、こちらのブログでも指摘されている通り、一般的なスタイルガイドが定まっていません。スタイルガイドとはコードの書き方マナーようなもので、どこで改行するか、空白はいくつ入れるか、大文字を使うかなどの諸々を指します。 もしスタイルガイドが無いとこんな事が起こります コードに
AWSが生まれたのは、Amazonが経費削減のためにSunのサーバからHP/Linuxサーバへ切り替えたことがきっかけ。当時の社員が振り返る
AWSが生まれたのは、Amazonが経費削減のためにSunのサーバからHP/Linuxサーバへ切り替えたことがきっかけ。当時の社員が振り返る 1990年代後半に、米Yahoo!などに代表されるインターネット系企業の株が高騰したインターネットバブルが発生しました。 そのバブルが2000年前後にはじけると、ユーザー数の拡大を背景に資金調達をしてきた企業の多くが投資家からの資金を得られなくなり、行き詰まり始めます。 Amazon.comもそうした状況のなかで先行きを不安視された企業の1つでした。2001年4月の週刊東洋経済の記事には、最高値の10分の1程度にまで下がった株価のグラフとともに、「莫大な酸素（キャッシュ）を燃やし続けている」「2000年12月末時点で2000億円を超える債務超過だ」と記されています。 当時Amazon.comのデジタルメディア部門ディレクターであったDan Rose氏
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「記憶を消してもう一度やりたい」「マジでとんでもないゲームだった」年末年始にOuter Wildsを遊んだみなさんの声（ネタバレなし）
Hadoop＋Hive検証環境を構築してみる
従業員の逮捕について | 楽天グループ株式会社
PostgreSQLのtext型に対するINDEX