覚えておきたい！「名寄せ」の基本 - ITpro
“システムを作成するときには考慮されていなかった観点でデータを使おうとしたとき”に「使えないデータたち」は発生します。しかし，使えないデータだからと言って捨ててしまうことはできないでしょう。なぜなら，そのデータは今まで使っていたデータであり，これからも使うデータだからです。 では，使えないデータを使えるデータにするにはどうすれば良いのでしょうか。その作業は「データ・クレンジング（Data Cleansing）」と呼ばれます。データ・クレンジングに似た言葉として「名寄せ」というものがあります。名寄せはデータ・クレンジングをした結果，データ間の関連性を導き出す行為です。重複データを特定するという観点では，名寄せはデータ・クレンジングの一環です。 この連載は，名寄せ技術について，個人データの例をとりあげて具体的に説明します。データを扱うソフト技術者/開発者にとって，名寄せは必須知識の一つと言って
手続き説明画面
受付窓口 各区役所戸籍住民課及び篠路・定山渓出張所 ※市役所住民情報課、大通証明サービスコーナーなど上記以外では受け付けておりません。 受付時間 1．平日 8時45分～17時15分 2．各区役所では平日の上記時間以外、及び土曜日、日曜日、祝日も終日届出できます。この場合日直員等が取り扱いますので、なるべく平日の上記時間内に各区戸籍住民課戸籍係で下調べをしておいてください。 区役所一覧へのリンクはページ右下にあります。
Linuxのバッファキャッシュとページキャッシュの違いは？ | b.l0g.jp
Linuxのバッファキャッシュとページキャッシュの違いは？ 2012-10-25 Linuxが管理するキャッシュ領域には、バッファキャッシュとページキャッシュ領域があって、topコマンドや/proc/meminfoの「bufferes」「cached」という項目を見れば、現在のそれぞれのキャッシュ領域がどの程度なのかを確認することができる。 どちらも、ディスクの読み書きをキャッシュしてデータへのアクセスを高速化するという点では同じだが、それぞれがどのような意味で、どういう違いがあるのかについて、Quoraに分かりやすい解説があったので、翻訳してみた。 ページキャッシュは、ファイルI/Oを最適化するために、ファイルのページをキャッシュする。バッファキャッシュは、ブロックI/Oを最適化するために、ディスクブロックをキャッシュする。 Linuxカーネル2.4よりも前では、2つのキャッシュは明白に
Performance Comparison of Streaming Big Data Platforms
Flink, Spark, and Storm are three popular streaming platforms compared on performance. A benchmark was created to simulate an advertising analytics pipeline with events streamed to Kafka. Flink and Storm had similar linear latency increases with throughput. Spark had higher latency due to micro-batching, but could handle higher throughput. At very high throughput, Storm performed best with acknowl
JupyterからSpark clusterを操作できるlivy + sparkmagicを試してみた - once upon a time,
Spark Summit 2016でもトークがあったSparkのREST serverであるlivyですが、MicrosoftがHDInsight上のSpark clusterとJupyterをlivyを使って繋げられるようにしたと聞いて、早速試してみました。 Jupyterって何？という方は簡単に言うと、ブラウザで各種言語のREPLが動くものと思ってもらえばいいです。 詳細は過去に書いた以下の記事を読んでみてください。 techlife.cookpad.com livyとは livyはSpark clusterをコントロールするためのREST Serverです。 Microsoftはこれとjupyter notebookのsparkmagicを使ってHDInsightとjupyterをつなげるようにしているそうです。 MSの取り組みはSpark Summit 2016のトークがわかりやす
Gigahorse — Gigahorse
Gigahorse Gigahorse は、Scala のための HTTP クライアントで複数のバックエンド実装をサポートする。 内部実装として Apache HTTP HttpAsyncClient か Async Http Client か Square OkHttp か Akka HTTP から選ぶことができる。 セットアップ Apache HTTP HttpAsyncClient を使う場合: libraryDependencies += "com.eed3si9n" %% "gigahorse-apache-http" % "0.7.0" Async HTTP Client を使う場合: libraryDependencies += "com.eed3si9n" %% "gigahorse-asynchttpclient" % "0.7.0" Square OkHttp 3.x
The 10 Algorithms Machine Learning Engineers Need to Know
It is no doubt that the sub-field of machine learning / artificial intelligence has increasingly gained more popularity in the past couple of years. As Big Data is the hottest trend in the tech industry at the moment, machine learning is incredibly powerful to make predictions or calculated suggestions based on large amounts of data. Some of the most common examples of machine learning are Netflix
Joda-Timeを使ってみよう - じみこつブログ
javaの日付関連のクラスでかゆいところに手が届かない感を感じている人に オススメできるのがJoda-Timeというオープンソースライブラリ。 こやつを知る前は標準のDateだとキツイにしても commons-ioのDateUtilsとかで何とかなっていたので そこまで朗報！というわけでもないのだけれど 使ってみたら結構便利だったのでまとめてみる。 ではさっそく。 Joda-Timeを使ってみよう 公式サイトはhttp://joda-time.sourceforge.net/になります。 最新バージョンは現状で 2.2 でした。 準備 使い始める準備はjoda-time-2.2.jarをクラスパスに通すだけですね。 mavenをお使いの方はpom.xmlに ... <dependency> <groupId>joda-time</groupId> <artifactId>joda-time
「すい臓がん」は、なぜ増加が食い止められないのか？（市川衛） - エキスパート - Yahoo!ニュース
７月３１日、大相撲の元横綱千代の富士の九重親方（６１）が東京都内の病院で死去したことが報じられました。現役時代、その技の美しさと圧倒的な強さに憧れを抱いた世代の一人として、心から哀悼の意を表します。 報道によると、九重親方は去年すい臓がんの手術を受け、その後は職務に復帰したものの、最近になって転移が見つかったとされています。 実はこの「すい臓がん」という病気は、検査や治療の技術が進歩した現代においても治癒が難しい、とても「やっかい」ながんなのです。 すい臓がんで亡くなる人は、増え続けている余り知られていないことですが、いまがんで亡くなる人は減り続けています。 亡くなる人の数自体は増え続けているのですが、それは高齢化の影響が大きく、年齢の影響を排除すると、がん全体の死亡率は年々減り続けているのです。主要ながん（胃がん、大腸がんなど）の死亡率を見ても、男女ともにおおむね横ばいか、減っています。
霞が関の業務見直し 旅費編
2016.08.01 行革事務局を中心に、各省庁の協力を得ながら、国の業務の見直しに取り組んできました。 その中でも旅費・会計業務の見直しに関しては、今回、徹底的に行いました。 国家公務員が出張した後、旅費が支払われるまでに三か月以上かかることも珍しくなく、職員がその間、立て替えなければならない状況でした。 また、精算にはたくさんの添付書類が必要で、事務作業も非常に煩雑でした。 霞が関には旅費を精算をするためのシステムがすでに導入されていますが、旅費精算業務の実態を調査することなく、また、各省庁の違いもそのまま放置されていたため、非常に使いにくい、非効率的なシステムになっていました。 そのため今回、各省庁の協力を得て、徹底的な旅費精算業務の調査を行いました。 その結果、旅費の支払いが一か月以内にできたのは四割未満、三か月以上かかったのは約一割。 多数の担当者が同じ項目をチェックし、旅費の計
足裏チェック！疲れと痛みの真犯人はカカトだ - NHK ガッテン！
足がだるい、ふくらはぎが張る…。 そんな人は、足の裏に「炎症」が起きている可能性があります！ ひどくなると、足の骨に「トゲ」ができて歩けないほどの激痛に襲われることも・・・ 足や足裏にトラブルが起きてしまう大きな原因は、 足裏の筋肉や、ふくらはぎの衰えです。 普段の生活ではなかなか気づけませんが、 「現代人の宿命」と言ってもいいほど 多くの人が抱える落とし穴になっています。 そこで今回のガッテンは、 足の健康度をチェックする３つの方法をご紹介しました。 「和式お便所座りポーズ」や「足指力」などをやってみて、 問題がある場合は、とっておきの「足裏＆ふくらはぎストレッチ」をぜひオススメします！ 足の疲れや張り、痛みをスッキリ解消するために、 詳しくは、お役立ち情報のページへどうぞ！ 足裏のかかとに炎症やトゲが発生する「足底腱(けん)膜炎」の原因の一つとして、「ふくらはぎの筋肉の硬さ」が挙げられ
かかとが痛いときに疑うべき病気と対処法10 | ライフスタイルNext
かかとの痛みの特徴と場所で病気を判断するかかとに痛みが生じるシーンやタイミングによって、どのような病気が考えられるのかをある程度判断することができます。 かかとが痛む主な状況と病気静止状態から歩き始めた直後にかかとが痛む足底腱膜炎(そくていけんまくえん)踵骨棘(しょうこつきょく)足に体重をかけた瞬間に、かかとが痛む踵骨下滑液包炎(しょうこつかかつえきほうえん)踵骨骨端症(しょうこつこったんしょう)かかとから土踏まずにかけての足裏を押すと痛む足底腱膜炎踵骨棘かかとの中央を押すと痛む踵部脂肪褥(しょうぶしぼうじょく)かかとから足の後ろ側のアキレス腱にかけてが痛むアキレス腱滑液包炎(あきれすけんかつえきほうえん)踵骨後部滑液包炎(しょうこくこうぶかつえきほうえん)長時間立ちっぱなしでいると、かかとが痛くなる足底腱膜炎踵骨棘坐骨神経痛長時間歩く・走ると、かかとが痛くなる後天性偏平足坐骨神経痛
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ビックカメラ | ダイキン エアコン （冷房時7～10畳／暖房時6～8畳）「Fシリーズ」 AN25TFS-W 【フィルター自動お掃除機能付】 ・・・・・【買い替えで5000ptプレゼント対象商品】
Iterate over dates range (the scala way)