OpenRefineで神エクセルと戦う - Qiita
データエンスージアストにとって天敵とされる「神エクセル」。ぶつくさ言いながらも必要な人はひたすらセル結合の解除や省略値の補完やコピペ、そして検索と置換に勤しむ訳ですが、そんな人はぜひいちど、苦しみをみんなで乗り越えるためにコミュニティによって活発に開発されているOpenRefineを使ってみてください。神エクセルの難易度も様々ですが、表計算ソフトやテキストエディタだけで頑張るよりもはるかに効率的にクレンジングでき、さらには肩凝りも減らすことができます。※個人の感想です。 1 元データ 岩手県 令和元年度学校一覧（エクセル形式） セル結合はもとより均等割付、縦書き、名称の省略、区切り行などなかなか見事な神っぷりです。エクセルの行で596行あります。難易度は中級というところでしょうか。 2 整形/クレンジング 2.1 エクセルデータを読み込む 上級レベルになると、事前にエクセル側である程度整形
VMagicMirror - 夢日記屋さん - BOOTH
VMagicMirror v3.2.2 Standard Edition 2023/06/28 VRMをキーボードとマウスだけで動かせるWindows向けソフトです。ゲームパッドにも反応します。 ゲーム画面やコーディング画面の横に置いて配信に使ったり、単にデスクトップマスコットとして置きっぱなしにしたりできます。ウェブ会議やリモート登壇にも活用できます。 顔トラッキング、リップシンクに対応しているほか、簡易的なハンドトラッキングもサポートしています。 ※v1.8.0以降ではこちらの無料版について、ハンドトラッキングの使用に制限があります。制限を解除するには有料版(フルエディション)をお求め下さい。 VMagicMirror Full Edition: https://baku-dreameater.booth.pm/items/3064040 有料版の導入経緯について: https://n
SMSで送信元を偽装したメッセージを送る
送信元表記が送信者IDのケース SMSのメッセージを受信した際に表示される送信元には、電話番号の代わりに任意の英数字も表記できる。この英数字の送信元表記を「送信者ID（Sender ID）」という。JC3の図では 通信事業者Ａ が送信者IDに当たる。 なお送信者IDの利用可否は受信側の通信事業者の対応状況によって異なる。Twilioの販売パートナーであるKWCの説明によると、日本国内ではNTT DOCOMOとSoftBankが送信者IDに対応し、KDDIは対応していないとのこと²。私はKDDIの回線を所有していないため、受信側がKDDIの電話番号を使用している場合の挙動は検証できていない。 まずはiOSの公式メッセージアプリに届いていたAmazonからのメッセージのスレッドで偽装を試みる。送信者IDは Amazon となっているため、TwilioでSMSを送信する際のFromの値に Ama
GDPR Enforcement Tracker - list of GDPR fines
6 years GDPR: 5th edition of the CMS Enforcement Tracker Report now available The 2024 edition of the CMS Enforcement Tracker Report is now available providing a deep dive into fines imposed under the GDPR: link Ireland: Record fine against Meta Platforms Ireland Limited in the amount of EUR 1.2 billion The Irish DPA (DPC) has fined Meta Platforms Ireland Limited EUR 1.2 billion for unlawfully tra
池上彰氏の「格差はなぜ世界からなくならないのか」で使われたグラフに見る「なぜ印象操作はなくならないのか」
金曜プレミアム・池上彰緊急スペシャル https://t.co/Vb4jiYsTjc 前回 | 2016年12月16日(金) 19:57～22:52 放送 格差はなぜ世界からなくならないのか▽貧しい人がますます貧しく...深刻データ語る日本の格差 pic.twitter.com/g9AFUJHW6Y — 不破雷蔵(懐中時計) (@Fuwarin) 2016年12月17日 12月16日にフジテレビ系列で放送されたという「金曜プレミアム・池上彰緊急スペシャル 格差はなぜ世界からなくならないのか▽貧しい人がますます貧しく...深刻データ語る日本の格差」という番組で使われた、日米の所得に絡んだグラフ。そのものの画像や映像は権利関係があるので(引用の領域をこえるとの判断が成される可能性はある)直接の提示は止めておくけれど、どうも印象操作的なグラフの使われ方がされたとの指摘が多数挙がっている。 それを
自分のメールアドレスやID名で検索するとハッキングされて過去の流出リストに入っていたかどうかがわかる「Have I been pwned?」
by Automobile Italia Adobeや不倫・浮気サイトのAshley Madison(アシュリー・マディソン)を始めとする大手ウェブサイトがハッカーから攻撃を受けるなどして、個人情報が流出してしまう事件はたびたび起こっています。過去に起こった個人情報流出事件において、自分のメールアドレスやユーザー名が含まれていたのかを検索可能で、もし今後流出したら教えてくれるサイト「Have I been pwned?」がMicrosoftのMVP社員によって公開されています。 Have I been pwned? Check if your email has been compromised in a data breach https://haveibeenpwned.com/ ということで、公に情報が流出したことのあるサイトのリストは以下の通り。流出件数トップとなっているのは、20
クラウドを支えるこれからの暗号技術
The document summarizes cryptography techniques such as hashing functions, MAC, digital signatures, and FIDO authentication. It discusses SHA-2 and SHA-3 hashing standards, how MAC provides data integrity while signatures provide non-repudiation. ECDSA is introduced as an elliptic curve digital signature algorithm. FIDO aims to standardize multi-factor authentication using authentication devices a
ダメな統計学：目次｜Colorless Green Ideas
2017年1月20日追記：『ダメな統計学――悲惨なほど完全なる手引書』という本が出版されることになった。この本は、ここに掲載されているウェブ版の『ダメな統計学』に大幅に加筆したものだ。ウェブ版の『ダメな統計学』を読んで興味を持った方は、書籍となった『ダメな統計学』をぜひ読んでいただければと思う。書籍版の詳細については「『ダメな統計学――悲惨なほど完全なる手引書』の翻訳出版」という記事をご参照願いたい。 ここに公開する『ダメな統計学』は、アレックス・ラインハート (Alex Reinhart) 氏が書いたStatistics Done Wrongの全訳である。この文章は全部で13章から構成されている。詳しくは以下の目次を参照されたい。 はじめに データ分析入門 検定力と検定力の足りない統計 擬似反復：データを賢く選べ p値と基準率の誤り 有意であるかないかの違いが有意差でない場合 停止規則と
「I-O DATA ハードディスクフォーマッタ」でFAT32形式にフォーマット したいのですが？ | IODATA アイ・オー・データ機器
＜参考＞ 以下の手順にて、「I-O DATA ハードディスクフォーマッタ」でFAT32形式 にフォーマットを行なうことができます。 ※フォーマットを行なうと、中のデータは全て消去されます。大切なデータ が保存されている場合は、必ずデータをほかのハードディスクなどにコピー してからフォーマットしてください。 ※誤消去を防ぐため、ほかのUSB機器は、極力外してから操作することを 強くおすすめ致します。 ※添付のセットアップガイドや、弊社ホームページにて、お使いの製品が 「I-O DATA ハードディスクフォーマッタ」に対応しているかご確認の 上、お使いいただきますようお願い致します。 ※容量が2TBを超える(3TB以上など）のハードディスクやSSDはFAT32形式でフォーマットできません。 ===================================== 1.「I-O_DATA_ハー
DATA GO JP/open data
データセット データセットとは、ファイルやURLなどの「オープンデータ」が登録された入れ物を指します。 データポータルでは、複数の切り口からデータセットを探すことができます。
ハードディスクはどこのメーカー製が一番壊れにくいのかが2万5000台の調査結果でついに明らかに
By epSos .de ハードディスク(HDD)の寿命傾向や価格の展望を業務上で蓄積されたデータから発表してきたオンラインストレージサービスを提供するBackblaze社が今回新たにメーカー別のHDDの壊れやすさに関するデータを公開しました。 Backblaze Blog » What Hard Drive Should I Buy? http://blog.backblaze.com/2014/01/21/what-hard-drive-should-i-buy/ 今回比較したのはSeagate・Western Digital(WD)・日立の3メーカー。データは、2万5000台以上のHDDの調査結果から算出されているとのこと。 これが具体的なHDDのメーカー別の数字。東芝製・サムスン製については母数が少ないため今回は検討から除外しています。 なお、今回のデータの基になった、Backbl
「情報管理Web」：JST（独立行政法人科学技術振興機構）の｢学術情報流通｣発信サイト
「情報」はあらゆるものに付随しています。 現代社会は、情報が氾濫しているため、何かを知りたいときには、その膨大な情報のなかから、取得選択をしなくてはいけない機会が増えています。 関連性が高いもの、精度の高いものを収集しなくては、ウソの情報に踊らされてしまいますので、慎重に実行するべきタスクです。 そして、個人も企業も、情報を収集するだけではなく、保存・管理を行わなくてはいけません。 「情報」を「管理」する。 情報管理とは、「情報を簡易に取り出せる」「情報を活かす」「情報を適切に保存する」という意味があります。 最近では「情報管理」の意味合いに、「流出させない」というものも含まれています。 インターネットの普及に伴い、サイバー攻撃も身近なものになっているためです。 あなたの個人情報、企業の持つ顧客の個人情報や企業の機密情報が、不特定多数に狙われています。 情報管理がずさんだと、あっという間に
やればできる卒論の書き方 第３部 研究者と社会
やればできる卒論の書き方 第３部 研究者と社会 中田 亨 「精神のない専門家、魂のない享楽的な人間。 この無にひとしい人は、自分が人間性のかつてない最高の段階に到達したのだと、自惚れるだろう」 —マックス・ウェーバー『プロテスタンティズムの倫理と資本主義の精神』（中山元・訳、日経BPクラシックス） 研究と不正行為 (Academic Fraud) 残念ながら、自然科学研究にからんだ不正行為は、規模の差はあれ、ある程度の割合で行われていると考えられる。実際、大きな事件なら年に２～３件は新聞沙汰になっているし、小さな事件でも米国では不正を監視する役所(医学生物学関連のみであるが Office of Research Integrity, ORI)が不正調査結果を公表している。 卒論研究は教育訓練であり、研究成果の質は問われない。（「何を考え、何をやり、何が起こり、何が分かったか」を報告すれば満
実測データ収集へのこだわりで、被曝水準の低さが裏付けられる - 山形浩生の「経済のトリセツ」
デニス・ノーミル（Dennis Normile） 原文：Insistence on Gathering Real Data Confirms Low Radiation Exposures (Science 10 May 2013: Vol. 340 no. 6133 pp. 678-679) （翻訳 山形浩生） 東京： 2011年3月、福島第 1 原子力発電所での惨事が展開する中で、早野龍五は放射性物質の放出についてツイッター投稿を始めた。この東京大学素粒子物理学者は、次第に地域住民の被曝をめぐる論争にますます深く引きずり込まれるようになっていったのだった。当局がきちんとした事実を提供していないことに失望した早野は、学校給食の放射性セシウム検査を始めた。これは福島周辺の環境で最も量の多い放射性核種だ。そして、汚染食物を食べることで地元住民がどれだけ放射性核種を吸収しているか計測しようとし
ユニバーサル アナリティクスについて - アナリティクス ヘルプ
ユニバーサル アナリティクスは前世代の Google アナリティクスで、2020 年 10 月 14 日より前までは、ウェブサイトのデフォルトのプロパティ タイプでした。詳細
NASA | SDO's Ultra-high Definition View of 2012 Venus Transit
Launched on Feb. 11, 2010, the Solar Dynamics Observatory, or SDO, is the most advanced spacecraft ever designed to study the sun. During its five-year mission, it will examine the sun's atmosphere, magnetic field and also provide a better understanding of the role the sun plays in Earth's atmospheric chemistry and climate. SDO provides images with resolution 8 times better than high-definition t
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NASA Image and Video Library
私たちはお土産にどの八ッ橋を買えばよいのか（PDF）
Google Transparency Report
OpenStreetMap
