「分析やってます」の大半は処理なんです　本質なきデータ分析がはびこるワケ：これからのAIの話をしよう（データ整備人編）（1/3 ページ） データサイエンティストやデータアナリストなどに比べ、あまり目立たない「データ整備人」という仕事。フリーランスとして20年以上データ分析に携わってきたしんゆうさんは、データの抽出・集計を行うデータ整備の重要性をブログなどで発信しています。 しんゆうさんへのインタビューの前編では、「データ分析においてデータ整備人が重要な理由」「なぜ多くの組織でデータ整備が後回しにされるのか」「日本企業がデータ活用できないワケ」などを聞きました。 後編となる本記事では、日本のデータ分析の実態や、データ分析の本質にも切り込んでいます。 しんゆうさんのプロフィール データアナリストを名乗っているけど、データアーキテクト（データ整備人）＋アナリティクスディレクターもやる何でも屋。む

お客様の設定により、お客様情報が「非表示」となっております。お客様情報を表示するにはdアカウントでログインしてください。 お客様情報表示についてへ お客様情報表示についてへ Tweet 株式会社リクルートと業務提携契約を締結 -「dポイント」を中心にさまざまな分野での協業を推進- ＜2020年1月30日＞ 株式会社NTTドコモ（以下、ドコモ）は、このたび株式会社リクルート（以下、リクルート）と業務提携契約を締結いたしました。本提携に基づき、ドコモが提供する共通ポイント「dポイント」を中心に、リクルートが提供するさまざまなサービスをご利用のお客さまと、ドコモのdポイントクラブ会員の皆さまの利便性とサービスの向上をめざし、エコシステムの拡大に取り組んでまいります。 また、同時にリクルートと中小個店向けの業務・経営支援サービスの展開についての基本合意書を締結し、株式会社リクルートライフスタイル（

事業共創プログラム　OPEN HUB for Smart World 未来をひらく「コンセプトと社会実装」の実験場 OPEN HUB for Smart Worldは、社会課題を解決し、わたしたちが豊かで幸せになる未来を実現するための新たなコンセプトを創り、社会実装を目指す事業共創の場です

2020年1月25日に行われた第83回Tokyo.Rでの発表資料です https://tokyor.connpass.com/event/161709/ 資料で使われたコードは以下になります https://github.com/dropout009/tokyoR83

4428 シノプス　世界を視野に、“ありそう” で “なかった”需要予測自動発注システムを提供 by Ono ビジョン：“世界中の無駄を10%削減する。” スローガン：“ユニークな製品で世界ナンバーワン且つオンリーワンになる” 株式会社シノプス 上場時商号（会社名）　株式会社リンク 2019年4月1日　“株式会社シノプス”に商号変更 同社が提供する製品・サービス名であるsinops（シノプス）と同一にすることでブランドの知名度向上に加え、 sinopsを中心とした事業展開に集中する姿勢を表すため sinops（シノプス）の由来は sinops＝Strategic Inventory Optimum Solution（戦略的在庫最適化ソリューション） から。 ＜事業内容＞ 自動発注・在庫最適化サービス「sinops」の開発・販売 sinopsシリーズとして 流通三層である「製」　「配」　「販

機械学習でアルゴリズムを構築する上で重要なのが「データセット」です。アルゴリズムの精度を上げるためにはより多くのデータと時間が求められますが、十分に大規模なデータセットを集めたり探したりするのは機械学習を行う上で特に苦労するポイント。そんなデータセットをオンライン上から検索できる「Dataset Search」の正式版をGoogleが公開しました。 Dataset Search https://datasetsearch.research.google.com/ Discovering millions of datasets on the web https://blog.google/products/search/discovering-millions-datasets-web/ Dataset Searchにアクセスするとこんな感じ。 データセットを検索するには、入力欄に検索した

エンジニアゼロの組織から内製開発の DX をどう実現したのか / How did we achieve DX in in-house development in an organization with zero engineers?

This presentation is for Kaggle Days Tokyo organized by Kaggle and Google Cloud at Roppongi Hills Tokyo on Dec 11th.

Pornhubをご存知だろうか。 答えは当然Yesだろう。 ところがその本当の実態について我々は理解しているだろうか。 WikipediaのPornhubページには興味深い事柄が書いてある。 YouTubeに次ぐ世界第2位の動画共有サイト 360度動画を提供しており、PlayStation VRで視聴できる 上下運動で発電できるリストバンドを発明した 宇宙空間でポルノを撮影すると発表した VPNHubというVPNサービスを開始した これらのいくつかを恥ずかしながら私は知らなかった。 この恥ずかしさがモチベーションとなり、私はPornhubのポルノ以外のことを調べた。 出てくるものはアダルトコンテンツばかりだったが、 以下の3つのページに出会うことができた。 Pornhub Insights :: Digging deep into the data Interview with a Por

アイテック北海道では、最近、開発マシンとしてMacを導入する機会が増えてきました。 Android/iOS向けにネイティブアプリを開発するにしても、UnityやCocos2d-xを使うにしても、 やはり両OS向けのバイナリを作成できるMacのほうが何かと便利です。Unix向けの色々なツールも使えますし。何より使っていてカッコイイですよね！ さて、Windowsをずっと使っていた人がMacに乗り換える際、Windowsでできた◯◯◯は、 Macではどうやるの？というような質問を受ける事がよくありますが、今日はそんな質問の1つ、 「離席時にスクリーンロックするのは、どうするの？」 についてのTipsをご紹介します。Windowsでいうところの「Windowsキー + L」でやってた、アレです。 １.  ずばり、ショートカットキーを使う そのものずばりです。Macで割り当てられているショートカッ

このブログの RSSフィードを出力するコードを feedgeneratorで書いたのでその時のこと Pythonで RSSを出力するためのモジュールはいくつかあるが、比較検討した結果 Django由来と言われる feedgenerator を採用してみることにする。 フィードの構築 entriesは出力したいエントリのリスト。 title = "My Blog" link = "http://www.example.com/blog/" feed_url = "http://www.example.com/blog/index.xml" description = "私のブログです" # フィードを生成 feed = feedgenerator.Rss201rev2Feed(title=title,link=link,feed_url=feed_url,description=descri

こんにちは。sunnyと申します。運用企画チームというところで、サーバ監視運用部隊の運用をやっています。趣味はジョギングでマラソン大会にも出場しますが、一向にスリムになる気配がありません。知ってる方はつまらないけど、知らない方にとって「へー」となりそうな緩めの記事を書きます。よろしくお願いします。 AWSを学ぶ 今日は、AWS初学者にオススメの学習ノウハウのお話です。 何かをきちんと学ぶには本やドキュメントなどを読むという方法が一般的かと思いますが、私はどうも文字が苦手なので（もちろん必要な時は読みますが）、実際に手を動かしたり動画で学べるものが無いかと探しました。それで効果的だと思ったものをまとめましたので、書いていきたいと思います。ちなみに幸いなことに「AWSを勉強したい」と会社に言ったら、AWSのアカウントが貰えました。ありがとうございますありがとうございます。 注意 : AWSは日

セルフサービスなDWH。 データウェアハウス（Data Warehouse：DWH）は、直訳すれば「データの倉庫」で、データベース（Database：DB）の一種ですが、過去すべての時系列データを要約せずにそのまま保持し続ける、文字通り倉庫のような役割から、区別してそう呼ばれています。 また、DWHはデータを活用した意思決定に利用されることから、ビジネスインテリジェンス（Business Intelligence：BI）のひとつに位置付けられます。BIは経営・会計・情報処理などの用語で、企業などの組織のデータを収集・分析・可視化することで、ビジネスの意思決定に役立てる手法や技術のことを言います。 DWHを利用するのは商品開発やマーケティングなどの部門ですが、基幹データを扱うことから、管理するのは情報システム部門であることがほとんどです。管理部門がDWHのデータ設計と実装を行い、分析可能な状

AI論文データベース

JAWS-UG 初心者支部 #22 ハンズオン用の資料です。 目的 AWSアカウントを不正利用されないために、アカウントを作成したらまずやるべきセキュリティ周りの設定を行います。 前提 AWSアカウントを作成済みであること AWSアカウントにログインしていること リージョンは東京リージョンを利用します ハンズオン手順 アカウント周りの設定 ルートアクセスキーの削除 ※ルートアカウントのアクセスキーは、デフォルトでは作成されておりません。アクセスキーを作成済みの方を対象とします。 ルートアカウントは全てのサービスへのアクセスが出来てしまうため、ルートアカウントは使用せず、IAMユーザーを使用しましょう。 CLI等のプログラムアクセスも不要なため、アクセスキーを削除します。 https://console.aws.amazon.com/iam/home#/security_credential

スクレイピングにも色々あって、クローラにガーッとデータを一気に抜いてきてもらう場合もあれば、IR情報など、更新をウォッチしたいサイトに定期的にクロールするという場合もあると思います。 今回は後者のときのための話です TL;DR 日毎のスクレイピングという場合、更新情報の管理が必要になって面倒 スクレイピング結果をRSS形式にしておくようにしたら、その辺の手間がなくなって嬉しかった 更新情報をとってくる 例えばニュースサイトで新しい記事が出てきたらその内容を取得したい。 という場合、以下の手順が必要になります ニュースサイトの一覧画面からスクレイピングして記事のリストをとってくる 記事が未知のURLか、既知のURLか判定 未知のURLだったら処理する これはこれでやれば良いのですが、 記事が未知のURLか既知のURLか判定 という手順が意外と面倒臭かったりします。なぜならこの判断をするには、