機械学習基盤のセキュリティとエクスペリエンス - builderscon tokyo 2019
Abstract 「AI幻滅期」と言われている昨今ですが、ブームが落ち着く一方で私たちITエンジニアの実業では機械学習技術の導入や導入検討が増えており、また堅実な事業活用も進んでいると感じます。 本セッションでは、話者が約2年半に渡って機械学習とデータサイエンスの基盤に携わってきた経験から、機械学習基盤で必要となったセキュリティとエクスペリエンスについてお話しします。 また直近2〜3年に渡る機械学習プロジェクトの増加と50名超から成る機械学習研究者・データサイエンティスト・DevOps/ML Opsの混合組織が成長する中でいかに軽量に研究開発や検証を行い、セキュリティを保ち、エクスペリエンスを向上させるか、これらを念頭に置いた基盤の変遷についてもご紹介します。 【機械学習基盤のセキュリティ】 機械学習基盤ではカメラ映像や位置情報といったデータを一般的なWebアプリケーションとは異なったシス
mazgi.log
WebKit will hang in the specific combination if you use WebKit with Playwright, Docker, and Ubuntu. The Purpose of this Article In this article, I describe PCs and development environments I recommend for those who want to become a web developer. I’ll not only list up PCs but also describe why I use them and how. When you develop web systems, PCs and development environments are the things you wil
mazgi.log :: S3 + CloudFrontをTerraformで設定してCircleCIで更新する
「Terraform で S3+CloudFront+SSL/TLS 証明書 w/ ACM を設定して Hugo で作った static な Web サイトを CircleCI で自動 deploy する」やつができた。 できたもの 普通のいかにもHugoで作った Web サイトができた。 もう 2018 年なので手オペなどせず Infrastructure as Code で構築かつ CI でコンテンツ deploy です。 中身はまだない。 きっと酒とメシについての何かが書かれるのでしょう。 これはそもそも先日開催したハッカソンでやろうとして途中までしか進められなかったので、その補習も兼ねてます。 なお次回ハッカソンは Go です！ DeNA Techathon: 著者と学ぶ「Go ならわかるシステムプログラミング」黙々会 - connpass 構成 図を描く気力がなかったのでテキスト
mazgi.log :: Amazon SageMakerをそれなりの人数で使うときの設定
AWS のマネージド Jupyter サービスである「Amazon SageMaker」を数十名規模で使う機会があったのでインフラ的に設定した内容などを書いておく。 SageMaker で何をしたかなどはいずれちゃんとした情報が出ると思う。 出ました！ => Amazon SageMaker ハンズオンレポート Amazon SageMaker とは? AWS の WebUI でぽちぽちクリックしていくと Jupyter が起動する、そういうやつです。 SageMaker のオフィシャルサイトはこちら。 機械学習モデルとアルゴリズム | AWS での Amazon SageMaker Amazon SageMaker の起動方法 まずアクセスすべきはこちら。 https://console.aws.amazon.com/sagemaker/home#/notebook-instances
<mazgi.github.io 移行済>Amazon SageMakerをそれなりの人数で使うときの設定 - mazgi.log
移動しました mazgi.log :: Amazon SageMakerをそれなりの人数で使うときの設定 AWSのマネージドJupyterサービスである「Amazon SageMaker」を数十名規模で使う機会があったのでインフラ的に設定した内容などを書いておく。 SageMakerで何をしたかなどはいずれちゃんとした情報が出ると思う。 Amazon SageMakerとは? AWSのWebUIでぽちぽちクリックしていくとJupyterが起動する、そういうやつです。 SageMakerのオフィシャルサイトはこちら。 aws.amazon.com Amazon SageMakerの起動方法 まずアクセスすべきはこちら。 https://console.aws.amazon.com/sagemaker/home#/notebook-instances 「Create notebook inst
<mazgi.github.io 移行済>S3+CloudFrontをTerraformで設定してCircleCIで更新する - mazgi.log
移動しました=> mazgi.log :: S3 + CloudFrontをTerraformで設定してCircleCIで更新する 「TerraformでS3+CloudFront+SSL/TLS証明書 w/ ACMを設定してHugoで作ったstaticなWebサイトをCircleCIで自動deployする」やつができた。 できたもの 普通のいかにもHugoで作ったWebサイトができた。 もう2018年なので手オペなどせずInfrastructure as Codeで構築かつCIでコンテンツdeployです。 中身はまだない。 きっと酒とメシについての何かが書かれるのでしょう。 https://sakemeshi.love/ これはそもそも先日開催したハッカソンでやろうとして途中までしか進められなかったので、その補習も兼ねてます。 なお次回ハッカソンはGoです！ denatechstudi
<mazgi.github.io 移行済>SSE-KMSで暗号化したS3バケットをs3fsでmountする - mazgi.log
移動しました=> mazgi.log :: SSE-KMSで暗号化したS3バケットをs3fsでmountする タイトルの通り「AWS Key Management Service (AWS KMS) 」を使って暗号化したAmazon S3バケットをs3fsでUbuntu 16上でmountした。 KMSについては以下のドキュメントが詳しいが要は暗号化の際に煩雑な鍵の管理をAWSにお願いできる仕組み。 docs.aws.amazon.com S3バケットの準備 S3バケットを作り、画像のように Default encryption を AWS-KMS に設定する。 なおこのS3バケットは記事公開時点で削除済み。 s3fsの設定 Install GitHubからアーカイブをダウンロードして $ ./autogen.sh $ ./configure $ make $ sudo make inst
さくらのクラウドで「尖ったインフラ環境」を構築。カスタマイズに強い、その実力とは | SELECK [セレック]
今回のソリューション：【さくらのクラウド】 〜「素直な仮想サーバー」として使える国内サービス「さくらのクラウド」で、柔軟で尖ったインフラを構築した事例〜 AWSやGoogle Cloud Platformといったクラウドサーバーは、今やサービス開発には欠かせないものになっている。 DSPシステム「Sphere」を、数百台ものサーバーで構築しているマーベリック株式会社。リリース当初からハウジング100％の環境でインフラを構築してきた同社だが、新規サービス「Sphere Paper」「Sphere Infeed」では、クラウドサーバーを活用している。 そこで選択したのは、さくらインターネット株式会社が提供する「さくらのクラウド」だ。 さくらのクラウドには、海外発のクラウドサーバーにはない「ハウジングとのシームレスな接続」というメリットに加えて、仮想サーバーが「素直」でカスタマイズしやすいという
![さくらのクラウドで「尖ったインフラ環境」を構築。カスタマイズに強い、その実力とは | SELECK [セレック]](https://cdn-ak-scissors.b.st-hatena.com/image/square/b327b7dc70410a16b94929c412876d3cb6577d9b/height=288;version=1;width=512/https%3A%2F%2Fdpd29bjwmgbr8.cloudfront.net%2Fwp-content%2Fuploads%2F2018%2F06%2F24155254%2F89c9cc73-ed31-434a-b8ed-43ae029f046f.jpg)
さくらのクラウドで「尖ったインフラ環境」を構築。カスタマイズに強い、その実力とは | SELECK
今回のソリューション：【さくらのクラウド】 〜「素直な仮想サーバー」として使える国内サービス「さくらのクラウド」で、柔軟で尖ったインフラを構築した事例〜 AWSやGoogle Cloud Platformといったクラウドサーバーは、今やサービス開発には欠かせないものになっている。 DSPシステム「Sphere」を、数百台ものサーバーで構築しているマーベリック株式会社。リリース当初からハウジング100％の環境でインフラを構築してきた同社だが、新規サービス「Sphere Paper」「Sphere Infeed」では、クラウドサーバーを活用している。 そこで選択したのは、さくらインターネット株式会社が提供する「さくらのクラウド」だ。 さくらのクラウドには、海外発のクラウドサーバーにはない「ハウジングとのシームレスな接続」というメリットに加えて、仮想サーバーが「素直」でカスタマイズしやすいという
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
mazgi.log :: このWebサイトの見た目をちょっとまともにした
mazgi.log :: S3 + Lambda + SQSでファイル処理する仕組みをTerraformで構築する
mazgi.log :: SSE-KMSで暗号化したS3バケットをs3fsでmountする
mazgi.log :: 簡易な技術ドキュメントをHugoで書くと便利だった
<mazgi.github.io 移行済>簡易な技術ドキュメントをHugoで書くと便利だった - mazgi.log
<mazgi.github.io 移行済>EC2 P3で使えるChainerMN入りのDockerイメージを作った - mazgi.log
システムの差がサービスに直結する。つまり、アドテクはエンジニアにとってチャレンジしがいのある世界だということです。｜マーベリック株式会社 松木 秀憲氏 | CHANGE-MAKERS
<mazgi.github.io 移行済>複数のサーバーに対してSSL証明書の期限を確認する - mazgi.log
<mazgi.github.io 移行済>Hadoop黙々会を始めました - mazgi.log
<mazgi.github.io 移行済>NISSAN×DeNA @ dots. #23x に行ってきました - mazgi.log
「第2回さくら #石狩DC 見学ツアー～さくらの夕べin石狩～」に参加してきた(1日目) - mazgi.log