Spotify Scio - Google Dataflow の Scala言語版 - Qiita
Google GCP(Google版AWS)のDataflowサービスを使ってみました。 Dataflowとは、その名の通り、膨大なデータをGoogleご自慢の分散環境を使用して並列で爆速処理してくれる、ビッグクエリーと同じGCPのマネージドサービスの１つです。 使用できるオフィシャルなプログラミング言語は、JavaとPythonのみですが、 Spotifyから、ScioというScalaのライブラリが提供されていますので今回使用してみました。 Dataflowでは、パイプラインを作成し、入力、変換1、変換2...変換N、出力の３ステップで構成します。関数型言語のScalaは、変換ロジックをラムダ式でコンパクトに記述できるため、Javaよりもコード量が少なくて済みます。 Spotifyでは、KafkaからDataflowへ移行する際に、Scalaで記述できるようにScioライブラリを開発した
コンピュータ業界でよく出る英語 - Qiita
みなさまへのお願いごと 間違いなどの指摘は、編集リクエストでお願いします。 コメントの記載はページが長いこともあり、お控えください。 TOEIC900でも英語が話せない日本人へ ITエンジニアの私がなぜ令和の今、中国語を学ぶのか？ 名詞/イディオム gotcha はまりポイント。注意すべきこと。引っ掛け。 Got you のくだけた表現。捕まえた、誰かをトラップに引っ掛ける、という意味から。 注) 一般的には、Got itやYup、I seeのような、同意の返事でよく使われる。 類) caveat, pitfall There are many gotchas in this application. sought-after (スキル、人材、機能、アプリが) 人気の、需要がある、求められてる、引っ張りだこ Python is a sought-after language. c-suit
機械学習を英語ビデオで学ぶサイトまとめ - Qiita
機械学習、盛り上がってますね。いつの日かクイックソートのようにロジックを知らなくても無意識に使える日が来るのでしょうか？ とにかくエンジニアにも数学と英語が必須な時代になりましたね。。。 グーグルのMartin Görner博士の３時間近いロングなビデオです。 MNISTをメインに、クロスエントロピー、Softmax、バックプロパゲーション、CNN、RNNと幅広く説明しています。 インド人？ぽい発音ですが、逆に聞き取りやすいです。 https://www.youtube.com/watch?v=vq2nnJ4g6N0&t=5265s&list=PL635lD4BqMFwg9TRzQPWGRrAOQBd41ISK&index=4 スタンフォードのフェイフェイ リー博士、今はグーグルAIのチーフサイエンティストです。 有名なスタンフォードの講義CS231nと呼ばれるものです。ゼロから作るの斎藤
Apex GoでELBのアクセスログをAWS LambdaでElasticsearchに取り込む - Qiita
すでに何人かの方が記事を書かれていますが、Go言語の情報が少ないので書いてみました。 基本的にはDevelopers.IOの藤本さんの記事を元に、Apex Goで実装してみました。 AWS Lambda Funcion作成 完成版のLambdaコードはGistを見てください。以下、要点のみ説明します。 全体の流れ ELBがアクセスログをS3に書き込むと、メタ情報がS3イベントとしてLambdaに渡され、該当のLambdaファンクションを実行します。 以下、処理詳細になります。 LambdaハンドラーがS3イベントを引数として受け取る。 S3イベントにはスライスで複数のアクセスログファイル名が格納されているのでループで処理する。 S3に接続し、アクセスログファイルのコンテンツを取得する。 取得したファイルを１行ごとループで処理する。(1行が1HTTPリクエスト) ログをJSON形式に変換する
Firebase の Auth 機能を使ってみる。Swift版 - Qiita
Firebaseとは 私はiOSデベロッパーですので、WWDCはジョブス時代から見てますが、Google I/Oは一度も見たことがありませんでした。野外コンサート会場みたいなんですね。。。グーグルのCEOスンダーはインド人です。マイクロソフトのCEOもインド人ですね。ティムクックもインドを訪問し、インドで４０００人のエンジニアを採用すると発表しましたが、インドの勢いはすごいですね。 Parseサービス終了に伴う、受け皿のFirebaseです。AWSサービスにもかぶります。Google I/Oにて、リノベートされたとのことでしたので、メール&パスワードログインと、Googleログインを使ってみました。 メール&パスワードログイン Podでプロジェクトを作成するまではkoogawaさんのページをご覧ください。 Podfileに下記を追加し、pod update してください。 pod 'Fir
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
