タグ

2023年10月15日のブックマーク (6件)

  • ぼくのかんがえたさいきょうのPostmanかんきょう

    Postmanを使う上でより便利になる環境設定の解説をしています ・Environmentの設定について ・CollectionのVariable, Auth設定について ・Testsでの値管理自動化について Postmanの入門を終え、基操作に慣れてきた方はより理解が深まる内容になっていると思います

    ぼくのかんがえたさいきょうのPostmanかんきょう
  • ラムダアーキテクチャ - Qiita

    1. 調査の趣旨・目的 2. 調査方法 3. 調査結果概要(要約) 4. 調査詳細(具体的な内容) 4.1. ラムダアーキテクチャとは 4.2. 三層構造とは 4.3. 登場の背景 4.4. 原理 4.5. ラムダアーキテクチャのメリット 5. 所感 6. 不明単語 1. 調査の趣旨・目的 ビッグデータ処理に用いられている、ラムダアーキテクチャについて理解する バッチレイヤ スピードレイヤ サービスレイヤ 2. 調査方法 参考ページ 拡張性と保守性を備える設計 ラムダアーキテクチャーを理解 5分ちょいでわかった気になるラムダアーキテクチャ 3. 調査結果概要(要約) ラムダアーキテクチャとは、三層構造を用いることで、ビッグデータを処理する設計概念 リアルタイム&低精度のスピードレイヤと、バッチ処理&高精度のバッチレイヤから、クエリに応じて適切なデータパスで処理を行う 4. 調査詳細(具体的

    ラムダアーキテクチャ - Qiita
  • ラムダアーキテクチャ

    ラムダアーキテクチャとはラムダアーキテクチャとは、膨大なデータ「ビッグデータ」を処理するアプローチです。ハイブリッドアプローチを使用してバッチ処理やストリーム処理メソッドへのアクセスを提供し、任意の関数を計算する問題を解決するために使用されます。ラムダアーキテクチャは3つのレイヤーから構成されています。 バッチレイヤー新しいデータは、データシステムへのフィードとして継続的に提供されます。データはバッチレイヤーとスピードレイヤーに同時に供給されます。全てのデータを一度に調べ、最終的にストリームレイヤー内のデータを修正します。ここでは、多くの ETL と従来型のデータウェアハウスを見つけることができます。このレイヤーは、通常 1 日に 1 回または 2 回、事前定義されたスケジュールを使用して構築されます。バッチレイヤーには、次の 2 つの重要な機能があります。 マスターデータセットの管理バッ

    ラムダアーキテクチャ
  • UTokyo English Academia

    こんな人におすすめです 英語での コミュニケーションに 苦手意識がある大学院生 学術的な交流の輪を 国際的に広げたい 大学院生 英語での授業スキルを 向上させたい 大学院生・大学教員 ラボ、学会、授業等、アカデミックな場で英語に触れる機会が当たり前になっています。 英語が母語でない大学院生や駆け出しの研究者の中には、英語を使って国内外の学術コミュニティに関わっていくことに魅力を感じる一方、不安や苦手意識を感じる方も多いのではないでしょうか。また、国際性豊かなクラスにおいて、英語で授業を行うことに戸惑う方も多いのではないでしょうか。 English Academiaは、東京大学大学総合教育研究センターの無料のプログラムとして開発されました(開講期間:2017年2月10日~2021年2月28日)。忙しい方でもスマートフォンやパソコンを使って自分のペースで研究生活に活かせる知識を身につけることが

  • 24時間365日動き続けるデータシステムの設計手法 : 「データ指向アプリケーションデザイン」実践編

    「データ指向アプリケーションデザイン」をベースに、24時間365日動き続けるデータシステムを実装する際に必要となる技術や考え方を紹介します。 この資料は、2023大阪大学大学院 情報科学科 マルテメディア工学特別講義で使われた資料を一般用に修正して公開しています。 参考: 「30分でわかるデータベースデザイン」https://speakerdeck.com/xerial/30fen-dewakarudetazhi-xiang-apurikesiyondezain-data-engineering-study-number-18

    24時間365日動き続けるデータシステムの設計手法 : 「データ指向アプリケーションデザイン」実践編
  • GitHubコマテク集 - OpenWork Tech Blog

    インフラチームの西川です。 当社ではGitHubを利用しています。いろいろ便利な機能があるのですが社内でコマテクを募集してみたところ意外と知らないものがあったので共有してみます。 行動の見える化 特定コミットのリンク取得 通知 行動規範 ガイドライン .github リポジトリ テンプレートリポジトリ タグをたくさんプッシュさせない ドラフトプルリクエスト チケットの自動リンク化 ベースブランチの更新を取り込む まだレビューが終わってないプルリクエストの一覧化 レビュアーの自動割り当て コードの所有者 ファイル単位でレビュー済みをチェックする レビュー中のファイルを全部閉じる 具体的な修正を提案する レビューコメントをラベル化 デプロイ管理 リリースノートを自動作成 行動の見える化 以下の設定をすることで、GitHub上の行動を見える化することができます。 docs.github.com

    GitHubコマテク集 - OpenWork Tech Blog