Serverless Architectures
Serverless architectures are application designs that incorporate third-party “Backend as a Service” (BaaS) services, and/or that include custom code run in managed, ephemeral containers on a “Functions as a Service” (FaaS) platform. By using these ideas, and related ones like single-page applications, such architectures remove much of the need for a traditional always-on server component. Serverl
遅れながら、Chefの新しい11系のバージョンを触ってみました。 つまづいた途中経過を含めて、セットアップのログや動きで気付いた事を簡単に残しておきます。 尚、今回使ってみた実行環境は、CentOSの6系です(Linux)。 結論から申し上げますと、Chefの新しいバージョンは、サーバのセットアップが物凄く楽でした。 旧来のバージョンでもUbuntuはそこそこ楽でしたが、CentOSの面倒くささと言ったら、んもう。 インストールパッケージの入手先 最近は、下記のChef本家となるOpscodeのサイトから、client/serverともインストーラ(各OSでのパッケージ)をダウンロードできるようになっています。 Chef Downloads Clientのインストール 上記サイトからパッケージをダウンロードしてインストールしてもよいのですが、Linuxであれば curl -L https:
SaaSシステムを開発しているみなさま、お元気でしょうか。 SaaSシステムというといわゆるWebサービスよりももう少しBtoBの雰囲気が漂ってまいります。 SaaSシステムでは契約者（ここではテナントと呼ぶ）が複数いて、テナント毎に複数のログインユーザーやロールが存在するのが一般的です。そして当然ながらテナント毎のデータは漏洩・混濁が許されない高いセキュリティが求められます。 SaaSシステムの構築はスケーラビリティにおいても100テナント程度から始まりゆくゆくは数千、数万テナントまで少なくとも線形にスケールするアーキテクチャを開発当初から求められ、さらに突発的な大規模テナントも問題なく吸収したいという要求があります。 その要求を満たす設計・開発・保守・運用をやっていくのは当然ながら簡単ではありません。 というわけで今日はマルチテナントアーキテクチャのお話です。 世に出る情報がとっても少
Mercari Microservices Platformの進捗（2019年） | メルカリエンジニアリング
Microservices Platform TeamでTech leadをしている@deeeeeeetです． 昨年のMTC2018ではMicroservices Platformチームの立ち上げから1年で僕らが取り組んできたことを紹介しました． speakerdeck.com 具体的にはStranglerパターンによるMonolithからMicroservicesへの段階的なリクエスト移行を行うためのAPI gatewayの開発や，Microservicesのインフラのセットアップを簡単にしサービス開発チームのSelf-service化を進めるためのStarter-kitの開発，GoでのMicroservicesの開発を高速で始めるためのTemplateプロジェクトの開発，Spinnakerの導入などについて紹介しました． これらはPlatformとして最低限の機能を整備したにすぎず，さ
Multitenant: Get isolation, agility, and economies of scale by managing multiple Pluggable Databases inside your Oracle Multitenant Container Database In-Memory: Support real-time analytics, business intelligence, and reports by keeping your important data in the Oracle Database In-Memory column store Partitioning: Enhance performance, availability, and manageability of your database with data par
The File Picker v8 allows you to use the same functionality used within the M365 service within your solutions. Meaning as we iterate and improve the service, those new capabilities appear for your users! This new "control" is a page hosted within the Microsoft service which you interact with via post messages. The page can be hosted either embedded in an iframe or as a popup. Just Show Me The Sam
セールスフォースが採用しているマルチテナントアーキテクチャでは、すべてのユーザーが同一データベース、同一スキーマを共有しています。これによってインフラの共有が容易になり、非常に効率的な運用と低コストを実現しています。 （本エントリは「知られざる『マルチテナントアーキテクチャ』（1）～SaaSはみんな同じではない？」からの続きです。） しかし、それだけではスケーラビリティやアベイラビリティを実現することはできません。それらの実現には別の技術が併用されています。それはOracleのパーティショニング機能とパラレル機能による分散処理です。 パーティショニング機能の話をする前に、セールスフォースが採用しているデータベースの特徴を見てみましょう。 すべてのデータに振られる組織ID セールスフォースはすべてのユーザーが1つのデータベースを共有するマルチテナントアーキテクチャを採用しています。ということ
RLSを用いたマルチテナント実装 for Django by Takayuki Shimizukawa 複数のテナント（チーム・組織）向けにサービスを提供するシステムで、テナント相互の情報を分離して扱う、複数のマルチテナントアーキテクチャが考案されています。「各プログラマが努力して実装する」戦略でも実現はできますが、プログラミングミスや設定間違いによるデータ混濁が高確率で発生します。このトークでは、マルチテナントアーキテクチャにおけるデータ分割アプローチのひとつ「共有アプローチ」をDjangoとPostgresのRow Level Security (RLS) の組合せで安全に実現する方法を紹介します。またこの方法のメリット、デメリットを紹介します。 https://djangocongress.jp/Read less
GitHub - akullpp/awesome-java: A curated list of awesome frameworks, libraries and software for the Java programming language.
Awesome Java A curated list of awesome Java frameworks, libraries and software. Contents Projects Bean Mapping Build Bytecode Manipulation Caching CLI Cluster Management Code Analysis Code Coverage Code Generators Compiler-compiler Computer Vision Configuration Constraint Satisfaction Problem Solver CSV Data Structures Database Date and Time Dependency Injection Development Distributed Application
セールスフォース・ドットコムは、米国西海岸とシンガポールのデータセンターにあった国内顧客のクラウド環境を、昨年12月に開設した東京データセンターへ移行する作業が1月15日に完了したことを明らかにしました。 同社によると国内の顧客は約5000社。移行作業は昨年2011年10月からはじまり、2012年1月15日日曜日に完了したとのこと。 同社代表取締役社長 宇陀栄次氏は「弊社のクラウドサービスは、お客様の既存の情報システムとさまざまな種類の連係が緊密に行われている。しかし今回の移行に際して、お客様側でのシングルサインオンの移行設定し忘れなどによる軽微な問題はあったものの、ほとんど何の問題なく移行が完了した。私のIBM時代の経験も含めて言えばデータセンターの移行にトラブルはつきものだが、今回は非常にすんなりといって正直びっくりした」と、今回の移行を振り返っています。 左から、CTO 及川喜之氏、
Docker without Docker Author Name Thomas Ptacek @tqbf @tqbf Image by Annie Ruygt We’re Fly.io. We take container images and run them on our hardware around the world. It’s pretty neat, and you should check it out; with an already-working Docker container, you can be up and running on Fly in well under 10 minutes. Even though most of our users deliver software to us as Docker containers, we don’t u
CNCFはWeaveworksが開発を進めるPrometheus as a ServiceのCortexを、サンドボックスプロジェクトとして採用。コンテナ監視のスケールアウトを目指す。 クラウドネイティブなコンピューティングを実現するためのソフトウェアスタックを推進するCloud Native Computing Foundation（以下、CNCF）は、マルチテナント型のモニタリングサービスを実現するCortexを、サンドボックスプロジェクトとして採用したことを発表した。 参考：CNCFのリリース：CNCF To Host Cortex in the Sandbox これはWeaveworksが開発を進めている監視ソリューションであるCortexを、CNCFのプロジェクトとしてホストすることを決定したというものだ。 Weaveworksのブログにあった言葉を用いてシンプルに表現すると、C
rubykansai.doorkeeper.jp テーマが同じだけに、 id:gfx さんの railsdmでマルチテナント・ウェブアプリの話をしました - Islands in the byte stream と、内容が似通ってしまいましたが、自分なりにまとめてみました。 運用が始まり、ユーザ（テナント）が増えるとと色々難しい局面にも出くわします。 それは、また別の機会にお話しできれば。
Amazon Web Services ブログ マルチテナントソリューションでAmazon SQSを使う AWS SaaS Factoryチームのシニアパートナーソリューションアーキテクト Raju Patel によって書かれた記事です。 モダンアプリケーションは、サービス統合、バッチ処理、またはワークフローオーケストレーションの一部として、キューイングに依存することがよくあります。キューは、システムの環境に拡張性と耐障害性を追加するうえ重要です。 これは、キューイング戦略をマルチテナントソリューションのワークロードにどのように適用するかを考える必要がある、Software-as-a-Service（SaaS）環境では特に当てはまります。SaaS アプリケーションのキューイングモデルを設計する際には、データの分離、パフォーマンス、および運用を考慮する必要があります。 多くの組織がアマゾンウ
Cloudera World Tokyo 2013に参加してきました #cwt2013 | DevelopersIO
Cloudera World Tokyo 2013に参加してきました。 http://www.cloudera.co.jp/jpevents/cwt2013/index.html 午前中は用事があったので午後からの参加となりました。参加したのは以下のセッションです。 13時30分〜14時10分 CDH最新情報 14時25分〜15時05分 Hadoopデータプラットフォーム 15時30分〜16時10分 SQLで実現するバッチ処理とストリーム処理 16時25分〜17時05分 Hadoopの運用 17時20分〜18時00分 Hadoop コミュニティと YARN の現状 ということで参加レポートですが、現時点でスライドが公開されていないものが大半だったので、各セッションに関して概要といいつつ詳細まで書いています。ここについてはスライドが公開されたタイミングで差し替えていく予定です。 CDH最新情
Active RecordでRow Level Securityを使って安全にテナント間のデータを分離する - SmartHR Tech Blog
従業員データベース機能の開発を担当している渡邉です。最近公開したGemであるactiverecord-tenant-level-securityの紹介をします。 SmartHRにおけるマルチテナントの現在 私たちが開発するSmartHRはお客様ごとに1つの環境を提供する、マルチテナント型SaaSです。サービス全体で1つのデータベースを持ち、複数のテナントのデータが混ざらないように、SQLで問い合わせを行います。 1つの環境ごとに1つのデータベースを持つ方式は安全性の面で優れていますが、スキーマの保守やマイグレーションにかかる時間の増加など、多くの技術的な困難をもたらします。この選択の背景については、2018年に書かれた以下の記事もご覧ください。 tech.smarthr.jp とはいえ、常にテナントごとのWHERE句を意識しながらコードを書くのは大変ですし、不具合の温床になります。幸い、私
Choosing the right solution for AWS Lambda external parameters | Amazon Web Services
AWS Compute Blog Choosing the right solution for AWS Lambda external parameters This post is written by Thomas Moore, Solutions Architect, Serverless. When using AWS Lambda to build serverless applications, customers often need to retrieve parameters from an external source at runtime. This allows you to share parameter values across multiple functions or microservices, providing a single source o
こんにちは、マイクロソフトの前島です。 今月1日より、"Windows 10 on 認定クラウド" が正式に許諾されるようになりました。これまでも当ブログにて関連情報をお伝えしてきましたが、多くのお問い合わせをいただいていますので改めて現状をまとめてご案内します。 ■ まとめると… 2017年8月付のマイクロソフト製品条項改定により、一定の条件を満たす場合に Microsoft Azure および 認定を受けたマルチテナント ホスティング パートナー (QMTH, 詳細は後述) で Windows 10 の稼働が認められるようになりました。 これまでは Azure 等マルチテナント型ホスティング環境で "Windows デスクトップ オペレーティング システム" を利用することが認められていませんでした。詳細は過去記事（Windows 10 on Azure の現状について as of
🌟 Introducing Dash 🌟
Create Reactive Web Apps in pure PythonDash is a Open Source Python library for creating reactive, Web-based applications. Dash started as a public proof-of-concept on GitHub 2 years ago. We kept this prototype online, but subsequent work on Dash occurred behind closed doors. We used feedback from private trials at banks, labs, and data science teams to guide the product forward. Today, we’re exci
PostgreSQLのRow Level Securityを使ってマルチテナントデータを安全に扱う - HRBrain Blog
こんにちは、サーバーサイドエンジニアーのユキチです。 SaaSの開発を行う上では複数の企業様のデータを扱うことになります。 そういったマルチテナントのデータ設計を行う上で、弊社ではPostgreSQLのRow Level Securityという機能を使って実装しました。 今回はPostgreSQLのRow Level Security（以下RLS）という機能を使ってマルチテナントのデータ操作を安全に扱う方法を紹介していきたいと思います。 マルチテナントデータベース設計 主に3パターンの設計手法が考えられます。 Multi Tenants in 1 Database：複数企業のデータを一つのデータベースで管理 1 Tenant in 1 Database：テナントごとにデータベースを分けて管理。物理的なインスタンスは同じ。 1 Tenant in 1 Instance：テナントごとにデータベ
railsdmでマルチテナント・ウェブアプリの話をしました - Islands in the byte stream
railsdm.github.io 発表：「マルチテナント・ウェブアプリケーションの実践」 一文でまとめると「HTTPのリクエストごと、あるいはjobの実行ごとにストレージの名前空間違うから気をつけような！！」ってのを常に意識する必要がありますって話でした。 なおElasticsearchのnamespacing v2はまさに先週の話なのですが、遅くなったというのは勘違いでした。 というのも少しだけ日付けをずらしてfuzzy searchの実験もしており、それがパフォーマンスに悪影響を与えていたようです。fuzzy searchはノイズが増えるので結局無効にすることにしたため、トータルではnamepsacing v2はnamespacing v1よりパフォーマンスがよくなっています。 またブコメでも指摘されているように、テナント横断のことをやり始めるとまたいろいろと新しい課題がでてくると思
Scaling Kubernetes Tenant Management with Hierarchical Namespaces Controller | メルカリエンジニアリング
Scaling Kubernetes Tenant Management with Hierarchical Namespaces Controller Author: @deeeeeeeet from Platform Developer Experience Team Three years ago, we took the decision to break our monolithic API into microservices, and move from the physical machine deployment on-premise to container deployment on GCP by using Google Kubernetes Engine (GKE). We architected our Kubernetes cluster with multi
New Relic Architecture - Collecting 20+ Billion Metrics a Day - High Scalability -
This is a guest post by Brian Doll, Application Performance Engineer at New Relic. New Relic’s multitenant, SaaS web application monitoring service collects and persists over 100,000 metrics every second on a sustained basis, while still delivering an average page load time of 1.5 seconds. We believe that good architecture and good tools can help you handle an extremely large amount of data while
Context Architecture for agile projects has to be described and defined differently. Not all decisions will be made at once, nor will all of them be done when the project begins. Agile methods are not opposed to documentation, only to valueless documentation. Documents that assist the team itself can have value, but only if they are kept up to date. Large documents are never kept up to date. Small
Salesforce.com Buys Heroku For $212 Million In Cash | TechCrunch
Salesforce.com has just announced that it is acquiring Heroku, which provides a Ruby application platform-as-a-service, for approximately $212 million in cash. That’s one hell of an exit for the startup, which was founded in 2007 and has raised only $13 million in funding. Heroku was initially provided with seed funding through Y Combinator back in 2008. The startup says it currently powers over 1
A Comprehensive Guide to Building a Scalable Web App on Amazon Web Services - Part 1
A Comprehensive Guide to Building a Scalable Web App on Amazon Web Services - Part 1 Josh Padnick Josh Padnick helps software teams scale with Amazon Web Services & DevOps. He has launched major apps on AWS serving 100,000+ users, hosted 150+ websites on AWS, and worked with AWS for 5+ years. It seems like everyone today wants to build the next great scalable web app. And, at least according to Ga
Geppoでバックエンドエンジニアをしている@yks0406です。日本酒で膨らんだお腹を凹ませるために、片道8キロの道のりを毎朝毎晩自転車で通勤しています。これまではRailsを中心にバック/フロントどちらも対応するスタイルで開発してきましたが、1年前Geppoにジョインしてからはバックエンドをメインに開発しています。 今回はGeppoに activerecord-multi-tenant を導入した際の話です。 導入の検討を開始したのが2018年1月あたりで、実際に導入が完了したのは2019年10月です。方針決定までに1年4ヶ月、開発に6ヶ月かかりました。途中空白の期間が発生してはいるものの、なかなかの作業ボリュームでした。 ※この記事はHR Tech Advent Calendar 2019の最終日の記事です マルチテナンシーって何？ 1つのサービスで複数クライアント（つまりテナント）
FAQ_JP - Cassandra Wiki
FAQ CassandraはListenAddress設定で何故0.0.0.0(全アドレス)でリッスンできないのですか? Cassandraはどのポートを使うのですか? Cassandraは何故大量のインサート後に遅くなるのでしょうか? 新たにノードを追加したときに，既存のデータはどうなってしまうのでしょうか? 動いているクラスタに新たにカラムファミリを追加したり削除したり改名したりできますか? Thriftクライアントやハイレベルクライアントがどのノードに接続しているかは問題になるでしょうか? Cassandraを動かすマシンの推奨スペックってどんなものでしょうか? SSTablesとMemtablesって何ですか? Javaで何故TimeUUIDTypeを使うのが難しいのでしょうか? Cassandraからデータを削除したのにディスク使用量は同じです.何が起こってるのでしょうか? 何故
Impala
Apache Impala is the open source, native analytic database for open data and table formats. Follow us on Twitter at @ApacheImpala! Do BI-style Queries Impala provides low latency and high concurrency for BI/analytic queries on the Hadoop ecosystem, including Iceberg, open data formats, and most cloud storage options. Impala also scales linearly, even in multitenant environments. Unify Your Infrast
2013年7月17日、およそ5年半振りのメジャー・バージョンアップとなるOracle Database 12cの国内提供が開始されました。本連載では、500を超える新機能の中から、代表的なものをピックアップしてわかりやすく解説していきます。第1回目となる今回は、12c最大の目玉であるマルチテナント機能について解説します。 Oracle Open World 2012での発表から10ヵ月、ついにOracle Database 12c（以下、12c）の国内提供が開始されました。クラウドの『c』を製品名に掲げ、コンテナ、プラガブル、マルチテナントなど、これまでのOracle Databaseにはなかった多くのコンセプトを引っさげて登場した12cには、実に500を超える新機能が実装されています。 新機能を理解しやすくするために、まずはこれまでのバージョンについて少しだけ振り返ってみましょう。Ora
Update 2: Stack Overflow Architecture Update - Now At 95 Million Page Views A Month Update: Startup – ASP.NET MVC, Cloud Scale & Deployment shows an interesting alternative approach for a Windows stack using ServerPath/GoGrid for a dedicated database machine, elastic VMs for the front end, and a free load balancer. Stack Overflow is a much loved programmer question and answer site written by two g
IBM Developer
IBM Developer is your one-stop location for getting hands-on training and learning in-demand skills on relevant technologies such as generative AI, data science, AI, and open source.
Unikernels: Rise of the Virtual Library Operating System - ACM Queue
January 12, 2014 Volume 11, issue 11 PDF Unikernels: Rise of the Virtual Library Operating System What if all the software layers in a virtual appliance were compiled within the same safe, high-level language framework? Anil Madhavapeddy and David J. Scott Cloud computing has been pioneering the business of renting computing resources in large data centers to multiple (and possibly competing) tena
2012年09月12日 VXLANを超訳してみた[ 前編 ] 以前Microsoftが進めている仮想ネットワークプロトコルNVGREの超訳をしましたが、今回Cisco、VMwareが標準化を進めているVxLANのドラフトが02にバージョンアップしたようなので、こちらも超訳してみました。 VXLAN: A Framework for Overlaying Virtualized Layer 2 Networks over Layer 3 Networks [ 訳 ] VXLAN: とあるL3上のオーバーレイL2ネットワークのフレームワーク Abstract This document describes Virtual eXtensible Local Area Network (VXLAN), which is used to address the need for overlay ne
データベース統合の新たな手法「マルチテナント・アーキテクチャ」：ユーザー目線でチェック！ Oracle Database 12cの知りたいところ（2）（1/3 ページ） 連載第2回の今回は、目玉機能「マルチテナント・アーキテクチャ」についてレビューしていきます。ライセンスの制限やアラートログの扱いや、3種類の「コンテナ」の違いなど、実際に評価する前に知っておきたい情報を紹介していきます。 連載第2回目となる今回は、Oracle Database 12c R1の新機能の中でも、特に注目を集めているマルチテナント・アーキテクチャについて説明します。 マルチテナント・アーキテクチャは、2012年のOracle OpenWorldでの発表当初、「Pluggable Database」と呼ばれていましたが、現在は「Pluggable Database」を包含する概念として、「マルチテナント・アーキテ
続報、Windows 10のデスクトップ環境をDaaSのVDIで利用可能に――ライセンスの明確化：Microsoft Azure最新機能フォローアップ（38）（1/2 ページ） Microsoft製品およびサービスの使用権の説明資料である「製品条項（PT）」の2017年8月1日の改訂版に、「Windows 10マルチホスティング」の権利が追加されました。この権利が明文化されたことで、Microsoft Azureおよび認定クラウド上でWindows 10 Enterpriseを正式に実行できるようになりました。 連載目次 「Windows 10マルチホスティング」の権利とは？ Microsoft製品およびサービスの「製品条項（PT）」ドキュメントの最新版は、以下のサイトから入手できます。 マイクロソフト製品およびオンラインサービスのボリュームライセンス｜製品条項（2017年8月1日、または
話題の軽量エディション「Windows 10 Lean」とは何か - 阿久津良和のWindows Weekly Report
レポート 話題の軽量エディション「Windows 10 Lean」とは何か - 阿久津良和のWindows Weekly Report 「Windows 10 Lean」の存在が注目を集めている。2017年からうわさレベルで、その姿を見え隠れさせていた「Windows 10 Cloud」の流れをくむエディションだ。ただし、結局のところWindows 10 Cloudは発表されず、フタを開ければUWP(ユニバーサルWindowsプラットフォーム)アプリケーションに限定した「Windows 10 S」が投入されたことは記憶に新しい。 ちなみにWindows 10 Sは単独のエディションではなく、各エディションのモード(機能)として実装すると、Microsoftは2018年3月にアナウンスされている。 さて、Windows 10 Leanは既存のエディションと何が違うのだろうか。とある筋から入手
Reinventing virtualization with the AWS Nitro System - All Things Distributed
All Things Distributed Werner Vogels' weblog on building scalable and robust distributed systems. Running a business at the scale of Amazon, we often have to solve problems that no other company has faced before. The disadvantage of this is that there is no “how to” guide for us—a lot is unknown. However, the advantage is that when we solve a new problem, it’s an opportunity to reinvent our servic
Applies To: Windows Server 2012 R2 Server virtualization enables multiple server instances to run concurrently on a single physical host; yet server instances are isolated from each other. Each virtual machine essentially operates as if it is the only server running on the physical computer. Network virtualization provides a similar capability, in which multiple virtual network infrastructures run
Configuring a Secure, Multitenant Cluster for the EnterpriseCloudera, Inc.
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Chef 11 での client/server/knife のセットアップ手順(+α) - 元RX-7乗りの適当な日々
マルチテナントアーキテクチャについて - コンポツさん
Oracle Database 10g Express Edition
Folders and files - Live Connect Developer Center
知られざる「マルチテナントアーキテクチャ」（2）～スケーラビリティのカギは組織ID
RLSを用いたマルチテナント実装 for Django
セールスフォース・ドットコムが東京データセンターに国内顧客約5000社の移行完了。その裏側を聞いた
Docker without Docker
CNCF、Prometheus as a ServiceのCortexをサンドボックスプロジェクトとして採用
Ruby 関西でマルチテナントアプリの発表してきました - インゲージ開発者ブログ
マルチテナントソリューションでAmazon SQSを使う | Amazon Web Services
Windows 10 on Azure の正式解禁！
Documenting Architecture Decisions
ActiverecordMultiTenant でマルチテナンシー｜yks0406
徹底解説！Oracle Database 12cのすべて Vol.1 | アシスト
Stack Overflow Architecture - High Scalability -
第九研究室だより:VXLANを超訳してみた[ 前編 ]
データベース統合の新たな手法「マルチテナント・アーキテクチャ」
続報、Windows 10のデスクトップ環境をDaaSのVDIで利用可能に――ライセンスの明確化
)
ネットワーク仮想化の技術的な詳細 | Windows Server 2012
Hadoop meets Cloud with Multi-Tenancy