LambCIを利用してPull RequestベースのCloudFormation環境を構築する | DevelopersIO
はじめに こんにちは、中山です。 前回の記事に続いてLambCIの2回目のエントリです。今回はCloudFormation(以下CFn)をPull Request(以下PR)ベースで管理し、LambCIからデプロイする方法をご紹介します。 CFnの管理 みなさんはCFnをどのように管理されているでしょうか。インフラ担当の方が1名の場合は、その人にスタックの作成/アップデートをお願いすればいいかもしれません。しかし、チームでCFnを管理する場合はやはり使い慣れたPRベースの開発フローに乗せられると便利だと思います。この開発フローを採用したい場合、今回ご紹介するLambCIを利用した実装は1つの選択肢になるかもしれません。 もちろん、Service Catalogを利用したCFnの管理もとても便利だと思います。細かく権限の設定が可能なので、よりきめ細かな統制管理が可能です。弊社のブログにも多く
(レポート)[ServerlessConf London] 「 Serverless architecture at iRobot」 #serverlessconf | DevelopersIO
概要 本レポートは2016年10月26日(水)〜28日(金)に開催されたServerlessConf Londonのセッション"Serverless architecture at iRobot"のレポートです。 本セッションのスピーカーはルンバでおなじみ iRobot で Cloud Robotics Research ScientistをしているBen Kehoeさんです。 発表資料 動画 スライド iRobot 社について ユーザー買い切りのロボット ロボットはインターネットにつながっていて、その通信費は iRobot が支払う 運用費には非常にシビア 稼働しているロボットの数が大きいので、小さなコスト差が大きな差をうむ。 どうしてサーバーレスにしたの? 以前使っていた IoT プラットホームはスケーラビリティなどの点からAWSにインフラ移行した 移行については今年の re:inve
![(レポート)[ServerlessConf London] 「 Serverless architecture at iRobot」 #serverlessconf | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/17c008813764fb15f69f5ae4d5c67d6f3fc096ce/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2016%2F10%2Fserverless.jpg)
[EBS] gp2のBurstBalanceが確認可能となったのでボリュームサイズ別に検証してみた | DevelopersIO
はじめに AWSチームのすずきです。 2016年11月10日のアップデートにより、 AWSのEC2用ブロックストレージ、EBS (Amazon Elastic Block Store) の CloudWatchメトリックとして、BurstBalance の利用が可能となりました。 New – Burst Balance Metric for EC2’s General Purpose SSD (gp2) Volumes 今回、1〜1000GiBまでのEBS(gp2)を用意し、最大IO発生時のバーストバランスと、性能変化を確認する機会がありましたので、 その内容を紹介させて頂きます。 環境情報 ec2 インスタンスタイプ : c4.xlarge (測定対象EBS毎に異なるインスタンスを用意) OS : Amazon Linunx (amzn-ami-hvm-2016.09.0.2016102
![[EBS] gp2のBurstBalanceが確認可能となったのでボリュームサイズ別に検証してみた | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/75cf1196d052414c1b87ad0eb4239794d54f170d/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2014%2F05%2FAmazon_EBS.png)
DatadogでサーバのSSH接続を監視する | DevelopersIO
こんにちは、虎塚です。 この記事では、DatadogでサーバのSSH接続を監視するための設定手順と、動作確認の方法を紹介します。 DatadogでのSSH監視 DatadogにはSSHインテグレーションという機能があり、次の項目を監視できます。 検知できるもの 検知目的 Datadogでは、監視対象サーバにインストールしたDatadog agentから同じサーバ内のSSHサーバに接続を試みることで、SSH接続状態を監視します。 設定手順 DatadogでSSH接続監視をするための設定手順を説明します。次のバージョンで動作確認しました。 監視対象サーバのAMI: amzn-ami-hvm-2016.09.0.20160923-x86_64-gp2 監視対象サーバのPython: 2.7.12 Datadog agent: (Collector, Dogstatsd, Forwarderともに
Soracom Funnel + Amazon Kinesis Firehose + Amazon RedshiftでIoTデータを蓄積する環境をコードレスに構築する | DevelopersIO
Soracom Funnel + Amazon Kinesis Firehose + Amazon RedshiftでIoTデータを蓄積する環境をコードレスに構築する こんにちは、せーのです。 最近のIoT界隈ではクラウドサービスが非常に充実していまして、ほとんどコードを書くことなくデータの流れが出来てしまいます。 今回は大量のIoTデータをRedshiftに蓄積して分析したい、というソリューションをコードレスで構築する方法をご紹介します。 概要 今回想定しているソリューションはこのような感じです。 IoTデバイスから定期的にデータをクラウドに飛ばし、それをRedshiftに蓄積、BIツールにて解析する、というソリューションです。 この場合データの流れのポイントとしては どうやってデータをクラウドにあげるか どうやってデータをRedshiftに蓄積させるか 大量データを捌けるか というよう
LambCIを利用したサーバーレスなデプロイ環境の構築 | DevelopersIO
はじめに こんにちは、中山です。 以前から気になっていたのですが、なかなか触る機会のなかった LambCI を使ってみたのでご紹介します。これは一言で言うと「AWS Lambdaを利用したデプロイシステム」です。GitHub上のリポジトリに対するpushを契機に、各種AWSリソースが実行されます。その中でLambdaを実行し、Lambda上でデプロイを実施することが可能です。 今までこういったシステムを構築しようとするとJenkinsかCircleCIなどのSaaSを利用することが多かったと思います。とても便利なプロダクト/サービスではあるのですが、以下のような問題をよく指摘されていると思います。 Jenkinsの保守が大変 SaaSは高い 何を優先するのかは個人/組織の環境によって異なると思いますが、上記問題点を考慮するのであればLambCIは1つの選択肢になるかもしれません。 Lamb
【アップデート】外部ライブラリ込みの Lambda Function のソースコードもマネジメントコンソールから閲覧・編集できるようになりました | DevelopersIO
【アップデート】外部ライブラリ込みの Lambda Function のソースコードもマネジメントコンソールから閲覧・編集できるようになりました こんにちは、藤本です。 本日、AWS Lambda をご利用中の方には地味に嬉しいアップデートがありました。 Announcement: AWS Lambda enables code editing for deployment packages that include custom libraries 今まで Lambda Function は追加ライブラリがないという条件付きで、マネジメントコンソールからソースコードを作成、編集することができました。ライブラリを含めたい場合、ライブラリ込みのソースコードをパッケージ化（zip化）した上でアップロードする必要がありました。またソースコードを閲覧したい場合、API経由でダウンロードして、確認す
AWS上でのデータレイク構築の概要を紹介している『Building a Data Lake on AWS』を読んでみた ｜ DevelopersIO
先日、『データレイク』で情報を調べてみたら『Building a Data Lake on AWS』というeBookの資料(PDF)がある事を知りました。比較的ボリューム短めで読み易かったので、当エントリではその読んでみた内容をご紹介してみたいと思います。 Data Lake on AWS 『データレイク』とは何か 今日、組織では様々なソースからなる複数種別のデータを管理する業務が行われています。大規模なデータボリューム、様々なデータの種類に直面し、組織はタイムリーに洞察力を組織内に提供する為に、従来のデータ管理システム以上の敏捷性と柔軟性を備えるデータストレージと分析ソリューションを必要としています。 "データレイク"は、最近注目されるようになってきた新しい方法です。これら課題の多くに対応するデータを格納し、分析する事が出来ます。データレイクを構築する事で、組織は構造化されたもの、非構造
Amazon Redshift: 新しいデータ型『タイムゾーン付きタイムスタンプ(TIMESTAMPTZ)』をつかってみた。 | DevelopersIO
まず、今まであった型のTIMESTAMPの方はタイムゾーンを反映していないため、JSTとUTCで本来は異なる時間のはずが同一の値になっていることがわかります。この点においてTIMESTAMPTZを用いることで、タイムゾーンを反映させた値で取り込まれていることがわかります。 次に、TIMESTAMPTZなのですが以前この機能が実装されたときはタイムゾーン付きで取り込まれるものと思いこんでいました。 しかし、結果を見てみるとタイムゾーン付きで取り込まれたわけではないことがわかります。 その代わり、JSTの日付は時差を反映した値がUTCで入っていることがわかります。 ここでTIMESTAMPTZの挙動をもう一度確認してみたいと思います。 入力値にタイムゾーンが含まれる場合、Amazon Redshift はタイムゾーンを使用して値を協定世界時 (UTC) に変換し、UTC 値を格納します。 日時
(レポート)[ServerlessConf London] 「Real-time Data Processing Using AWS Lambda」 #serverlessconf | DevelopersIO
はじめに 本レポートは2016年10月27日(木)〜28日(金)に開催されたServerlessConf Londonのセッション「Real-time Data Processing Using AWS Lambda」のレポートです。 本セッションのスピーカーはAWS Solutions ArchitectのKen Payneさんです。 発表資料 動画 スライド 見当たらず セッション概要 なぜサーバーレスなのか AWS LambdaとAWS Kinesis Streamsを使ったリアルタイムデータ処理方法について デモ なんでFunction as a Service(FaaS)? ロジック Framework Dependencies OS Hardware というレイヤーがある。 2006年にS3、EC2とリリースしてから、その上にマネージド・サービスを構築してきた。 AWS Lam
【新機能】Amazon AuroraからLambdaを呼べるようになりました | DevelopersIO
ウィスキー、シガー、パイプをこよなく愛する大栗です。 本日Auroraで新しい機能が発表されました。なんとAuroraの中からLambdaを呼び出す事ができるようになりました！さっそく試してみました。 2017年2月現在AuroraがPrivate Subnetに有ってもLambdaをcallすることが可能になっています。 Amazon Aurora Update – Call Lambda Functions From Stored Procedures; Load Data From S3 Release: Amazon RDS on 2016-10-18 どういう機能？ 一言で書くと、『AuroraのストアドプロシージャでLambdaをInvokeできる』機能です。 ドキュメントによると、ストアドプロシージャは以下の通りです。 シンタックス CALL mysql.lambda_asy
(レポート)[JAWS Festa 2016]学ぼう機械学習！ ～簡単なデモと実践〜 #jawsug #jawsfesta | DevelopersIO
こんにちは、菊池です。 はじめに 本レポートは2016年10月22日(土)に開催されたJAWS Festa 2016のセッション「学ぼう機械学習！ ～簡単なデモと実践〜」のレポートです。 スピーカーは(有)来栖川電算、機械学習名古屋勉強会に所属の後藤俊介さんです。 レポート 機械学習について 機械学習とは（Wikipedia） AI（人工知能）の研究分野の一つで数学的な基礎付け コンピュータに何かを学習させて、それを元に色々な仕事をさせる ポイントはその主な判断基準をコンピュータ自身に考えさせること 大分類 教師あり学習：推測と判別 教師なし学習：構造や特徴を導く 強化学習：一連の行動から報酬がもっとも多く得られる方法を学習 教師あり学習 線形回帰 SVM ニューラルネットワーク 教師なし クラスタリング/次元削減 手法：K-means/混合ガウスモデル（GMM）/主成分分析/独立成分分析
![(レポート)[JAWS Festa 2016]学ぼう機械学習！ ～簡単なデモと実践〜 #jawsug #jawsfesta | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/71103f235ab98f81d6b8175743108fa565024858/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2016%2F10%2Fjaws_festa_tokaido_2016.jpg)
AWS Playbookの設計ポリシー | DevelopersIO
渡辺です。 Ansible2.2より、AnsibleのAWS関連モジュールが充実され、AnsibleでAWSリソースの構成管理を行うことが現実味を帯びてきました。 AWSリソースの構成管理を行うには、CloudFormationやteraformなど、他の選択肢も多くあります。 その中でも、EC2インスタンスの構成管理をAnsibleで行っているならば、利用するツールを共通化できるのが最大のメリットです。 今回は、そんなAWSリソースを構成管理するとき、作成するPlaybookの設計ポリシーを解説します。 localhostのlocalコネクションを利用する 一般的に、Ansibleでは、対象ホストにSSH接続を行い、構成管理を行います。 AWSリソースの場合、対象となるのはVPCなど、AWSリソースであるため、SSH接続は行えません。 このようなケースでは、対象ホストにローカルマシンを指
AWSクラウド構築テンプレートサービスの『WEB/AP+DBサーバ（Linux版）』を解説します | DevelopersIO
ウィスキー、シガー、パイプをこよなく愛する大栗です。 先日、初期費用無料で導入できる「WEB/AP＋DBサーバ」構成の提供を開始しました。これは弊社のAWS総合支援サービスであるメンバーズの一環で提供しているサービスなのですが、その構成について解説をしたいと思います。 メンバーズとは？ 弊社クラスメソッドが提供するAWS総合支援サービスがメンバーズです。 メンバーズ ｜ クラスメソッド株式会社 大きな特徴として、以下のものがあります。 コストパフォーマンス 初期費用無料、代行手数料無料 弊社にてAWSエンタープライズサポート、損害保険に加入済み AWS利用費ディスカウント（EC2利用費10%OFF1、CloudFrontアウトバウンド通信費64%OFF2） セキュリティ MFA設計やファイアウォール設定などのセキュリティ自動チェックを実施しています。 サポート 日々追加される新しい機能をい
データベース移行をサポートするAWS Schema Conversion Toolでアップデートがありました(2016/10/04) | DevelopersIO
西澤です。レポートが遅れましたが、データベース移行をサポートするツールであるSchema Conversion Toolのアップデートが先週あったのでご紹介してみようと思います。 Release: AWS Database Migration Service on 2016-10-04 : Release Notes : Amazon Web Services AWS Schema Conversion Tool Copies Schemas and Optimizes for the Cloud AWS Schema Conversion Toolとは？ しつこいかもしれませんが、Blackbelt資料が素晴らしいので再掲です。 SCTはDMSが対応してくれないスキーマ移行をサポートしてくれる補助的な位置付けのツールです。こちらの記事でも簡単にご紹介していますのでご確認ください。 AWS
Amazon Redshift: AWS CLIでスナップショット取得＆リストアを効率化するPythonスクリプト | DevelopersIO
小ネタです。 Amazon Redshiftはクラスタの"停止"が行えないため、一旦クラスタのスナップショットを取得しておき、取得後に削除、そして復旧の際には取得したスナップショットからのリストア作業を行って起動し直す、という手順が必要となります。ある程度環境が整って来た段階であればそこまで頻度多く削除(with スナップショット取得)・起動(リストア)の機会は無いかなとは思いますが(データ量が増えてクラスタ規模も大きくなるとそもそもリストアに時間が掛かるため運用的には立ち上げっぱなしというケースが大半です)、動作検証時や開発作業用に一時的にクラスタを立ち上げて終わったら落とす、というケースは割と良くあるケースかと思います。 当エントリではその際に使えそうな『スナップショットを取得の後、クラスタの削除』及び『直近最新の手動スナップショットからのリストア』をコマンド一発で行えるスクリプトを作
【レポート】Developers.IO 2016 in Fukuokaで「AWSのサービスだけでセキュリティ対策を考えてみる」を話してきました。 | DevelopersIO
森永です。 地元福岡で登壇の機会があるということで手を上げて発表させてもらいました！ プレゼン資料 補足 初の福岡イベントということであまり深入りしないで説明するということを心がけました。 ガチ勢の人からすると物足りないかと思いますがご了承下さい。 福岡オフィスつくりますよ！！ 絶賛Hiring中ですので興味のある方はお声掛け下さい！ 申し込んじゃう！というかたはこちらからどうぞ！！
【アップデート】AWS Config Rulesに新たに8個のマネージドルールが追加されました！ | DevelopersIO
Config芸人の森永です。 Config Rulesに新たなマネージドルールが追加されました！嬉しい！ 8 new Config Rules to govern the configuration of critical AWS resources 追加されたルール 何が追加されたかを知りたい方はこちらを以下ご覧頂ければ概要は分かります。 IAM_PASSWORD_POLICY IAMパスワードポリシーが適切な設定になっているか RDS_STORAGE_ENCRYPTED RDSが暗号化されているか オプションで特定のKMSキーで暗号化されているかも確認可能 RDS_MULTI_AZ_SUPPORT RDSがMulti-AZになっているかどうか DB_INSTANCE_BACKUP_ENABLED RDSのバックアップが有効になっているか バックアップウィンドウや保管期間が適切かもチェッ
[新機能] #SORACOM AirでIMEIロックが可能に | DevelopersIO
ども、大瀧です。 本日、SORACOMのサービス開始1周年に合わせ、新機能としてSORACOM AirでIMEIロックができるようになりました！ IMEIロックとは IMEIはSIMを搭載する3G/LTEモジュールに付与される一意なIDです。SORACOM AirでIMEIロックを設定すると、指定したIMEI以外のモジュールにSIMを挿入しても通信できないよう、ロックをかけることができます。 IoTデバイスは様々な場所に設置されるため、これまでSIMの盗難によるなりすましや不正利用のリスクがありました。IMEIロックを活用することでよりセキュアなSIMの運用が可能になります。 設定手順 SORACOMユーザーコンソールから、設定するSIMのオプションとして設定できます。[操作] - [IMEIロック]をクリックします。 [IMEI]の項目に、ロックしたいIMEIを入力し、[ロックする]をク
![[新機能] #SORACOM AirでIMEIロックが可能に | DevelopersIO](https://cdn-ak-scissors.b.st-hatena.com/image/square/890e92c071895fc6564bae1832cc0ffa3d617885/height=288;version=1;width=512/https%3A%2F%2Fdevio2023-media.developers.io%2Fwp-content%2Fuploads%2F2015%2F09%2Fsoracom-logo-400x400.png){kind=logo}
【小ネタ】AWS CLIでS3のPre-Signed URLを生成できるようになっていました！ ｜ DevelopersIO
西澤です。およそ1ヶ月前にリリースされていた機能なので、ブログに書くには遅すぎた感もありますが、社内担当で知らない者もいたので、小ネタですが書いておこうと思います。 最新版のAWS CLIを使えば、Pre-Signed URLを簡単に生成できるようになっています。正確には、aws s3コマンドのサブコマンドとして、v1.10.59からpresignが追加されていますので、こちらの機能をご紹介したいと思います。 1.10.59 feature:s3: Add a new aws s3 presign command, closes #462 aws-cli/CHANGELOG.rst at develop · aws/aws-cli Pre-Signed(署名付き) URLとは？ Pre-Signed URLとは、S3上のオブジェクトに期限付きURLを生成する機能です。正確には、アップロード
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
