Envoy, Nginx, Apache HTTP Structured Logs with Google Cloud Logging Google Cloud Logging provides several plugins that allows you to easily emit structured logs for common applications. For example, if you install the Stackdriver Logging agent, you can get logs using the following fluentd plugins This sample demonstrates two of these plugins (apache and nginx) and how to configure them to emit not

Stackdriver Introduction GCPUG Admin Google Developers Expert Mercari / Merpay Solution Team @sinmetal

2019年3月23日Rails Developer Meetup (https://railsdm.github.io/)で発表した資料です。スライド内で参照しているリンクなどはブログに記載しています。 https://blog.ikedaosushi.com/entry/2019/03/23/150125

1.はじめに みなさんAWSのアカウント設計はどのようにしていますか？ AWSを使ってシステムをセキュアに開発・運用していくためには、 AWSアカウント(*)の設計が重要になりますよね。 AWSアカウント1つのみで運用されてる方は、誤操作や、 誰にどの権限を与えるかのポリシー設計等で困る方もいらっしゃるのではないでしょうか。 (私もその一人です。) 本内容は、『Amazon Web Services 業務システム設計・移行ガイド』にも載っているので、 悩んでる場合は、購入をおすすめします！（こちらの書籍と実体験を元に書いてます。） 今回はAWSアカウント設計について、パターン別にメリット・デメリットを書いていこうと思います！ (*)AWSアカウントとは、AWSを使用するためのマスターアカウントのことを指しています。 ※IAMユーザーとは別物です！ 2.AWSアカウント設計パターン紹介 本章

こんにちは、臼田です。 ついに来ました！先日API GatewayでAWS WAFを直接利用できるようになりましたが、そこで真価を発揮するAWS WAFマネージドルールがF5さんからリリースされました！ AWS Marketplace: F5 Rules for AWS WAF - API Security Rules 早速見ていきましょう。 概要 上記マーケットプレイスのページでは下記のように書かれています。 Protects against API attacks, web attacks (such as XML external entity attacks) and sever side request forgery. The rule set includes support for XML and JSON payloads, and common web API fram

こんにちは、臼田です。 地味なアップデートですが、先日AWS Configで高度なクエリが使えるようになりました。 [新機能]AWS Configに現在のリソース設定をSQLで取得できる高度なクエリ機能が追加されました 地味ですがSQLが書けるということで、もしかして可能性が無限にあるのでは？と思って活用方法について検討してみたのですが、その過程で調べて情報や確認したことについてまとめてみます。 今後活用方法を検討する方の参考になれば幸いです。 参考資料 まだリリースされて間もないのもありますが、2019/03/28現在では下記2点が参考資料(というか情報のほぼ全て)です。 Querying the Current Configuration State of AWS Resources - AWS Config AWS Config Resource Schema | GitHub 前者

Application Load Balancers now support request routing based on standard or custom HTTP headers and methods, query parameters, and source IP addresses. This launch extends the existing support for Host header and path-based routing rules in Application Load Balancers to more fields from HTTP request messages. This richer set of routing criteria enables you to further simplify your application arch

You can now use a new set of open source tools to test your applications locally before deploying to Amazon Elastic Container Service (ECS). Previously, you had to deploy your applications to ECS to ensure that updates were technically working properly for the credentials and task metadata service. If something was misconfigured, it required subsequent deployments to production to resolve the issu

はじめに AWSチームのすずきです。 ALBの高度なリクエストルーティング を利用して、CloudFront、CDNを経由しない、ELBへの直リクエストを禁止したALBを設定する機会がありましたので、紹介させていただきます。 https://dev.classmethod.jp/cloud/aws/advanced-request-routing-for-alb/ ELB設定 デフォルトルールの編集 設定対象のALBを選択、「リスナー」のタブより「ルールの表示/編集」より設定を行います。 「デフォルトアクション」 のルールを変更します。 デフォルトアクションとして以下を設定しました 固定レスポンスを返す レスポンスコード: 403 Content-Type: text/plain; レスポンス本文: Not authorized CloudFront access. カスタムルールの追加

こんにちは、臼田です。 先日AWS Configで高度なクエリを発行する機能が追加されました。概要や使い方は下記をご参照ください。 [新機能]AWS Configに現在のリソース設定をSQLで取得できる高度なクエリ機能が追加されました この機能により、普段データが確認しづらいAWS Configの活用が捗ります。 リリースと合わせてサンプルSQLが提供されていたので、どのようなものがあるのか調べてみました。どんな事ができるの？って雰囲気が知りたい方向けに主要なものを抜粋していきます。 サンプルSQLを抜粋 個人的に面白いと感じたり、有用そうだと思ったものを抜粋していきます。 SecurityGroupの関連リソース取得 List all resources that are related to security group "sg-12345"というサンプルSQLでは指定したIDのSec

Amazon S3 Pricing ストレージクラスのおさらい ストレージクラスのおさらいです。読み飛ばしても問題ありません。 S3 には、バケットに格納したオブジェクトのユースケースに応じてストレージクラスを選択できます。 ストレージクラスには以下の種類があります。 アクセス頻度の高いオブジェクトのストレージクラス STANDARD デフォルトのストレージクラス REDUCED_REDUNDANCY 低冗長化ストレージクラス それほど重要ではない再生可能なデータを STANDARD より低いレベルの冗長性で保存する コスト効果が良いのは STANDARD とされており、使用は推奨されていない アクセス頻度が高いオブジェクトと低いオブジェクトを自動的に最適化するストレージクラス INTELLIGENT_TIERING アクセス頻度から長時間アクセスされていない場合、オブジェクトを低コストで

はじめに 好物はインフラとフロントエンドのかじわらゆたかです。 何度か記事が上がっていますが、大事なことなので私からも警鐘を鳴らしたいと思います。 廃止予定のS3署名バージョン2API利用をCloudWatchEventで検出してみた 署名バージョン4専用のS3エンドポイントを古いCLIで試してみた 上の記事をすでに見ている人はご存知の内容になりますが、 2019/6/24 以降、署名バージョン 2を用いたS3へのアクセスは受け付けらないことになります。 これにより、署名バージョン 2を用いている場合、S3へファイルのアップロードやダウンロードも含めすべての操作ができないということになります。 Amazon S3 における AWS 署名バージョン 2 の廃止 上記に対応が必要なAWS SDKやAWS CLIのバージョン等の記載もあるので、 まずはそこに記載されているバージョンを用いているか

コンニチハ、千葉です。小ネタです。 以前、こんな記事がありました。 AWS Network Load Balancer(NLB)のソースIPとターゲットのセキュリティグループ留意点まとめ ターゲットグループの種類によって、EC2で見えるIPがクライアントのIPなのかNLBのIPなのかがことなりました。 で、最近NLBにTLSの機能が追加されています。 静的なIPアドレスを持つNLBがTLS Terminationに対応してアクセスログも出力可能に！ そこで気になったのがTLSを有効にした場合、EC2ではどのIPでアクセスログが残るのか？でした。ということで早速試して確認しました。 やってみた 実際やってみました NLBにてTLSを有効 EC2にApacheを設定し、アクセスログで表示されるIPを確認する では、早速環境を構築しました。 NLBにてTLSを有効化します Apacheを設定して

The AWS Toolkit for the Visual Studio Code is now available for download from the Visual Studio Marketplace with support for node.js. Previously, the toolkit was only available on GitHub. The AWS Toolkit for Visual Studio Code is in developer preview. The AWS Toolkit for Visual Studio Code is an open source plug-in that makes it easier to develop applications on AWS. Today the toolkit provides an

Amazon Web Services ブログ AWS App Mesh – クラウドアプリケーション向けのアプリケーションレベルネットワーキング AWS App Mesh は、HTTP および TCP サービスの実行を広範囲で支援します。これにより、トラフィックのルーティングと監視に一貫性のある方法が提供され、問題の内容を把握し、障害やコード変更の後にトラフィックをリルートすることが可能になります。App Mesh は、オープンソースの Envoy プロキシを使用します。AWS のパートナーやオープンソースコミュニティが提供する多くのツールと連携できます。 このサービスは、AWS Fargate、Amazon EC2、Amazon ECS、Amazon Elastic Container Service for Kubernetes、 Kubernetes などの上で実行が可能です。各サ

Google Container EngineとKubernetes Google Container Engine (以下GKE) は Kubernetes (以下k8s) というコンテナ管理アプリケーションを載せた基盤を構築するサービスだ。GKEは Google Cloud Platform (以下GCP) の幾つかのサービスを使って構築されているので、GCPの各サービスの恩恵を受けることができる。このエントリでは、GCPの恩恵によってGKEがより便利になる事柄を紹介する。 k8sとは まずk8sとは何なのか。ここではk8sを使う為に理解すべき事柄を中心に紹介する。 k8sにまつわるよくある勘違い k8sはDockerコンテナを動かすための基盤ではない。Dockerコンテナは手段でしかなく、k8sの本質はコンテナをスケーラブルに運用するための基盤である。そのために様々な概念や設定がでて

tl;dr 俺はこうした random_id リソース 何が出来るか 何に使えるか tf サンプル output random_integer リソース 何が出来るか 何に使えるか tf サンプル output random_pet リソース 何が出来るか 何に使えるか tf サンプル output random_shuffle リソース 何が出来るか 何に使えるか tf サンプル output random_string リソース 何が出来るか 何に使えるか tf サンプル output random_uuid リソース 何が出来るか 何に使えるか tf サンプル output 以上 tl;dr Availability Zone のどっちか！とか, Subnet ID のどっちか！をランダムに欲しい時にどうしようかなと思っていたら, Terraform には Random Provid

Published: 2019-03-28 Updated: 2020-02-11 OAuth 権限設定についての変更がありましたので、チュートリアルのその設定部分の編集しました。 こんにちは、みなさんいかがお過ごしですか。さて最近、Slack の新しいメッセージ UI フレームワーク Block Kit がリリースされました。これを使えば皆さんの Slack アプリから送信できるメッセージがさらにリッチになり、例えばタスクのリストや投票結果などが一つのメッセージでより情報的になります。 Block Kit は、ビジュアルツール Block Kit Builder を使うとさらに簡単にプロトタイプでき、さらにこのツールで生成された JSON ストリングをコードにそのまま組み込むことができます。 このチュートリアルでは、シンプルなレストラン検索結果を表示させ、そのユーザ・エクスペリエンスを

Amazon Web Services ブログ 新しい Amazon S3 ストレージクラス – Glacier Deep Archive AWS のお客様の多くは、大量 (大抵の場合ペタバイト以上) の重要データを収集して保存しますが、そのデータにアクセスすることはほとんどありません。raw データを収集してからすぐに処理し、その後万が一さらに処理または分析する必要が生じたときのために数年または数十年にわたって保存しておく場合もあれば、データをコンプライアンスまたは監査目的のために保持する場合もあります。このパターンに当てはまる業界とユースケースには以下のようなものがあります。 金融 – 取引アーカイブ、活動 & 監査ログ、および通信ログ。 ヘルスケア/ライフサイエンス – 電子医療カルテ、医療画像 (レントゲン、MRI、または CT)、遺伝子配列、製剤開発の記録。 メディア & エンタ

#phperkaigi 2019での発表資料です。 応用編は https://speakerdeck.com/hgsgtk/think-deep-unit-test-practical-problem にて

2019/03/30 PHPerKaigi 2019

tl;dr 先頭 8000 バイト以内に NUL が有ったらバイナリファイル。 Gitの実装 Gitの内蔵diffは FIRST_FEW_BYTES だけ検索するようになっている。 https://github.com/git/git/blob/6e0cc6776106079ed4efa0cc9abace4107657abf/xdiff-interface.c#L187 #define FIRST_FEW_BYTES 8000 int buffer_is_binary(const char *ptr, unsigned long size) { if (FIRST_FEW_BYTES < size) size = FIRST_FEW_BYTES; return !!memchr(ptr, 0, size); }

Systemd's Nspawn Lands OCI Runtime Support Written by Michael Larabel in systemd on 21 March 2019 at 07:00 AM EDT. 67 Comments Merged this morning into the systemd code-base was a big feature addition that's been in the works for the better part of one year by Lennart Poettering and other developers. Merged into the systemd tree is now the OCI runtime support for nspawn. Systemd's Nspawn, their to

PHPerKaigi 2019で、C/Goコンパイラを作る過程で学んだことについて話しました。

Why Bref? Why serverless?We're in 2024. Applications should scale automatically. Hosting should be reliable and cost-efficient. Infrastructure should accelerate development, not consume our time. Bref deploys PHP applications to AWS Lambda and sets up the rest of the infrastructure using serverless services. Simple. Instead of setting up and maintaining servers, define your application in a simple

長山です。2019 年 3 月 29 日付けで 7.5 年勤めた Google を退職しました。 わたしは SWE ではなくアナリストとしてエンジニアリングの組織にいました。検索や Play といったプロダクトで、スパム対策の戦略やフィルタを作ったり、データ分析を通じてプロダクトの改善点を見出したり、アウトリーチを行ったりと、様々なプロジェクトに興味のままに関わっていました。ちょうど今日退職したので、入社エントリのビッグウェーブのついでに、自分が Google で何をしていたのかをまとめておこうと思います。 そもそも、なぜ Google に入社したのか 2011 年当時、わたしはイギリスの London School of Economics and Political Science (通称 LSE) という大学で、社会人類学の修士号を取得している最中でした。先行研究を読んだり論文を書い

とある会社の社内勉強会にて！

80歳の祖母と18歳の孫がこの春、そろって京都市上京区の同志社大に入学する。祖母は大学院総合政策科学研究科でデジタルアーカイブを研究、孫は政策学部で学ぶ予定といい、「得意な部分で助け合えたら」と世代を超えてともに学ぶ機会を喜び合っている。 【写真】 線路転落、非常ボタンで電車止める　駅長が「お礼」ポスター 大学院前期博士課程に入学する阪田美枝さん＝中京区＝は、同志社女子大職員として勤めていた1990年代、全国を巡って収集した「紙すき唄（うた）」と「酒造り唄」をCDや書籍にまとめて出版した経験がある。大学院では日本に伝わる多様な「作業唄」について研究を深める。 昨年春、阪田さんのCDを偶然に知ったジャズピアニスト山下洋輔さんが「（作業唄は）日本の文化の原点」と高く評価したことで、「もっと深く掘り下げなければ」と、大学院での研究を志すきっかけになった。その直後にステージ4の大腸がんと診断され、

3月31日で閉店が決まっている都内のセブンイレブン店主が、2月末に本部から閉店1カ月前を通知された後、失踪していたことが分かった。 この店舗は、東京都内にあるセブンイレブン東日本橋1丁目店。2010年にオープンしたが、ドミナント戦略（特定地域への集中出店）などの影響により経営が悪化していた。 現在、同店を中心とした半径200ｍ前後には、他のコンビニが6店舗あり、うち4つはセブンとなっている。 オーナーの齋藤敏雄さん（60）は自殺をほのめかしていたため、訪れていた北海道で警察に一時的に保護された。支援者の助けで3月28日、東京に戻り、今後の身の振り方について関係者と相談している。 ●他チェーンを追い出したら、別のセブンが入ってきた 妻の齋藤政代さん（52）によると、同店は2010年のオープン後、徐々に売り上げを伸ばし、近隣のファミリーマートやローソンが撤退。1日の売上（日販）が100万円前後

やるしかない、ついにNintendo Switch Online生活！！ 最近、ゼルダの伝説ブレスオブザワイルドでもう百時間以上生活している私も、家に帰ったらやるしかない。 Amazonプライム会員なら、Nintendo Switch Onlineが12カ月無料です！！！。 japanese.engadget.com Amazonのゲーム実況SNS「Twitch」は、有料会員Twitch Primeの特典として、「Nintendo Switch Online」が12か月無料になる利用券の提供を開始しました。Twitch PrimeはAmazonプライムの特典の1つとして提供されており、Amazonプライム会員なら追加料金無しでTwitch Primeの特典を利用できます。 Nintendo Switch Onlineがどれだけ楽しいかわからないけど、1年間無料なら入ってみて判断してみればい

Research indicates that carbon dioxide removal plans will not be enough to meet Paris treaty goals

大阪市西淀川区にあるGIGAZINE旧本社へ編集長たちが自動車で荷物を取りに行ったところ、なんと斜め前にあるGIGAZINE第一倉庫がショベルカーでぶっ壊されている真っ最中の現場に偶然遭遇しました。 ◆所有している倉庫が見知らぬショベルカーに破壊されていた 現場はココ、2019年2月16日のことです。現場到着して確認直後からすぐ録音開始しているため、以降の様子はすべて音声データが存在していますが、記事執筆時点で警察が捜査中とのことなので、支障が出ないように専門的で詳細な部分はあえて省略し、被害届や供述調書に沿った事実関係のみで記事化しています。 上記の倉庫がこんな感じに。 解体業者がショベルカーで破壊中。もちろんすぐに「ここはうちの名義になっているし、登記して権利を所有している。火災保険もかけているし、税金も払っている。何かの間違いではないか」と伝えたところ、「上の不動産会社の社長から取り

.app 1 .dev 1 #11WeeksOfAndroid 13 #11WeeksOfAndroid Android TV 1 #Android11 3 #DevFest16 1 #DevFest17 1 #DevFest18 1 #DevFest19 1 #DevFest20 1 #DevFest21 1 #DevFest22 1 #DevFest23 1 #hack4jp 3 11 weeks of Android 2 A MESSAGE FROM OUR CEO 1 A/B Testing 1 A4A 4 Accelerator 6 Accessibility 1 accuracy 1 Actions on Google 16 Activation Atlas 1 address validation API 1 Addy Osmani 1 ADK 2 AdMob 32 Ads

具体的には、経営者が主導した企業の割合は、従業員数が1～5人の企業では84％、6～20人の企業では56％、21～50人の企業では37％、51～100人の企業では23％、101人以上の企業では16％だった。 これに対してITや情報システムの担当者が主導した企業の割合は、従業員数が1～5人の企業では6％、6～20人の企業では13％、21～50人の企業では21％、51～100人の企業では28％、101人以上の企業では34％だった。その一方で、従業員数が21～300人の企業では、総務担当者が主導した割合が3割弱あった。 SECURITY ACTIONに取り組む動機は？ 関連記事 サイバーセキュリティ経営の実践に向けたプラクティス集、IPAが公開 経済産業省とIPAは、サイバー攻撃に対する備えの強化に向けて、国内での実践事例を基にしたプラクティス集を公開した。2017年11月に策定した「サイバーセキ

boardのヘルプは、Githubで管理し、プルリクエストを使って編集・校正を行っています。 ざっくり以下のような運用になっています。 新規のヘルプは、僕が書いてプルリクエストを出し、編集者がチェックする 既存のヘルプは、編集者が気づいた点を随時修正してプルリクエストを出し、僕が内容をチェックする 所定のブランチにマージされると、ステージング環境・本番環境に自動的に反映される これについては、以前詳しく書いたので、興味がある方は下記をご覧ください。 tamukai.blog.velc.jp 実際に運用していて、この仕組みはとても気に入っているのですが、せっかくここまで仕組みができたので、もう一歩進めて、機械的にチェックできるところは、編集者の時間を使わずにチェック・修正をしたいなと考えました。 文章の場合、機械的にチェックできるのは、たとえば、以下のようなものです。 ・「とくに/特に」のよ

平成の30年間は情報セキュリティの観点から振り返ってみると、まさに「悪意ある攻撃の巧妙化」と「情報セキュリティ技術の進化」とのイタチごっこでした。 そこで今回は、社会に大きなインパクトを残し、今日の情報セキュリティを作り上げる礎となったインシデントをいくつか紹介していきます。巧妙化する攻撃に対し、セキュリティ技術がどの様に変化を遂げ、いかに進化してきたのかを過去から探り、今後隆盛するであろうIoT（Internet of Things）時代のセキュリティ対策についても触れていきたいと思います。 平成はコンピュータの進歩そのものの歴史 平成という時代は、個人向けコンピュータが大きく花開いた時代でした。 家庭用コンピュータや個人向けに最適化されたOSが次々と発売されたことで、それまで法人利用が中心だったインターネットを個人であっても気軽に利用することが可能になったのです。 広大な情報ネットワー

2019/3/26 Ansibleもくもく会 （サーバ編）2019.03 in オイシックス・ラ・大地！での中原の講演資料になります