[B! AWS][go] clavierのブックマーク

Amazon CloudSearch にドキュメントを取りこむ Lambda 関数 s32cs のご紹介 - 酒日記はてな支店

このエントリは OSS紹介 Advent Calendar 2017 - Qiita 16日目の記事です。穴が空いていたので拙作の紹介で穴埋めを。 s32cs という Amazon CloudSearch に対して S3 からのイベントドリブンでドキュメントを投入する Lambda を書いたのでご紹介します。 github.com 3行で Amazon CloudSearch にドキュメントを登録する Lambda を作ったアプリケーションからは Fluentd にログを送るだけ Kinesis Firehose + S3 を利用することで、ストリームデータを一定時間/一定サイズに区切っての継続的なバッチ処理が容易かつ堅牢に基礎知識 Amazon CloudSearch は AWS が提供している、フルマネージドな検索エンジンです。ドキュメント数が多くなったりすると勝手にスケール

clavier 2017/12/26

リンク

Ridge - A framework like GAE/Go on AWS

golang.tokyo#4 https://golangtokyo.connpass.com/event/50714/

clavier 2017/03/03

リンク

A Go framework for AWS Lambda

In previous posts I discussed why I think Lambda represents a new development opportunity. Lambda based services are operationally aware by design. Delegating some operational responsibility to AWS frees your team to focus on creating business value at higher velocity. Earlier PaSS offerings promised similar benefits, but those often didn’t materialize for a host of reasons. Lambda-based architect

clavier 2016/04/17

リンク

法学部生だけどはてなのインフラで4年間バイトした - naokibtn’s blog

(↑上司の id:y_uuki さんが考えてくれたタイトル / "法学部生"なのはあと少しだけですが..) はてなでインフラエンジニアのアルバイトを約4年間やって、本日最終出社だったので簡単に振り返ります。アルバイト入社前後大学入学から少しして、はてなアルバイトの退職エントリを何かで見つけ、(今のアルバイト採用 - 株式会社はてなにはないですが) 確か当時の募集要項には、サーバを組み立てる仕事、みたいな職種が書いてあり、なんか面白そう、ということで深く考えず応募したのを覚えています。面接のあたりから Linux とか Perl の話が出てきて、思ってたのと違うぞと面食らってはいましたが、さすがに不安を覚えたのが、研修が始まって謎の課題を与えられたとき。内容は "小規模サーバに Gentoo をインストール。ネットワークは Thinkpad から NAT で頑張れ" というもの。L

clavier 2016/03/24

リンク

GitHub - goadapp/goad: Goad is an AWS Lambda powered, highly distributed, load testing tool

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

clavier 2016/02/15

リンク

AWS Lambdaで効率的にgoバイナリを実行する — そこはかとなく書くよん。ドキュメント

lambda_procでは、node側でJSONを整形し、goに対して一行のJSONとして渡します (Line Delimited JSON)。 go側のヘルパーライブラリがJSONを整形し、goのメイン関数に渡します。返答は、適当なstructを返すとlambda_procのヘルパーライブラリがJSONに整形してnodeに返してくれます。実際にベンチマークにgoのソースコードは以下となります。標準出力に書いてしまうとnode側に渡ってしまうので、ログは標準エラー出力に書く必要があります。 package main import ( "encoding/json" "log" "os" "github.com/aws/aws-sdk-go/aws" "github.com/aws/aws-sdk-go/aws/session" "github.com/aws/aws-sdk-go/se