はてなブックマーク

よくあるやつ。値を代入するたびに新しいcontextが生成される。 なので、乱暴に値を上書かない限りはあまり状態を気にしなくていい。 TimeoutとCancel func WithCancel func WithDeadline func WithTimeout はキャンセルを取り扱う。 WithTimeout, WithDeadline は特定時間になったタイミングでキャンセルされる。 引数で指定の仕方が 何秒後かと時刻指定がなのが違うだけ。 実際にWithTimeoutの中身は WithDeadlineを呼んでいるだけ。 WithTimeout, WithDeadline 指定した時間後にキャンセルイベントが起きる。 // 5秒かかる処理 func heavyFunc(ctx context.Context) { time.Sleep(5 * time.Second) } func

この記事は Go その2 Advent Calendar 2015 10日目の記事です。 今回はgoとdockerを使ってMicroserviceっぽく、ウェブアプリケーションを作っていく時のさわりの部分を書いてみました。 Microservice Hello World macでdocker toolboxインストールして、docker-machine start devとdocker-machineを立ち上げた後から。 Hello Worldを返すウェブサーバーのdockerイメージを用意してみます。 package main import "net/http" func main() { http.HandleFunc("/", func(w http.ResponseWriter, r *http.Request) { w.Write([]byte("Hello World"))

※ 2016/07 現在のre:dashについては いつの間にかre:dashの設定が簡単になってた(Dockerを使えば) に書いてます re:dashをdocker-machine上で動かしてみる。 注意 バージョンは v0.8.2-rc。masterブランチを見ると書き換えているようなので、新しいものはこの方法だと使えなくなりそう。 必要なもの docker-machine docker-compose node(bower) docker imageの準備 git clone git@github.com:getredash/redash.git # redash image作成 $ cd redash # Dockerイメージにassetsを入れるために先にbower installしておく $ cd rd_ui $ bower install # 追記: make depsでも

syncパッケージには、相互排他ロックがあります。 これを使うと意図的に処理にブロックを入れることが出来て goroutineのチャンネルのやりとりのウェイトのようなことが実装出来ます。 Mutex型 相互排他ロック。 使わない場合 package main import ( "fmt" "time" ) func main() { c := make(chan bool) for i := 0; i < 5; i++ { go func(i int) { time.Sleep(500 * time.Millisecond) fmt.Println(i) c <- true }(i) } for i := 0; i < 5; i++ { <-c } } package main import ( "fmt" "sync" "time" ) func main() { m := new(sy

package main import "fmt" func gen(nums ...int) chan int { out := make(chan int) go func() { defer close(out) for _, n := range nums { out <- n } }() return out } func sq(cs <-chan int) <-chan int { out := make(chan int) go func() { defer close(out) for c := range cs { out <- c * c } }() return out } func main() { ch := gen(1, 2, 3, 4, 5) sq1 := sq(ch) for s := range sq1 { fmt.Println(s) } // Outp

Goで時刻を取り扱う場合 time型を取得する time.Time型の変数を取得する方法。 現在時刻から取得する fmt.Println(time.Now()) // Output: // 2009-11-10 23:00:00 +0000 UTC

rails(3.2.18)アプリunicornで起動しているときに、そのunicornのプロセスをeyeでモニタリングする方法。 準備 Railsプロジェクト上であること前提。 unicorn.conf を置く https://github.com/defunkt/unicorn/blob/master/examples/unicorn.conf.rb あたりを参考に worker_processes 3 preload_app true timeout 15 listen 3000 pid File.expand_path('tmp/unicorn.pid', ENV['RAILS_ROOT']) stderr_path File.expand_path('log/unicorn.log', ENV['RAILS_ROOT']) stdout_path File.expand_path(

https://github.com/awslabs/aws-sdk-go aws公式のsdkになるaws-sdk。 取り急ぎ、ファイル一覧取得と、ファイルのアップロードの2つだけ確認してみた。 ファイル一覧取得 package main import ( "fmt" "github.com/awslabs/aws-sdk-go/aws" "github.com/awslabs/aws-sdk-go/gen/s3" ) func main() { accessKey := "<AWS_ACCESS_KEY_ID>" secretKey := "<AWS_SECRET_ACCESS_KEY>" bucket := "<bucket>" creds := aws.Creds(accessKey, secretKey, "") cli := s3.New(creds, s3.BucketLoca

Goでwebサーバーを作るときに考えたことをまとめておきます。 dockerコンテナで動かす場合を少し考慮してます。 フルスタックフレームワークか軽量系フレームワークか 最初に突きつけられる問題です。 フルスタックフレームワーク revel beego 軽量系フレームワーク goji negroni どんなフレームワークもそうですが、フルスタックなフレームワークならば、 その道に乗っかることで余計なことを考えずにすみます。 だけどその道から外れることをする場合に苦労が伴います。 golangの場合、Go初心者ならばフルスタックでもいいけれど、 ある程度Goに慣れてくると標準のライブラリといくつかのライブラリを使うだけで webサーバーを作る場合、十分な場合があります。 前にrevelを使っていたときは、最初はrevelの機能を使っていたけれど、途中で他のライブラリを使ったほうが楽なんじゃな

よく見かける構造体の使い方のざっくりメモ。 名前はまったく思いつかなかったので、ケース別に。 Goroutineを使わないもの縛り。 コンストラクタの設定をする type Foo struct { Param Param } type Param struct { Name string } // コンストラクタ func NewFoo(name string) *Foo { p := Param{name} return &Foo{p} } func main() { f := NewFoo("Hello") fmt.Println(f.Param.Name) // "Hello" } type Foo struct { Name string } func (f Foo) Error() string { return fmt.Sprintf("Error: Foo's %s erro

最近のウェブ開発では各機能ごとをAPIでつなぎ込む時代になっています。 そのため、各チームが開発をしていく上で、 他のチームにAPIの仕様を伝える方法をきちんとまとめておく必要が出てきています。 そんな中でAPIドキュメントにどのような役割が求められていて どのような選択肢があるか、一旦自分の把握している知識をまとめています。 (ここで書いているAPIは、httpでアクセスしたら、JSON形式でレスポンスを返すウェブサービスのAPIを指しています) APIドキュメントを用意する上で、すぐにぶつかる壁 APIドキュメントを用意する場合に、何も考えずにExcelやwikiにまとめると、早い段階で メンテナンスのコスト の問題にぶつかります。 『APIドキュメントを書く時間がない』 『本当にドキュメント通りの結果が返ってくるか、試してみないとわからない』 『実際に返ってくるAPIとレスポンスが違

func TestSetsRemoteAddr(t *testing.T) { defer afterTest(t) ts := httptest.NewServer(HandlerFunc(func(w ResponseWriter, r *Request) { fmt.Fprintf(w, "%s", r.RemoteAddr) })) defer ts.Close() res, err := Get(ts.URL) if err != nil { t.Fatalf("Get error: %v", err) } body, err := ioutil.ReadAll(res.Body) if err != nil { t.Fatalf("ReadAll error: %v", err) } ip := string(body) if !strings.HasPrefix(ip, "1

APIドキュメントツールにswaggerというものがあります。 公式のデモ ドキュメントに記載したAPIの一覧を表示し パラメータなどを直接入力してその場で試せるというものです。 facebookのGraph API Explorerや twitterの https://dev.twitter.com/console と同じような位置づけです。 すべて設定するととても便利なのですが、 ドキュメント元となるJSONの作成が必要であったり、 使いこなすのが結構大変だったりします。 ただswagger-expressを使うと 出来るだけ簡単にドキュメント化することができます。 swaggerの構成 ブラウザでの表示のためのindex.htmlやjs,css,imgなどがある、swagger-ui APIの情報がまとめられている 設置の仕方 expressを使ったアプリ sampleApp 上で、

var moment = require("moment"); // 現在時刻を取得する例 moment().format(); // 2014-07-16T09:00:00+09:00 (default) moment().format("YYYY-MM-DD"), // 2014-07-17 moment().format("YYYY-MM-DD HH:mm:ssZ"), // 2014-07-17 10:00:00+09:00 moment().format("dddd, MMMM Do YYYY, h:mm:ss a") // "Thursday, July 17th 2014, 10:00:00 am” moment().toDate() // Date型で取得 moment().unix() // unix timestampで取得 moment().toISOString()

Goでhttpリクエストを送る方法。 シンプルなものがあるものの、詳細まで設定しようとすると やらなければいけないことが増えていきます。 1. シンプルなGETリクエスト net/httpのfunc Get(url string) (resp *Response, err error) を使う。 (以下エラーは無視してます) package main import ( "fmt" "net/http" "io/ioutil" ) func main() { url := "http://google.co.jp" resp, _ := http.Get(url) defer resp.Body.Close() byteArray, _ := ioutil.ReadAll(resp.Body) fmt.Println(string(byteArray)) // htmlをstringで取得

GoでJSONをパースするときに、あれこれ考えるのだけど きちんとやっていくと、どうしてもうまく実装できなくなって困っているという話。 先に書いておきますが、結論はないです。 JSONをパースするときの問題 そもそも、JSONを簡単に取り扱う必要がなぜあるのか、について。 標準では、JSONをパースする場合 json.Unmarshalを使ったりjson.NewDecoderを使ったりする。 例えば、User構造体に type User struct { Name string Age uint16 } func main() { var jsonStr = `{ "Name": "Ken", "Age": 24 }` var u User json.Unmarshal([]byte(jsonStr), &u) fmt.Println(u) // {Ken 24} } 上の場合、JSONの

google app engineでウェブアプリケーションを とりあえず動かしてみたいときに行う場合。 アプリケーションを動かす まずはアプリケーションを動かすところまで。 SDKのインストール デプロイやローカルで動かすためにSDKをインストールする。 Google App Engine SDK

a = [1,2,3,4,4] b = [3,4,5,6,7] p a | b # 和集合 [1,2,3,4,5,6,7] p a - b # 差集合 [1,2] p a & b # 積集合 [3,4] var _ = require('lodash'); var a = [1,2,3,4,4] var b = [3,4,5,6,7] console.log(_.union(a, b)); // 和集合(union) [1,2,3,4,5,6,7] console.log(_.difference(a, b)); // 差集合(difference set) [1,2] console.log(_.intersection(a, b)); // 積集合(intersection) [3,4]

1ヶ月くらいGoの勉強をしたときにたどり着いたリンク集。 (適時追加中) ページ A Tour of Go - 最初にここ。ただし、量と途中のエクササイズの問題の分かりにくさで、最初から全てを理解するのは大変。 go-wiki tips的な Golang JP - Google+のコミュニティ build web application with golang - Goでウェブサービスを開発する場合の説明。 Go言語での構造体実装パターン - 構造体の使い方 Go Language Patterns - 『You should have already read the Go Tutorial and Effective Go. This site is the next step.』 スライド Go For Perl Mongers - YAPC::Asia TOKYO 2014のプレゼ

最近APIのバリデーションを行うのにJSON Schemaを使おうという話をよく聞くのですが じゃあやってみようとすると、単体のJSONのバリデーションを行うことは出来るけれど それが実際の運用に適用できるようにするためには、 それなりに考えなくてはいけないようです。 JSON Schemaって? JSON Schemaは、文字の通りJSONのスキーマ定義を明確にするものです。 2014/09/07現在、IETFにdraft v4が3つに分割されて公開されています。 JSON Schema Core JSON Schema Validation JSON Hyper-Schema それで、単体のJSONファイルの確認ならばCoreだけで十分なのですが WebサービスのAPIを管理しようとなると、 JSON Hyper-Schemaのほうで定義されているlinksを使って、ひとつのURIに対

Go製フレームワークRevelの処理の流れです。 ざっくりとした処理の流れの話です。 以下、社内勉強会用資料。 revelの主な処理の流れ http://revel.github.io/manual/concepts.html Play Frameworkを参考に作っている。 基本的にはMVC。 revel アプリの作成方法 revel アプリケーションの作成 $ revel new sample ~ ~ revel! http://revel.github.io ~ Your application is ready: /Users/username/.go/src/sample You can run it with: revel run sample . ├── app │   ├── controllers │   │   └── app.go │   ├── init.go │ 

http://talks.golang.org/ などにあるGoに関するスライドショー。 左右キーでページ送り出来るのですが、 スマホで見れなかったりして、 使いづらいのによくみんな使っているなあと思ってたら、 どうやらこのスライドはgo.toolsにあるpresentという パッケージを使っているということに気づきました。 つまりは「Goの勉強会で発表で使うと差がつけられる！」ということのようです。 以下、作り方のメモ。 ローカルで閲覧できるようにする presentを使ってローカルにスライドショーを作成。 presentのインストール $ present --help Usage of present: -base="": base path for slide template and static resources -http="127.0.0.1:3999": HTTP ser

前置き 構造体をJSONにする場合、encoding/jsonのfunc Marshal(v interface{}) ([]byte, error)を利用する。 package main import ( "encoding/json" "fmt" "time" ) type Data struct { Id int `json:"id"` Title string `json:"title"` CreatedAt time.Time `json:"created_at"` } func main() { loc, _ := time.LoadLocation("Asia/Tokyo") d := Data{ 1, "HelloWorld", time.Date(2014, 8, 25, 0, 0, 0, 0, loc), } bytes, _ := json.Marshal(d) fm

API Blueprint(以下Blueprint) は MarkdownファイルからAPIドキュメントやサンプルデータになる JSONを生成する仕様。 一旦決められたフォーマットのJSONに吐き出すので、 それを中心に入出力のライブラリが色々あったりする。 Blueprintのパーサー MarkdownからJSONを出力するために Snow Crashというライブラリを利用する。 後に書くものは大体このSow Crashを利用するので詳細は省略。 BlueprintからAPIドキュメントHTMLを生成する Blueprintを上手く扱うために、 色々なライブラリが用意されている。 aglioはBlueprintから表示用htmlを用意してくれるライブラリ。 # output.htmlにファイル出力 $ aglio -i input.md -o output.html # デフォルトの h

外部リクエストを含める処理の場合のテストの書き方 いわゆるリクエストのモックの作り方について。 例えばfetch()という外部のURLをGETで取得する関数があったとする。 package main import ( "fmt" "io/ioutil" "log" "net/http" ) func fetch(url string) []byte { res, err := http.Get(url) fmt.Println(url) if err != nil { log.Fatal(err) } defer res.Body.Close() body, err := ioutil.ReadAll(res.Body) if err != nil { log.Fatal(err) } return body } func main() { clientId := "<client id>

Go言語にはデフォルトでSQLやSQLライクなデータベースに接続するための インターフェースがデフォルトで用意されている。 それに各DB用のドライバーを追加して、データベースに接続する go-sql-driver/mysql のインストール package main import ( "database/sql" "fmt" _ "github.com/go-sql-driver/mysql" ) func main() { db, err := sql.Open("mysql", "root:@/my_database") if err != nil { panic(err.Error()) } defer db.Close() // 関数がリターンする直前に呼び出される rows, err := db.Query("SELECT * FROM users") // if err !=

package main import ( "fmt" "net/http" ) func handler(w http.ResponseWriter, r *http.Request) { fmt.Fprintf(w, "Hello, World") } func main() { http.HandleFunc("/", handler) // ハンドラを登録してウェブページを表示させる http.ListenAndServe(":8080", nil) } ServeHTTPを使う 既存のstructや型に対して、ServeHTTPメソッドを用意することで http.Handleに登録出来るようにする package main import ( "fmt" "net/http" ) type String string func (s String) ServeHTTP(w http

var gulp = require('gulp'); var coffee = require('gulp-coffee'); // pluginの読み込み gulp.task('coffee', function() { return gulp.src(['src/*.coffee']) // srcを指定 .pipe(coffee()) // 指定したファイルをJSにコンパイル .pipe(gulp.dest('dest')); // dest先に出力する }); // default タスクの時にcoffeeタスクを実行する gulp.task('default', ['coffee'], function() { console.log('done'); });