この記事は Let’s talk about logging の翻訳です。 Nate Finch による Go Forum への投稿で始まったスレッド を見てこの記事を書くことにしました。 この記事は Go を対象にしていますが、あなたのいままでのやり方を振り返ってみたら、同じ考え方がより広く適用できると思います。 なんでこんなに足りないの？ 訳注: "Why no Love?" を、「（愛されてないから）機能が足りない」というニュアンスで解釈しましたが、自信が無いです。 Go の log パッケージ はレベル付きのロギングを提供していません。なので手動で debug, info, warn, error のようなプレフィックスを書く必要があります。 また、 Go はパッケージごとにログの出力レベルを制御する方法も提供していません。 比較対象としてサードパーティーのロギングライブラリを見て

開発の土田です。 bugspots が何かをご存知でない方はまず、下記の記事をご参照ください。 Google のバグ予測アルゴリズムと bugspots の導入 bugspots は簡単に言うと、「そのファイルはバグ修正が最近沢山されているから、次に修正するときもバグが入る可能性が高い」という考え方でスコアを算出するアルゴリズムです。コミットログを参照し、ファイルごとにスコアを算出します。前回の記事では、bugspots の簡単な紹介と、その導入について書きました。今回はその応用編として、どのように運用しているかを書いていきたいと思います。 コミットログについて bugspots はバグが発生したコミットが重要な指標で、バグかどうかの判断基準にコミットログの文字列を使っています。デフォルトは「fixとかcloseっぽい文字列」(fixes, fixed, closes, closed を含

日本アニメ初の快挙！海外アニメ賞を受賞した『スキップとローファー』海外ライセンス部長&プロデューサーが語る、奮闘の舞台裏

Test Driven Development with Puppet - Gareth Rushgrove, Puppet LabsRead less

具体的には https://github.com/golang/go/blob/f78a4c84ac8ed44aaf331989aa32e40081fd8f13/src/net/unixsock_posix.go#L339 の実装。 Go言語でGraceful Restartをする を参考にgoのhttpサーバをServer::Starter経由で起動させたいのだけど、この挙動のお蔭でunix domain socketを使った場合に困っている。 package main import ( "fmt" "log" "net/http" "os" "os/signal" "syscall" "github.com/braintree/manners" "github.com/lestrrat/go-server-starter/listener" ) func main() { go fun

この記事は、第1回情報共有ツールお悩みNightのグループワークを元に作成しています。 新しい情報共有ツールを試すぞ！と思っても、一人では使えるものではないし、やめるかもしれないものに仕事の実情報を載せてガンガン使っていくというわけにもいかなかったりして、どうやって試すのかなやみどころ。 「30日間お試しで、ある情報共有ツールが使えるようになった。どうやって楽しく使ってもらうようにするか。」 こんなお題でアイデア出しをした結果をまとめました。 こちらの記事はイベントのまとめサイト、「JohoKaigi 情報会議」内に移動しました。 お手数ですが以下のページをご覧くださいm(_ _)m http://johokaigi.org/articles/2015/11/09/johokaigi-1.html

Airflowを導入するとcronのバッチ処理でエラーが起きてログファイルを漁った結果、Log出力が甘くて原因特定できないぐぬぬぬぬもうやだまじつらい、みたいなことが仕組みで防げるようになります。 Airflowってご存知でしょうか？ Airbnb社がオープンソースで公開しているデータパイプラインのスケジュールとモニタリングツールです。簡単に言うとジョブツリーを構築できる高機能なcron。Python2系で開発されていてpip install可能なオープンソースのソフトウェアです。AWSが年1で開催している大規模イベントre:Invent 2015で複数の会社がAirflowを利用していると発表し注目を集めました。Yahooの発表を読んで興味を持ちました。この記事はAirflowをプロジェクトに導入すべきか検討、検証したメモです。 ■ プロジェクトの解析タスクをAirflowに乗せてみた

こんにちはこんにちは、 VOYAGE GROUPでBuild prayer*1として活動している@_nishigoriです。 pip, bundler, rebar 等 各プログラミング言語のビルドツールないしパッケージマネージャ等と呼ばれているツールを弊社でも利用していますが、 PHPでは依存管理ツールとしてComposerを利用しているプロジェクトがあります。 今回はComposer本体のバージョニングについて紹介し、 利用する上での良い側面と悪い（と思われる）側面を紹介します。 はじめに Composerの入手 最新版 *2 Installer self-update リリースサイクル 効能 デメリット self-updateする日時によってrevisionが異なる（場合がある） ある日のself-updateで突然死 Tagging Versions Installer self-

@teppeisさんがこの辺のことを一発でやってくれるteppeis/espower-typescript-babelを公開されてるので、以下の情報はもうあんまり意味がありません。 TypeScriptがasync/await対応したのでテストとかでも使いやすくなった。 こないだ試したらちょうどmocha+TypeScript+power-assertが使えるようになってたのでメモる。 package.json { "devDependencies": { "babel": "^6.0.15", "babel-polyfill": "^6.0.16", "espower-babel": "^3.3.0", "espower-typescript": "^2.0.0", "mocha": "^2.3.3", "power-assert": "^1.1.0" }, "scripts": { "

2022.03.09 Azure AD導入環境に対するペネトレーションテストの資格「Certified Az Red Te...

今回は、Pythonの標準インストールされている『Tkinter』の配置に関する実践的Tipsを書き留めています。Classで作成したフレームをキー入力によって切り替える方法について書いています。Classで定義したもの […]

前回の記事でOpenSCAPの概要と、簡単な使い方については理解できたので、 今回は実用的な使い方について調査してみました。 SCAPを利用する上で最も重要なのが、どんなSCAP content(スキャンのポリシ)を利用するかだと思います。 SCAP contentは自分で構築することもできますが、 効果的/網羅的なポリシを自分で作り、メンテナンスし続けるのはなかなか骨の折れる作業だと思います。 ということで、今回はThe SCAP Security Guide project(以下SSG, https://fedorahosted.org/scap-security-guide/)で提供されている SCAP contentを使ってスキャンするときの手順をまとめます。 SCAP contentの取得 SSGが提供するSCAP contentは、RPMでインストールもしくはGitHubから取

SCAPとは SCAP(Security Content Automation Protocol)とはNISTによって管理されている規格。 エンタープライズシステムのセキュリティメンテナンスの標準化のためにつくられたもの。 パッチの存在確認の自動化 システムのセキュリティ設定の確認 不正アクセスの痕跡の調査 ...等 OpenSCAPとは SCAPの構成要素は脆弱性や設定等のセキュリティデータを伝えるための、複数の複雑なデータ変換フォーマットを含む。 歴史的な理由から、これらの情報に適切なフォーマットで問い合わせをするツールはほとんどなかった。 そのようなツールの欠落は、SCAPを使ってもらうことの障壁になっていた。 OpenSCAPプロジェクトは、SCAPへのアクセシビリティを向上させることを目的としている。 OpenSCAPは、以下のコンポーネントで構成される。 Library - S

Red Hat Enterprise Linux運用自動化のキモ 1. Red Hat Enteprise Linux運用自動化のキモ Kazuo Moriwaka Solution Architect, Red Hat K.K. 4 November 2015 2. ● 構築運用自動化の理想 – 自動化がうまくいくとどうなる? – なぜ自動化が必要? ● 自動化したい「キモ」と関係するOSS – 自動化したいものは……? ● Red Hat Satellite 6でどこまでできる? Agenda 3. 構築運用自動化の理想 4. 運用管理を改善したい ● IT予算のかなりの割合は運用維持 ● 人が手間暇をかけるところを減らしたい →各種の作業を自動化し、社内標準を作っていく – 人間にはパッチをあてられないけど、 スクリプトならテストして修正できる – 同じ作業を何回も繰り返すのはコンピ

The goal is to have a similar base use case with CoreOS than with boot2docker or docker-machine: I want to be able to launch on CoreOS a Docker container from my Mac’s command line and access it from the mac. The test environment is: Host: 10.10 Yosemite laptop Docker 1.6 CoreOS alpha 675 Vagrant 1.7.2 VirtualBox 4.3.26 CoreOS-Vagrant CoreOS is already providing a CoreOS-Vagrant repository, with a

表のDockerについて。。。 Engineはいわゆる普通のDocker。Dockerの実行環境です。 MachineはローカルやAWSなどの別環境にDockerのホストマシンを構築するツール。 通常、MacやWindowsでDockerを使う場合は、このMachineを用いて、ローカルのVirtualBoxにDockerホストのVMを作って、それに対して、dockerコマンドを実行していきます。 Composeは複数のコンテナのパラメータをYAMLファイルに記述しておいて、ワンボタンで環境構築するものです。 はじめにdockerの環境を整えておく Dockerで構築しておくと何度も同じインストール作業をしなくてよくなります。 MacだとDocker Toolboxをインストールすれば、Docker Engine, Machine, Composeの準備がすべて整います。 https://

今回はtd-agentのバッファーディレクトリ内からいろいろ情報取得したかったので、ざびたんに協力してもらいました。 まずはエージェントへの設定から。※今回は動作中のzabbixを対象としています。 UserParameter=td-agent.dirused[*],du -bs $1 | cut -f1 2>/dev/null UserParameter=td-agent.bufnum[*],ls -lt $1 2>/dev/null | wc -l UserParameter=td-agent.filetime[*],ls -trl --time-style='+%s' $1 | head -n2 | sed -e '1d' | sed -E 's/\s+/,/g' | cut -d, -f6 2>/dev/null 1行目：とあるディレクトリの使用容量取得 2行目：とあるディレクトリ

# Data Volume Containerを作成 # mysqlイメージは `VOLUME /var/lib/mysql` されているので，最初からマウントポイントがある uraura@rosemary$ docker create --name dbdata mysql d7e4a8577eeb94bc89d13dae68c4c71e719f58fa58b6f10dc87311a17d3ff098 # コンテナが作成されることを確認．起動していないので，`-a`付けないと出てこない uraura@rosemary$ docker ps -a CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES d7e4a8577eeb mysql "/entrypoint.sh mysql" 26 hours ago Created dbdata

About Ubuntu 14.04 の環境に、nginx + ngx_pagespeed な環境を構築した時の作業メモです。 先日、nginxのMainline版である1.9.5がリリースされましたが、HTTP/2対応が取り込まれたということで、これを機に自鯖(今はSPDY)をHTTP/2デビューさせます！ ちなみに、バックエンドで動かしているphp-fpm(FastCGI)はHTTP/2を喋らないぞ？？？、と心配になりましたが、結論としては心配無用でした。 公式の解説によると、NginxはHTTP/2のGatewayとして機能し、バックエンドとはHTTP/1.1に変換して喋るようになっているようです。 NGINX acts as an “HTTP/2 gateway” to ease the transition to the new protocol. On the front en

[markdown] こんにちは。Railsエンジニアの谷口です。 本日はマネーフォワードにて行っている開発プロセス「試食会」について紹介します。 試食会とは マネーフォワードには「試食会会場」があります。 これは、実際にそういった物理的な部屋があるわけではなく、ただのチャットルームです。 「試食会会場」というチャットルームでは、まだ世に出ていないリリース前の機能が開発環境に公開されていて、みんなにフルボッコにされています試食されています。 つまり「試食会会場」とは、全社でドッグフーディングをするためのチャットです。 試食会始まったきっかけ 遡ること半年程前の出来事です。 マネーフォワードでは、それまで同様爆速でサービス開発が行われていました。[/markdown] [markdown] が、予期していなかった ・カスタマーサポートがユーザーからの問い合わせで新機能を知る ・営業が訪問先で

いま所属している組織で使っている情報共有システムが僕はいまいち好きではなくて，気に食わないところを twitter にガーッと書いたんだけど，さてここで「良い情報共有システムとは」と考えた時にスッと言語化出来なかったので，僕の思う情報共有システムに求めることをここでまとめておくことにする． エディタが腐ってない これは本当に重要で，エディタが腐っていると「Wiki を書こう」という気がそもそも起きないし，起きたとしてもエディタがストレスフルだと文章を書き始めてすぐに嫌になってしまうので最低限エディタはまともである必要がある．さもなくば Wiki は廃墟と化す． WYSIWYG なエディタを利用するのは難しいと思っていて，本当に使いやすい WYSIWYG エディタを作るというのはかなりコストが高い (WYSIWYG エディタはある程度まで完成度が高まっていないと使い物にならない気がする) の

Rubyにおける定数は意図せず書き換えられることがある 以下のような場合、警告すら出ずに定数が書き換えられてしまう。 PERMIT_ID = ['0001', '0002', '1234'] PERMIT_ID.reject! { |id| id == '1234' } p PERMIT_ID # => ["0001", "0002"] Rubyにおける定数は不変の値というより、グローバル変数に近い。 また、Rubyでは先頭が大文字になっている識別子のことを定数としていることから、クラス名であるStringやArrayなども定数として扱っている。 そう考えると、クラスはメソッドを追加したり等いつでも書き換えられるミュータブルなオブジェクトなので、定数が参照するオブジェクトもミュータブルにする必要がある。 よって上記のコードはRuby的に正しい挙動なので警告は出されない。 とはいえ、定数を定

Norikra でクエリした結果を Mackerel に投げたい場合、これまでは fluent-plugin-norikra で取得して fluent-plugin-mackerel で送信する、という作りにしていたと思います。 Norikra 1.2以降では Listener plugin が使えるようになったので、クエリ結果を直接 Norikra 上で扱うことが可能になりました。 ということで、norikra-listener-mackerel (rubygems) を書きました。Norikra 単体で、クエリ結果を Mackerel のサービスメトリクスとして送信できます。 使い方 $ gem install norikra-listener-mackerel norikra が動作する ruby でインストールすれば、norikra start 時に自動的に読み込まれます。 クエリ

前々から書こうと思ってて, すっかり忘れてたので, 書きます! Mackerelの監視 Mackerelでは, ホストの状態(CPU, メモリ, ファイルシステムの利用率とか, Mackerelと繋がっているかとか...)やURLの死活などを監視することが出来るのですが, 8月末に監視設定APIがリリースされ, これらのパラメータをAPI経由で実施出来るようになりました. というわけでReactioの開発チームでも, 早速このAPIを利用して, 以下のような仕組みを作ることで, Mackerelの監視パラメータを"コード"で管理するようにしました. 仕組み Reactioには, 開発者支援ツールが詰め込まれた｢Reactio-HQ｣というリポジトリがあるのですが, そこにMackerelの監視設定ファイルを用意しました. ちなみにReactioの開発者支援ツールは, Reactioそのもの

やっと、ついに、誰もが無料でHTTPSを使えるようになる！…MozillaやEFFが共同プロジェクトを立ち上げ - TechCrunchだが、ブコメ欄で「フィッシングサイトが見分けられなくなる」と勘違いしている向きがあるようなので、ちょっと書いておく。 このLet's Encryptだが、Let’s Encrypt: Delivering SSL/TLS Everywhereに説明が書かれている。そもそも上のTechCrunchの記事ではLet's Encryptがどういうものか分からない。この記事では何ができて何ができないかを書いていないし。 TechCrunchの記事はオレが見た時点(2014/11/20 5:00)ですごいブクマ数(792ユーザ)なんだけど、本体の説明のブクマ数は4ユーザ、オレがブックマークしたので5ユーザである。ちょっと調べてからコメントすればいいのに。 下記のほう

ついカッとなって書いた。 タイトルにもある通り、ngx_bumpylifeはnginxでApache HTTP ServerのMaxRequestsPerChildに相当する挙動を実現するための拡張モジュールです。 さらに言うとap-mod_bumpy_lifeがやってるようなMaxRequestsPerChildの値を一定範囲内でランダムにする機能も合わせて提供します。bumpylifeという名前はこちらのモジュールから来ています。 使い方と動作解説 こんな感じで設定します。 ngx_bumpylifeは以下の3つのディレクティブを提供します。 bumpylife -> ngx_bumpylifeを有効／無効にする bumpylife_min -> nginxの各ワーカプロセスが終了するまでに処理するリクエスト数の下限値 bumpylife_max -> nginxの各ワーカプロセスが終

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

私は、ブログでお金を稼ぐこと自体については、中立的なモノ言いをせざるを得ない。googleアドセンス広告を切っているとはいえ、このブログだってAmazonのアフィリエイトは使用しているわけだから、とやかく言えたものではない。 そして涼しい顔をしながら*1安定した収入を獲得しているブロガー達に対し、“ブログ道”の違いはあるにせよ、賛嘆の念を禁じ得ない。 以上を断ったうえで、善悪是非ではなく個人的好悪に基づいて、錢勘定を隠そうともしないブロガーを批判してみたいと思う。 「うわっ！カネ臭ぇブログだ！」 私は、カネ臭さを隠そうともしないブログが苦手だ。 ちょっと複雑かもしれないが、私は「カネ臭いブログ」が苦手ではなく「カネ臭さを隠そうともしないブログ」が苦手なのだ。 カネの流れる音が聞こえてくるブログというのはある。 しかし、カネの流れる音が聞こえてくるブログの、ブロガーの自意識や言動までもがカネ

初めてクレジットカード決済するようなアプリを作ってみています。 決済には Stripe を使ってるんですが、その使い方はまた今度として、 Webhookをどうやってローカルで受け取るかという話。 UltraHook - Receive webhooks on localhost ↑ これ、めっちゃいいです。 開発環境は Mac で Vagrant を使ってます。 まずは登録。 ネームスペースも登録する。 登録すると api_key がもらえるので、それをこんな感じ。

Bash用テストフレームワークに、Batsやshunit2がありますが、イケてないなーと思ってたら、気づいたら自分で作ってました。 github.com テストの結果はモダンなテストフレームワークのように、カラフルに表示します。 またFAIL時は、FAILしたテストの結果を表示します。 自分の Arch Linux 上の Bash 4.3.42 および、Travis CI 上で動作することを確認しています。 インストール curl -o ~/bin/bashtub https://raw.githubusercontent.com/ueokande/bashtub/v0.1/bin/bashtub chmod +x ~/bin/bashtub です。ただし~/binはパスが通ってるとします。 これでターミナルから bashtub と打つことで実行できます。 bashtub テストを書く 各

先日、TinySegmenter.jlの話を書いたら各方面から反響を頂きました。 repeatedly.github.io http://woxtu.tumblr.com/post/132337169740/rust-tinysegmenterwoxtu.tumblr.com qiita.com そんな中で、ikawahaさんがGoでも同様の最適化を実装していました。 ikawaha.hateblo.jp それと比較するために、とりあえずJulia templateをPRして比較しました。 Ruby Perl Python Node.js C++ Go Julia Julia (hash optimized) 132.98 134 111.85 105.31 48 10.50 11.70 10.35 実はTinySegmenterMakerのshogo82148さんが一部のhashのkey

【緊急】 F-Secure日本支社のバックは韓国国家情報院ｷﾀ━━━━(ﾟ∀ﾟ)━━━━!! 日本支社長の正体が真っ黒すぎてヤバイ！！！！ 2ch「防衛省のデータの流出元の可能性大」

おにぎりがエスニック料理や専門店もできるほどの人気のパクチーと融合。おうちで作るパクチーおにぎりが美味しいと評判です。 2015.05.18

はじめに 2015年6月12日にRSpec 3.3がリリースされました。 APIが大きく変更されたり、派手な新機能が追加されたりはしていませんが、うまく活用するとテストを効率よく書いていけそうな実践的な新機能がたくさん導入されています。 この記事ではそんなRSpec 3.3の新機能を紹介していきます。 新機能一覧 RSpec 3.3で追加された主な新機能は以下の11個です。 これから各新機能の内容を紹介していきます。 特定のエクスペクテーション群をまとめて検証できる（aggregate_failures メソッド） グループやexampleをID指定して実行できる 失敗したテストだけを再実行できる（--only-failures オプション） 失敗したテストを1件ずつ修正できる（--next-failure オプション） テストが増減しても seed を指定したランダム実行が同じ順序で実行

※この記事は元々「Gitのこれやめて！リスト」として2015年11月に投稿したものを改訂したものです。 この記事について 私が個人的にgitとプルリクエストについて、「こうして欲しい」とか「これはやらないで！！」とか思っていることをまとめたものです。 元々は2015年に私がコードレビューをしてる時に気になったことを、あまり推敲もせず思うがままに書いた記事でした。今改めて読み返すと稚拙な文章なのと、他に思うところとがあったりしたので、改めて書き直しました。いいね貰ってるのに書き直すのに若干後ろめたさがあるのですが、よりいい内容にできればと思います。 コミットログがきれいだとレビューしやすい 一人で開発するときはgit使っててもブランチ切らないし、プルリクもださないしで、コミットログも"First Commit"の次が"Second Commit"とかでも支障はないです。しかし、チームで開発す

技術に精通した コンサルタント が併走 経験豊富なアドバイザー 元ITエンジニア、元ゲーム企業人事、 IT会社役員、大手人材エージェント

Amazon Elasticsearch ServiceはElasticsearchです。 普通にElasticsearchとしてエンドポイントを使用でき、アクセスポリシーは次の中から選びます。 Any 送信元IPアドレス IAM(STS) さて、ちょっと都合でS3に置かれたファイルを軽くパースしてElasticsearchに突っ込もうかと、IAMベースでLambdaからのリクエストを思ったところ、現状では署名リクエストを自前でつくって放り込むっぽい。 結果。やってはみたが、今は一旦CloudWatch Logsのストリームに流してからプリセットのファンクションを使うほうが結局楽に済みそう。ES用にboto3のresourceが実装されれば苦労しなくてよさそうだ。 とりあえず動いたのでコードをメモしておこう。 Elasticsearchドメイン側のポリシー IAMテンプレートでLambda

久々に話題になっていたブログに反応して書いてみました。 「IT業界で客先常駐という働き方はもうやめにできないか」 こちらですね。エンジニアの精神的な負荷が高いから客先常駐をやめにできないかという内容で、私も以前とあるSIerに就職し、ドナドナされ、客先常駐をやっていたこともあるので非常に共感出来る内容でした。 ただ、今私は開発会社の経営をやっているので、経営者側の気持ちとしても理解は出来るので、「絶対にやめられないんだろうなー」と思ったので経営者が客先常駐をやめられない理由を実際に私が会社経営で大変だったことと合わせて書いてみます。ちなみにうちの会社では客先常駐はやっていません。 利益とキャッシュフロー これは参照のブログにも書いてありましたが、経営するに当たってやっぱりキャッシュフロー大事なんですよね。通常の受託の場合納期が数ヶ月後になり、その間は社員の給与を払っていかないといけないので

AWS Lambdaのアップデートにより、本記事のワークアラウンドを用いなくても、 rate(1 minute) とすることで、1 分間隔を指定できるようになっています。(2015年4月25日現在)。 Announcement: Scheduled Events now support 1-minute granularity はじめに re:invent 2015でLambdaにスケジュール化されたファンクション(Cron)機能が追加されました。 スケジュールの指定は rate(5 minutes) のように間隔を指定する方法と cron(*/5 * * * ? *) の用にcron形式で指定する方法があります。 Walkthrough 5: Using Lambda Functions to Process Scheduled Events (Python) ただし、スケジュールの最短