Pixelaを支える技術 - えいのうにっき
Pixelaの技術的な話（といっても高度なことは殆どしてないんだけど......）とか、あと今回の個人的な頑張りポイントである利用規約・GDPR対応といったところは、後日別エントリとしてまとめたいな〜と思っています。そのうち書くので、よろしかったらそちらも楽しみにしてやってくださいっ。 commit以外の数値でも草を生やせる、PixelaというAPIサービスを作った！ - えいのうにっき blog.a-know.me などと書いておきつつ、3週間ほど経ってしまった。ということで、今回はこの点に関して書く。あと、過大なタイトルについてはすみません。これ以外もう何も思いつかなかった。 思い当たる限りで、ざっと箇条書きにしていく。この記事に限らないことだけど、なにか間違ってることとか、もっといいやり方あるよ、というところがあれば、ぜひ教えて欲しい！ サーバーサイド GCP（Google Clou
Mackerelチェックプラグイン check-smtp を開発しました - インフラエンジニアway - Powered by HEARTBEATS
はじめまして。技術開発室の與島（ @shiimaxx ）です。 先日、mackerelio/go-check-pluginsにSMTP接続の正常性を監視するプラグインcheck-smtpを追加するPull Requestを送り、Mergeしていただきました。 そこで、本記事ではcheck-smtpの概要、新規プラグイン開発をするにあたってどのような点を意識したか、について紹介します。 なお、チェックプラグインの作成方法自体については説明しません。作成方法については、以下のヘルプが参考になりますのでご参照ください。 checkersを利用してチェックプラグインを作成する また、プラグインの開発時のGoのバージョンは1.10です。 背景 ハートビーツでは、NagiosとNagios Pluginsを使って監視をしています（その他、監視の要件によっては自作Nagiosプラグインも使っています）。
Linuxのloadavgが約7時間ごとに上昇する現象の原因 - Mackerel お知らせ #mackerelio
Mackerelチームのエンジニアのid:itchynyです。 「mackerel-agentを入れるとloadavgが7時間ごとに上昇する」 先日、このような問い合わせを複数のお客さまから受けました。私も実験してみたところ、確かに再現しました。EC2 t2.microにmackerel-agentを入れて簡単なログ監視とプロセス監視を設定し、数日放置しました。 確かに、約7時間ごとにloadavgが上昇しています。この周期のcronの設定はしておらず、またmackerel-agent内部でも7時間ごとに行う処理はありません。しかし、プラグインを多く入れるほどloadavgのピーク値も上がります。 本エントリーでは、この現象の原因について説明します。 loadavgが上昇する原因を調べるには、まずloadavg自体がどう計算されているかを知る必要があります。 まずは、Linuxがloada
Redis Cluster の運用とモニタリング/監視のコツ
この記事は、はてなエンジニア Advent Calendar 2017の 20 日目の記事です。19 日目の記事は yasuhiro_onishi さんのScratchを使った子どもへのプログラミング教育 — 大西ブログでした。 今年の 2 月にはてなに入社して、あと 1 ヶ月と少しで 1 年を迎えようとしています。はてなに入社してから Mackerel のインフラと時系列データベースの AWS 移行プロジェクトを任されたり、移行を終えた後も後片付けや移行後の運用を担当したりと、主に Mackerel にコミットしていた 1 年でした。自分が Mackerel にコミットしたところは Mackerel のイベントで登壇したいくつかの登壇資料にもあるとおり数多いのですが、この記事では、運用する中で試行錯誤を重ねて苦労した Mackerel を支える時系列データベースのコンポーネントとして利用
プロセスの監視 ~ check-procsを読み解く - そーだいなるらくがき帳
この記事は Mackerel プラグインアドベントカレンダー(全部CRE） の8日目です。 qiita.com soudai.hatenablog.com それでは8日目は check-procs です。 check-procsはプロセスを監視してくれるプラグインです。 github.com インストールと設定手順 至れり尽くせりなので公式ドキュメントに手順が書いてあるのじゃ！！ mackerel.io 使い方 至れり尽くせりなので公式ドキュメントに使い方が書いてあるのじゃ！！ mackerel.io オプション一覧 公式ドキュメントに無いので追加しました。 # check-procs -h Usage: check-procs [OPTIONS] Application Options: -w, --warning-over=N Trigger a warning if over a n
Mackerel "kazeburo" plugin を通じてサーバーモニタリングのキモを探る 〜スクリプトプラグイン編〜 - えいのうにっき
去る 10月5日に、Mackerel DAY というイベントが開催された。サーバー監視サービス・Mackerel のリリース3周年を祝っての大型イベントで、豪華登壇陣をゲストに迎え、お昼過ぎから懇親会まで、非常に濃密な時間だった。僕もスタッフとして参加し、また登壇もさせていただいた（僕の登壇スライドはこちら）。 豪華登壇陣、と書いたが、本当に豪華で、非常に多種多様な観点でのお話を聴くことができ、中の人としても・いちユーザーとしても、大変貴重な時間だった。そんななか、ガツンと脳天に響いたセッションが、メルカリ社の SRE チーム所属・プリンシパルエンジニアの id:kazeburo （ @kazeburo ）さんの発表だった。 speakerdeck.com 内容としては、メルカリ社における Mackerel のサービス／ロール設計のお話と、独自に作成しておられるカスタムスクリプト／プラグイ
史上最大のお祭り Mackerel Dayを開催しました - Mackerel ブログ #mackerelio
mackerelio.connpass.com Mackerel正式リリース3周年を記念したイベント、"Mackerel Day"を10月5日に開催しました。 平日の昼間からのイベントにもかかわらず、100人近い人で会場が埋め尽くされ、大盛況のイベントでした。 参加人数の多さだけでなく、セッション数やイベント開始から終了までの時間など、何もかもがMackerelイベント史上最大規模でした。 Mackerelスタッフも含めた総勢8名のセッションで構成され、イベント当日のTwitterハッシュタグ(#mackerelday)も大いに盛り上がっていました。 Mackerelリリース3周年の振り返りとこれからの成長について 最初のセッションはプロデューサーの杉山から。Mackerelの特徴を改めてご紹介しつつ、1分粒度の保存期間延長など、今後の取組みについても紹介されました。 アプリケーションエン
「JAWS-UG コンテナ支部 #9」で「ECS x Mackerel」をテーマに LT をした - kakakakakku blog
昨日は「JAWS-UG コンテナ支部 #9」に参加して，LT もしてきた．ECS を中心に移行の話，デプロイの話，モニタリングの話などを聞けたし，懇親会にも参加させてもらって，カジュアルに話せて楽しかった．僕もコンテナ支部の運営をお手伝いしたいな！ jawsug-container.connpass.com 発表資料 今回 LT 枠で応募したら採択してもらえたので「ECS x Mackerel ~ 動的ポートマッピングに対応したタスクのメトリクスを取得する ~」という話をしてきた．内容としては，前にブログに書いた記事を整理した感じ．時間も少なくシュッと話したので，詳しくはブログを見てもらえればなと！ kakakakakku.hatenablog.com kakakakakku.hatenablog.com 他の発表でも似た話があったけど，やっぱりタスクのメトリクスも取得したい場合は Dat
Mackerel でみる Linux システムメトリック項目の見方・考え方 - えいのうにっき
Mackerel について考えない日はないというくらいに Mackerel・Love な僕なわけですが（考えない日はあります）、Mackerel の Web 画面で日頃なにげなく見ている「システムメトリック」、みなさんはどのような意識を持って観察していますでしょうか。 ↑ https://home.a-know.me をホストしているサーバのシステムメトリックのようす。 ここでひとつおさらいをしておくと、「システムメトリック」とは、監視対象のサーバにインストールされた mackerel-agent が、それ単体で収集・投稿するメトリックのことです。一般的な Linux系OS に mackerel-agent をインストールした場合、以下のような項目がシステムメトリックとして Mackerel に投稿されます。 loadavg5 cpu memory disk interface files
はてなブログのデプロイを約6倍高速化したはなし - Sexually Knowing
今年、稼働中のサービスであるはてなブログのデプロイ方法を新しい方式へ無事故で移行し、従来と比べて約6倍速くデプロイできるようになりました。 この記事では、安全にデプロイ方式を変えたプロセスを順を追って紹介します。 はてなブログと継続的デリバリー デプロイが遅い 複雑なデプロイ設定 デプロイのテストを書く ボトルネックの発見、そして pull 型から push 型のデプロイへ 新デプロイへの移行 結果 まとめ はてなブログと継続的デリバリー はてなブログは1日あたり平均して1.02回デプロイを行っています。これは土日を除いた週5日の営業日に対する平均です。ざっくりとした算出で、祝日は考慮していません。5月と9月の祝日を含めるともう少し多くなるかもしれません。 また、原則として休日の前日にはデプロイしないことになっています。もしもデプロイした変更にバグがあった場合、休日が明けてから対応するか、
mackerel-agent のインストールがワンライナーで行えるようになりました！ - Mackerel ブログ #mackerelio
Mackerel Drink Up #3 を開催しました！ 先週ここでも告知させて頂いた Mackerel Drink Up #3 ですが、おとといの水曜日に開催しました！ mackerelio.connpass.com 年末シーズンということもあってか、急遽来られなくなった方もいたようでしたが、そのぶん Mackerel チームと参加者の方との間で濃いお話ができていたように思います。 募集の際にはお知らせしていなかった「Mackerel アパレルグッズの参加者全員プレゼント」があることをお伝えしたときには、思わず会場からどよめきが。 じゃんけん大会も開催し、勝者にはレアグッズでもある「Mackerelパーカー」がプレゼントされました。 今年の公式イベントはこれで最後となりますが、来年もまた定期的に開催していく予定ですので、ぜひ来年以降もお見逃しなく！ それでは、今週のアップデート情報です
「エンジニア向けサービスを支える技術」を開催しました。SideCI Study 1th - SideCI TechBlog
こんにちは。 @sumyapp です。 6月29日にSideCIチーム主催でテックイベント(勉強会)を開催しました！その様子をご紹介します:) 株式会社はてなさんのMackerelチームと共同で開催させて頂きました。 テーマは「エンジニア向けサービスを支える技術」です。 エンジニア向けサービスを提供している会社様3社に登壇して頂きました。(+弊社) sideci.connpass.com ダイジェスト 19:30~19:40 イベント内容や登壇者様、会場のご紹介 19:40~20:50 発表 + QA SideCIのインフラ構築を自動化した話 エンジニア向けSaaSを開発・運用するということ ~ Mackerelの場合 Mobingi: Have FUN! with Spot Instance DeployGateの作り方 20:50~21:00 懇親会の準備 & 宣伝タイム & 事後アン
Serverspec + Mackerel APIによるインフラテストの実運用化 - ゆううきブログ
この記事は Mackerel Advent Calendar 2015 の24日目の記事です。 前回は、id:hitode909 による 三度の飯より監視と通知！Mackerelで自分の心拍数を監視しよう - hitode909の日記 でした。 今回は、Mackerel APIを用いてServerspecによるサーバ構成テストを実運用化した話を紹介します。 Serverspec単体では手の届かないかゆいところをMackerelでサポートするところがポイントです。 Mackerelはもちろんですが、他のサーバ管理ツールにも通用する汎用的な話になるように心がけています。 Serverspec導入の背景 Serverspec Serverspec × Mackerel ロール単位でspecを書く ディレクトリレイアウト Thorfile サーバ上でServerspecをローカル実行する あとがき
Markdownドキュメントをgithubで管理して、はてなブログでホストする ~ Mackerelの場合 - Hatena Developer Blog
はてなチーフエンジニアの Songmu です。この記事ははてなデベロッパーアドベントカレンダー2015の7日目の記事です。昨日は id:mazco による デザインにおける個性のつけ方 でした。 今日は Mackerel の公開ドキュメントについてのお話です。 Mackerelは以下で公式ドキュメントを英語と日本語で提供しています。 help.mackerel.io help-ja.mackerel.io これらは実ははてなブログでホストしています。 翻訳は日本語を先に書いて、それをチームのネイティブ翻訳者が翻訳するフローになっています。 ドキュメントの運営 告知ブログのようなものなら良いのですが、ドキュメントはその性質上定期的なメンテナンスが必要になります。特に以下の様な点がドキュメントを運営する際に難しいところです。 なんらかの一括修正が必要になった場合に修正点を洗い出して一括で反映す
Mackerelの監視設定も｢コード｣に落としこもう! - Masteries
前々から書こうと思ってて, すっかり忘れてたので, 書きます! Mackerelの監視 Mackerelでは, ホストの状態(CPU, メモリ, ファイルシステムの利用率とか, Mackerelと繋がっているかとか...)やURLの死活などを監視することが出来るのですが, 8月末に監視設定APIがリリースされ, これらのパラメータをAPI経由で実施出来るようになりました. というわけでReactioの開発チームでも, 早速このAPIを利用して, 以下のような仕組みを作ることで, Mackerelの監視パラメータを"コード"で管理するようにしました. 仕組み Reactioには, 開発者支援ツールが詰め込まれた｢Reactio-HQ｣というリポジトリがあるのですが, そこにMackerelの監視設定ファイルを用意しました. ちなみにReactioの開発者支援ツールは, Reactioそのもの
Mackerelの告知を出すときに最近気をつけていること - Mackerel ブログ #mackerelio
こんにちは。はてなシニアエンジニアのid:daiksy です。 Mackerelをご利用いただいている皆さんは、ぼくのidを見て「おや？」と思われた方もいらっしゃるのではないでしょうか。 ぼくは、金曜日のMackerelのニュースレターとブログ告知記事の執筆を担当しています。 今回は、Mackerelの告知やニュースレターで最近始めた取り組みについてご紹介いたします。 毎週金曜日に告知とニュースレターを出す Mackerelではリリースから現在まで、60週以上にわたり毎週のリリースを継続しています（年末年始の1週間だけお休みしました)。 不具合の修正や内部的なロジックはもちろん継続的に改善しているので、毎週リリースが行われているという事自体は特に珍しいことではありません。 ここでいう"60週以上連続"というのは、ユーザーの目に触れる新しい機能をこの期間ずっと続けてリリースをしている、という
使いやすさをデザインする上で心掛けていること - Mackerel ブログ #mackerelio
こんにちは。デザイナーの id:murata_s です。Mackerelのリリース当初からMackerelの画面設計やUX、ユーザビリティなどのデザイン業務全般を担当しています。 今回は、主にエンジニアさんのためのツールであるMackerelをデザインする際に id:murata_s が気をつけている点を紹介します。ユーザーにとって必要な情報を分かりやすく伝え、迷わないデザインを施すにはどういった配慮が必要か、製品の振る舞いのデザインについてMackerelの事例を交えながら考えてみたいと思います。 Mackerelは言わばソフトウェアであり管理画面ですから、一般に言われるウェブサービスよりもツールとしての側面が強いサービスだと思います。雑誌の誌面ではなく、車のダッシュボードをつくっているようなもので、グラフィックデザイン的な情報設計の考え方が前提となりつつも、それに加えてプロダクトデザイ
ウチの監視システムの変遷について書く | Ore no homepage
今、リアルタイムでは休暇中でフランクフルト経由ベルリン行きの飛行機の中にいる。暇すぎる。うちの会社、ってかトレタの監視系の変遷について書く。でも絵を描く気力はないので文字のみ。 今の状況です ルフトハンザは日本線は軽食の時間に ONIGIRI が出てくるので結構好きな航空会社です。休暇中なのにラップトップ持ってくのはプロ社畜の証。まあ今会社で裏側見てるのが俺しかいないので、エエ…。しかし世の中ホント便利に便利になってる。空の上でもインターネットができる。言い方を変えると空の上でもアラートが届くっていう…。飛行機の中は暇すぎるけどさすがに仕事はしたくないね。というかこの旅行中は仕事を忘れたい。 2014/10以前 俺が入社する前。 コア機能：Engineyard(OS: gentoo)。 プロセス異常監視、閾値監視など：monit エラートラッキング、レスポンスタイム、SQL：NewReli
July Tech Festa 2015 - したためなければいきのこれない
要約 Docker監視はDatadog、New Relicの２強、DIYでやるのは分が悪すぎる モダンブラウザでELB要らずになる？？？ はてなやpixivの若手は素でDocker運用はじめてるけど、次も使うかは微妙らしい サービス事業者は開発用途に絞ったほうが幸せそう Google Dataflowなるフルマネージド(MapReduce,Spark)++が出る バッチとストリームの分界も含めてフルマネージド 真剣にDocker運用を考える人に、各種監視ツールとサービスを比較 naotaka jay hotta Datadog Dockerのモニタリングについて、真剣に考え始めているハズ 5 year Datadog day event 今日で5年目、NYでパーティーが始まっている 「なぜその技術を使わないといけないのか？」 ビジネス視点で考え続けることが、エンジニアとして重要になってきて
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
運用・監視もコード化する。開発者が監視まで考える方法論