Athena+Embulk+BigQueryによるアプリケーションログの分析環境構築
はじめにこんにちは、Finatextで証券プラットフォーム（Brokerage as a Service、以下BaaS）の開発に携わっている石橋（@bashi0501）です。過去のFinatextテックブログではTerraform、CDKとIaCをテーマにした記事しか書いたことがなかったのですが、今回はログの分析活用をテーマとします。 概要弊社の証券事業ではECSによるワークロードを組んでいます。本テーマのアプリケーションログについては標準出力したものをawslogsログドライバーが回収してCloudWatch Logsに送信しています。 ログの検索という観点ではCloudWatch Logs Insightsというサービスでかなりリッチにフィルターや集計を行うことができるのですが、ログデータを元にしたユーザーのファネル分析や業務改善（後述します）に活かしていきたいという意図があるため、マ
待望！Amazon ECSのコンテナにログインできるAmazon ECS Execを試してみた - SMARTCAMP Engineer Blog
スマートキャンプ、エンジニアの入山です。 前回のブログにも書きましたが、弊社では昨年末から既存のEC2からECS/Fargateへのインフラ移行作業を実施しています。 EC2からECSへ移行する上では、特に運用面が大きく変わります。利便性やメンバーへの教育コストを考慮すると、今までEC2でやっていた運用をECSでどう上手く代替するかが力の入れ所だと思います。 一ヶ月前に弊社インターンの関口が書いた以下の記事も、既存運用の置き換えやデバッグ時の利便性向上を目的とした手段の１つで、この記事を執筆した時点ではECS/Fargate上のコンテナに対するAWS公式のログイン手段はありませんでした。 tech.smartcamp.co.jp 弊社のECS移行も稼働直前の佳境を迎えている最中ですが、この度Amazon ECS Execがリリースされ、待ち望んでいたECS/Fargate上のコンテナに対す
エンジニアだが、趣味が仕事になったことに負い目を感じるときがある
中学生の頃からパソコンいじりが趣味になった。高校生の時はかなりの劣等生で、趣味に没頭しまくったせいで成績も最悪だった。成績不振すぎて退学を打診されたこともある。半ばお情けでギリギリ回避したけど。 それから大学に進学したが、改心して勉強に打ち込んだわけでもなく、PC関連に没頭する生活が続いていた。少なくとも進学の時点ではPCはただの趣味で、特にエンジニアになる気はなかったので情報系の学部でもなんでもないところにいた。 大学は高校よりも単位を取るのが楽だったこともあり、幸い留年レベルにはならなかったが、成績は悪い方だった。 それでも紆余曲折あり、今はいわゆる"ホワイト"な職場でエンジニア職をしている。待遇も良いし、コロナ禍ではもちろんテレワークが出来ており、ハンコ出社なんてのもない。細かい不満は多少あるが、総合的に見れば良いところで働けていると思う。 この自分語りを見てもわかるが、Twitte
Herokuから ECSに 移行した - pixiv inside
こんにちは、インフラ部の id:sue445 です。私事ですが先日GCPの Professional Cloud Architect を取得しました。 そういうわけで今日はGCPではなくAWSの話をします。 tl;dr; 劇的ビフォーアフター 構成 移行のモチベーション パフォーマンス向上 コスト圧縮 アーキテクチャの採択理由 やったこと 1. DB作成 2. MySQL 5.7 -> 8.0 MySQL 8.0でハマったこと MySQL 8.0からデフォルトの認証がcaching_sha2_passwordになった RDSのMySQL 8.0からMariaDB 監査プラグインがなくなった 3. 本番用のDockerイメージを作成 困ったこと：CodeIgniterがログの標準出力に対応していなかった 4. ECS + Fargate + CodePipeline構築 5. CDN作成 6
本当に「好き」か考えるのをやめる｜あさのますみ #わたしがやめたこと - りっすん by イーアイデム
文 あさのますみ 誰かの「やめた」ことに焦点を当てるシリーズ企画「わたしがやめたこと」。今回は、声優・作家として活動するあさのますみ（@masumi_asano）さんに寄稿いただきました。 あさのさんがやめたことは、主に仕事にまつわる場面で「本当に好き」か考えること。 今就いている仕事にやりがいを感じるし、楽しいと思える瞬間もあるーーそんな方はきっと少なくないはずです。それでも「今の仕事のことが『本当に好き』か」と問われると自信を持って頷けるという人は多くはないのではないでしょうか。 狭き門とされる声優の職に就き、その約7年後には文章を書くことも仕事にしたあさのさんも、この「好き」という気持ちに複雑な感情を抱いていたのだそう。簡単には測れない「好き」の物差しに悩んだあさのさんの考えを変えるきっかけになったのは、同じく「好き」が原動力のように見えていた友人漫画家の一言だったそうです。 ＊＊＊
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
台湾PC大手エイスース、部品不足深刻「供給追いつかず」 - 日本経済新聞