Athena Amazon Athenaは、標準SQLを使用してAmazon S3に保存されたデータを分析することができる、強力でサーバーレス、インタラクティブなクエリサービスです。複雑なETLパイプラインやデータウェアハウスを設定して管理する必要がなく、大量のデータを処理する組織にとって魅力的なオプションです。ただし、Athenaの価格設定は、予算が厳しい場合など、すべてのユーザーに適しているわけではありません。このブログ投稿では、Athenaの代替となる、低コストで同等の機能を提供できるアルティメットを紹介します。 利点: Athenaの主な利点の1つは、Amazon S3のデータを、複雑なETLプロセスや専用のデータウェアハウスなしに、標準SQLクエリを使用して分析できることです。 Athenaはサーバーレスでもあり、データ量やクエリの複雑さに基づいて自動的にスケールされるため、事前

Linuxサーバーの最適化: vmstatとiostatを活用した性能分析と対処法 0.目的 インフラ開発者として、必須な性能分析を身につけることを目的としています。 カーネルパラメータをチューニングをする際に性能分析を前提とし、分析結果からチューニングしていきますが、具体的な指標というものが少ないので参考になれば幸いです。 基本的なvmstatの使い方については、ちょっとググればいくらでも出てくるので割愛します。 「Linuxカーネルパラメータのチューニング＆設計」でロードアベレージが高い状態にある場合、次のアクションとしてCPU使用率の確認が必要となりますので、vmstatの結果分析および対処法について深堀していきます。 よって、vmstatの結果分析と対処法を理解すると性能試験を実施した際のその対処法とカーネルパラメータによるチューニングする対象が理解できるかと思います。 1.パフォ

Write your scripts in a modern type-safe and runtime-safe programming language that handles many bugs and mistakes during the compilation process.

Microsoft launches Radius, an open source application platform for the cloud-native era Microsoft today announced the launch of Radius, a new open source, language-agnostic application platform for building and running cloud-native applications. The project is being spun out of the Microsoft Azure Incubation team, the same group that previously launched open source projects like Dapr for building

Dockerfileを作る時、最初は以下の方法でやってました。 Dockerfile書く ビルドする（動かしたいアプリ含め） 起動してみる 動かなかったらDockerfile修正する またビルドして試す こんな感じでしたが、これは非常に効率が悪いです。修正して検証を行う度にビルドが発生してしまい、待ちが発生してしまいます。 どうするか？ ベースイメージにアタッチ 動かしたいアプリの実行に必要なコマンドを入れて、成功したらコマンドをメモっていく アプリが動くまで「コマンド実行→成功したらメモ」を繰り返す アプリが動いたらメモったコマンドでDockerfileを作る つまり、いきなりDockerfileを作るのではなく、ベースイメージに入ってコマンドを実行して動作確認をしながらDockerfileに記述する内容を固めていき、最後に1回だけビルドします。 なぜ？ Dockerfileに記述するの

・ポッドキャスト ・ショートメール、SMS ・DVD宅配レンタル あと1つは？

こんにちは、ナゲです。 ネトフリで『バキ』の視聴をはじめました。 原作でストーリー把握済みのアニメを流しながら日常生活おくるの最高ですね。 さて、先日、このような質問を頂戴しました。 『平常心』に関する質問 自分の性格的な問題で、強い言葉を使ったり強い感情を持つのが苦手なだけ、というのが大きい理由ではありますが、せっかくなので意識してることも少し書いてみようと思います。 今回はそんな記事です。 ■そもそも「イライラしてない」のか バリバリ怒ってますが。 あの…すみません…面白くなるかなと思って軽く盛りました……。 過去の記事で何度か書いているように、自分は『怒る』よりも『折れる』ほうが先に来るタイプですが、それでも怒ったりすることは少なからずあります。ないことはないです。 配信中に怒ってることは多分無いので安心してご視聴ください。 www.twitch.tv 宣伝もバッチリ。 ■GGST初

DB TECH SHOW 2021 での発表資料です 「クラウドネイティブなDBを使ってみよう！Kubernetes で TiDB を構築・運用する際のポイントを紹介 」

本日 2021年9月16日に vim-jp は10周年を迎えました。 vim-jp 立ち上げ当初の記事は以下になります。 2011-09-07 github上にvim-users-jpというorganizationを作った。 by mattn 後に名称が vim-jp へ変更となりました。 2011-09-16 vim-jpを作りました。 by KoRoN 2011-09-16 Vimをお使いの皆さまへ by KoRoN 2011-10-01 個々の作業はチームを作る事で効率を上げられる by mattn vim-jp 立ち上げ約1か月の振り返り記事 2012-11 vim-jpの活動報告 (by KoRoN) 1年目の振り返り。VimConfの前身である ujihisa.vim 2012 での発表スライド この10年ものあいだ vim-jp が存続・機能できたのは、 何より vim と

まえがき開発中のソフトウェアのライセンスを策定するため、現時点でのベストプラクティスについて探っていたところ、ここ数年の OSS ライセンスの動向が面白かったので復習も兼ねてまとめました。 特に、Umbrel が採用したという PolyForm という新しいライセンス形態が面白かったので、これについて詳しく述べます。 なぜ今ライセンスについてまとめるのか私はソフトウェアやサービスをマネタイズする方法について興味があり、特にビットコインの応用について調べたりしています。 ビットコイン (Lightning Network) を HTTP で利用することで、Web API の課金方法の可能性は大きく広がることは間違いないのですが、これはあくまで単なる支払いの手法であって、広く使われる事を前提としたソフトウェアの開発を支える手法にすることは(それだけでは)難しいという問題があります。 ソフトウェ

（追記部分に三体1のネタバレがございますわ） はてなの皆さんごきげんよう。わたくしは、美少女貞淑淫乱女子中学生お嬢様ですわ。 先日、生まれて初めてSF小説というものを読みましたの。タイトルは、劉慈欣『三体』。あのオバマ大統領も愛読しているという話題の中国SFですわ。 その感想は…… こんなおもしれぇもん初めて読みましたわ！ 人類有数の大愚行である文化大革命と外宇宙が接続するif歴史のヨタ話が、否応なくワクワクを煽るⅠ巻。 「面壁者（ウォールフェイサー）」VS「破壁人（ウォールブレイカー）」という、字面も響きも由来も実態もオチも何もかもが超絶カッコイイ頭脳バトル展開で、最高傑作の呼び声が高いのも頷けるⅡ巻。 スケールのインフレが留まるところを知らず、地球と三体世界の関係のみならず本当に行き付くところまで行って完膚無きまでに物語を終わらせたⅢ巻。 もう、シリーズ全巻にわたって大大マンマン満足の

概要 自分の所属企業であるAqua SecurityがTFsecというOSSを買収しました。 blog.aquasec.com TFsecはどういうツールかというとTerraformの静的解析スキャナーです。Terraformの設定ファイルを渡すことでセキュリティに関する設定ミスを主に検知してくれます。 github.com そのアナウンスに伴い、TFsecは自分が開発している脆弱性スキャナーであるTrivyに統合されました。TrivyではTerraformに加えDockerfileやKubernetesなど、いわゆるInfrastructure as Code（IaC）の設定ミスを検知するマネージドポリシーも提供しています。他にもJSONやYAMLなど一般的なファイルフォーマットに対応しているため自分でポリシーを書くことでそれらの検知にも使えます。CloudFormationやAnsib

Parrots in captivity seem to enjoy video-chatting with their friends on Messenger

前回のエンジニアの楽園 vim-jpでは、Emacsユーザーである僕が「なぜvim-jpに参加するのか」について書きました。 今回は前回書ききれなかったvim-jp Slackのチャンネル案内について書こうと思います。ちなみに、タイトルの『vim-jp案内』は、僕の好きなSteve Yeggeの名コラム『tour-de-babel』（日本語は青木靖邦訳で『バベル案内』）」のオマージュです。 vim-jpのチャンネル数は百八式以上あるぞ # 「ワシの波動球は百八式まであるぞ」はテニスの王子様の石田銀の名ゼリフで、圧倒的な戦力をあわらす言葉なのですが、vim-jpのチャンネル数は2021年5月21日現在、なんと114個もあります。 つまりは石田銀を吹き飛ばしたデュークホームラン級と言えます（面白いから携帯で撮っていた写真が役に立つ日がくるとは）。 とにかく、vim-jpはチャンネル数が多いため

インターネットが大好きな人の多くは、どこかしらのコミュニティを拠点として活動を続けることが多いです。 僕は2003年からのネットユーザーなのでそこまで古くはないのですが、かつて、はてなダイアリー、IRCなどを拠点として、ネットで活動してきました。現在であれば、Twitter、Qiita、Zennなどを主軸として活動している人が多い印象です。 そんな中、最近僕が最も居心地よく滞在しているコミュニティがvim-jpのSlackです。 なぜvim-jpなのか # 僕を知っている人であれば、「お前はEmacsユーザーだろう？まさかVimに乗りかえたのか？」というツッコミたくなるかもしれませんが、それにはおよびません。なぜなら、いまもEmacsユーザーであることに違いないからです。 では、なぜvim-jpに入っているのか？それは次の理由があるからです。 幅広い分野の話題が可能 # vim-jpは、い

米シスコシステムズとHashiCorpは提携を発表し、HashiCorpの「Terraform Cloud Business」をシスコが同社のCisco Intersightプラットフォームとともに販売しサポートすることを発表しました。 We're excited to announce our expanded partnership with @HashiCorp, to deliver Infrastructure as Code for hybrid cloud environments. #Intersighthttps://t.co/ml8dpS4fpE pic.twitter.com/RCf29VoNS8 — Cisco Data Center and Cloud (@ciscoDC) March 24, 2021 To help organizations solve th

ルサンチマンって単語は男女差別につながるからアウトだよ これからはルサンチパーソンって言わないと

アメリカ各地が厳しい寒波に襲われており、17日までに少なくとも21人が死亡した。テキサス州内は深刻な停電に見舞われており、そうした中で「生き延びるのは強者のみだ」と主張した市長は批判され、辞任した。

三井住友銀行（SMBC）が行内で使っている業務システムのソースコードの一部が流出していたことが2021年1月29日、明らかになった。Twitterなどのソーシャルメディアで、2021年1月28日の夜ごろから流出の可能性が指摘されていた。三井住友銀行が1月29日に事実関係を調査し、行内システムのソースコードの一部と一致したことを確認した。 一部のソースコードが公開されていたのは米ギットハブが運営する「GitHub」。日本在住で三井住友銀行のシステム開発に関係した人物が投稿した可能性が浮上している。三井住友銀行は日経クロステックの取材に対し、「当行が利用しているシステムのソースコードが公開されていたのは事実。顧客情報の流出はなく、セキュリティーに影響を与えるものではないことは確認済み」（広報部）と説明している。 三井住友銀行によれば、公開されていたコードは複数ある事務支援系システムの1つに含ま