docker pull を速くするために：layer-parallel から chunk-parallel へ - 薄いブログ
この記事は Recruit Advent Calendar 2021 の15日目の記事です。 TL;DR 従来のレイヤー並列の pull より Range リクエストを用いたチャンク並列の pull によって速度が 2~5倍速くなる可能性がある。 ECR は Public だと region ごとに速度が大きく異るので安定した速度を求める場合は Private にする。 (pull through cache を活用すると良い) 2022/10/9 追記: ECR の Public が適切な Pop から返ってくるようになっていた。 その Benchmark も取得し、結果を追記した。 ap-northeast-1 では6倍近く早くなっていて region による差が小さくなっていた。 背景・動機 コンテナイメージは一つ以上のマニフェスト、そこから得られるコンフィグとレイヤーから構成される
eBPFとは？できること、なぜそれがオブザーバビリティに関係について解説
成功者がどのようにNew Relicを使用してKubernetesのパフォーマンスを4倍に向上させ、拡張性とスループットを改善したかをご覧ください。
2021 年の Cloud Spanner を振り返る
この記事は Google Cloud Japan Advent Calendar 2021 の 14 日目の記事です。本記事は 2021 年 12 月 14 日現在の情報に基づいて書いています。 こんにちは、Google Cloud で Database Specialist をやっている佐藤です。今回は Cloud Spanner 冬休み講座と題して、2021 年の Cloud Spanner を振り返ってみようと思います。これらをおさえておけば、来年に向けた Cloud Spanner の復習と予習はバッチリ！さて 2021 年は Cloud Spanner にとってどんな年だったでしょうか？ 目次1 時間目：Cloud Spanner はどんなデータベース？2 時間目：インスタンスの運用管理機能の向上 — 0.1 ノード インスタンスの登場 — 任意の時点のデータを復元する PITR
X'masにDeepなPacket処理、いかがですか？ - ainnoooのブログ
慶應理工 Advent Calendar 2021の14日目の記事です。 昨日の記事はこちら nageler.hatenablog.com この記事ではeXpressなDataのPath、その名もXDP!!!!についてゆるゆると書いていきたいと思います XDPとは何者 雑に動かしてみて感じ取るXDP デバドラコードから感じ取るXDP 大変参考になる資料たち SecHack365 XDPとは何者 XDPはLinuxカーネルに実装されている技術でして、高速なパケット処理を実現する方法の1つとされています。 なぜ高速なのかと言いますと、XDPではNICのデバイスドライバの段階でパケットを処理するプログラムを動かすことが出来るのです。NICというのはNetwork Interface Cardのことでして、フレーム（パケット）を受信するハードウエアです。このハードウエアをOS側から制御するソフトウ
CloudSQLを安くするために考えたこと - ludwig125のブログ
無料トライアル期間が終わったのでCloudSQLのマイグレーションをした話 安さを追求したわけではなく、自分なりの妥協点を探っただけ 事象 2019/5/22 CloudSQLに接続できなくなった $ gcloud sql connect myfinance --user=root ERROR: (gcloud.sql.connect) HTTPError 409: The instance or operation is not in an appropriate state to handle the request. GoogleAppEngineのログには以下が出力されていた failed to insert table: daily, err: driver: bad connection, query: 原因 Google Cloud PlatformのUIの一番上を見ると無料
「Kubernetes」を使うなら、まず知っておきたい「Flannel」と「Calico」の通信
関連キーワード SDN（Software Defined Networking） | オープンソース | Docker コンテナオーケストレーター「Kubernetes」のクラスタ（Kubernetesクラスタ）におけるネットワークは、一般的にCNI（Container Networking Interface）プラグインを使用して構成します。CNIは業界団体CNCF（Cloud Native Computing Foundation）のプロジェクトとして定義された「Linux」コンテナ向けのネットワークの仕様であり、CNIプラグインはこの仕様に基づいたプラグインです。CNIの仕様に基づいたプラグインであれば、Kubernetesだけではなく「Cloud Foundry」や「Apache Mesos」などの主要なコンテナオーケストレーターでも利用することが可能です。 併せて読みたいお薦め記
郵便番号APIのようなシンプルなREST APIをlambdaで作る時にマスターデータを何で持つべきか計測してみた
こういうAPIを作らなければいけないときって割とよくあると思います（有料データベースと契約してて、csvでもらったデータをAPIで使えるようにするとか） そんな時に一番シンプルな解決方法として思いつくのがaws lambda + API Gatewayになると思います そんな時にふとした疑問が生まれました 元のcsvって何の形式で持つのが一番効率良いのだろう こういうのって何となく適当に選んじゃうことが多いのですが実際に計測して選ぶことも大切なので色々計測してみました 別解 多分goあたりでプログラム本体に含めてコンパイルしちゃうのが早いと思いますが、今回はrubyでやりたかったのでそれ以外の解決策を考えてみます 準備 郵便局の出している住所 <-> 郵便番号データをサンプルとして使います 元データがcsvなのですがその時点で以下のようになっています 行数：12万4500行 ファイルサイズ
Piro🎉"ｼｽ管系女子"ｼﾘｰｽﾞ累計5万部突破!!🎉 on Twitter: "Log4j(2)の脆弱性の原因になった変更がどういう経緯で行われ今に至ったのか、こちらのツイートのリプライツリーで参照されている記事2つと、既に頂いていた指摘で参照されていたイシュートラッカーの情報を見ながら、把握しようとしてみて… https://t.co/eImvzjJMRX"
Log4j(2)の脆弱性の原因になった変更がどういう経緯で行われ今に至ったのか、こちらのツイートのリプライツリーで参照されている記事2つと、既に頂いていた指摘で参照されていたイシュートラッカーの情報を見ながら、把握しようとしてみて… https://t.co/eImvzjJMRX
Google Pixel Stand（第 2 世代） 販売開始
Google では、本日より高速なワイヤレス充電器、Google Pixel Stand（第 2 世代）の販売を開始します。 新しい Google Pixel Stand は、Google Pixel 6 を最大 21 W、Google Pixel 6 Pro を最大 23 W のパワーで充電し、静音型のファンによる長時間の冷却と短時間の充電を可能にします。Google Pixel スマートフォンの充電モードをカスタマイズでき、素早く充電したい時には Max Charge モードを、静かさを重視したい時には Quiet Charge モードを選択できます。充電モードを自動的に調整してくれる Auto / Optimized モードを選択することもできます。また、ワイヤレス充電対応のイヤフォンを簡単に充電するための専用コイルも内蔵しています。 前世代の Google Pixel Stand
HDMI 2.0にしか対応していないモニターを「HDMI 2.1対応」と宣伝するのは虚偽なのか？
HDMI(High-Definition Multimedia Interface)は、映像と音声を1本のケーブルにまとめて送信できる通信規格で、バージョンによって伝送速度や映像の解像度、フレームレート、対応オプションが大きく異なります。「2021年12月時点で最新バージョンであるHDMI 2.1への対応をうたう液晶ディスプレイが、実際は古い規格であるHDMI 2.0にしか対応していなかった件」について、映像機器関連のニュースを取り扱うTFT Centralが調査を行っています。 When HDMI 2.1 Isn't HDMI 2.1 - The Confusing World of the Standard, "Fake HDMI 2.1" and Likely Future Abuse - TFTCentral https://tftcentral.co.uk/articles/wh
“スカウター”みたいなARグラス、中国OPPOが発表 2022年に限定発売
スマートフォンメーカーの中国OPPOは12月14日（日本時間）、新型ARグラス「OPPO Air Glass」を発表した。目の前に道案内や天気などの情報を表示できるデバイスで、メガネのように掛けられるがレンズは右側のみ。 つるの部分のタッチバーでタッチ操作ができる他、音声操作にも対応。レンズには、天気やカレンダー、ヘルスケア情報、プレゼン台本などを表示できる。リアルタイム翻訳機能や、ナビゲーション機能、ハンドトラッキング・ヘッドトラッキング機能なども備える。 SoCは米QualcommのSnapdragon Wear 4100。バッテリー駆動時間は最長40時間。使用にはスマートフォンやスマートウォッチとの接続が必要で、Wi-FiやBluetoothで通信できる。解像度は明かしていないが、表示できる色は単色のみの256段階。マイクロLEDによって300万ニトの輝度による照射が可能という。 本
「負債のないシステムはない」「過去との対立じゃなく、いまの問題を解きたい」メルカリ基盤刷新に挑むPJOの胸のうち | mercan (メルカン)
大手ポータルサイトで、数多くのサービスを運用した経験を活かし、プラットフォーム開発やSRE部門の立ち上げなどを行う。2019年8月にメルカリ入社。Microservices PlatformチームのEngineering Managerを経て、2020年1月よりDirector of Developer Productivity Engineering。 デパート店員からエンジニアへのキャリアチェンジ ー@mtsukaさんはメルカリに転職される以前はYahoo! JAPANを運営するヤフーに在籍していたんですよね。 はい、12〜13年間ほど。それ以前はPFUという富士通の子会社でSIerみたいな仕事をしていました。 ーそもそも@mtsukaさんはどうしてエンジニアになろうと考えたんですか？ 実は僕、キャリアのスタートはデパート（百貨店）なんですよ。パソコンは趣味で触っていた程度でしかなくて
WSLはいいぞ
この記事は LITALICO Engineers Advent Calendar 2021 その2 の14日目の記事です。 社内slackでMacの民が環境などでハマっているのを見ると、「（WSLはいいぞ...）」と心の中で思ったり冗談半分で言ったりするのですが、なんだかんだで良さをちゃんと列挙したことないなと気付きました。 今後もし本気で布教する機会が来たときに自信を持って推せるよう、ちょいとここらで想いを書き出してみようと思います。 布教ターゲット 本記事の想定読者、もとい布教ターゲットは、 ソフトウェア開発、特にWeb系の開発をする人 特に強い理由がなくMacを使っている人 宗教上の理由でMacを使わずLinuxを使っているが、ぶっちゃけつらい人 フルスペックなゲームプレイと開発を一つのマシンで欲張りたい人 となっています。信念を持ってMacを使っている方やLinuxデスクトップをガ
Replicate your data from Amazon Aurora MySQL to Amazon ElastiCache for Redis using AWS DMS | Amazon Web Services
AWS Database Blog Replicate your data from Amazon Aurora MySQL to Amazon ElastiCache for Redis using AWS DMS Caching enables the best user experience for real-time applications. You can build applications that provide sub-millisecond response times by storing the most frequently requested data in an in-memory cache like Redis. On August 30, 2021, we announced the support for migrating your data fr
エラーハンドリングをミスって大事故に - Qiita
はじめに アドベントカレンダー初参加です！ とある企業でサーバーサイドエンジニアとして働いており、主にGoでAPIを実装しています。 今年に入って新規事業の開発を任され、色々やらかしを経験させていただきました。 その中でも一番のやらかしを自戒の念も込めて投稿したいと思います。 特定を避けるために敢えて分かりづらく表現している箇所があります。その点ご了承くださいmm 惨劇発覚前夜 とある会員制サイトのリリースを控えており、それに備えて色々準備を整えてました。 リリース当日はそれなりにアクセス急増が見込まれるので ALBの暖気申請 フロントエンドサーバーのスケールアウト 等の対応を行いました。 今までも似たようなサイトをいくつかリリースしており、上記の対応でアクセスは捌けていたので今回も同様の対応で問題ないと思ってました。 リリース当日PM20:00 にサイトのURLを公開。 今までをはるかに
すき焼きの写真にすき焼きの3Dモデルを埋め込む方法 - KAYAC engineers' blog
この記事は Tech KAYAC Advent Calendar 2021の14日目の記事です。 こんにちは！意匠部のおばらです。 今日は、知っていても役に立たないかもしれない、 WEBページでの画像の変な使い方をご紹介しようと思います。 題して「すき焼きの写真にすき焼きの3Dモデルを埋め込む方法」です。 すき焼きの写真にすき焼きの3Dモデルを埋め込む方法 WEBページで読み込んでいるファイルは全部丸見え！ ブラウザのデベロッパーツール、便利ですよね。 特に Network や Source タブ。 読み込んでいるファイルがぜ〜んぶ丸見えです。 いけてるWEBサイトを見つけたら どうやって作ってるんだろう？ ふむふむ、3D部分はThree.jsで、モデルはglTFか〜 お、テクスチャはKTXを使ってる！ みたいに調べちゃいますよね？？ そう、デベロッパーツールは 覗く側としては、すご〜く勉
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
jqの代わりにperlを使ったり、mysqlを使ったり(できなかった)
知らぬうちに取り付けられた不審なAirTagをAndroidで検出、Appleがアプリをリリース【やじうまWatch】
OPPO、約30gの単眼スマートグラス「Air Glass」発表 ナビや翻訳が可能
Trivy + Regoを用いたパッケージ脆弱性管理 /trivy-rego
GitHub - FEX-Emu/FEX: A fast usermode x86 and x86-64 emulator for Arm64 Linux