Cloud SQLのストレージ自動増量の注意点 - GMOインターネットグループ グループ研究開発本部
こんにちは。次世代システム研究室のM.Mです。 あるプロジェクトでGCPのCloud SQL(PostgreSQL)を使い始めて約1年経過しました。 そのCloud SQLを利用しているサービスも成長して、登録されているデータもかなり多くなってきました。 登録されるデータが増えても、Cloud SQLのストレージ自動増量の設定のおかげで、勝手に利用しているストレージサイズが増えていくため、運用が楽だなと思っておりました。 実際に、約1年の間で数回ストレージサイズが自動で増えました。 約1年が経過し、そろそろデータ削除の運用も始めたほうがよいと考え、不要になった古いデータを削除した際に問題が起きてしまいました。 1. Cloud SQLのストレージ自動増量の注意点と起きた問題 注意点については、ちゃんとマニュアルに記載がありました。 データベースに対する書き込みが多いと、大量のトランザクショ
podman + kind で macOS のディレクトリをマウントする - Qiita
概要 以下の記事にて macOS で podman + kind を動かすことは確認出来たので、その続きをやってみた 以下のことを確認する nginx を deploy して画面を見るというシンプルな確認をする podman + kind で macOS で編集したものを、そのまま表示してみる podman machine は ４系から QEMU の volume マウントをサポートしているので、 kind の pod から macOS のディレクトリをマウントしてみる 検証した環境 $ sw_vers ProductName: macOS ProductVersion: 12.3.1 BuildVersion: 21E258 $ podman version Client: Podman Engine Version: 4.0.3 API Version: 4.0.3 Go Versio
GCPのVPCネットワークを作成してみた - Qiita
・VPCネットワークは、グローバルリソース。特定リージョンやゾーンに関連付けられていない ・サブネットはリージョンリソース ・インスタンス間のトラフィックは、NWのFWルールで制御可能。ルールはVM自体に実装される ・VPC NW内のリソースには、NW FWルールが適用される ・内部IPｖ４、IPv6アドレスを持つインスタンスは、Google API、サービスと通信できる ・NW管理は、IAMロールを使用して保護される ・組織は、共有VPCを使用して、共通ホストプロジェクト内で、VPC NWを維持できる ・VPCネットワークピアリングを使用して、異なるプロジェクトや組織のVPCネットワークとVPCネットワークを接続できる ・ハイブリッド環境のVPCネットワークは、Cloud VPNまたは、Cloud Interconnectを使用して安全に接続できる 概要 VPC ネットワークを元に整理し
Go 言語の context を基礎から実践まで解説 - Qiita
はじめに こんにちは、エンジニアの清水です。 私は業務で Go を書いているのですが、context についての理解が浅いことでエラーに遭遇したので、勉強のために記事を書いてみました。 この記事では、実際のコード例を交えながら Go 言語の context パッケージの基本から実践的な使用方法まで解説していきます。 また実際に私が遭遇したエラーの例も交えて context の陥りやすい落とし穴についても解説します。 context の基本 context とは何か contextは、Go の標準ライブラリに含まれるパッケージで、API やプロセス間でリクエストスコープの値、キャンセル信号、デッドラインなどを伝播するための仕組みを提供します。 なぜ context が必要なのか リソースの適切な管理：不要になった処理を適切にキャンセルし、メモリや CPU などのリソースを解放できます。 タイ
マネージャー向けガイド: バーンアウトに立ち向かう方法 - The Asana Blog
この記事は英語、フランス語、ドイツ語、ポルトガル語、スペイン語でもお読みいただけます。 編集メモ: この記事は Quartz に掲載されたものです。 過酷なストレスは、今や仕事において身近な存在となってしまいました。去年、ナレッジワーカー (知識労働者) の 71% が一度はバーンアウト (燃え尽き症候群) を経験しています。さらに、メンタルヘルスの状態を「悪い」または「非常に悪い」と回答した労働者の割合が、5% から 18% に急増しました。ストレスレベルが「高い」または「非常に高い」と回答した割合は、42% に上ります。このようなストレスやプレッシャーの高まりは、明らかに時代の流れを感じさせます。 これは Asana「仕事の解剖学」インデックス 2021 報告書に基づいています。この調査では、回答者のほぼ半分が、バーンアウトの主な要因として過労を挙げています。つまり、問題の要因はオフィ
ダイレクト VPC 下り（外向き）と VPC コネクタの比較 | Cloud Run Documentation | Google Cloud
フィードバックを送信 ダイレクト VPC 下り（外向き）と VPC コネクタの比較 コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 Cloud Run には、Cloud Run サービスまたはジョブから VPC ネットワークに下り（外向き）トラフィックを送信する方法が 2 つあります。 ダイレクト VPC 下り（外向き） サーバーレス VPC アクセス コネクタ このページでは、Cloud Run から VPC ネットワーク下り（外向き）に送信する 2 つの方法を比較します。どちらの方法でも、Compute Engine VM インスタンス、Memorystore インスタンス、または内部 IP アドレスを持つ他の任意のリソースにアクセスできます。 ダイレクト VPC 下り（外向き） ダイレクト VPC 下り（外向き）では、Cloud Run のインフラス
Cloud RunのDirect VPC Egressを解説 - G-gen Tech Blog
G-gen の佐々木です。当記事では、Google Cloud (旧称 GCP) のサーバーレスコンテナサービスである Cloud Run の Direct VPC Egress 機能について解説します。 前提知識 Cloud Run とは サーバーレス VPC アクセスコネクタとは 概要 Direct VPC Egress とは 使用方法 サーバーレス VPC アクセスコネクタと Direct VPC Egress の比較 コスト パフォーマンス 構成図 比較表 ユースケース 制限事項 Cloud Run services、Cloud Run jobs 共通の制限事項 サブネットに十分な IP アドレスが必要 Direct VPC Egress を使用できるコンテナインスタンス数の上限 メンテナンスイベント時の接続断 Cloud Run の実行環境（世代） Cloud Run jobs
Direct VPC egress in Cloud Run sends traffic over a VPC easily | Google Cloud Blog
Announcing Direct VPC egress for Cloud Run: better performance and lower costs We’re launching Direct VPC egress for Cloud Run in Preview today. This feature enables you to send traffic to a VPC network, without setting up a Serverless VPC Access connector. Direct VPC egress is easier to set up, is faster, can handle more traffic and has lower costs. This is a very exciting update to Cloud Run. Be
VPC ネットワークによるダイレクト VPC 下り（外向き） | Cloud Run のドキュメント | Google Cloud
フィードバックを送信 VPC ネットワークによるダイレクト VPC 下り（外向き） コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 サーバーレス VPC アクセス コネクタなしでダイレクト VPC 下り（外向き）を使用することで、Cloud Run サービスまたはジョブが VPC ネットワークにトラフィックを送信できるようにします。 始める前に プロジェクトに VPC ネットワークがない場合は作成します。 共有 VPC を使用する場合は、共有 VPC ネットワークへの接続をご覧ください。 VPC サブネットを使用する場合、サブネットは /24 以上である必要があります。 Cloud Run 全体で使用できる十分な IP アドレスを確保するには、次の条件に注意してください。 Cloud Run のサービスまたはリビジョンをデプロイするサブネットでは、少なくと
インデックスとは何？MySQL(InnoDB)とPostgreSQLのインデックスの違いとは？調べてみました
はじめに こんにちは。calloc134 です。 前のハッカソンイベントで、UUID をプライマリキーに利用するかどうかの議論がありました。 結果的にはあまりパフォーマンス要件の高くないアプリケーションであったため、プライマリキーとして UUID を採用することにしたのですが、イベント終了後に気になったため、調査を行いました。 今回は、この調査の結果を元に、MySQL と PostgreSQL におけるインデックスの内部構造の違いと、UUID をプライマリキーにする際の問題についてまとめてみたいと思います。 インデックスの概要 インデックスとは インデックスとは、データベースのテーブルに対して、アクセスを高速に行うための指標となる構造のことです。 インデックスとは日本語で索引ですが、まさに辞書の索引のように、アクセスにおいての手助けをしてくれます。 より具体的に解説すると、データベースにお
よくわかる Cloud Run の VPC 接続の基本
スループットが分からない場合は、現在 (2023年12月時点) プレビューで提供している スループット チャート を使用して実際のスループットをモニタリングする方法がおすすめです。まずはいずれかのマシンタイプを仮で決めて運用し、実際のスループットが想定と乖離があるようであればマシンタイプやコネクタ インスタンスの最小数・最大数を変更するようにします。なお コネクタの設定の変更 も現在 (2023年12月時点) はプレビューで提供しています。 サーバーレス VPC アクセスの詳細な仕組みについては次のドキュメントを参照してください。 コネクタ インスタンスのスケール アウトに注意する必要がある コネクタ インスタンスはスケール設定 (最小数、最大数) に基づき、トラフィックに応じて自動的にスケール アウトします。 トラフィックが増えた場合の管理が不要な点は便利ですが、一方でスケール インは行
Google CloudのVPCを徹底解説！(基本編) - G-gen Tech Blog
G-gen の杉村です。当記事では Google Cloud (旧称 GCP) の Virtual Private Cloud (VPC) について徹底解説します。なお当記事は VPC の基本機能に絞った 基本編 であり 応用編 も続けてご確認ください。 Virtual Private Cloud (VPC) とは ネットワークとサブネット ネットワーク サブネット サブネットの IP アドレス サブネット作成モード VPC 間接続 オンプレミスや他のクラウドとの接続 ルート ファイアウォール（Cloud NGFW） インターネットとのアクセス VM とインターネット間の通信 Cloud NAT インターネットとの通信を防ぐ方法 プレミアムティアとスタンダードティア Google Cloud サービスへのプライベートサービスアクセス Virtual Private Cloud (VPC)
オープンソースのRust製コードエディタ「Zed」、ClaudeベースのAIアシスタント機能「Zed AI」を発表
オープンソースのRust製コードエディタ「Zed」を提供するZed Industriesは2024年8月20日（米国時間）、「Zed AI」を発表した。Zed AIは、自然言語のプロンプトを通じてZed上でのコード生成、変換などコーディングタスクを支援する機能だ。 「Zed AIは、Anthropicの『Claude 3.5 Sonnet』を基盤としている。Claudeの『Prompt Caching』を活用することで、数千行のコードをコンテキストウィンドウに含めても、応答が非常に高速であり、コストも削減している。初期リリース中はZedにサインインすることで無料で利用できる」と、Zed Industriesは述べている。 Zed AIでコーディング体験はどう変わるのか 関連記事 Rust製コードエディタ「Zed」、オープンソース化を発表 Zed Industriesは、Rust製コードエデ
データアーキテクチャ特集 データ利活用を推進する8社の技術選定 - Findy Tools
公開日 2024/09/12更新日 2024/09/13データアーキテクチャ特集 データ利活用を推進する8社の技術選定 毎回ご好評頂いているアーキテクチャ特集の今回のテーマは、データ分析基盤です。 データ活用に特に力を入れている日本のIT企業8社にご協力頂き、それぞれの技術選定の裏側と今後の展望についてご寄稿頂きました。 ※ご紹介は企業名のアルファベット順となっております 株式会社朝日新聞社 アーキテクチャ選択の背景や意図 これまでは、朝日新聞デジタル（朝デジ）のサービス開発・運用において、データを収集する基盤が存在せず業務ごとに Adobe Analytics や AWS QuickSight、 内製のツールなど様々なBIツールが乱立している状態でした。そこで、複数のシステムのデータソースを統合的に可視化・分析を可能にするために、分析基盤の構築に着手しました。 まず、データを集積・加工す
Cloud Run サービスから Cloud SQL にダイレクト VPC 下り (外向き) を使ってプライベート接続する
2023年は「Cloud Run を触って覚える」をテーマとした一人アドベントカレンダーを一人で開催しており、Cloud Run のさまざまな機能や、Cloud Run でよく使う構成などを実際の使い方と一緒にご紹介しています。 14日目は Cloud SQL にプライベート接続する方法についてご紹介します。Cloud Run から VPC 内のリソースにプライベート接続する方法は、今年 (2023年) にプレビューで提供を開始した「ダイレクト VPC 下り (外向き)」を使います。 Cloud Run の概要は技術評論社さまのブログ「gihyo.jp」に寄稿した記事で解説していますのでこちらもぜひご覧ください。 Cloud SQL にプライベート接続する方法 まず、Cloud Run サービスから Cloud SQL にプライベート接続するにはどのような構成になるか解説します。 Clou
Go でマルチスレッドプログラミングする際に最低限知っておくべきこと - Cybozu Inside Out | サイボウズエンジニアのブログ
この記事は、CYBOZU SUMMER BLOG FES '24 (クラウド基盤 Stage) DAY 10 の記事です。 こんにちは。クラウド基盤本部の野島です。Go は goroutine やチャネルなどの仕組みが備わっており、簡単にマルチスレッドなプログラムを書くことができる言語だと言われています。しかし、マルチスレッドプログラミングには独特の罠があり、何も知らない人が雰囲気でコードを書くとわかりにくいバグを仕込んでしまうリスクが非常に高いです。 この記事では、マルチスレッドプログラミングに詳しくない人に向けて、そのような罠を避けるための方法を紹介します。この記事は Go の基本的な使い方を知っていることを前提としています。 這い寄るデータ競合の恐怖 まずは以下のようなプログラムを考えてみましょう。これは複雑な計算を行って結果を返すような HTTP サーバーのコードです。 // 複雑
ゼロからRAGを作るならこんなふうに
どんな人向けの記事？ これからRAGを作ってみたい DifyやLangChainにこだわらず、自分で開発をハンドリングしたい ベクトルDBや埋め込みモデルの選定の勘所をサッと知りたい ここではRAGとは何かのような話題は扱いません。 RAGが、ほぼAI活用の現実的な最適解になりつつある LLMは高度な知的タスクを実行可能である。 そんな理解が世界に広まっていく中で、企業は自らが蓄えたデータをLLMに組み合わせてどう活用するか躍起になっています。これからはビッグデータだ！という時代を経ているため、情報インフラに投資した企業も多く、AIでデータを活用する流れはもはや確定路線と言えます。 この問題を解決する手法として一番最初に思いつくのは、モデル自体を改変するファインチューニングです。しかし、ファインチューニングにはいくつかの実用上の問題があります。ファインチューニング自体に専門知識が必要である
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
macOS の podman で kind をやってみる - Qiita
仕事を前に進めるためのコツ - 判断と決断と共有 / Aim for the goal
GCP Networking VPC - GCP Certification Cheat Sheet