タグ検索の該当結果が少ないため、タイトル検索結果を表示しています。
Google Compute Engine を用いた機械学習モデル学習バッチのスケジュール実行 - MicroAd Developers Blog
こんにちは、機械学習エンジニアの河本 (@nnkkmto) です。マイクロアドのシステムにおいて、機械学習が必要な部分の研究開発及び実装を担当しています。 この記事では GCP (Google Cloud Platform)、特に GCE (Google Compute Engine) を用いた機械学習モデル学習バッチのスケジュール実行について紹介できればと思います。 はじめに 前提 全体の流れ 各処理の詳細 スケジューリング Cloud Scheduler Cloud Pub/Sub Cloud Functions インスタンス起動による学習バッチの実行 preempted 時のリトライ処理 終わりに はじめに 現在マイクロアドでは、以下にあるようにGCP を用いた機械学習基盤の構築を進めていて、Kubeflow を用いた実行環境へ移行予定です。 オンプレ×Google Cloud Pl
Google Compute Engine 向けにコスト最適化された新型汎用 VM「E2」 | Google Cloud 公式ブログ
※この投稿は米国時間 2019 年 12 月 12 日に、Google Cloud blog に投稿されたものの抄訳です。 汎用仮想マシン（VM）はクラウド アプリケーションの主力プロダクトです。本日は、Google Compute Engine 向けの VM である E2 ファミリーについてお知らせします。この VM は動的リソース管理機能を搭載し、信頼性と持続性に優れたパフォーマンス、柔軟な構成、Google の VM で最も低い総所有コストを実現します。 現在ベータ版である E2 VM は同等の N1 構成に匹敵するパフォーマンスを提供し、次のようなメリットがあります。 低い総所有コスト: N1 と比べて 31% の削減。Google Cloud の VM の中で総所有コストが最も安価です。 一貫したパフォーマンス: 料金を低く抑えたまま、信頼性と持続性に秀でたパフォーマンスを実現し
Googleは2019年8月13日（米国時間）、「Google Cloud Platform」（GCP）のIaaS「Google Compute Engine」で提供する仮想マシン（VM）の新しいラインアップを発表した。新しいVMは「汎用（はんよう）マシンタイプ」「コンピューティング最適化マシンタイプ」「メモリ最適化マシンタイプ」の3種類。 汎用マシンタイプでは価格性能比が向上 Googleは汎用マシンタイプに、第2世代Xeonスケーラブル・プロセッサーを利用できる新しい「N2マシンタイプ」を追加した。 N2マシンタイプは現在β版。既存の「N1マシンタイプ」と比べて、多くのワークロードで価格性能比が20％以上向上する。仮想CPU1個当たり、最大25％多くのメモリをサポートする。N2マシンタイプの仮想CPUは基本周波数が2.8GHzで、ターボブースト時の最大周波数3.4GHzを全コアで利用で
Google Compute Engineの起動と停止をGUIでスケジュールする（初心者向け） | DevelopersIO
データアナリティクス事業本部、池田です。 本エントリは クラスメソッド Google Cloud Advent Calendar 2021 の5日目の記事です。 Google Cloudの仮想マシン（VM）を提供するサービスの Google Compute Engine （以下、GCE）のインスタンスの 起動と停止をスケジュールすることで自動化してみます。 探した限りだとGUIでの情報があまりなかったので、今回はコンソールからGUIで行います。 触った範囲だと、公式のガイドのうち、特に↓この辺に注意が必要そうです。 【 VM インスタンスの起動と停止をスケジュールする 】 ・インスタンス スケジュールを使用するには、プロジェクトの Compute Engine サービス エージェントに次の権限が必要です。 ・compute.instances.start: VM インスタンスの起動をスケジ
こんにちは。Google Cloudのカスタマーエンジニアの有賀です。 この記事は Google Cloud Japan Advent Calendar 2022 の「通常版」の（遅れてしまいましたが）9日目の記事です。 クラウド環境へのアクセス制限は、どのようなクラウドを使う場合でも必ず発生する非常に重要な設計・設定の1つだと思います。その中でもVMサービス（Google CloudだとCompute Engine）へのアクセス制限は多くの場合で必要になります。 そこで本記事ではまず、Compute Engine VMへの接続方法にはどのようなものがあるかを詳細に見ていきます。その上で最後に、それらの接続方法をどのように制限・コントロールをすればよいのか検討したいと思います。 TL;DR VMへの接続はVPCファイアウォールで制限 Identity-Aware Proxyの利用は、API
永久無料枠で Google Compute Engine (GCE) インスタンスを立ち上げる : その2 - Corredor
前回、Google Cloud Platform (GCP) に登録し、その中の Google Compute Engine (GCE) というサービスを使い、完全無料で使える仮想マシン (VM) を立ち上げて SSH 接続までこぎつけた。 今回は、立ち上げた VM をより安全に利用するための設定を紹介する。 課金を通知する予算アラートを設定しておく VM に割り当てられる Public IP を固定する SSH 接続するためのポートを22番から他のポート番号に変更する ポートを変更する前に SELinux を無効化する SSH 接続に使用するポート番号を変更する GCP のファイアウォール設定を変更する 変更後のポート番号で SSH 接続する 以上 課金を通知する予算アラートを設定しておく 前回説明したとおり、GCP には無料枠と1年間の無料クレジットがあるし、有料アカウントに手動で移行
GitHub - irsl/gcp-dhcp-takeover-code-exec: Google Compute Engine (GCE) VM takeover via DHCP flood - gain root access by getting SSH keys added by google_guest_agent
Note that the last 4 bytes (0a:80:00:02) of the MAC address (42:01:0a:80:00:02) are actually the same as the internal IP address of the box (10.128.0.2). This means, 1 of the 3 components is effectively public. The pid of the dhclient process is predictable. The linux kernel assigns process IDs in a linear way. I found that the pid varies between 290 and 315 (by rebooting a Debian 10 based VM many
Google Compute Engineインスタンス環境下でbqコマンドを使ってBigQueryにデータを投入する | DevelopersIO
アライアンス統括部 サービスグループの しんや です。 DevelopersIOのブログ投稿データを収集・加工・可視化して社内に共有することをここまで実践してきていたのですが、その際に用いている環境にはAmazon Redshiftを活用していました。先日個人的に部署異動(2023年03月01日付けでアライアンス統括部に異動)したのもあり、またデータ連携と可視化の仕組みもよりスムーズに/便利に/広範に連携出来るようにしたいと思い、「社内投稿データ分析環境をBigQueryに載せ替える手順をそれぞれブログにまとめておこう」と思い立ちました。 当エントリではその中から「Google Compute Engineインスタンス環境からbqコマンドを使ってデータをBigQueryに連携する」手順についてまとめておこうと思います。 目次 データ連携イメージ(構成図) Google Cloud:Comp
マーケティングテクノロジーの情報やノウハウ・TIPS、エクスチュア社の情報を発信。【ブログネタ募集】ご興味のある分野を教えてください！ご要望の内容を記事に起こします！メニューの「ブログへの」リクエストよりお送りください。 menu こんにちは、エクスチュアの權泳東(権泳東/コン・ヨンドン)です。 今回はGCEのUbuntu VMにスワップファイルを作成する方法についてです。 GCEでLinux仮想マシンを作成すると、UbuntuだろうがCentOSだろうがスワップファイルがない状態で仮想マシンが作成されます。 別にswapがなくても困らないくらい潤沢なメモリを積んでれば問題はないのですが、f1-microタイプのインスタンスで、ちょっとメモリを使う処理をしたりすると、あっという間にメモリ不足になります。 というわけで、f1-microじゃなくてもswap作っておきたい場合は下記の手順で作成
Google Compute Engine gets new E2 VM machine types | Google Cloud Blog
Introducing E2, new cost-optimized general purpose VMs for Google Compute Engine Editor’s note: As of March 19, 2020, E2 VMs are generally available. We’ve also added E2 VMs to all 22 global regions General-purpose virtual machines are the workhorses of cloud applications. Today, we’re excited to announce our E2 family of VMs for Google Compute Engine featuring dynamic resource management to deliv
Google Compute Engineのインスタンスに自動でGoogle Cloud Operationsのエージェントがインストールされるようにする - YAMAGUCHI::weblog
はじめに こんにちは、StackdriverあらためGoogle Cloud Operations担当者です。今回は担当分野の新しい機能について紹介します。本記事はGoogle Cloud LoggingやGoogle Cloud Monitoringというものがなにかをすでに理解されている方向けに書いています。 TL;DR Agent Policyを使うことで、Google Cloud LoggingとGoogle Cloud MonitoringのエージェントをGCEインスタンス作成時に自動でインストール＆起動させられるようになる。 Google Cloud Logging + Google Cloud Monitoring on Google Compute Engine Google Cloud LoggingやGoogle Cloud MonitoringはGCPが提供するログと
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「Google Compute Engine」で仮想マシンのラインアップが更新
詳解 Google Compute Engineへの接続
Google Compute EngineのUbuntu VMにスワップ領域を作成する
kodomo.jswc.or.jp
engineering.linecorp.com
3newskininaru.com
president.jp
anond.hatelabo.jp
note.com/hisashi358