takaya030のブックマーク / 2023年8月3日

takaya030 id:takaya030

2023年8月3日のブックマーク (5件)

Codecov is now open source - Codecov
Authors Note: Hey, we messed up in this post by referring to BUSL-1.1 as Open Source. We’re sorry, we are leaving this post as-is to keep the record clear and we’ve followed up in a new post. Since the beginning, the open source community has been a strong partner in Codecov’s growth and success. That’s why we always offered Codecov for free to use on any open source project. And if we’re being to
takaya030 2023/08/03
codecov
リンク
Dataflow の Day 2 Operation ベタープラクティス
Google Cloud Japan の RyuSA です。👋 最近「 Pub/Sub からイベントとデータを引っ張って BigQuery に投げ込みたい」「 Cloud Spanner の変更ストリームを BigQuery に配置し、データを分析に使いたい」など、様々な用途で大量なデータの処理のために Dataflow を利用いただいているのを観測しています。👀 さて、巨大な分散処理をマネージドで実行してくれる便利な Dataflow ですが、運用する上でいくつか気を付けないといけないことがあります。そしてそれらの多くは「問題が発生してから」発覚することが多いです。この記事では「 Dataflowジョブの運用に関しての FAQ やよくある問題」に対する回答をまとめておきました。監視 / 可観測性 Q: ジョブのログベースの監視のベストプラクティスをおしえて！ A. ログベース監視を
takaya030 2023/08/03
dataflow

apache

beam
リンク
ChatGPT Code Interpreterで画像編集をしてみる - Taste of Tech Topics
カメラ好き機械学習エンジニアの@yktm31です。先日、以下のように、ChatGPTのCode Interpreterを用いて、画像データを加工する記事を書きました。その際は、リサイズや画像の切り抜きなど、基本的な加工ができることを確認しました。今回は、画像編集ソフトで行うような、より高度な画像処理を実施してみたいと思います。 acro-engineer.hatena blog.com 利用する画像は前回記事と同様、以前撮影した富士山の写真を使いたいと思います。画像処理/加工今回、以下のような画像処理／加工を実施してみました。ガンマ補正を適用し画像を明るくする CLAHEを適用しコントラストを調整するシャープネスを向上させるノイズ除去を適用するガンマ補正を適用し画像を明るくするガンマ補正は、画像の明るさを非線形に調整するための手法です。一番単純に画像を明るくする方法は、
takaya030 2023/08/03
chatgpt
リンク
検索用APIを使わずにウェブページをChatGPTに学習させる方法【Python / LangChain / FAQ】
はじめまして、ますみです！株式会社Galirage（ガリレージ）という「生成AIに特化して、システム開発・アドバイザリー支援・研修支援をしているIT企業」で、代表をしております^^ この記事では、「LangChain」というライブラリを使って、「ウェブサイト検索が可能なChatGPTの作り方」を解説します。この記事を読むことで、検索APIを使わずに、ウェブ上の最新情報を取り入れたChatbotの作成が可能になります。 ChatGPTやLangChainについてまだ詳しくない方は、こちらを先にご覧ください◎
takaya030 2023/08/03
chatgpt

openai

langchain

python
リンク
[概要編] GCPでVMインスタンスを自動・自律的に構築する仕組み
はじめにこんにちは、情報システム部 SRE 橋本です。今回は我々のチームで運用効率化として構成しているVMインスタンスの自動的・自律的な構築を行う仕組みについて紹介したいと思います。昨今、クラウド・プラットフォーム上で様々なマネージド・サービスが利用可能になっていますが、10年スパンで継続運用されているシステムでは移行難易度的にそれらのサービスを使うことが難しく、従来構成を維持してVMインスタンスを大量に構築する機会があります。我々の運用システムでもフロントエンドはGKE/コンテナ化が進みつつありますが、DBやKVSなどのデータストアはVMインスタンスで構築しています。またMySQLなどのデータベースサーバではパフォーマンス等の要件により垂直・水平分割がすすんだ結果、構築台数が多くなるというケースはしばしば発生すると思われます。このようなサーバを構築・運用する場面で以下のような経験
takaya030 2023/08/03
gcp

terraform

ansible
リンク
- 2023年8月4日
- 2023年8月3日
- 2023年8月2日