SRE の田中 @kenzo0107 です。 社内版 ChatGPT を構築し、社内の ChatGPT 利用を促進した話です。 社内版 ChatGPT が必要だった理由 以下要望を実現する為です。 秘匿情報をクローズドな環境で OpenAI にポストしたい 社員誰もが最新のモデルやバージョンで高精度、且つ、パフォーマンスの高い ChatGPT を利用したい 構成 - Web 版 社内 ChatGPT Web サービスは AWS に配置 ALB を会社毎に分けて Google 認証する *1 ECS から Azure API Management 経由で Azure OpenAI Service に問い合わせ API Management は Azure OpenAI Service の監査ログを取得する為に配置している *2 Azure 側ではネットワークセキュリティグループで AWS N
AIや機械学習が持て囃されて、統計分析やデータ可視化がいまいち主流になれない理由 - 渋谷駅前で働くデータサイエンティストのブログ
先日のことですが、こんなことを放言したら思いの外伸びてしまいました。 データ可視化は一時期物凄く流行った割に今はパッとしない印象があるんだけど、それは結局のところデータ可視化が「見る人に『考えさせる』仕組み」だからだと思う。現実の世の中では、大半の人々は自分の頭で考えたくなんかなくて、確実に当たる託宣が欲しいだけ。機械学習やAIが流行るのもそれが理由— TJO (@TJO_datasci) 2024年8月28日 これはデータサイエンス実務に長年関わる身としてはごくごく当たり前の事情を述べたに過ぎなかったつもりだったのですが、意外性をもって受け止めた人も多ければ、一方で「あるある」として受け止めた人も多かったようです。 基本的に、社会においてある技術が流行って定着するかどうかは「ユーザーから見て好ましいかどうか・便利であるかどうか」に依存すると思われます。その意味でいうと、データ分析技術にと
MySQL/Aurora/TiDBロック入門 – 第１回トランザクション分離レベル｜技術ブログ｜北海道札幌市・宮城県仙台市のVR・ゲーム・システム開発 インフィニットループ
MySQL/Aurora/TiDBロック入門 – 第１回トランザクション分離レベル MySQL InnoDB および AWS Aurora や PingCAP TiDB におけるロックの仕組みやトランザクションの動作を全１１回のシリーズで解説します！ 最初はベースとして重要な MySQL 8.0 InnoDB 前提でユーザー視点でのロックの仕組みを学び、後半第１０回以降では MySQL 互換 DB として人気の高い AWS Aurora や PingCAP TiDB と MySQL InnoDB との違いについて学びます。 １回目の今回はロック機構と切っても切り離せないトランザクションとその分離レベルについて、実際に挙動を確かめながら解説します。ライブ感のある説明も理解に役立ちますので、解説動画も付けてみました。合わせてご覧ください！ ★ 第１回 トランザクション分離レベル ★ 第２回 ロ
「機械学習で時系列予測はできるのか」論議がTransformerと共に帰ってきた - 渋谷駅前で働くデータサイエンティストのブログ
先日、こちらのポストをお見かけしました。 AI技術開発部の高橋が社内勉強会の資料「時系列予測にTransformerを使うのは有効か？」を公開しました。 論文Are Transformers Effective for Time Series Forecastingの紹介を中心に、時系列予測について解説しています。ぜひご覧ください。https://t.co/LplxTT8b1d pic.twitter.com/nUXb4bGiQ3— GO Inc. AI Tech (@goinc_ai_tech) 2023年9月28日 なるほど、NN全盛というかNN一択の時代にあっては時系列予測もNNでやるのが当たり前になったのだなという感想でした。大昔「沖本本」で古典的な計量時系列分析を一通り学んだ身としては隔世の感がありますが、これもまたNN時代の趨勢なのでしょう。 なお、元論文2点は上記リンクから辿
レトロゲーム界隈で重大な発見をしているにもかかわらず名前もあがらないしインタビューもされない歴史から消された男、その謎に迫る。 - 嵯峨のはてなブログ
どうもみなさん。 なぜか記事化されないことで有名な嵯峨(サガフロンティアTASの人)です。 是非今日は私の事を覚えて帰っていただきたい。 ゲームのやりこみやバグ発見、RTAなどは時にニュースにもなります。 昨今ではその量も増えてきており注目度の高さがうかがえます。 これは批判ではなくただの自虐(冗談)なんですけど 私は結構ヤバイバグやチャートを考え付いて いろんな人に携わってきたつもりなんですけど 一度も私に関する情報やゼノギアスが記事化されていません。 今度そのスルーされっぷりを自分でネタ記事にしてみようかな笑 おかげで自称無名雑魚初心者です。 — 嵯峨 (@kyotosagauoa) 2023年11月6日 先日このように呟いた通り、私の活動は今まで記事化されてきておりません。 そんな記事になるような事してきたのか？という声も聞こえてきそうですが いよいよ1ツイートだけでも紹介されそう！
Pythonのパッケージ・プロジェクト管理ツールはまだ乱立状態にあって、どれを使えばいいのかわからないから慣れたpyenv+pipを使おうという判断をする人がいるかもしれない。その判断自体は別に否定しないけれども、初心者に教える時にpyenvを教えるのはもうそろそろやめてほしい。 Pythonをソースからビルドするので、コンパイラや依存ライブラリを事前に揃えないといけない。依存ライブラリが足りないと中途半端なPython環境もできうる。 デフォルトで最適化オプション(PGO+LTO)が付いてないので、最適化ビルドしたPythonより~5%程度遅い Windowsで使えない Rye, pdm, Hatch などは python-build-standalone と呼ばれるビルド済みPythonをインストールする機能があるので、これらの欠点が存在しない。 Pythonをインストールするところま
【追記】 そこまで伸びてないが追記。 人文知のブログでブクマついたことなかったから驚いてる。 他人の褌ではあるが、本紹介なら任せてくれ。 ブコメで俺を叩いてる奴は大きく2種類見られて、 ・諦めているから綺麗事を吐くやつを叩く奴 ・上からクソバイスかけるなよという奴 前者はまあ、できるだけ好転して欲しいと神に願うばかりだが 後者は人ごとなのに誰も幸せにならない悪口を吐いてなお健全に生きられるの羨ましいな。 読み返したらスピ全開でちょっと恥ずかしかったw 増田でしか書けないな。 一応サンプル紹介、厳選3つ ・食べものは、本当に「おいしい！」と感じるものを食べるようにします。 「頭」で食べないで、「からだ」で選んで食べるようにします。できれば、できたてのもの、手づくりのもの、旬のもので「おいしい！」と思うものを食べます。 ・可能なかたは、ぜひマッサージに通ってください。できるかぎりでよいです。
「セクシー田中さん」漫画家、投稿削除「攻撃したかったわけじゃなくて。ごめんなさい」ブログも閉鎖（スポニチアネックス） - Yahoo!ニュース
日本テレビで昨年10月に放送された連続ドラマ「セクシー田中さん」の原作者で、漫画家の芦原妃名子氏（50）が28日、自身のX（旧ツイッター）を更新。脚本をめぐって局側と折り合いがつかず、自らが9、10話の脚本を書くことになったと告白したことについて謝罪した。 【写真】ドラマ「セクシー田中さん」番組インスタグラムから 芦原氏は26日、「ドラマ『セクシー田中さん』について」とし、「色々悩んだのですが、今回のドラマ化で、私が9話・10話の脚本を書かざるを得ないと判断するに至った経緯や事情を、小学館とご相談した上で、お伝えする事になりました」と投稿。ドラマ化にあたって“必ず漫画に忠実に”などの条件が守られていなかったことを明かし、自ら9、10話の脚本を手がけることになったと説明した。 この告白は大きな反響を呼び、たちまち拡散。ドラマの脚本を担当した脚本家・相沢友子氏に対し批判の声が上がっていた。 2
ティモンディ・前田裕太さんが保護猫の預かりボランティアを続けるワケ。「猫との生活が自分を成長させてくれる」 - 週刊はてなブログ
楽天市場のお買い物を通じて動物保護団体を支援できる「動物保護団体支援プログラム」と、はてなブログが共同で、ペットとの絆や思い出を募集する特別お題キャンペーン ＃ペットを飼うこと を実施中。このお題に関連して、保護猫の預かりボランティアを始めたお笑いコンビ・ティモンディの前田裕太さんにお話を伺いました。保護された動物たちには、保護団体をはじめさまざまな人の手が関わります。期間限定で動物を預かり、新たな家族との出会いに向けて「人馴れ」を進めるボランティアもその一つ。 今回は、お笑い芸人として活動する傍ら保護猫ボランティアにも携わり、テレビ番組などでその様子を発信している前田裕太さんにインタビューを行い、保護猫と過ごした日々のエピソードや自身の変化、さらに保護活動やサポートに対する思いについて伺いました。 ※この記事は楽天グループ株式会社によるSponsoredContentです。 “エア猫”を
“LLM for SRE“の世界探索 - ゆううきブログ
ChatGPTが登場した当初、対話や要約、翻訳、コード生成などの典型的な言語タスクができても、SREやAIOpsの研究開発にはあまり関係ないのではないかと正直思っていた。AIOpsでは典型的にはいわゆるObservabilityデータ（メトリクス、ログ、トレースなど）が入力となるため、自然言語ではなく数値のデータを解析することが求められる。自然言語のタスクを研究対象としていなかったため、AIOpsとChatGPTに強い関係性は見いだせなかった*1。 しかし、自分で大規模言語モデル（Large Language Model: LLM）を日常的に使用したり、表題にあるようにSREのためのLLM（LLM for SRE, LLM4SRE）に関する論文を読むうちに、LLMのテキスト生成器としての性質よりもその優れた推論機械としての性質に注目するようになった。特にSREの障害診断は、人間の専門家が推
ずっとさぼっていたのですがインフラ周りを整備し、AWS SAMで構築できるようにしました。 下記が一番星はてのシステム構成図です。 一番星はてのシステム構成図 システム概要 はてのさんはLambda上におり、EventBridge経由で基本的に2時間に1回のスケジューリングではてなAPIやOpenAI APIと連携しブックマークを行います。 LambdaはコンテナイメージタイプでFastAPIで動いています。FastAPIのルーティングとLambdaを統合するためmangumを利用しています。 各インフラはAWS SAMによってコード管理されており、GitHub Actionsでpush時に自動ビルド、デプロイでAWS上のインフラが構築されます。 感想 これまでIaC化できてなかったが、すごくいい。 構成全体が把握しやすくなるし、変更や拡張が容易になる。 あとからやるのも面倒だし今後は最初
これは はてなエンジニア Advent Calendar 2023 の 18 日目の記事です。昨日は id:gurrium による private-isuで70万点取るためにやったこと - ぜのぜ でした。私は 50 万点ぐらいで満足してしまっていたので、しっかり詰めていて凄いなと思う。 developer.hatenastaff.com Web アプリケーション開発において、「キャッシュは麻薬」という言葉がインターネット上をよく飛び交っています。YAPC::Kansai OSAKA 2017 の id:moznion のトークでよく知られるようになったワードじゃないかな。 初出はちゃんとは分からないんですが、少なくとも 2011 年には言われていますね。 「キャッシュは麻薬」とはよく言ったものだ。— TOYAMA Nao (@nanto_vi) November 5, 2011 キャッシ
映画『ナポレオン』の批判ポイント - 破壊屋ブログ
現在公開中の映画『ナポレオン』はフランスで「これは違う！」と大批判を浴びていて、リドリー・スコット監督が辛辣な言葉で反撃しているのが話題になっています。私自身は 「娯楽作品は事実を捏造しても構わない」 という危ない考え方の持ち主ですが、この映画『ナポレオン』に批判が発生する理由もちょっと分かります。というわけで映画『ナポレオン』の批判内容を解説します。 戦争シーン 戦争シーンが第一次世界大戦っぽい 歩兵の動きは第一次世界大戦っぽく、乱戦の描き方は逆に中世っぽく、随分とちぐはぐな戦争シーンらしいです。私はあまり気になりませんでしたが。フランスでは 「1815年と1915年を間違えているのでは？」 という皮肉な批判をされています。映画の作り手たちが戦争シーンにこだわった割には、ナポレオン戦争の再現がおざなりになっているのが批判要素となっています。 機動を描いていない 大陸軍（ナポレオンの軍隊）
Googleフォームの設定ミスによる情報漏えいが多発～あなたのフォームは大丈夫？ 原因となる設定について解説～ - ラック・セキュリティごった煮ブログ
デジタルペンテスト部の山崎です。 4月から「セキュリティ診断」の部署が「ペネトレーションテスト（ペンテスト）」の部署に吸収合併されまして、ペンテストのペの字も知らない私も晴れてペンテスターと名乗れる日がやってまいりました！（そんな日は来ていない😇） そんなわけで、新しい部署が開設しているブログのネタを探す日々を送っていたのですが、最近、Googleフォームの設定ミスによる情報漏えい事故が増えてきているようです。 どのような設定が問題となっているのでしょうか？ 同じような事故を起こさないよう、設定項目について見ていきたいと思います。 情報漏えいの原因となりうるGoogleフォームの設定について Googleフォームから情報漏えいとなっている事例を見てみると、大きく分けて以下の２パターンのいずれかが原因となっているようです。 １．表示設定で「結果の概要を表示する」が有効に設定されている ある
「あとで読む」タグで振り返る2023年 〜今年の「あとで読む」、今年のうちに〜 - はてなブックマーク開発ブログ
今年も残すところあと少し。皆さんにとって、2023年はどのような一年でしたか？ はてなブックマークでは今年もたくさんのエントリーがブックマークされ、コメント欄も盛り上がりました。 データで見る「あとで読む」 年末ということで、2021年・2022年に引き続き今年も「あとで読む」タグにフォーカスしたデータを集計しました。全ブックマークを対象にした「あとで読む」率、カテゴリー別「あとで読む」率、「あとで読む」が多いエントリーランキングを通して、2023年のはてなブックマークを振り返ってみましょう。 全ブックマークを対象にした「あとで読む」 率 カテゴリー別 「あとで読む」 率 「あとで読む」 タグが多いエントリーは？ トップ10ランキング 「あとで読む」タグの数が多かったエントリーランキング カテゴリー別「あとで読む」率の高かったエントリーランキング 気になった記事を気軽に保存できる「あとで読
OpenAIがGPT Store開設、早速「SEOブログ記事自動生成」「AI検出回避に人間らしく加工」等が人気。レベニューシェア収益化も | テクノエッジ TechnoEdge
OpenAIが、かねてから予告していたGPT Store をようやく開設しました。 個人や企業が作ったカスタム版ChatGPTであるGPTsを分野ごとにブラウズ・検索して利用でき、自分が作ったGPTを公開することもできます。 現状では有料プランのChatGPT Plus加入ユーザーのみ、メニューの「Explore GPTs」から利用可能です。 ストアといっても利用に別途料金が必要なGPTsは今のところありませんが※、OpenAIは今四半期のうちにも、GPTsが利用された回数に応じて制作者に収益を分配するレベニューシェアを開始予定です。 (※ サードパーティーと接続したGPTsなどでは、チャットの過程で有料サービスに案内されることはあります。) 開設されたばかりのGPT Store でトップにフィーチャーされているのは、 AllTrails 世界中のトレッキングコースやアウトドア体験を場所・
長い研究者生活で、論文を数十篇書いていく上で重要なこと #制御工学 #研究者 - 制御工学ブログ
本記事はnoteに記載した以下の記事に加筆修正を加えたものです。 10年スパンでの論文執筆の考え方 研究者として生活していく上で、学術論文は1本でOKというわけにはいかず、分野ごとで数字の大小はあるでしょうが、数十本オーダーで書いていくことになります。学術論文１本を書く上での心得みたいなものは様々な記事がありますが、なかなか十年単位の話はないので書いてみようと思いました。ここでは、制御工学の研究を博士の3年間、国立大学の教員16年間行ってきた中での複数論文を書いていく実体験を中心に、10年スパンでの研究論文の書き方やコツを紹介したいと思います。 ちなみに、LaTeXによる論文執筆の記事も書いていますのでこちらもよかったらご覧ください。 10年スパンでの論文執筆の考え方 著者の実績 論文執筆時の研究者スタンス 同時並行で進める研究のテーマ数 研究者としての大学生・大学院生との関わり方 論文一
今年登山を始めた人でも登れる山と、下山後に泊まりたい温泉宿をまとめた 秋になると「今年登山を始めた人（あるいはこれから登山を始める人）がこれから登れる山を教えてほしい」という、リクエストをいただくことがあります。 しかし、山の秋はとても短く、高山では10月に雪が降ることも珍しくありません。本日時点でも既に、北アルプスや富士山はすっかり冬山です。 夏の間は運行していたロープウェイや、登山口行きのバスが営業を終了してしまうところも多く「公共交通機関で気軽に日帰り登山を楽しめる」ハードルが上がります。それで10月中旬以降は奥多摩や奥秩父、丹沢なんかがめちゃくちゃ混んだりするのですが……。 都内から気軽に行ける奥多摩奥秩父丹沢もいいけれど、どうせなら登山と組み合わせて温泉宿に泊まれるところを紹介したい！ということで、本稿では「10月いっぱい」「公共交通機関利用で」「日帰り登山+温泉宿をセットで楽し
私は本来本好きの人間であるが、最近はめっきり本を読む機会が少なくなった。技術を学ぶなら pluralsightとかのビデオのコースもあるし、Webの公式ドキュメントも充実している。よしんば本を読んでも紙ではなくKindle が多い。ブックマークもつけれるし、サーチもできるし、老眼にもやさしい。本ってもうオールドファッションのメディアじゃないだろうか？ 最近本を書く機会があって、そんなことを考えたので久々にはてなのブログのほうで考えたことを書いてみたい。 本を書くべきかどうかの葛藤 私は米国のマイクロソフトで Azure Functions というサーバーレスのサービスの開発者として勤務している。アメリカで働いているので日本で本を書こうとか全く考えていなかったが、ある日文藝春秋の山本さんが突然コンタクトをとって来て「本を出しませんか」と言われた。私は普段はnoteで自分の学んだことを、自分の
ネットワーク パフォーマンスの解読: TCP と UDP のバルクフローのベンチマーク | Google Cloud 公式ブログ
Gemini 1.5 モデル をお試しください。Vertex AI からアクセスできる、Google のもっとも先進的なマルチモーダル モデルです。 試す ※この投稿は米国時間 2024 年 6 月 22 日に、Google Cloud blog に投稿されたものの抄訳です。 Google Cloud ネットワーキング チームは長年にわたり、お客様のネットワークの構築、修正、強化の支援に深く携わってきました。その間に、ネットワークのパフォーマンスと効率を最大限に高める重要なパターンやベスト プラクティスを発見しました。この豊富な知見は、ただの理論的なリソースではありません。Google Cloud、クロスクラウド、オンプレミス、その他のクラウド プロバイダなどデプロイ先を問わず、お客様のビジネス目標達成を支援するよう設計された実用的なツールキットです。Google はこの専門知識を共有する
ブックマークについたスターを眺められるサイト「はてなギャラクシー（β版）」をリリースしました - 一番星はての開発ブログ
まえがき 2023年も終わりなので「2023年 一番星はてのコメント10選」みたいな記事を書こうと思い、とりあえずスター数の多かったコメントを集計していました。 集計自体はすぐ終わったのですが、はての以外の人でもこれ知りたいなあと思い、サービスとして公開することにしました。 というわけで、ブックマークについたスターを眺められるサイト「はてなギャラクシー（β版）」をリリースしました。 はてな★ギャラクシー どういうサイトなのか サイト自体を見てもらった方が早いので、一番星はてののページを見てみます。 一番星はてののブックマーク firststar_hateno - はてな★ギャラクシー 一番星はてののはてのギャラクシーのページ ユーザーの全ブックマークを取得し、スター数の降順に並べます。 あとはキーワードと日付によるブックマークの絞り込みができます。 キーワードはブックマークコメントとブック
「次の職場が Ruby なんだけど」と読み書きそろばんを聞かれたのと、大阪Ruby会議03、大江戸Ruby会議10、Kaigi on Rails 2023 と Ruby/Rails 関係のイベントに続けて参加して、作者の皆さまと会ったので。 「読める」になるために 言語仕様は何らかの本 1 冊の冒頭の方を読めば雰囲気は掴めるだろう。 Ginza Rails27 igaiga - Speaker Deck 著書や技術顧問、健康診断レポート でお馴染みの @igaiga555 さんの作った表で、難易度別にまとまっている。 たのしいRuby か、プロを目指す人のためのRuby入門 が定番かなぁ。 できることを知る るりま (Ruby リファレンスマニュアル) の Enumerable、String Rails Guides の Active Support Core Extensions 日本語
愛されて23万View！新卒向け研修資料「テスト文字列に”うんこ”と入れるな（2024年版）」を公開しました｜技術ブログ｜北海道札幌市・宮城県仙台市のVR・ゲーム・システム開発 インフィニットループ
ホーム 技術ブログ 愛されて23万View！新卒向け研修資料「テスト文字列に”うんこ”と入れるな（2024年版）」を公開しました 愛されて23万View！新卒向け研修資料「テスト文字列に”うんこ”と入れるな（2024年版）」を公開しました こんにちは松井です。今は会長になりました。 遡ること3年前、2021年の新卒研修向けに「テスト文字列に”うんこ”と入れるな」という資料を作成しました。 おかげさまで多くの方に読んでいただいたようで、SlideShareのView数は「23.6万View（2024年4月現在）」にまで達しました。 わたし的にはもうこれで満足していたのですが、 「会長、今年も例のうんこの話をしていただけませんか」 というオファーがあり、またこのクソみたいな話をすることになったという次第です。 せっかく話をするならばということで、事例やTIPSのページを新たに加え、「2024年
ありもしない「規約違反」に問われ、不正な手続きとパワハラで追放された事件 - かみや貴行のブログ 1%でなく99％のための福岡市政を
日本共産党福岡県指導部が「常任委員会」の名で私の除籍・解雇について声明を発表したので、私は反論せざるを得ません。簡単に説明します。 ありもしない「規約違反」 私が共産党を「除籍」という名目で追放されたのは、ありもしない「規約違反」に問われたからです。 私は2023年2月の党福岡県委員会総会で、松竹伸幸氏の除名処分には重大な瑕疵があると発言し、その見直しを提案しました。提案は総会で否決する決定がなされました。私はこの決定の立場で今後がんばるというブログ記事を書いてアップしました（同年3月）。 ところがそのブログ記事が、党の見解に反する意見を勝手に発表し、また、内部の問題を勝手に外部に出したとして、「規約違反」だとされたのです。 しかし、私はブログで元の私の意見を否定し、総会の「決定に従う」という結論をちゃんと書き、しかも、決定そのものや決定に沿った認識を、否決された元の私の意見の10倍も書い
筆者は、日本共産党が喉から手が出るほど欲しい学生党員であったが、入党以前から諸般の問題とそれに対する党や党員の姿勢に、時に激しい反発をするほどの違和感を抱いていた。まあ、我慢していようかと思っていたが、神谷貴行さんが不当に除籍されたことが一つの契機となり、離党することを決心した。はじめに述べておくが、党の対応の悪さはファクターではあるが、自分自身の生き方の選択として離党したというのが本質なのかもしれない。 以下、離党の弁と少しばかりの党への提案を述べる。なお、表題は森田草平「共産党に入るの弁」をモジったものである(言いたかっただけ)。以下、敬称略で失礼します。 離党の弁 入ったから離れ、食べたから出るのである。差し当たって、入党前後の状況を述べる。 筆者の曽祖父と曽祖伯父は戦前、全農の活動家として小作争議を組織化、指導していた。その活動の中で、曽祖伯父は共産党に入党、曽祖父は共青同盟(戦後
2023年に観てよかった映画は何ですか？ はてなブロガーの「ベスト映画2023」をまとめました - 週刊はてなブログ
映画を観て感じたことはどんどんブログに書いていこう 毎日さまざまな話題のエントリーが生まれるはてなブログの中から「旬な話題」をピックアップする企画「はてなブログで話題」。今回は「ベスト映画2023」をテーマに記事を紹介します。 はてなブログでは、年末年始にかけて、2023年に公開された映画の感想をまとめるエントリーが数多く投稿されました。 中でも特に目を引くのは、年間ベスト作品を決めるブログ記事！ 映画を観るのが好きで、映画館へ頻繁に足を運んでいる人ほど、ひとつの作品に選び抜くのは難しいはず。どの記事も読みごたえがあります。 そこで、2023年に公開された新作映画を取り上げるエントリーを中心に、はてなブロガーたちが選ぶ「ベスト映画2023」をご紹介します！ 『窓ぎわのトットちゃん』 2023年を締めくくるのにふさわしい強度をもつ映画 『スパイダーマン：アクロス・ザ・スパイダーバース』 本当
AWS S3 のファイルを社内からのみ URL でダウンロード可能にする（パブリックアクセスブロック有効） - APC 技術ブログ
はじめに こんにちは。クラウド事業部の野本です。 業務でモックサーバを作る際に、静的なファイルをふつうに URL でアクセスしてダウンロードできるようにする必要がありました。この用途に AWS の S3 を使いたいものの、バケットの設定を間違えると全世界に公開されてしまいそうで、公式ドキュメントを調べながら恐る恐る設定しました。 調べた結果、バケットポリシーで適切なアクセス制限を掛けるならパブリックアクセスブロック機能は有効のままでもいいことがわかりました。その設定方法や考え方について纏めます。 設定方法 S3 のオブジェクトを URL 直アクセスでダウンロードできるようにするには、 REST API GetObject を全員に許可するようにバケットポリシーを設定します。 リクエスト元を制限する際にポリシーが「非パブリック」と判定されるよう設定すれば、パブリックアクセスブロック機能はオン
実務において回帰分析を行うに当たっての注意点を改めて挙げてみる - 渋谷駅前で働くデータサイエンティストのブログ
先日のことですが、以下のニュースが統計的学習モデル界隈で話題になっていました。 肝心の箇所が会員限定コンテンツなので簡潔にまとめると、従来モデルよりも説明変数に入れる海域の数を増やした上で、Lasso（L1正則化）回帰で多重共線性を抑えつつ汎化性能を高めるというアプローチを取った、というお話です*1。これは回帰分析という基本に立ち返った、昨今の「猫も杓子も生成AI」という流れからは一線を画した試みで、いかにも玄人好みという感があるなと僕も感じた次第です。 一方で、僕が身を置く広告・マーケティング業界でもMMM (Media/Marketing Mix Models)を初めとして様々なタイプの回帰分析が広く行われていますが、個人的に見聞する範囲では冗談でなく本当にピンキリで、中には「そんなデタラメな回帰分析で本当に役員会の意思決定に使っているんですか？？？」みたいなケースも珍しくありません。
「ベクトル検索 vs 全文検索」〜Amazon Bedrockの埋め込みモデルを用いたプロトタイピング〜 - コネヒト開発者ブログ
※ この記事は、AWS (Amazon Web Services) の技術支援を受けて執筆しています。 はじめに この記事はコネヒトアドベントカレンダー 8日目の記事です。 コネヒト Advent Calendar 2023って？ コネヒトのエンジニアやデザイナーやPdMがお送りするアドベント カレンダーです。 コネヒトは「家族像」というテーマを取りまく様々な課題の解決を 目指す会社で、 ママの一歩を支えるアプリ「ママリ」などを 運営しています。 adventar.org こんにちは！コネヒトの機械学習エンジニア y.ikenoueです。 突然ですがみなさん、Amazon Bedrockをご存知でしょうか。 aws.amazon.com Amazon Bedrock(以下、Bedrock)は、テキスト生成AIをはじめとする基盤モデル (Foundation Model)*1を提供するAWS
はてなブックマーク透明性レポート （2023年 8月-10月） - はてなブックマーク開発ブログ
透明性レポートの公開について 削除依頼、発信者情報開示請求等の状況 スパムアカウントに対する利用停止措置の状況 スパムエントリーに対する公開制限措置の状況 通報の状況 エントリーに対する通報 コメントに対する通報 透明性レポートの公開について はてなブックマークでは、サービスの公正性、健全性を保つため、スパムアカウントの利用停止やスパムエントリーの表示制限を取っております。表示制限にあたってはシステムによる利用状況、投稿状況の監視に基づく制限措置に加え、ユーザー様からコメントやエントリーに対する通報を受理しており、それら通報情報も参考として目視による制限措置もとっています。 また、サービス内に権利侵害情報が投稿された際には、プロバイダ責任制限法に基づく手続きによって、送信防止措置や、発信者情報の開示を行っています。 このような措置について、可能な限り透明性を確保していく取り組みとして、四半
2024年版：独断と偏見で選ぶ、データ分析職の方々にお薦めしたいホットトピックス＆定番の書籍リスト - 渋谷駅前で働くデータサイエンティストのブログ
毎年四の五の言いながら書いている推薦書籍リスト記事ですが、何だかんだで今年も書くことにしました。なお昨年度版の記事を上にリンクしておきましたので、以前のバージョンを読まれたい方はそちらをお読みください。 今回のバージョンでは、趣向をちょっと変えて「定番」と「注目分野」というように分けました。何故こうしたかというと、平たく言って 「初級＆中級向け」推薦書籍リストは定番化していて毎年あまり変更点がない 逆に直近のホットトピックスに関するテキストは毎年入れ替わりが激し過ぎて網羅しづらい という課題があり、特に2点目についてはあまりにもデータサイエンス関連書籍の新規刊行が多過ぎる＆僕自身がその流れについていけておらず完全に浦島太郎状態ですので、万人向けに等しくウケるようなリストを作るのは今回をもって完全に諦めたというのが実態です。 その上で、前回まで踏襲されていた定番書籍リストはバルクで提示すると
🥦 バカでかいブロッコリーの絵文字を動かすことができる
【追記あり】はてなブログでは2024年7月1日以降にads.txtの配信を開始する予定です。また、ads.txtの配信開始に先立ち、ユーザーのads.txtを保存する機能の提供を開始しました - はてなブログ開発ブログ
本記事にはご自身で広告を設置されているユーザー様が行うべき対応を記載しています。対応を行わなかった場合は、ご自身の広告が表示されなくなるなど不利益が発生する場合があります。 はてなブログでは、広告詐欺を減らすための仕組み「ads.txt*1」の配信を2024年7月1日以降を目処に開始する予定です。また、ads.txtの配信開始に先立ち、ユーザーが利用する ads.txt を保存する機能の提供を開始しました。ads.txtの配信開始以前に設定していただくことで、配信開始とともに有効なads.txtを配信することができます。 はてなの広告を掲載しているブログでは、はてなが利用する ads.txt の配信を開始する予定です。そのため「無料プランではてなブログの広告を表示しつつ、ご自身の広告も表示している」という場合*2、ads.txt の設定を行わなければご自身の広告が表示されなくなる可能性があ
はてなユーザーならばやはりブログをやれ
マジでやってくれないと人間性がわからなさすぎて貴様らは化物だと思いこんでしまう化け物になってしまう。俺を助けると思ってやってください。俺は書いています。
Goggle Podcastのサービス終了 2024年4月2日に「Google Podcast App」のサービスがアメリカで終了予定。 NPRなど海外ポッドキャスト番組を聴いていると、 「4月2日までに登録をSpotifyやYouTube Musicなどに移行する必要がある」と告知があったりするぐらい話題になっていたり。 日本でのサービスがいつ終了するのか、正直なところよくわからないのですが 近いうちには終わるんじゃないかと。（7月に完全終了の噂あり） ※追記: 日本では6/24にサービス終了とアプリ内で通知がありました。 グーグルポッドキャストアプリの特徴として、 ・動作が軽い ・無料 ・エピソード検索が優秀 ・シンプルなUI ・RSSで番組登録できる ・アカウント同期あり ・ウェブブラウザ版も無料で使える ・・・と、サブのポッドキャストアプリとしてはなかなか優秀だったので、 よく使っ
こんにちは。GitHub Copilotを先日初めて触って、感銘を受けたMNTSQ代表の板谷です。MNTSQの代表をしておりますが、現役の弁護士でもあります。 なぜ私が、GitHub Copilotに感銘を受けたかというと、「プログラミングの LLM による進化」は、契約という言語をコーディングするためにもドンピシャで使えそうだと感じたからです。 例えば、GitHub Copilot では、自分の過去のコードを参照して、最適なコードをサジェストしてくれます。 これは、契約に関わるすべてのビジネスパーソンが求めていたものです！契約の 99.9%が過去のコードの使い回しであるにもかかわらず、毎回ゼロからコーディングするのが本当に苦痛だからです。ちなみに、前回契約と理由なく diff があると取引先に怒られます。笑 しかし、GitHub Copilot 的なものがプログラミング言語だけでなく契約
【国会】維新・NHK「共産党は日本からいらない」- 非合法化する政党法を - 祈り from はてなブログ｜家庭連合信者拉致監禁裁判「勝訴」判決まとめ #信教の自由と人権を訴えよう #ReligiousFreedom #IRFSummitAsia
【国会】維新・NHK「共産党は日本からいらない」- 非合法化する政党法を youtu.be 1988年2月6日、 浜田幸一議員が国会で『宮本顕治は殺人者だ』と発言した。 170 浜田幸一 発言URLを表示 ○浜田委員長 お答えいたします。我が党は旧来より、終戦直後より、殺人者である宮本顕治君を国政の中に参加せしめるような状況をつくり出したときから、日本共産党に対しては最大の懸念を持ち、最大の闘争理念を持ってまいりました。 「日本共産党リンチ殺人事件」とは？ 1933年（昭和8年）、日本共産党中央常任委員であった宮本顕治、袴田里見らが、党中央委員大泉兼蔵と小畑達夫にスパイ容疑があるとして、「査問」と称するリンチを行った結果、小畑を死亡させたという事件。宮本は無期懲役。袴田は懲役13年の判決が下されていたが、1947年（昭和22年）戦後のGHQの方針等により、判決が無効となった。 1977年（
データセットの本質的な性質を踏まえないデータ分析には、大抵何の意味もない - 渋谷駅前で働くデータサイエンティストのブログ
前回のブログ記事は、論文紹介という地味なテーマだったにしてはだいぶ話題を呼んだ*1ようで、個人的にはちょっと意外な感があったのでした。確かに、今をときめくTransformerにも苦手なものがあるという指摘は、NN一強の現代にあってはセンセーショナルなものと受け止められても不思議はなかったかと思います。 しかし、それは同時に「データセットが持つ本質的な性質」と「データ分析手法の性質」とのミスマッチと、それが引き起こす問題とについてこれまであまり関心を持ってこなかった人が多いということなのかもしれません。そして、そのミスマッチは冗談でなく古来からある程度定まった類型があり、データ分析業界の古参なら「そんなの常識だよ」というものばかりだったりします。 ところが、最近僕の周囲でもそういうミスマッチが深刻な実問題を招いているケースが散見され、思ったよりもそれは常識ではないのかな？と思わされることが
Gitのブランチ戦略にはいくつかあります。 Gitフロー GitHubフロー GitLabフロー チームの戦略を考えるときにどれかを参考にしつつカスタマイズするときにいろいろ不都合が生じてしてきて複雑になってしまうことってありますよね？ 社内でブランチの管理の議論をする中で、ブランチの役割を明確にした上で、どのブランチがどのような役割を持っているのかを明確にした方が混乱が少なくなるのではないか？ というのを考えていました。 特に、プロジェクトごとに同じ名前でも役割が違うなー、というのとかもあり、ブランチ名＝役割ではなく、ブランチの上位概念として役割を考えて、それを実際のブランチとの対応づけを行う必要があるのではないかな、と。 CI/CDと組み合わされることで、releaseブランチ==ステージング環境となってしまい、ステージング環境を使いたいリリース前のブランチと、ホットフィックスの検証の
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
社内版 ChatGPT を構築し、社内の ChatGPT 利用を促進した話 - メドピア開発者ブログ
pyenvを初心者に薦めるのはもうやめよう - methaneのブログ
【追記】 そこまで伸びてないが追記。 人文知のブログでブクマついたことな..
一番星はてのを支えるインフラを整備しました - 一番星はての開発ブログ
「キャッシュは麻薬」という標語からの脱却 - id:onk のはてなブログ
公共交通機関利用で10月以降も日帰り登山と温泉が楽しめる山旅プラン20選 - 温泉ブログ 山と温泉のきろく
Googleと生き、Googleで死ぬ(かも) あるブログ運営者の苦悩
令和の時代に本を読む必要はあるだろうか？ - メソッド屋のブログ
Ruby/Rails の勉強に何読んだらいいかと聞かれたとき - id:onk のはてなブログ
共産党を離るの弁 - garigarimojaのブログ
はてなブログがnoteと比べて優れている点を紹介します - こんにちはブログ
グーグルポッドキャスト終了後、どのアプリで聴くべきなのか？ - 世界のねじを巻くブログ
もし「GitHub Copilot」を現役弁護士が使ったら？ - MNTSQ Techブログ
Gitのブランチの役割を考える | フューチャー技術ブログ