データ処理から機械学習まで一貫して実行、DWHの進化形であるSnowflake
写真 Snowflakeの利用画面。アカウント作成後、画面上でデータを取り込む操作をすると高速化のためのパーティショニングなどが自動で設定されて利用できるようになる。左側メニューから使いたい機能を選んでデータにアクセスする データがある場所で機械学習やデータ処理を実行 Snowflakeが以前からあるDWHと違う点は、機械学習やアプリケーション、データ処理などをデータがある場所で実行できることです。これまでのDWHは、データを蓄積して高速に分析処理を実行できる基盤であり、機械学習やアプリケーションなどは別の実行基盤に実装し、DWHに接続して処理していました。全体のアーキテクチャーは利用者が設計していました。 Snowflakeは「データクラウド」を標榜しており、機械学習やアプリケーション、データ処理、データガバナンスなどを実行する多様な機能をオールインワンで備えたプラットフォームになってい
【毎日書評】定例会議は何曜日がベスト？いちばん仕事の効率があがるのは | ライフハッカー・ジャパン
やる気はあるし、いつもがんばっているのに、どうも努力と結果の間のギャップが大きすぎる――『はかどる技術』（鈴木邦成 著、フォレスト出版）は、そんな悩みを抱えている方のために書かれたのだそうです。 興味深いのは、問題は「滞り」にあるという指摘。著者は物流・ロジスティクスの専門家として「モノの流れ」を研究している立場から、「『モノの流れ』に問題が生じるのは、そこに滞りが発生したとき」だと述べているのです。 仕事や人生設計も同じです。わざわざピーク状態をつくり出すようなスタイルで行動すれば、大きな滞りが発生して非効率になるだけです。健康のために血流をよくすることが大切なように、時間管理でも滞りの解消が不可欠なのです。（「まえがき」より） つまり、いかにピークを避けて滞りを解消していくかが、効率的な時間管理や仕事術につながっていくということ。そこで本書においては、大学で物流を教えながら学生や社会人
データ基盤でDXの本丸へ--テプコシステムズのアジャイル変革体験記（前編）
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます 東京電力（東電）グループは、2023年11月にデータプラットフォーム「TEPCO Data Hub」を構築し、DXの取り組みを本格化させようとしている。それをITで支えるのが、東電グループのテプコシステムズだ。アジャイル組織への変革の歩みを進める同社の取り組みを取締役 常務執行役員の沼田克彦氏とビジネスアジャイルセンター 副所長の望月大輔氏に聞いた。本稿は、前編としてアジャイル推進体制を整えるまでの苦難と成果を紹介する。 変化への対応に危機感、アジャイルを推進 テプコシステムズは、東電グループ唯一のIT企業として、発電や送配電、小売、再生可能エネルギーなどのグループ各社における基幹業務システムやインフラの企画、構築、運用、保守などを担う
外資系が「メジャーリーグ」なのに対し「ファーム」と呼ばれる日本の大手 採用の危機感を持ちづらい大企業の経営陣と現場の温度差 | ログミーBusiness
多様性のある組織にするために、全員が変わる必要はない 篠田真貴子氏（以下、篠田）：私もその変革（経営陣のマインドを変えること）のプロではぜんぜんないので、少ない経験だけでしかないんですけど。これはある経営者の方から経験則として教えていただいたことなんですが。会社の30パーセントから35パーセントぐらいが、こっちの考え（多様性を重視する考え方）になると、わりとみんな変わる。 だから、全員が変わる必要はないし、過半数である必要もないのがまず前提ですね。その上で、例えば②の経営陣のマインドについて、これまでうかがってきた事例でいくと……。やっぱりわかりやすいのが、トップの方が変わること。 例えば多様性でいくと、稲垣さんもそうでいらっしゃると思うんですけど、日本の企業でも、けっこう海外勤務が長い方だと、本当にいろんな方と仕事をされてきてるので。肌感覚として、この一様な感じがまずいと思われている。そ
デイリースクラムあるある早く言いたい
それデイリーやない。レイニーや。 はじめに こんにちは。学園アイドルマスターにハマっているスクラムマスターの池永です。 レバテック開発部ITSプロダクト開発グループに所属しており、日々チームが強く、楽しくなれるように試行錯誤しております。 先日、以下の記事を投稿したのですが、他のスクラムイベントにもあるあるはあるよなと思い、デイリースクラムのあるあるも早く言いたくなりました。 こちらも何か参考になる情報がありましたら幸いです。 話すこと スクラムにおけるデイリースクラムのあるある あるあるに対して自分がやったこと そのアプローチをとってどうなったか 話さないこと スクラムにおけるデイリースクラムの詳細な目的 デイリースクラムの具体的な進め方 では早速... 例に漏れずあるあるを早く言いたいので、挙げていこうと思います。 1. ただの進捗報告会になりがち スクラム導入間もないチームでは、デイ
山奥の自動車部品工場が「DX導入」...IT人材ゼロで成した赤字脱却のカギ（THE21オンライン） - Yahoo!ニュース
この経験から、どのように進めれば社員たちが幸せになれるかを考え、次のようなステップを踏み進めました。 まず、心理学の先生による性格分析を全社員に受けてもらいました。結果、行動型、調和型、発想型、論理型、信念型、遊び心型といった6タイプに分かれることがわかり、自分がどのタイプでどんな特性を持つのかを知ってもらいました。その上で、それぞれの特性に合ったやり方でDXに取り組んでもらうようにしたところ会社の押し付けではなく自分で選択し、行動できるようなりました。 次に、業務の自動化で仕事を奪われる不安を抱いている社員へ、より働きやすくすることを理解してもらうため、全社員の8割が関わる業務でのDX化を選定、実施しました。 弊社は月に400万個の製品を出荷しており、約70名の検査員で全ての製品を目視検査しています。検査した結果は紙に記入、その後Excelに入力し直すという非効率な作業を行って来ました。
Rustのデータ可視化ライブラリCharmingに入門した
Charmingとは Charmingは、Rustの強力なチャートレンダリングライブラリです．美しく高品質なデータ可視化します．GitHub上で以下のようなグラフが紹介されています． 後述しますが，このCrateは適切にStructが分割されているので，可読性の高い可視化用のコードを作ることができます． 簡単に散布図を作成する Datasaurusのデータを使います．ここでは，csvファイルをダウンロードして使っています． もちろん表示するのはdinoです． この記事では，cargo new project_nameした後に，data dirとoutput dirを作っていることを想定します．
Snowflake SUMMIT 2024が示唆する、AI時代のデータエンジニアリングの在り方
Snowflake主催の最大のカンファレンスであるSUMMITに参加してきました。 今年はサンフランシスコで6月3日から6月6日にかけて開催されました。 去年の参加レポート: Snowflake SUMMIT 2023参加して、世界のスピードを感じてきた。 私は普段、株式会社CARTA MARKETING FIRM のデータエンジニアとして、Snowflakeを使ったデータ基盤構築・運用をしています。 どういう機能がリリースされたという話は、他の方が記事を書いてくれてそうなので、当記事ではデータエンジニアの立場から、SUMMITのメッセージをどう捉えたか、今後どのようにデータと付き合っていくと良いかを考察してみます。 当時の様子については、X でたくさんつぶやいてるので、そちらを見ていただくほうがわかりやすいです。 また、データエンジニア目線で、注目の機能に関しては、「Snowflake
生成AIの活用方法 - 2024年現在、 結局どのように使えばいいのだろうか？ / How to use Generative AI in 2024
2024年6月13日に開催された APPS JAPAN の講演資料です。 講演詳細についてはこちらをご覧ください。 https://forest.f2ff.jp/introduction/9185?project_id=20240601
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
キンドリルが2025年度の事業戦略を説明、「ITモダナイゼーション」など3つの重点項目を掲げる
Copilot Studioを試してわかった「スゴい」可能性、オリジナルCopilotで業務負荷を軽減（ビジネス＋IT） - Yahoo!ニュース
Beyond PoC〜LLMを本番業務で適用するためにLayerXで取り組んでいること〜