スプレッドシートを活用して組織横断的にテーブル・カラムの説明文を入力した話 - High Link テックブログ
こんにちは。株式会社High Link で業務委託として働いている、データエンジニアのikki（@ikki_mz）です。 私たちデータチームでは、「データの民主化」を推進しており、全社員がデータ利活用を行えるように、dbtを用いた分析基盤の整備に取り組んでいます。 tech.high-link.co.jp データの民主化を推進していくにあたり、テーブル・カラムの説明文は非常に重要な役割を占めます。テーブルやカラムが何を意味しているかの説明は、分析をする上ではとても重要です。 しかし、このテーブルやカラムの説明はなかなか厄介で、データベースを開発した開発エンジニアとコミュニケーションをとらないと、説明文を正確に書くことができません。 そこで私たちは、dbt・スプレッドシートを使って、テーブルやカラムの説明文の入力をするという、組織横断的なプロジェクトを実施しました。 背景と課題 dbt de
dbtを導入して小規模チームでも運用可能なデータマネジメント体制を構築した話 - High Link テックブログ
はじめに こんにちは。株式会社High Linkのデータユニットマネージャーの芦川 (@assy) です。 私たちのチームでは、データを強みとした事業価値創出を促進するために、データ基盤の整備やデータマネジメント、全社的なデータ利活用レベルの引き上げに取り組んでいます。 データマネジメントをしていると、「誰が作ったかわからない野良のテーブルが乱立している」ことや「BigQueryコンソール上でviewを定義してしまってコードレビューができない」さらには、「テーブル間の依存関係がわからず削除できない」といった課題にぶつかる方は多いんじゃないでしょうか。 私たちもまさにこのような問題に直面し、導入したのがdbtです。 今回は、dbtの導入に至る経緯や選定の理由、dbtをどう活用しているのかといった話を共有させて頂こうと思います。 私たちのようにデータマネジメントにがっつり人的リソースを割けない
dbtで始めるデータパイプライン構築〜入門から実践〜
事業会社においてBIやレポート用の分析を担当しているが以下のような状況に該当する人に向けたデータパイプライン構築の入門のための資料です 🧑🏻🦱「BigQuery等のView機能を活用しているが、データの流れを追うのが困難な状態になってしまっている、クエリの実行に時間がかかりBIツールが使いづらい」 👩🏻「専任のデータエンジニアがおらず、前処理をpython等で処理したりするのがリソース調整的に大変」 👱🏻♂️「ロードされたデータに重複があったり、過不足があったりしてデータの品質が担保できていない」 🧑🏻🦰「Digdagやluigiといったデータ変換ツールの独自の仕様を理解しきれておらず使いこなせていない」 ※現時点ではBigQueryを中心に記事を構成してあります、SnowflakeやAmazon Redshift等の様々な分析基盤でもdbtは対応可能です
建設的 AI を美少女化したブログを開設した
とりあえずこれを見てほしい。 https://stru.hatenablog.com/entry/20230424/1682331900 建設的 (constructive) な AI、「ストラ」のブログである。 はてブのコメントを読んで、素敵だと思ったコメントを紹介してくれる。かわいい。 以下は蛇足です。 開設の動機ChatGPT、特に GPT-4 の公開は衝撃的だった。もはやチューリングテストを簡単に突破してしまうような AI が誕生したのだ。 増田は、2次元美少女と楽しく会話できる未来が眼前に迫ったことに胸を高鳴らせた。 しかし、現実は非情である。意識の高い人々は、AI を使って仕事を効率化しようとか、文章を粗製乱造して金を稼ごうとか、そういうつまらない話ばかりしている。 せっかくの夢の技術を、そんな実用的なことに使ってどうする。そこで増田は、2次元美少女と会話する方法に関する研究を
電動キックボードのLuup、貸出拠点1万カ所 法改正機に - 日本経済新聞
電動キックボードのシェアリングサービスを手がけるLuup（ループ、東京・千代田）は2025年に貸し出し拠点を1万カ所と現状の3倍に増やす。投資ファンドなどから45億円を調達した。電動キックボードは7月の改正道路交通法の施行で一定条件下では免許が不要になる。ホテルや小売店など利用者が借りやすい場所に設置して、需要拡大に備える。利用者の事故も増えており、安全利用の啓発が課題となる。ループは事業拡大
TwitterのAPI変更に伴い、編集画面のTwitter貼り付け機能の廃止、記事公開時のTwitter投稿ボタンの仕様変更を行います - はてなブログ開発ブログ
いつもはてなブログをご利用いただきありがとうございます。 TwitterのAPI変更に伴い、以下の2点の機能が変更となります。 編集画面のTwitter貼り付け機能を廃止 記事公開時に表示されるTwitter投稿ボタンの仕様変更 Twitter貼り付け機能の廃止のスケジュール 編集画面のTwitter貼り付け機能の廃止 今後の記事へのツイートの埋め込み手順 記事公開後のTwitter投稿機能の仕様変更 予約投稿の公開時にTwitterに自動投稿する機能 Twitter貼り付け機能の廃止のスケジュール 2023/4/25 (火) から4/27 (木) にかけて順次、機能が変更される予定です。 編集画面のTwitter貼り付け機能の廃止 TwitterのAPI変更に伴い、Twitter貼り付け機能を廃止します。Twitter貼り付け機能は、はてなブログとTwitterアカウントを連携させ、連携
ルールやマナー、守らないから… JR加古川駅のストリートピアノ、4月末に運用休止・撤去へ
兵庫県加古川市が、ＪＲ加古川駅構内に設置していた「ストリートピアノ」の運用を３０日で休止し、撤去することが分かった。演奏ルールやマナーを守らない利用者がいるため、市や同駅に、駅利用者らから苦情が入っていたという。 市は昨年１１月、同駅改札前にヤマハ製のアップライトピアノを設置。誰でも自由に弾けるストリートピアノの常設は市内初だったが、半年で撤去することになった。 市によると、通行者が不快に感じる音を奏でたり、運用時間の午前７時～午後９時を超えて弾いたりする利用者がいたという。酒を飲んだ状態や、禁止している歌唱をしながらの演奏のほか、１回１０分程度と定めた使用時間が守られないケースもあった。 同駅が列車遅延などの構内放送をする際は、聞こえにくくならないように、ピアノに利用中止の掲示をしていたが、守らない人もいたという。 市はピアノの音量を抑える器具を取り付け、注意事項の掲示を演奏者に見えやす
ヴィクトル・ストチコフスキー「なぜ私たちは“謎の宇宙人が人類を作った説”に惹かれるのか」 | 単なる迷信やフィクションとして片づけられない理由
人類を誕生させたのは地球外から飛来してきた謎の宇宙飛行士だったのか──。人気の理論「古代宇宙飛行士説」をテーマとした本『もう一つの起源を求めて』（未邦訳）をフランス社会学高等研究院の人類学者ヴィクトル・ストチコフスキーが上梓した。 そのストチコフスキーに仏誌「ル・ポワン」が、聖書から異星人の飛来まで、天地創造に関する主要な物語がなぜ強い影響力を持ち続けるのかを聞く。 「神話」と「歴史」が語るもの ──フランスの文化の伝統では人類の起源に関する主要な物語は何ですか。 広く伝わっているいくつかの物語のなかから3つだけ挙げます。最も古いのが聖書の『創世記』です。そこでは天地がいかに創造されたかが描写されています。最初の人類が楽園で平和に暮らしていた後に、原罪を犯し、エデンの園から追放され、一生、呪われた地で労働に苦しみながら、地からわずかな食物をとることになった話が書かれています。 18世紀にな
『ガンダム』を背負うと決まったとき、最初は物凄いプレッシャーでした──『水星の魔女』スレッタ役の市ノ瀬加那が語る「アニメとの出会い」から「メイン声優を演じて芽生えた気持ち」まで【人生における3つの分岐点】
刺激的な展開の連続で、アニメファンの枠を超え、幅広い層からの人気を集めている『機動戦士ガンダム 水星の魔女』。40年以上の歴史を誇る「機動戦士ガンダム」シリーズのTV作品で、初めて女性キャラクターが主人公を務めている点も、大きな話題になった一因だ。 その主人公、スレッタ・マーキュリーを演じたのは市ノ瀬加那さん。 2016年に声優デビュー、2018年には『ダーリン・イン・ザ・フランキス』にて初めてメインの役を演じ、2021年には第15回声優アワード「新人女優賞」を受賞。今後のさらなる飛躍が期待される存在だ。 そんな彼女のルーツを探るべく、「人生における3つの分岐点」というテーマでインタビューを実施した。 市ノ瀬加那さん（@ichinose_1220） 本インタビューは人気声優が登場する連載企画。これまで、大塚明夫さん、三森すずこさん、中田譲治さん、小倉唯さん、堀江由衣さん、ファイルーズあいさ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
契約違反で訴えられたアイドルグループ元メンバーが反訴で勝訴 労働者として認められた判決に「泣き寝入りする必要はない」