Dataplexのデータリネージ機能を導入した話 - pixiv inside
はじめに 初めまして。プラットフォーム開発部にてデータ基盤を整備しているkashiraと申します。 ピクシブではデータガバナンス強化のために、Google Cloud Platform(GCP)のDataplexのデータリネージ機能を本番運用で使い始めました。 この記事では、「どのように導入したのか？」「導入によってどんな効果が出たのか？」について話していきます。 cloud.google.com データリネージとは？ データリネージとは、データの流れを可視化する機能です。 BIやDWHで分析するデータは、各所に散らばった複数の処理を経て生成されます。 複数の散らばった処理を1つずつ追いかけるのには時間がかかり、何かデータに障害が発生した場合のデバッグや、データ変更をしたい場合の調査に対するコストが大きくなります。 こうした課題を解決するための仕組みの1つがデータリネージです。 具体的には
日銀、23年度物価見通しを2.5％程度に大幅上方修正の公算大－関係者
日本銀行は今週の金融政策決定会合で議論する新たな消費者物価（生鮮食品を除くコアＣＰＩ）の見通しについて、2023年度を従来の前年比1.8％上昇から2.5％程度上昇へ大幅に上方修正する公算が大きい。事情に詳しい複数の関係者への取材で分かった。 企業による積極的な価格転嫁を背景に足元のコアＣＰＩが３％台と日銀の想定よりも上振れていることを反映する。もっとも、海外経済や来年の賃上げの動向など先行き不確実性が大きい状況に変化はなく、24、25年度については現在の2.0％、1.6％から小幅の修正にとどまる見通しだ。 このため、持続的・安定的な２％の物価目標の実現を展望できる見通しにはならず、日銀は大規模な金融緩和政策の維持を決める可能性が大きい。複数の関係者によると、市場機能や金融仲介機能などの副作用にＹＣＣの修正で対応する必要性も現時点で乏しいと日銀はみている。 日銀の24年度物価見通し、２％近傍
ＬＰガス料金、設備費の上乗せ禁止へ 賃貸集合住宅向け 実効性確保で罰則新設
地方を中心に全国の約４割の世帯が使うＬＰガスについて、経済産業省は２４日の有識者会議で、賃貸集合住宅向けの料金で供給に関係ない設備費の計上を禁止する方針を示した。来春までに関係省令を改正、令和９年度の施行を目指す。実効性確保に向け、罰則規定も新設する。ＬＰガスの料金を巡っては、設備費を料金に上乗せして回収する不透明な料金体系が長年問題視されており、新料金制度の開始で月々の料金が数千円安くなる可能性もある。 新制度ではＬＰガスの料金をボンベなど供給設備の費用や点検、検針費用など固定費を「基本料金」、原料費や配送費など使用量に応じて発生する「従量料金」、ガス警報器の貸与など個別の契約に基づき発生する「設備料金」として、算定根拠を利用者に通知することを義務付ける。 設備料金では、エアコンやインターホンなどＬＰガスの利用と無関係な設備費の計上は禁止する。別のＬＰガス会社との契約ができない賃貸集合住
反対署名４万３千筆提出 旧統一教会の土地利用 多摩市長に
世界平和統一家庭連合（旧統一教会）が東京都多摩市内に土地を取得した問題で、進出に反対する市民団体が２４日、阿部裕行市長に対応を求める署名計約４万３千筆を提出した。教団側は研修施設を建てる方針だが、市や市民団体は見直しを求めている。 市民団体の佐久間む津美共同代表は教団の活動に違法性が指摘されているとして「多摩市民がこの問題をしっかり考えることが必要だ」と話した。署名は８月末まで受け付けるという。 署名を受け取った阿部市長は「国には速やかに解散命令請求を出すよう求めている。教団側に誠実な対応を求めていきたい」と話した。教団側は「市に土地利用計画を制限する法律上の権限はない」としている。 教団は多摩市永山に約６３００平方メートルの土地を取得。７月３日に敷地内にある建物の解体工事を始めた。市や市民団体は教団の活動に違法性が指摘されていることや、都立永山高や国士舘大に隣接していることなどを問題視し
全国で唯一戸籍の電子化がされていなかった御蔵島村が電子化。全国1896市区町村のデジタル戸籍化が完了へ | スラド
御蔵島村の電算戸籍が本日(9月28日)無事に稼働した、との御連絡をいただいた。これで、全国1896市区町村のデジタル戸籍化が完了したことになる。私(安岡孝一)個人としても非常にうれしく、関係各位には感謝の意を申し上げる。 ただ、戸籍のデジタル化を完全に完了させるためには、各市区町村に1～2%ほど残っている改正不適合簿(いわゆる紙戸籍の事故簿)を、何とかデジタル化しないといけない。デジタル化できない理由の一つだった氏名の漢字については、まあまあ文字コード化の見通しがついてきたが、変体仮名については恐ろしく手ごわい。戸籍デジタルシステムの稼働に向け、もう少し私自身も頑張ってみようと思う。 タレコミによると、日本で最後まで戸籍の電子化が行われていなかった東京・伊豆諸島の御蔵島村が電子化を終えたようだ（広報みくら9月[PDF]、時事ドットコム）。御蔵島村は人口が331人と少なく、紙でも対応できる規
モトローラはどこで間違ったのか？その歴史をマンガでたどる
Motorola(モトローラ)は1990年代に50％以上の携帯電話シェアを奪うなど、世界で最も優れたハイテク企業の一つでした。古くはラジオに始まり半導体、テレビ、携帯電話と業種を変えつつも、つねにテクノロジーの最先端を走ってきたモトローラですが、Motorola SolutionsとMotrola Mobilityに分割され、携帯電話部門がGoogleに買収されるなど、近年、著しく輝きを失っています。モトローラの没落は何がきっかけだったのかについて、モトローラの歴史をマンガで振り返るとこうなります。 Goodbye Moto: How Chicago's greatest tech company fell to earth http://www.chicagobusiness.com/section/goodbye-moto 世界で最も偉大なテクノロジー企業だったモトローラはどのようにし
検事、県議に自白要求か 「大変なことに」「裁判では遅い」―河井元法相の参院選買収事件：時事ドットコム
検事、県議に自白要求か 「大変なことに」「裁判では遅い」―河井元法相の参院選買収事件 2023年07月24日07時06分配信 東京地検特捜部が入る中央合同庁舎第６号館＝２３日、東京都千代田区 河井克行元法相（６０）＝収監中＝らによる参院選買収事件の取り調べを巡り、東京地検特捜部の検事が元広島市議の供述を誘導したとされる疑惑で、別の検事が現金受領を一部否定した広島県議に対し、「大変なことになる」「裁判になってからでは遅い」などと執拗（しつよう）に自白を要求していたことが２３日、時事通信が入手した録音データで分かった。 「証拠」強調、自白求める 参院選買収事件で検事 県議の当時の弁護人は「自白を強要した」として、取り調べ後の２０２０年４月、最高検に適切な対処を求める要請書を提出していた。 不起訴を示唆した供述誘導疑惑に続き、特捜検事が強引な捜査を行っていた可能性が明らかになった。 録音データに
新興国「ドル依存はリスク」 地域通貨や人民元シフトも - 日本経済新聞
7月4日、南米3カ国が国境を接する大瀑布（だいばくふ）、イグアスの滝からの轟音（ごうおん）が聞こえるホテルに南米の首脳が集まっていた。ブラジル大統領のルラが高らかに宣言する。「我々の国と国の間は共通通貨で決済しよう」南米一の経済大国、ブラジルと2位のアルゼンチンは1月、両国間の共通通貨構想を発表していた。ルラは「なぜ（貿易決済で）自国通貨でなく、米ドルを使用すべきなのか？」と貿易決済のドル1強
公立福生病院「透析中止裁判」で明らかになった、患者死亡までの経緯
慶應義塾大学大学院システムデザイン・マネジメント研究科（慶應SDM）修了。新聞・雑誌・書籍などでヘルスケア、および、社会保障全般（特に、医療・介護や障がい者など社会福祉領域等）の記事を執筆。著書『がん闘病とコメディカル』（講談社）『チーム医療を成功させる10か条－現場に学ぶチームメンバーの心得－』（中山書店）、スペイン語翻訳書『きみは太陽のようにきれいだよ』（童話屋） News&Analysis 刻々と動く、国内外の経済動向・業界情報・政治や時事など、注目のテーマを徹底取材し、独自に分析。内外のネットワークを駆使し、「今」を伝えるニュース＆解説コーナー。 バックナンバー一覧 2018年8月、公立福生（ふっさ）病院（東京都）で女性患者が腎透析を続けるために必要な手術を拒否したことで、透析が中止になり死に至った。2021年、家族が病院を提訴した民事訴訟は裁判所から和解勧告が出され、10月5日、
ChatGPTの知能が急激に低下しているとの研究結果、単純な数学の問題の正答率が数カ月で98％から2％に悪化
OpenAIのChatGPTは、2022年11月のローンチ以来、驚異的な精度で世界を席巻しました。しかし、2023年3月から6月の間に、ChatGPTが簡単な数学を解く精度やセンシティブな話題に対する思慮深さが劇的に低下していたことが、アメリカ・スタンフォード大学の調べにより判明しました。 [2307.09009] How is ChatGPT's behavior changing over time? https://doi.org/10.48550/arXiv.2307.09009 ChatGPT’s accuracy in solving basic math declined drastically, dropping from 98% to 2% within just a few months, study finds – Tech Startups | Tech Compa
Power Platform の仮想ネットワーク データ ゲートウェイについて
はじめに Power BI や Power Apps のデータフローから Azure のリソースに接続する場合、Azure のリソースはパブリック ネットワークに存在する必要があります。しかし SQL Database や Blob Storage をパブリック ネットワークに公開するのはセキュリティを考慮するとあまり現実的ではありません。SQL Database や Blob Storage は仮想ネットワーク (VNet) に閉じ込めておき、必要なリソースからのみアクセスさせるということになります。オンプレミス データ ゲートウェイを使ってアクセスさせるという方法もありますが、ゲートウェイとなる仮想マシンを用意しなければならず、なかなか大変です。 こういう状況もあってか、新たに仮想ネットワークデータ ゲートウェイという方法がプレビューで提供されています。これを使うとゲートウェイを用意す
Amazon FSx for NetApp ONTAPに移行したいと言われた時にヒアリングすることn選 | DevelopersIO
最近よく聞かれるのでまとめてみます こんにちは、のんピ(@non____97)です。 皆さんは「Amazon FSx for NetApp ONTAP(以降FSx for ONTAP)に移行したい」と言われたことはありますか? 私はあります。 私が布教活動をしている影響か、FSx for ONTAPへの移行の相談をいただくことがあります。 正直FSx for ONTAPだからといって、そこまで特殊な考慮事項はあまりありません。 ただし、ファイルサーバー移行時に共通的に役立つこともあるかなと思ったのでまとめてみました。FSx for ONTAP関係なくファイルサーバーの移行をする時などに参考にしてみてください。 記載のヒアリング項目で以下の内容を把握します。 FSx for ONTAPへの移行の妥当性 大まかなネットワーク構成 ランニングコスト 移行時のリスク 移行の背景や課題の確認 Q.
次は｢ディズニーとHulu｣手を組んだ切実な事情
ディズニープラスとHuluが手を組み、7月12日からセットプランを始めています。また6月30日からはU-NEXTにParaviレーベルがついに加わったところ。ユーザーにとって定額制の動画配信サービスを利用する選択肢が広がり、お得感が増している状況である一方、内々では実は3番手のポジションを奪い合う競争が激化しているとも言えます。 単独契約より約26％節約のセットプラン 外資系のディズニープラスと日本テレビ傘下のHuluの組み合わせはある意味、異色に映ります。セットプランを通じて動画配信の競合サービス同士が組むことは、日本国内ではこれが初のケースです。 7月12日からスタートしたセットプランの内容はというと、両方のサービスを合わせた月額料金が税込み1490円になるもので、それぞれと契約するよりも約26％節約できます。マーベルやスター・ウォーズなど強力ブランドを持つディズニープラスと、日本テレ
ＪＲ山手線、全線で運転見合わせ 再開見込立たず
ＪＲ東日本によると、２４日午前２時２５分ごろ、ＪＲ山手線の大崎駅で信号制御装置のトラブルが発生、同線は内回り、外回りとも全線で運転を見合わせている。運転再開見込は立っておらず、同社で復旧作業を行っている。 ＪＲ山手線、運転再開は正午ごろ
マイクロソフト「Azure Boost」発表。AWS Nitroのように専用SoCへ仮想化処理などをオフロード、より高性能なクラウド基盤提供へ
マイクロソフトは、従来ハイパーバイザとホストOSが行っていた処理を専用のシステムオンチップ（SoC）を用いたNICにオフロードし、より高性能なクラウド基盤によるインスタンスを提供する「Azure Boost」のプレビュー公開を発表しました。 Azure Boostを用いた仮想マシンでは、最大で200Gbpsのネットワーキング性能、最大で40万IOPS、10GBpsのストレージ性能などを提供します。 専用のSoCを搭載した「Microsoft Azure Network Adapter」 Azure Boostは、専用のSoCを搭載した「Microsoft Azure Network Adapter」 （MANA）と呼ばれるネットワークアダプタとソフトウェアによって実現されています。 ホストマシンとそのOS上で実行されてきた仮想化の処理などがMANAにオフロードされることで、ホストマシンの持
PS5をリモートプレイできる携帯ゲーム機「Project Q」のリーク動画によりAndroidベースの端末であることが明らかに
2023年5月、PlayStationがPlayStation 5(PS5)をリモートプレイできる8インチディスプレイ搭載の携帯ゲーム機「Project Q」を発表しました。このProject Qの実機動画がリークされ、AndroidベースのOSが搭載されていることが明らかになっています。 The Sony Project Q PlayStation handheld is running Android in a leaked video - The Verge https://www.theverge.com/2023/7/22/23804130/the-sony-project-q-leak-handheld-playstation-ps5-android Imgur: The magic of the Internet https://imgur.com/a/sgvKTFk#Dkm
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
中国の2国間決済、人民元初の米ドル超え 23年4〜6月 - 日本経済新聞
物価はなぜ上がった？ コスト高から賃上げ、期待が左右 - 日本経済新聞
The Snowflake Marketing Data Stack: A Tool-by-Tool Breakdown
Solidigm、世界最大61TBのSSD
中国の先端医薬品、アメリカで利用急増 緊急輸入相次ぐ - 日本経済新聞