驚くほどキレイな三次元シーン復元、「3D Gaussian Splatting」を徹底的に解説する - Qiita
はじめに 最近、3D業界で大きな衝撃を与えた「3D Gaussian Splatting」1について、ご存知でしょうか？数少ない写真から、目を奪われるほど美しい三次元シーンを再構成できるデモを見て私も大感動しました。なぜこんなに美しいのか、どんな技術で実現したのか、興味が湧いています！ "普通の3D物体ではなく、カメラの移動に合わせて、水面に映る景色も正確に表現しています。これはなかなか凄い..." 私も時間をかけて論文や公開されたコード2を勉強しました。本家の実装はCUDA化されており、難解な部分が多く、論文に書かれていないこともあります。そのため、「3D Gaussian Splatting」を勉強したい人にむけ、わかりやすい解説記事を書こうと思いました。単に概念や考え方だけでなく、ゼロから再実装できるように、すべてのロジックを数式として整理し、徹底的に解説しようと思います。 「3D
イケア、AIが叶える理想の空間デザインツール「IKEA Kreativ」日本導入開始
イケアジャパンは、AIを活用し理想の空間をデザインできるツール「IKEA Kreativ」の日本導入を発表しました。 このAIニュースのポイント イケアの空間デザインツール「IKEA Kreativ」日本導入。スマホとパソコンで利用可能 AIによりデジタル空間を生成し、イケアの商品をに自由に配置・模様替えが可能に 手軽に、より機能的で自分らしい空間づくりをサポート 日本法人のイケア・ジャパン株式会社は、2024年2月27日（火）から新たなデジタルホームデザインツール「IKEA Kreativ」（イケア クリアティーヴ）を導入します。IKEAアプリとウェブサイトで利用可能です。 「IKEA Kreativ」は、自分の部屋にイケアの家具やアクセサリーを配置して、自分の生活空間を自由にデザインできる機能や、イケアが提供する3Dショールームを基にデザインを変更できる機能が備わっています。このツール
Microsoft、深度センサーカメラ「Azure Kinect」生産終了
米Microsoftは8月17日（現地時間）、深度センサーカメラ「Azure Kinect Developer Kit」の生産終了を発表した。技術はパートナーエコシステムが存続させるので「これで終了するわけではない」としているが、2010年発売のXbox 360用モーションコントローラ「Kinect」から始まったKinectブランドはついに消滅する。 初代Kinectは、Xbox 360のモーション追跡カメラセンサーだった。これは大ヒットとなり、その後、Windows PC版も発売された。 だが、次の世代のXbox Oneでは途中からKinectのバンドルはなくなり、2017年にはXbox One用Kinectセンサーの生産を終了。翌年にProject Kinect for Azureを発表した。これは、深度カメラ、TOF方式の距離画像センサー、マイク、加速度センサーを搭載し、Azure
三井住友建設、締固めの範囲と時間を把握する「ARコンクリート締固め管理システム」を開発 | IoT NEWS
2023-04-03 三井住友建設、締固めの範囲と時間を把握する「ARコンクリート締固め管理システム」を開発 高品質なコンクリート構造物を構築するには、コンクリート全体を、バイブレータで定めた時間締固めることが求められる。 しかし、従来の締固めの管理は、バイブレータの挿入時に、作業員と施工管理者が充填状況を目視でコンクリート表面から判断するなど、人間の感覚に頼った定性的なものであった。 そうした中、三井住友建設株式会社は、コンクリート打設時に、AR技術を活用して締固め作業の定量的な管理を行う「ARコンクリート締固め管理システム」を開発し、実現場で試験導入して有効性の確認を行った結果、実用化に目処をつけたことを発表した。 「ARコンクリート締固め管理システム」は、打設したコンクリートの締固め範囲と時間を、iPadの画面上に見える化するもので、締固め作業の定量的な管理が可能となる。 「ARコン
光切断法トンネル断面計測装置が製品レベルに！ 国交省PRISM試行の成果を全国展開へ（大林・日南・東京大学コンソーシアム） | サクセスストーリー
光切断法トンネル断面計測装置が製品レベルに！ 国交省PRISM試行の成果を全国展開へ（大林・日南・東京大学コンソーシアム） 大林組と東京大学は2021年度、「光切断法」と呼ばれる手法を用いて、トンネルの断面を簡単かつ高精度に計測できる装置を開発した。2022年度には機器開発を得意とする日南（本社：神奈川県綾瀬市）をコンソーシアムに加え、さらに装置の完成度を高めた。そこには、国土交通省が生産性向上や品質管理の高度化のために推進する「PRISM試行」の開発成果を建設業に普及させ、全国の現場に展開する狙いがあった。 光切断法によるトンネル断面計測装置の製品化を視野に入れた完成イメージ。PRISM試行プロジェクトでの開発成果を建設業界に広く普及させ、全国の現場で使えるようにと考えた結果が最終的なデザインに結び付いた 現場事務所で完成デザインをお披露目 2023年2月7日、国土交通省近畿地方整備局の
LiDARのないiPhoneで3Dスキャン可能に 米Nianticの「Scaniverse」
「Pokemon GO」（ポケモンGO）などのARゲームで知られる米Nianticは9月14日（現地時間）、iOS向け3Dスキャンアプリ「Scaniverse」がLiDARを持たないiPhoneにも対応すると発表した。iPhone XS以降の全てのiPhoneと過去4年間に発売されたほとんどのiPadで利用できるという。 LiDARに代わり、ニューラルネットワークを活用してカメラ画像から奥行きを推測する「ManyDepth」技術を搭載した。建物など大きな空間に適した「Areaモード」と人物やオブジェクトの細部を捉える「Detailモード」があり、DetailモードならScaniverseフォトグラメトリ処理を活用してLiDAR搭載デバイスと同等の高品位なスキャン結果が得られるとしている。 「LiDARを搭載していない端末でもScaniverseを利用したいという要望が多かった。（ManyD
【初心者向け】iPhone 3Dスキャンパーフェクトガイド｜iwama
こんにちはiPhone3Dスキャンを日本中に普及させる男ことiwamaです。 2020年の10月にiPnone12Proシリーズに初めてLiDARセンサーが搭載され、現在では様々な業界でiPhoneの3Dスキャンが活躍し始めています。 そこで今回はiPhone3Dスキャンって何？でどういうアプリがあるの？などの初心者向けの解説を行っていこうと思います。 ※この記事は2023年2月3日に、より初心者向けの記事になるよう大規模な改修作業を行いました。 自分の記事を読んで為になったという方にお願いです。可能な限りで良いので令和6年能登半島地震の被災地支援のため募金活動をよろしくお願いします。 3Dスキャンについて学ぼうそもそも3Dスキャンって何？現実にある物体や空間をデジタル3Dデータ化する技術の事を(このnote内では)3Dスキャンといいます。 3Dスキャン技術には様々なモノが存在していますが
iPhoneの自撮りで本物そっくりな動く3Dリアルアバター 米Metaが技術開発
Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米MetaのReality Labsの研究チームが開発した「Authentic Volumetric Avatars from a Phone Scan」は、スマートフォンで自撮りした短時間のスキャン画像から、本物そっくりの3D頭部アバターを生成するシステムだ。異なる視点やフォトリアリスティックな表情を表現し、高い忠実度で再現する。 現在、実在する人物のアバターを作成するためには膨大な人物データを取得する必要があり、そのデータを収集するには大規模なマルチビューキャプチャーシステムを必要とする。そのため軽量なデータキャプチャー、低遅延、許容できる品質でのアバター作成プロセスを自動化することが
VR Inside - VR/AR/MRの未来を創るビジネス ニュース メディア
小田急のOOH×XR実証実験にpalanARが採用！XR広告と3Dビジョンが融合 ARビジネスpalanAR株式会社palan小田急電鉄株式会社株式会社小田急エージェンシー 14時間前 リアルバーチャル社がメタバースでの市場調査を開始！精度の高さに信頼の声も リアルバーチャル株式会社VR市場調査体験調査ビジネスVRメタバース 2024/04/17 18:00 KATWALK向けVRゲーム「ゴーストきゃぷちゃー」稼働開始！RED° TOKYO TOWER 体験施設VRゲームKATWALKRED° TOKYO TOWER株式会社デジタルリージョンゴーストきゃぷちゃー 2024/04/16 18:00 企業向けメタバース空間レンタルサービス開始！就活生や内定者と気軽に対話可能 VRスマホVRアプリメタバース株式会社Xメタバース空間レンタルサービスメタバース就活 2024/04/15 18:00
無料で写真から3Dプリント出力可能なモデルを生成できるオープンソースの3D再構築ソフト「Meshroom」
3D再構成とカメラ追跡アルゴリズムを提供するフォトグラメトリフレームワークのAliceVisionに基づくオープンソースの3D再構成ソフトが「Meshroom」です。MeshroomはWindowsとLinux向けにリリースされており、無料でインストールすることができます。 AliceVision | Meshroom - 3D Reconstruction Software https://alicevision.org/#meshroom Meshroomがどんなソフトなのかは以下のムービーを見ればよくわかります。 Photogrammetry 2 – 3D scanning with just PHONE/CAMERA simpler, better than ever! - YouTube Meshroomは複数の大学やラボの協力によって開発された、フォトグラメトリソフトウェアです
スマホ1台で手軽に物体を3Dスキャンできるアプリ「Trnio 3D Scanner」を使ってみた
iPhoneを利用して物体の3Dスキャンを行うアプリは複数存在しますが、その多くはLiDARスキャナ(測距センサー)が必須で、LiDARスキャナを搭載していないモデルでは使用できません。iPhone向けアプリの「Trnio 3D Scanner」なら、LiDARスキャナを搭載していないモデルでもカメラを使った3Dスキャンが可能とのことなので、実際に使って物体の3Dスキャン手順を確かめてみました。 Trnio 3D Scanner https://www.trnio.com/ ・目次 ◆1：Trnio 3D Scannerのインストール手順 ◆2：色んな物体を3Dスキャンしてみた ◆3：3Dデータの出力手順 ◆1：Trnio 3D Scannerのインストール手順 まずは、以下のリンクからTrnio 3D Scannerの配布ページにアクセスします。Trnio 3D ScannerはiPho
1枚の画像から3D化・実サイズでAR試しおき可能な「ハリボテAR」が提供開始 (2021年12月24日) - エキサイトニュース
株式会社palanは、簡単に3D管理が可能なサービス「palan3D」上で、1枚の画像から3D化し実サイズでAR体験可能な技術「ハリボテAR」の提供を開始したと発表した。 ■背景palanでは今まで、誰でも簡単にARが作成可能なpalanARや、今後リリース予定のECプラットフォームのWebXRコマースを開発してきた。その中で、多くの企業から「実物大の3DでAR表示したいものの作成コストが高い」という意見があったという。 そのような声に応えるべく、「1枚の画像から3Dを生成し、WebARで実サイズで試しおき可能」な技術の開発に至ったとのことだ。■ハリボテARについて1枚の画像、もしくは裏表の画像を指定し、奥行きや縦横の大きさを指定することで3D生成が可能だ。またARに注釈を付与、壁掛け設定や音楽をつけるなど、幅広いニーズに合わせた3Dが作成できる。
東芝、ズームレンズの単眼カメラの写真のみで3D計測できるAI 7m先のひび割れのサイズを高精度に計測 | Ledge.ai
本AIは、インフラ点検などにおいて、高所や斜面など危険で点検が困難な場所に近づくことなく、離れた場所から単眼カメラで撮影した数枚の写真を用いて簡単に補修対象部分のサイズを計測できるという。 単眼カメラのいくつかの異なる位置で撮影した画像（多視点画像）から求めた相対的な奥行き情報に加えて、撮影画像に含まれるボケ情報を組み合わせることで、単眼カメラのみで絶対値を計測する。 国内のインフラ設備の平均年齢が35年を超える中、本AIは優先度をつけ、過不足のない適切な補修を実現する効率的な保全計画の策定に貢献するという。 従来、多視点画像から求められる奥行き情報は相対値であるため、絶対値を得られるジャイロセンサーやサイズに関する基礎情報が必要だった。また、ボケ情報からの大きさ計測は焦点距離というカメラパラメータが求められ、事前学習が必要だった。 本AIは、従来必要としてきたジャイロセンサーやサイズに関
iPhoneで始める3Dスキャン生活｜iwama
皆さん！3Dスキャンしてますかーーーーー！? どうもiPhone3Dスキャン大好きおじさんです。今回はiPhoneで始める3Dスキャンというお話をしていこうと思います。 iPad Pro(2020)にLiDARセンサーが搭載されたことで3Dスキャンが誰でも出来る時代が到来しました。 ただいきなりiPhoneやiPadで3Dスキャンができるよ！と言われてもピンとこない方が大半だと思うので、今回のnoteでは簡単な3Dスキャン技術の紹介からスキャンアプリ、スキャン方法などを説明していこうと思います。 3Dスキャンのざっくりとした区分まず3Dスキャンとは何なのかという話ですが、3Dスキャンとは現実にある物体を様々な手法でスキャンし、それをコンピュータ上で再現することだと個人的に思っています(もしかしたら違うかも) 3Dスキャンの方法としては、写真から3Dモデルを作成するフォトグラメトリとレーザー
3Dスキャンをより簡単に アップルがフォトグラメトリAPI「Object Capture」を発表
3Dスキャンをより簡単に アップルがフォトグラメトリAPI「Object Capture」を発表 アップルは、2021年6月8日に開催された開発者会議WWDCにおいて、開発者向けに新たな発表を行いました。基調講演の後半では、Mac向けのフォトグラメトリAPI「Object Capture」が新たに発表されました。 「Object Capture」では、iPhoneやiPadで撮影した写真をベースに現実の物体の3Dモデルを作成することができます。アップルによれば3Dモデルの作成にかかるのは、“わずか数分”とのこと。 3Dオブジェクトは、2021年秋に更新されるMacOSの最新版「Monterey」にアップデートされたMacで、各種対応ツールで作成できるようになるとのこと。基調講演では、3Dモデリングツール「Cinema 4D」で3Dモデルの作成と編集を行なっている様子が映し出されていました。
1回のスキャンで顔の「シワから毛穴まで」再現 リアルな皮膚の動きも自動生成
Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 南カリフォルニア大学、USC Institute for Creative Technologies、Pinscreenによる米研究チームが開発した「Dynamic facial asset and rig generation from a single scan」は、1回スキャンしただけで、その人の高精細な顔と忠実度の高い動きを自動生成可能にする深層学習フレームワークだ。顔のアニメーションに合わせてリアルな皮膚の動きを再現する。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
360°を1秒で3Dスキャン！ リコーがTHETAのような「3次元復元デバイス」を開発していた | 建設ITブログ
https://www.moguravr.com/phorhum/?s=09
https://news.denfaminicogamer.jp/news/220405e?s=09
国土交通省 九州地方整備局が実施する「令和3年度防災訓練」へ、スマホ・タブレットで簡単に高精度3次元測量できるアプリ、「OPTiM Geo Scan」を提供 | OPTiM
