ミチトー1955 @micchito1955 株式会社やりたい放題の社員。土木業界出戻り組。帰ってきた三代目バカ息子。これからは好き勝手な事をしてやろうと決意した創業家出身の次期社長(多分)。営業、積算をメインに担当するも基本的には なんでも屋。1級土木施工管理技士、1級建設業経理士、2級舗装管理技士、測量士補、ビジネス法務エキスパート®取得済。
こんにちはiPhone3Dスキャンを日本中に普及させる男ことiwamaです。 2020年の10月にiPnone12Proシリーズに初めてLiDARセンサーが搭載され、現在では様々な業界でiPhoneの3Dスキャンが活躍し始めています。 そこで今回はiPhone3Dスキャンって何?でどういうアプリがあるの?などの初心者向けの解説を行っていこうと思います。 ※この記事は2023年2月3日に、より初心者向けの記事になるよう大規模な改修作業を行いました。 自分の記事を読んで為になったという方にお願いです。可能な限りで良いので令和6年能登半島地震の被災地支援のため募金活動をよろしくお願いします。 3Dスキャンについて学ぼうそもそも3Dスキャンって何?現実にある物体や空間をデジタル3Dデータ化する技術の事を(このnote内では)3Dスキャンといいます。 3Dスキャン技術には様々なモノが存在していますが
タイトルの通りなんですが、適当に散歩しながら 3D スキャンをやりまくっていくのが 2020 年代最初に来る新たな遊びだという結論に至ったので、みなさん今すぐ iPhone 12 Pro か Pro Max を買ってやりましょう。やってない人はだれも理解していないと思いますが、最高に楽しいです。 そもそも iPhone で 3D スキャンって何だよって話ですが、今年でた iPad Pro から LiDAR が載るようになって、雑に言うと普通にカメラの情報に深度(カメラから物体への距離です)を乗せられるようになったんですよね。そもそもでいうと AR で使って現実世界にいい感じに物を乗っけるのが目的で Apple としても付けた物っぽいし、実際そういうアプリもいっぱい出ています。でも、正直 AR とか Apple Glasses が出るまでどうでもいいじゃないですか。そうなってくると LiDA
皆さん!3Dスキャンしてますかーーーーー!? どうもiPhone3Dスキャン大好きおじさんです。今回はiPhoneで始める3Dスキャンというお話をしていこうと思います。 iPad Pro(2020)にLiDARセンサーが搭載されたことで3Dスキャンが誰でも出来る時代が到来しました。 ただいきなりiPhoneやiPadで3Dスキャンができるよ!と言われてもピンとこない方が大半だと思うので、今回のnoteでは簡単な3Dスキャン技術の紹介からスキャンアプリ、スキャン方法などを説明していこうと思います。 3Dスキャンのざっくりとした区分まず3Dスキャンとは何なのかという話ですが、3Dスキャンとは現実にある物体を様々な手法でスキャンし、それをコンピュータ上で再現することだと個人的に思っています(もしかしたら違うかも) 3Dスキャンの方法としては、写真から3Dモデルを作成するフォトグラメトリとレーザー
Qiitaからのお引越し記事です。 目標 ステレオカメラ 概要 特徴 使用製品 パターンプロジェクションカメラ 概要 使用製品 iPhone ゾゾスーツ 工業製品(Ensenso, キーエンス) Time of Flight LiDAR Time of Flightの原理 特徴 スキャン型LiDAR フラッシュ型LiDAR 製品 Velodyne Series 追記 Livox Horizon iPhone iToF LiDAR 目標 通常のカメラは物体の明るさ、色を抽出するのに対し、距離センサは物体までの距離をセンシングします。そのため3DカメラやDepth Sensorなどと呼ばれたりします。 距離を知ることは多様なアプリケーションにおいて重要であり、例えば自動運転では前方車両までの正確な距離を知ることは必須です。またゲームなどのアプリケーションでは人の動作などを距離センサで抽出するK
本記事は初めてiPhoneで3Dスキャンを行う方や、実際に試して見たが上手く行かなかったとお困りの方に向けたiPhone3Dスキャンの撮影方法等を解説したものです。 その為3Dスキャンとは何か?等の全般的な内容はこちらの記事をご参照ください。 なお本記事は2023年の1月時点での情報をまとめており、最新の情報ではない可能性があります。 また筆者独自の調査や見解も入っており、事実とは異なる部分が存在する場合があります。 自分の記事を読んで為になったという方にお願いです。可能な限りで良いので令和6年能登半島地震の被災地支援のため募金活動をよろしくお願いします。 iPhone3DスキャンのタイプiPhone3Dスキャンにはいくつかのスキャンタイプが存在しています。 それぞれに特徴があるため用途に応じて使い分けると良いでしょう。 なお本記事はiPhoneのリアカメラ/LiDARの解説記事なので、フ
引っ越しに伴い、洗面所の空間活用について検討していました。ドラム式洗濯機の上の空間をうまく使いたいところですが、幅に余裕がなく既製のラックを導入できず困っていました。ないなら作ればいい、ということでDIYを画策。机や棚のようなモノとは違って空間を相手にするので、どう設計したものかと思い悩んだのち行き着いたのは「部屋の3Dスキャン」と「CADソフトによるレイアウト検討」でした。ググってみても事例が見つからなかったので、ここに残しておきます。 iPhone12 ProのLiDARスキャナで部屋を3D化 自分が保有している iPhone 12 Pro Max には『LiDARスキャナ』が搭載されているので、これを使えないかということで見つけたのが「3d Scanner App」。すぐに試したところ、期待した通り空間をスキャンでき、上の写真のテクスチャ付き3Dモデルを作り出すことができました。とり
Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米ミシガン大学、米フロリダ大学、電気通信大学による研究チームが発表した論文「You Can’t See Me: Physical Removal Attacks on LiDAR-based Autonomous Vehicles Driving Frameworks」は、自動運転車の周囲を検知するセンサーにレーザー光を物理的に照射して、選択的に障害物を見えなくする攻撃を提案した研究報告だ。偽の情報を注入するスプーフィング攻撃で自動運転車の物体検出モデルに影響を与え安全を脅かす。 自動運転車の知覚システムは、LiDARやカメラ、レーダーなどのセンサーを活用して、障害物回避やナビゲーション制
はじめまして、ティアフォー技術本部 Planning / Controlチームで開発を行っている堀部と申します。 今回は状態推定の王道技術「カルマンフィルター」が実際に自動運転で用いられるまでの道のりやノウハウなどを書いていこうと思います。 みなさんはカルマンフィルターという言葉を聞いたことがありますでしょうか。 カルマンフィルターとは「状態推定」と呼ばれる技術の一種であり、自動運転においては現在の走行状態、例えば車速や自分の位置を知るために用いられます。 非常に有名な手法で、簡単に使えて性能も高く、状態推定と言えばまずカルマンフィルターと言われるほど不動の地位を確立しており、幅広いアプリケーションで利用されています。 使い勝手に定評のあるカルマンフィルターですが、実際に自動運転のシステムとして実用レベルで動かすためには多くの地道な作業が必要になります。 この記事では、カルマンフィルターが
しっかりとした正しい知識を基礎から学び、長く電子工作を楽しむことができるようになることを目的とした今回の連載。分かりやすく解説してくれるのは、金沢大学電子情報通信学類教授の秋田純一先生です。記念すべき第1弾はセンサの仕組みを解説。 第1回となる今回は数あるセンサの中から、ToF距離センサについて解説をしていただきます。 目次 いろいろな距離の計測方法 ToFセンサと使い方 ToF距離センサの原理 カメラとToF距離センサ まとめ 1. いろいろな距離の計測方法 みなさん、こんにちは。金沢大学の秋田純一と申します。よろしくお願いいたします。 早速ですが、マイコンを使って何か作るとき、距離を測りたいことって、よくありますよね? 例えば障害物をよけて進むロボットとか、手を近づけたらアルコール消毒液を出す、といった場合です。こういうときは、いわゆる「距離センサ」を使うことになります。 対象物までの
It’s 2022, and Teslas still aren’t stopping for children. pic.twitter.com/GGBh6sAYZS — Taylor Ogan (@TaylorOgan) August 9, 2022 今年実施されたテスラの走行テストの様子がTwitterに投稿され、10万いいねを超えるほどの話題になっています。 動画内ではテスラ Model3が走行中に、車両前方に配置された子どもに見立てた人形を検知して停止することができるかというテストの模様が撮影されています。 映像右側で同時にテスト走行しているレクサス RXがしっかり停止しているのに対し、Model3は人形を豪快に吹き飛ばしてしまいました。 「LiDAR」を搭載していないのが原因? 明るく見通しも良い状況にもかかわらず、Model3が人形の前で停止できなかったのは「子ども人形のクオ
iPhoneに搭載された機能を使って、3Dデータを保存する動画が、約3万4000件のいいねを集めるほどの話題になっています。1分程度で、ホテルの部屋をスキャンできてしまうスピードに驚かされます。 ホテルの部屋を3Dデータ化する様子を公開 iPhoneの3Dスキャン情報を発信するiwama(@iwamah1)さんが投稿した動画。部屋の全方向にカメラを向けて、壁の形や、ベッドの位置を読み込んでいきます。物体のフチ部分が光輝いて読み込まれる様子が、SFのようでかっこいい……! 部屋の読み取りが完了すると、画面には部屋の3Dモデルが出現。しばらくしてデータが完成すると、壁やベッドの模様などテクスチャまで再現されています。 iwamaさんによると、動画は「ノーカットノー倍速」とのこと。長さは1分32秒なので、とても手軽に3Dデータが読み込めていることがわかります。 スキャンすると物体のフチが光ってか
iPhone13 ProシリーズのLiDARを使用した拡張現実(AR)の視覚効果(VFX)が公開され、話題になっています。 Githubでコードが公開 Unity Technologies Japanでエバンジェリストを務めるKeijiro Takahashi氏(@_kzr)は、“burnt-in barcode metadata”と呼ばれるアイデアの概念実証としてBibcamを公開し、サンプルプロジェクトとしてBibcamVfxを制作しました。渋谷の様子にSFの世界のようなフィルターがかけられています。 The world through iPhone 13 Pro Max sensors (Shibuya, 23rd Nov) pic.twitter.com/ClfvNXRE3L — Keijiro Takahashi (@_kzr) November 26, 2021 Takahas
自動運転車のレーザー、デジカメのセンサーを破壊。23万のα7R IIが台無しに2019.01.17 12:00121,071 塚本直樹 思わぬリスク。 自動運転技術を支える、車両装備から発せられるレーザー(Lidar)。このLidarが、なんとデジカメのセンサーを破壊したという意外な報告が、海外から登場しています。 自動運転技術を開発しているJit Ray Chowdhury氏は、AEye社が開発したLidarシステムをソニーのフルサイズミラーレスカメラ「α7R II」で撮影していました。そして撮影した画像を見返すと、なんとどの撮影画像にも謎の光るスポットとラインが記録されていたのです。Lidarシステムはレーザーを照射して自動運転車に周囲を認識させるためのものですが、そのレーザーがα7R IIのセンサーに当たってしまったようなのです。 Image: Peta Pixelこちらは、壊れたカ
皆さん!3Dスキャンしてますかーーーーー!? どうもiPhone3Dスキャン大好きおじさんです。今回はiPhone×フォトグラメトリについてお話をしていこうと思います。 (トップ画も2D写真じゃなくて3Dモデルになってますw) 3Dスキャン全般の説明に関してはこちら↓を参考にしていただけると幸いです。 ※記事内容はあくまで個人の意見なのでそこら辺を理解して貰えるとありがたいです フォトグラメトリの基礎知識フォトグラメトリって何?フォトグラメトリは日本語で写真測量と呼ばれており、普通のカメラなどで撮影された複数枚の写真から3Dモデルを作成する技術となっています。 フォトグラメトリ自体は結構長い歴史を持つ技術となっており、国土の地形を測る測量分野や考古学分野、事故・犯罪現場の状況保存、災害現場の状況把握、ゲーム分野など幅広く活用されている技術です。 下リンクは上から順に ・エジプトのピラミッド
3月に発売となったLiDARスキャナ搭載のiPad Proですが、本格的な3Dスキャナアプリが徐々に登場し始めているようです。Laan Labsが開発した無料アプリ「3d Scanner App」がすごいとTwitterで話題になっています。 ARモデルの共有も簡単 Laan Labs(@laanlabs)のiPad Pro用LiDAR 3Dスキャナアプリは、「クラウド、登録および課金なしでメッシュが作れるアプリが存在しなかった」のを理由に制作されました。テクスチャ付きのARモデルを、メッセージアプリとUSDZ、GLTF、OBJを使用しシェアすることができます。 Made a simple LIDAR 3d scanner for iPad Pro. Couldn't find any apps that don't require cloud / signup / $ to get a
自動運転技術にとって大きなカギを握ると期待されているのが、レーザーを使って物体との距離を測定する「LIDAR」と呼ばれる技術です。古くから知られ、自動運転車の開発とともに一躍脚光を浴びてきているLIDARを材料費35ドル(約3800円)で自作した人が、ハードウェア・ソフトウェアの情報を公開しています。 Open Simple LIDAR | Hackaday.io https://hackaday.io/project/20628-open-simple-lidar Ilia Sam氏による自作のLIDARが地図データを素早く作り上げる様子は以下のムービーで確認できます。 Open Simple Lidar: Making map of the rooms - YouTube これが4000円未満で作成できる自作LIDAR。 カメラとレーザー照射器を搭載したボードは1秒間に5回転します。
自動運転車の開発競争には、数十億ドル規模の投資マネーが流入している。しかし、この業界からは、まだビリオネアがほとんど誕生していない。 LiDARメーカー「ルミナー(Luminar)」の創業者でCEOのオースティン・ラッセルは、数少ない例外の1人だ。光学の天才と評されるラッセルは、17歳でルミナーを設立した。 同社のナスダック市場への上場に伴い、ラッセルは世界で最も若いセルフメイドのビリオネア(遺産相続などではなく、自力で資産10億ドルを突破した者)となった。 「SPAC(特別買収目的会社)との合併により上場を果たし、さらにスケールアップする機会を得たことに大きなやりがいを感じる。私はまだ若いが、多くの血と汗と涙を流してきた。自分はとても幸運だ」と25歳のラッセルは、カリフォルニア州パロアルトにあるオフィスから参加したビデオインタビューで語った。 ラッセルは、ルミナーの発行済株式総数の3分の
2021年11月13日 15時00分更新 文● 鈴木ケンイチ 写真●鈴木ケンイチ、SIP試乗会事務局 編集●ASCII カメラをほぼ使わない自動運転が登場 レベル4相当とのことだがその実力は? すっかり秋めいた10月下旬、東京のお台場エリアにおいて「SIP自動運転 実証実験プロジェクト試乗会」が実施された。SIPとは「戦略的イノベーション創造プログラム」の英文からきた呼び名で、科学技術イノベーション実現のために2014年度からスタートしている国家プロジェクトだ。様々なジャンルの科学技術のイノベーションを目指すが、その中に自動運転技術も含まれている。今回は、そうした日本の最新自動運転技術を披露する場としての試乗会が開催されたのだ。参加したのは、トヨタやホンダ、日産といった自動車メーカーだけでなく、ヴァレオやコンチネンタルなどの国際的サプライヤー系もあって、それぞれの最新技術を搭載した車両が用
記事の目的 本記事ではdToFとiToF LiDARの基本や原理について説明します。 また込み入った理論ではなく、LiDARの大まかな種類や用途を理解するのが目標です。 LiDARセンサはLight Detection and Rangingの略で光を使った距離測定技術の総称です。 RADARが電磁波を使って距離を測るのに対して、光を使った距離センサを指します。 こちらは距離センサ全般の記事です。合わせてどうぞ。 aru47.hatenablog.com 記事の目的 LiDARには大きく2種類ある dToF LiDAR 原理 dToF LiDARの製品 dToF LiDARの種類について iPadのdToF LiDAR indirect Time of Flight 原理 iToF LiDARの製品 参考文献 最後に LiDARには大きく2種類ある LiDARには大きく2つ種類があります。
レーザー技術を使った探索により、密林の中にある遺跡の様子が明らかになった/PACUNAM/CANUTO & AVLD-THOMAS グアテマラ北部のジャングルの下に隠れていた6万以上の古代マヤ文明の建造物が新しいレーザー技術によって発見された。 隠れていた数十の都市で発見されたのは、民家、宮殿、高さ約27メートルのピラミッドなどだ。このピラミッドは以前は単なる丘と考えられていた。 上空からジャングルの密林の中を見通せる特殊なレーザーを搭載した飛行機が可能にしたこの画期的な調査が示唆しているのは、マヤの都市が従来考えられていたよりもはるかに巨大かつ複雑ということだ。 農業、かんがい、採石場、防御設備の跡が広範囲で確認された。また大規模な道路網は、コミュニティー同士がこれまで知られていた以上に密接につながっていたことを示している。 従来の考えを覆す発見 米誌「ナショナル・ジオグラフィック」が最
ミシガン大学の研究チームは、自動運転車に対するサイバー攻撃として、距離計測センサーのLiDAR(ライダー)に偽情報を送り込む手法を考案した。実在しない障害物が存在するかのように見せることで、自動運転車の動作を混乱させられる。 自動運転車は周囲の状況を把握するため、カメラやレーダー、ライダーなど複数のセンサーを搭載している。センサーにはそれぞれ得意、不得意があるため、自動運転車は各センサーで得た情報を組み合わせてどう動くか判断している。たとえば、可視光映像で情報を取得するカメラは、道路標識にステッカーが貼られるなどして改変されるとだまされてしまい、最終的に交通渋滞や事故を起こす可能性があるという。 研究チームは、LiDARに偽情報を送り込むため、あるパターンのレーザー光線をLiDARの受光部に照射。こうすることで、実際にはない障害物を、あたかも存在するように誤解させられた。
「レーダー」のような電波ではなく、紫外線・可視光線・近赤外線などを用いて遠距離にある対象までの距離や性質を分析できるリモートセンシング技術が「LIDAR(ライダー)」です。マサチューセッツ工科大学(MIT)と国防高等研究計画局(DARPA)は、ライダーのセンサーを1個の極小チップ上に搭載することに成功しており、自動運転車やロボットの認識技術が進化することが期待されています。 MIT and DARPA Pack Lidar Sensor onto Single Chip - IEEE Spectrum http://spectrum.ieee.org/tech-talk/semiconductors/optoelectronics/mit-lidar-on-a-chip ライダー(Light Detection And Ranging)はレーダーに似た技術ですが、波長の長さが電波の10万分
このnoteでは、最新のコンピュータサイエンスの研究を140字でゆるく解説しつつ、気になる論文にはこういう研究もあるよと2-3個似てる研究を紹介しています。 分野の中の人も外の人も、実務で忙しい人もそうでない人も、小学生も大学生も、「なるほど、最先端ではこんなことがおきてるんだな。ふむふむ」と感じてもらえたらと思います。 --- 今週は、SIGGRAPH 2019があったということで、先週に引き続きSIGGRAPHの論文が多めです。Emerging Technologiesでもいくつかおもしろいのがあったらしく、ペーパーではなくてもそういうのも今後取り上げてもいいかも。 そして、今週のニュースはなんと言っても、Project SoliがPixel 4として世に出たこと。Soliは2015-2016年頃に出た当初から話題でしたが、こうやって研究の成果が実際にプロダクトとして出てくるのはいいで
iPad Pro(第4世代)に搭載されたLiDARスキャナを使ってできることを紹介した動画が公開されました。著名アプリの開発者たちが語っています。 光を検出して測定するLiDARスキャナ 発表されたばかりのiPad Pro(第4世代)の外観上の最大の特徴は、デュアルカメラと一緒に設置されたLiDARスキャナです。 LiDARは、「Light Detection and Ranging」(光検出と測距)の略称で、光が対象物に到達してから反射して戻るまでの時間を測定して距離を割り出す技術です。 iPad ProのLiDARスキャナは、屋内でも屋外でも、最大5メートル先から反射する光を測定するダイレクト・タイムオブフライト(TOF)方式を利用しており、拡張現実(AR)での活用が期待されています。 著名アプリの開発者たちが解説 著名アプリの開発者たちが、自身の開発したアプリを使ってiPad Pro
Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 中国のZhejiang Labと米UCLA(University of California, Los Angeles)の研究チームが開発した「Compact light field photography towards versatile three-dimensional vision」は、虫の複眼とコウモリの超音波探知を組み合わせた新たなカメラシステムだ。曲がった先の物体や何かの背後にある隠れた物体も同時に観察できるという。 コウモリは暗闇の中で、エコーロケーションと呼ばれる音波探知機を使って、周囲の状況を鮮明に映し出す。コウモリの鳴き声は、高周波数で周囲に反射し、耳で拾われる。そ
Scaniverseってどんなアプリ?ScaniverseはポケモンGOで有名なNiantic社が提供しているiOS向け3Dスキャンアプリとなっています。完全無料で使える3Dスキャンアプリながら有料のアプリにも匹敵する性能を誇ります。 5cm程度の小さい置物からホテルの1室までの幅広いサイズを3Dスキャン可能となっています。 対応機種はLiDARスキャンを行う場合は、iPhone12/13/14Pro/MaxシリーズかiPad Pro(2020年モデル以上)が必要になりますが、NoLiDARスキャンを行う場合はiPhoneXS以降に発売された全てのiPhoneとA12プロセッサ以降が搭載されたiPadシリーズで3Dスキャンが可能となります。 さらに!2024年の3月に行われたVer3.0アップデートにより、今まではPC又はクラウド処理が必須だった3D Gaussian Splattingを
iOS16で利用可能になる「RoomPlan」APIを使って、iPhoneで3Dスキャンした室内にある家具を消すデモ映像が公開されました。全ての家具を一気に消すだけでなく、選択した家具だけを消すことも可能です。 iOS16では3Dスキャンが簡単に iOS16では、LiDARスキャナ付きiPhoneやiPad Proで室内をスキャンすることで、3D見取り図を簡単に作成できる「RoomPlan」APIが動作します。 Shopifyの拡張現実(AR)/仮想現実(VR)エンジニア、ルース・マシュマイヤー氏が、 RoomPlan APIを使ったデモンストレーションの動画を公開しています。 ディスプレイやスピーカーの乗った机、椅子、観葉植物が置かれ、窓にはカーテンのかかった部屋をスキャンします。 一瞬で、何もない部屋に変わってしまいました。壁に取り付けられていたエアコンも含めて、完全に消えています。ゼ
iPhoneに搭載のLiDARスキャナでどんなことができるの? おすすめの使い方やアプリを紹介 最新のiPhoneやiPadには「LiDARスキャナ」という機能が搭載されています。普段はなかなか起動することのない機能ですが、これを使えば手早くモノの大きさを測ったり、周囲のものを3Dスキャンしたりできます。 LiDARスキャナを活用したサービスも少なくありません。今回は「LiDARスキャナ」で具体的にどんなことができるのかを紹介します。 そもそもLiDARスキャナとは? (画像は「超幻実 – au 5G × 鬼滅の刃」) LiDARスキャナは、レーザー光の反射を利用して、モノや地形の「距離」を読み取る機能です。これにより、iPhoneのカメラの機能が向上したり、現実のモノの大きさが計測できたり、3Dスキャンアプリを活用できたりと、さまざまな用途に利用できます。 LiDARスキャナを搭載してい
TOP 特集 VFXチームがわかりやすく解説! 大河ドラマ『青天を衝け』で学ぶ、VFXのつくり方 <22> 撮影現場でのスマホLiDARの活用 2022/02/03 VFXチームがわかりやすく解説! 大河ドラマ『青天を衝け』で学ぶ、VFXのつくり方 <22> 撮影現場でのスマホLiDARの活用 Maya HoudiniTV NHKの大河ドラマ『青天を衝(つ)け』のVFX映像の制作過程や裏話、現場の様子などをご紹介するシリーズ企画。22回目となる今回は撮影現場におけるスマホLiDAR(Light Detection and Ranging)の活用について解説したいと思います。 (※本記事は2022年2月14日(月)をもって、公開終了いたします)
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く