ARKit 3 気になったところ（WWDC 2019） - Qiita
2019-06-04 未明の WWDC、全くチェックしてなかった。 ARマイクラMinecraft Earthゲームプレイ初公開。#WWDC19 でARKit 3のオクルージョン実演 - Engadget 日本版 目次 リリース時期と公式サイト ARKit 3 の新機能いろいろ People Occlusion Multiple Face Tracking Motion Capture リリース時期と公式サイト ARKit 3 は、この秋にiOS 13と同時にリリース予定。 リリースは結構先。 Augmented Reality - Apple Developer Augmented Reality - ARKit 3 - Apple Developer ARKit 3 の新機能いろいろ 気になった部分だけ、他にも色々とある。 People Occlusion 人物で 3D オブジェクトを
ARKit で Face Tracking して左右を正しくアバターを動かす - Qiita
これは クラスター Advent Calendar 2020 14日目の記事です。 昨日はurauraさんの clusterサーバーサイドにおける技術選定について でした。とても興味深い話でしたね。 はじめに こんにちは、ねおりんです。 最近はビデオミーティングで使うためだけにアバターを動かすアプリを自作しています。 まじでアバターで来て大丈夫なのか不安という声があったのでとある社内Mtgの様子を貼っておきます アバター面談歓迎！バーチャルSNSを開発するUnityエンジニア募集！ by クラスター株式会社 (@cluster_jp) https://t.co/gG3piF0ete #wantedly pic.twitter.com/CnOb631UHG — とみね∞遠見海@バーチャル多趣味アンドロイド (@htomine) December 10, 2020 ↑はリーク画像。下が私です(
iPhone で Face Tracking with ARKit を実装する - Qiita
はじめに iOSエンジニアの神武です。 今回は、iPhoneXなど の Face Tracking with ARKit を利用して こんなの （モデル : 隣の席の先輩、謝謝！） をコメント多めで実装してみました サンプルコードはapple公式に上がっているので とにかく試したいiPhoneX所持者はこちらからどうぞ Creating Face-Based AR Experiences 記事の参考も👆です 前準備 1.iPhoneXなどを購入💰します 2.プロジェクトを作ります [ File > New > Project > Single View App ] 3.Main.storyboard に ARKit SceneKit View を貼り付け、ViewController と紐付けます 4.カメラ利用の許可を取るために、Info.plistに追加します [ Privacy
iPhoneのみを使った視線トラッキング技術とヘッドトラッキング技術が開発される - iPhone Mania
従来の視線トラッキング技術やヘッドトラッキング技術は、専用のシステムを必要として、導入にひと手間もふた手間もかかるものでした。EyewareがCES2021で発表する予定の「Beam」と呼ばれる技術では、iPhoneやiPadに搭載されたTrueDepthカメラのみで、これら2つのトラッキング技術を実現可能にします。 視線トラッキングとヘッドトラッキングをTrueDepthカメラで実現 EyewareのBeamと呼ばれる技術では、視線と頭の動きのトラッキング技術をiPhoneやiPadに搭載されたTrueDepthカメラのみで実現します。 TrueDepthカメラは各種センサーによって、ユーザーの顔の特有の形状を正確に読み取ることが可能で、Face IDによる顔認証のほか、アニ文字に使われています。 EyewareはAppleのARKitで提供されている機能とは別に、TrueDepthカメ
ARKit and CoreLocation: Part One
Personal project — August 17thDemo CodeARKit and CoreLocation: Part OneARKit and CoreLocation: Part TwoARKit and CoreLocation: Part ThreeBackgroundIt has been awhile since I’ve written a new blog post so hopefully, this makes up the difference. This post and the next will be a two part series on my experiments with ARKit and CoreLocation! The first part will deal with the basics of ARKit, getting
ARAnchorとは正確には何ですか？
ARKitを理解して使用しようとしています。しかし、私が完全に理解できないことが1つあります。 AppleはARAnchorについて次のように述べています。 ARシーンにオブジェクトを配置するために使用できる実際の位置と方向。 しかし、それだけでは十分ではありません。だから私の質問は： ARAnchor正確には何ですか？ アンカーと特徴点の違いは何ですか？ あるARAnchor特徴点のほんの一部では？ そして、ARKitはどのようにアンカーを決定しますか？ ARAnchorは、ワールドスペースのアンカーの位置に3Dモデルを保持できる非表示のnullオブジェクトです。モデルのローカル軸（平行移動、回転、スケーリングが可能）を使用してARAnchorいるのと同じように考えtransform nodeてください。すべての3Dモデルにはピボットポイントがありますよね？したがって、このピボットポイン
ARKitでデバイスの位置を取得する - Qiita
デバイスの位置って重要 ARはユーザーとARコンテンツのインタラクションなので、ユーザーの視点の位置＝デバイスの位置は大事です。 ARKitでデバイスの位置を取得できます デバイス位置取得 func session(_ session: ARSession, didUpdate frame: ARFrame) { let transform = frame.camera.transform.columns.3 let devicePosition = simd_float3(x: transform.x, y: transform.y, z: transform.z) print(devicePosition) } SIMD3(0.0, 0.0, 0.0) SIMD3(9.0870006e-10, 4.1317643e-09, -3.1889111e-09) SIMD3(-2.953596
ARKitで顔のGeometryを表示する – 野生のプログラマZ
はじめにいまさらですが最近ARKitに熱が入っているのでFaceGeometryの表示を試してみました。 下の画像のような感じのものです 解説ARKitでFaceTrackingを行う場合はARFaceTrackingConfigurationを追加います。 let configuration = ARFaceTrackingConfiguration() sceneView.session.run(configuration, options: [.resetTracking, .removeExistingAnchors]) Anchorの追加/更新アンカーの取得は2種類のメソッドで行います。 renderer(_ renderer: SCNSceneRenderer, didAdd node: SCNNode, for anchor: ARAnchor)はアンカーの追加、更新、削除な
ARKitを使ったFaceTrackingで地点間の距離を測る - Qiita
ARKitを用いてあれこれする機会があったので 備忘録代わりにまとめておきます。 バージョン情報 Xcode10.0 Swift4.2 準備 StoryboardにUIViewを貼り付けてクラスをARSCNViewに設定します。 カメラを使うので忘れずにInfo.plistに Privacy - Camera Usage Descriptionを追加しておきましょう。 実装 import ARKit import SceneKit class ViewController: UIViewController { @IBOutlet weak var sceneView: ARSCNView! @IBOutlet weak var distanceLabel: UILabel! let rightVertexID = 244 let leftVertexID = 824 override f
ARKit / フェイストラッキング｜npaka
iOSの「ARKit」で「フェイストラッキング」を行うプログラムを作ります。 1. リソースの準備以下のサイトのサンプルプログラムのリソースを使います。「Model.scnassets」と「Assets.xcassets」をコピペします。 ・Tracking and Visualizing Faces ◎Model.scnassets ・coordinateOrigin.scn ・overlayModel.scn ・robotHead.scn ◎Assets.xcassets ・wireframeTexture 2. 座標原点の表示はじめに、「フェイストラッキング」を行い、顔と左目と右目の座標原点を表示します。 import UIKit import SceneKit import ARKit //フェイストラッキング(座標原点の表示) class ViewController: UIVi
ARKitことはじめ：ドラッグ操作の意外な落とし穴と試行錯誤 - Goodpatch Tech Blog
この記事は「Goodpatch Advent Calendar 2021」の 24 日目の記事です。 今回の担当は iOS エンジニアの田中です。 弊社では社内有志による AR アプリ開発への挑戦が、密かに始まっています。（有志メンバーには Oculus Quest 2 が1台ずつ提供されるという特典も😀） そんな AR 開発初期に遭遇した落とし穴と試行錯誤、地味ながらも興味深い発見を共有します。 ノードをドラッグして動かすだけ、それなのに... 当初の実装 原因は意外かつ単純 端末の回転成分を考慮する より本質的に解決するならば オマケ( Swift Playgrounds for iPad で動かしてみた) おわりに ノードをドラッグして動かすだけ、それなのに... 実装していた機能は以下のようなものです。 水平平面を検出する 検出平面をタップすると、その平面にノード(本記事ではキュ
ARKit と LiDAR で 3 次元空間認識して SceneKit でリアルタイム描画 - OPTiM TECH BLOG
はじめに こんにちは．R&D チームの久保です．LiDAR スキャナ搭載 iPad Pro をいじり始めて 1 年以上が経ちました． ご存知の方も多いと思いますが，iOS/iPadOS 13.4 以降の ARKit/RealityKit では LiDAR スキャナによって 3 次元空間を認識してメッシュとして得ることが可能になりました．LiDAR スキャナ搭載デバイスもつい先日予約開始された最新モデルの iPad Pro を加えると 12.9-inch iPad Pro (第 4 世代及び第 5 世代), 11-inch iPad Pro (第 2 世代及び第 3 世代), iPhone 12 Pro, iPhone 12 Pro Max といった感じでずいぶん増えてきています． 今回の記事では LiDAR スキャナで取得したメッシュの情報を SceneKit で自由にリアルタイム描画する
ARKitのコードによく出てくる4次元行列transformについて - Qiita
4次元行列transformの中身を解説 ARKitを使った落書きなどのアプリのコードで、以下のようなコードがよく見られると思います。 transformってなに？となる方がいると思いますので、数学的な知識を補いながら、説明します。 guard let pointOfView = sceneView.pointOfView else { return } let mat = pointOfView.transform let dir = SCNVector3(-1 * mat.m31, -1 * mat.m32, -1 * mat.m33) let currentPosition = pointOfView.position + (dir * 0.1) 1行目はなんとなくわかるかと思いますが、2~4行目で、???となる方が出てくると思います。 結論から述べると、 2行目のpointOfVi
図解でわかる！ARKitのtransform理解のための4×4行列の説明 - Qiita
先日ARKitのための3D数学という記事を書きました。その中でも言及していますが、今記事では、transformを理解するために、4*4行列だけにフォーカスして説明していこうと思います。 僕も最初はよくわかっていませんでした。しかし今では理解できていて、座標変換するときに4*4行列を使うことの便利さを痛感しています。 4*4行列とはなんなのか 行列です。 この行列をベクトルに掛けると、座標を変換することができます。 こんなかんじの行列のイメージだけまずは覚えてください。 3D座標系を理解しよう 3D空間上にx軸とy軸とz軸があって、その空間上の点が(x, y, z)という座標系で表されることは中学高校の数学をやっていれば理解できるでしょう。 以下の図では、xがaで, yがbで, zがcで示される点Pを表しています。 しかし、座標変換を考えるときに、この点だけを考えるのは得策ではありません。
ARKit2の画像トラッキングを試してみた
ちょっと出遅れた感はありますが、ARKit2 で新たに追加された機能である画像トラッキング機能を試してみました。 題材は、パッと思いついたポケモンにしています（笑） class ViewController: UIViewController { private var textNode001: SCNNode? private var textNode002: SCNNode? private var textNode003: SCNNode? @IBOutlet var sceneView: ARSCNView! let imageConfiguration: ARImageTrackingConfiguration = { let configuration = ARImageTrackingConfiguration() let images = ARReferenceImage.
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
WWDC18 - Videos - Apple Developer
LiDAR を活用したARアプリを作ろう!
ARConfiguration.WorldAlignment.gravity | Apple Developer Documentation
ARKitとRealityKitについて学ぼう|【Swift】ARシューティングアプリを作ってみよう！|Techpit
【ARKit】3D空間座標をスクリーン座標に変換する | ゼイリブ株式会社