HoloToolkitからMixed Reality Toolkitへの名称変更が入りました。 HoloLensの開発を容易にするためにHoloToolkit-Unityというライブラリが公開されています。おそらく現状のHoloLensの開発ではほとんど必須といえるモジュールになります。今後このライブラリに大幅な変更がはいることになっています。これに合わせて今までHoloLens向けに提供されていたMixed Reality関連のライブラリの整理がすすみ体系化されています。 変更がなぜ入ったか HoloToolkit - Unityの時はMixed RealityのデバイスとしてHoloLensがメインだったこともあり、基本的にはHoloLens用の要素が強いライブラリでした。ですが、Oculus等のVR系の発展、Windows Mixed Reality対応のimmersive HMDの

Windows MLについて Windows MLはONNXを呼ばれる学習済みモデルを利用し、ローカルマシン上で機械学習の推論が実行できるAPIです。 学習済みモデルから生成したONNXがあれば誰でもオフラインでの機械学習の恩恵を受けることができます。 このAPIはOSバージョン1803（春のアップデート）から導入されています。 このような状況の中HoloLensの日本語版でOSバージョン1809（ビルド番号17663)を使いながらWindows MLでONNX（Tiny Yolo V2）を取扱う実験を行いました。その結果現時点では色々と扱いが難しいところが多く、その情報をTipsとして共有します。 実際にTiny Yolo V2を導入したアプリの構築については別記事で紹介します。 HoloLensで実験しましたが、一般のWindows OS全般同じだと思います。 Windows MLのO

HoloLensで始めるMixed Reality Toolkit - Unity ～HoloLensで有効なイベントの種類についてUnityMRHoloLensVisualStudio2017 Mixed Reality Tookit - Unityのイベントについて 先日、Mixed Reality Tookit - Unity(以下MRTK)のイベントの内モーションコントローラ向けに使えるものを整理しました。HoloLensだとどこまで使えるのかも調査してみました。 環境 今回の環境は以下の通りです。 Windows 10 Pro Fall Creators Update Unity 2017.2.1f1 Mixed Reality Toolkit - Unity 2017.2.0.1 上記の環境はWinMRの環境でもあるのですが、HoloLensでも開発できるようになりました（やっ

WinMR用に拡張されたMixed Reality Toolkit- Unity Mixed Reality Toolkit-Unity(以下MTRK)はWinMR系の機能も強化されています。その１つとしてモーションコントローラの操作についても対応しているので今回はその使い方について紹介したいと思います。 開発環境などなど 今回は以下の環境を用意。なお、MTRKについてはモーションコントローラ用のサンプルがあります。値を一通り採取できるようになっていますのでかなり参考になると思います。今回はこのサンプルの中からモーションコントローラの検出と値取得部分の仕組みについてご紹介します。作成時点ではPreleaseのMRTKを利用していますが、今であれば正式版（V1.2017.2.0）の方がいいと思います。 Visual Studio 2017 15.2 Unity 2017.2.0f3 Mixe

WinMRで始めるMixed Reality Toolkit Unity - モーションコントローラ使ったアプリ開発のTipsUnityMRHoloLensVisualStudio2017WinMR 先行者泣かせのモーションコントローラ Windows Mixed Reality Deviceが出たときに開発者版が欲しくて購入した人はかなり泣く出来事ではないでしょうか。せっかく市販でリリースされたにも関わらず、なぜかモーションコントローラ単体での販売がないというお金に糸目をつけなくてもよい人はいいですが、ヘッドセットだけ余らせても悲しいこの事態。今回唯一モーションコントローラを単体で販売している米Dellから個人輸入で手に入れました。そこで、Mixed Reality Toolkit-Unity(以下MTRK)を利用したモーションコントローラの使い方について紹介したいと思います。まずはモー

かなり便利ですよこれ 早速試すにあたっては、まず空の状態からMRDesignLabsが使えるところからやりたかったので実際に進めた手順を記載しました。 MRDesignLabsに含まれているモジュール群はかなり便利ですよ！Fluent Design Systemが考慮に入っており自前で用意するとかなり面倒になるであろう機能がほぼ用意されている状態です。デザイン周りも統一しやすいようにUIコントロールがそろっています。 また、とりあえず気になっていたいくつかの機能についての設定周りを少し整理しました。 使用環境 Unity 5.6.0f3 Visual Studio2015 update3 Windows 10 Pro コードについて 本日時点(2017/6/27)でMRDesignLabsのリポジトリ構造が変わりました。詳細は以下のまとめていますので、ソースコードの取得についてはそちらを参

Hololens複数台で同一空間内で動作させるアプリケーションをどう試すか Hololensで実現できることの1つに複数台で同一空間内でアプリケーションを協調して動作させるものがあります。HoloToolKitでは「Sharing」という機能になります。これを利用するとHololens同士で相互接続するためのサーバをたてて（HoloToolkitに付属）、各Hololensと通信を行い相互に影響を与えるアプリケーションなどを構築することができます。 2/4(土)開催「Osaka HoloLens Meetup vol.1」のなかでは「holograms_240」を体験しました。自分の頭の上に自機がいてほかの人に向かって弾をうって遊ぶものなのですが複数台だと単独でのアプリとは違った体験ができます。 いざこの手のアプリを作りたいと思っても実際どう確認するかが問題になると思います。なにせHolo

環境構築に必要な情報収集 Hololensでアプリを作るために必要な開発環境を整えていきたいと思います。 参照サイト 必要なアプリについてはMSの公式サイトに記載。 https://developer.microsoft.com/en-us/windows/holographic/install_the_tools Galaxy Explorerについてはgit hubでソースが公開されているので取得しておきます。 https://github.com/Microsoft/GalaxyExplorer 今回の環境とバージョン Windows 10 Pro 有効にする機能 .NET Framework 3.5 Hyper-V Visual Studio Community Edition 2015 update 3 Hololens Emulator 10.0.14393.0 Unity 5