ブログ@kaorun55

HoloLensやKinectなどのDepthセンサーを中心に書いています。

HoloLens

SpectatorViewのCalibrationアプリでカメラ画像が出ない問題について

SpectatorViewについて、しばらく見ない間にちゃんとリリースパッケージになってました。 github.com HoloTooliitのバージョンやUNET対応などでパッケージが分かれているようです(UNET対応版の1.5.7.2は未検証です)。 1.5.7.0でCalibrationアプリでカメラ画…

HoloLens案件の打ち合わせ時に使ってる動画

自分がHoloLens案件で打ち合わせに行くときに使ってる動画をまとめます。 公式のYoutubeにいくつか載っており、公式の事例かつ自分が体験したもの中心にを紹介しています。あとはお客さんの業種や打ち合わせの流れで、公式以外のものも紹介したりしています…

Tokyo HoloLens ミートアップ vol.4を開催しました。

7/15(土)に「Tokyo HoloLens ミートアップ vol.4」を開催しました。 hololens.connpass.com 今回はスタッフ含めて146人の参加となり、前回よりも多くの方にお越しいただけた印象です。 また試験的に司会など担当をいままでと変えてみました(直前にいろいろあ…

HoloLensとWindows Mixed Reality HMD

「Windows Mixed Reality」(旧「Windows Holographic」)用のデバイスとしてAcerが開発者版のHMDを出すそうです。 www.moguravr.com shiropen.com 「Windows Holographic」は「Windows Mixed Reality」に名前が変わったようです。 Windows Mixed Realityは$…

HoloLens Spectator Viewを試してみた

HoloLensのアプリで装着している人以外がその映像を見るにはMixed Reality Captureを使いますが、遅延があったり無線接続が不安定だったりカメラ画像があまりきれいではなかったりします。 それらを解決する一つの方法として、Spectator Viewというものがリ…

デベロッパーズサミット2017で展示、登壇しました

2017年2月16(木)のデベロッパーズサミット2017で展示、登壇してきました。 展示 TMCNベースでPETS、ホロラボ、ショッカソン、HoloEyes 連合で展示をしていました。 HoloLensが目を引くので、休憩時間中は人もたえず、3,4台体制だったので、今回も結構な人数…

HoloLens Meetupを開催しました。

1/28(土)の福岡を皮切りに、全国4か所でHoloLens Meetupを開催しました。 Fukuoka HoloLens Meetup vol.1 - connpass Tokyo HoloLens Meetup vol.1 - connpass Osaka HoloLens Meetup vol.1 - connpass Tohoku HoloLens Meetup vol.1 - connpass 参加してく…

Structure Sensorで3Dスキャンした人のモデルをHoloLensで表示させたときのまとめ

思い付きで3Dスキャンしたデータにリグ(ボーン)、モーションをつけてHoloLensに入れてみたら、思いのほか反響があったのでおおよその手順を記録しておきます。 慣れるとスキャンからリグ入れまでで30-60分でしょうか。 詳しい人からすると目新しいものではな…

HoloLensと3Dデータの記事を書きました

HoloLensと3D モデル/3D CADとの組み合わせについて、対談と記事がでました。3Dデータが「即座」に「実寸」で目の前に現れるというのは、いままでの3Dデータの在り方を変えるのではないかと取り組んでいます。2本セットで読んでいただくといいのですが、やっ…

HoloLensの日本でのプレオーダー日程について公式アナウンスがありました

HoloLensの日本でのプレオーダーについて、公式アナウンスがありました。 news.microsoft.com 2016年12月2日(金)よりMicrosoft Store 限定でプレオーダーを開始、2017年初頭より出荷とのことです。1月か2月くらいでしょうか。 日本語の対応状況など含めて…

Structure Sensorを使った3Dスキャンサービス「Canvas」のCADデータが来ました

Canvasでスキャンした部屋のCADデータが来ました。 www.naturalsoftware.jp 予定が25日で、実際に来たのが28日(現地だと27日かな?)でした。休暇もあったのと後からメールで「元のモデルに穴が空いててうまくできない場所があったよ」的なものが来てたので、…

HoloLensの販売対象に6か国追加(日本は入ってません)

blogs.windows.com HoloLensの販売対象国に6か国追加されました。 オーストラリア アイルランド フランス ドイツ ニュージーランド イギリス

HoloLens 2016年10月の更新

今回も公式のアナウンスはありませんが、HoloLensの更新がありました。更新内容については不明です。 9月の14393.187から14393.321に上がっています。

HoloLens 2016年9月の更新

公式にはアナウンスがなかったのですが、HoloLensの更新がありました。 Awesome Features coming to Hololensdanglingneuron.wordpress.com 8月の14393.0から14393.187に上がっています。 Hololens Remotingを中心にしたUnityシミュレーションやUnityか…

Windows Holographicの開放とIntel Project Alloy

Intel の IDFで「Intel Project Alloy」(以下Alloy)というVR型のデバイスを発表しました。AlloyはOculus RiftやViveのようなデバイスですが、HoloLensのようなPC入りの一体型のようです。 newsroom.intel.com 前面にRealSenseカメラが2つついているので、カ…

HoloLensのHPU(Holographic Processing Unit)

HoloLensはCPU(Cherry TrailのAtom)のほかにHPU(Holographic Processing Unit)というプロセッサーが搭載されており、ここでジェスチャーや空間マッピングを行っているようです。 Hardware details HPUについて公になっている情報はなかったのですが、Hot Chi…

HoloLens 2016年8月の更新

Windows 10 Anniversary Updateに合わせて、HoloLensにも更新がきました。 blogs.windows.com 詳細はこちら。 Release notes 前回の更新は2016年5月に行われています。 www.naturalsoftware.jp バージョンは5月の14342から14393に上がっています。 新機能 新…

HoloLens の空間音響を使う

HoloLensは左右にスピーカーがついており、耳元で音をだすことができます。 ソフトウェア的にも空間音響をサポートしており、カメラ(HoloLens)の位置に対して音源(GameObject)から音が出ているように聞こえます。 例えば、音源が右にあるときは右のスピーカ…

HoloLens の音声コマンドを使う

HoloLensには単語の音声認識機能があり、登録した単語を「英語で」発音すると、それを認識します。認識をトリガーにして処理を行うことで音声コマンドを実装できます。 サンプルの実行風景です。英語がアレなので、ちゃんと認識してくれませんが、こんな感じ…

HoloLens の視線カーソル(Gaze)とAirTap(Gesture)を使う

HoloLens の視線カーソル(Gaze)とAirTap(Gesture)を使ってみます。 HoloLensの選択処理は現状これしかないので、なんらかのアプリを作る上では必須の機能となるでしょう。 プロジェクト全体はこちらにあります。 github.com 視線カーソルの種類 今回はHoloTo…

HoloToolkit-Unity を使う

UntiyでHoloLensアプリを開発する場合、カメラ位置の変更や各機能の追加など、アプリ開発に入る前に結構やることがあります。 Academyに入っているPrefabを使ってもよいのですが「HoloToolkit-Unity」というツールキットがかなりよいので紹介します。 github…

「I/O 2016年 07 月号」にHoloLensの記事を書きました

I/O 7月号にHoloLensの記事を書きました。 pic.twitter.com/BpHYXn2xii — 中村 薫 (@kaorun55) 2016年6月16日 3ページでざっと概要を書いています。 IO 2016年 07 月号 [雑誌] 出版社/メーカー: 工学社 発売日: 2016/06/18 メディア: 雑誌 この商品を含むブ…

HoloLensが認識した空間から、床や壁、天井などの平面を検出する

HoloLensのToolkitに、HoloLensが認識した空間を元に平面を検出する機能があります。 上の画像は部屋の隅をキャプチャしたものです。壁2枚と天井を検出しています。 動きは次の動画を見てください。平面検出によって、床、壁、天井、テーブルの検出ができま…

HoloLens の World Anchor を使用する

HoloLensにはWorld Anchor / Spcial Anchor という機能があります。これはアプリ内の3Dオブジェクトの座標を固定する機能です。 HoloLens内の座標は少々ややこしく、原点(0,0,0、すなわちカメラ座標)は起動時のHoloLensの位置になります。これは起動ごとに空…

HoloLens 2016年5月の更新

HoloLensがリリースされて最初のアップデートが来ました。 blogs.windows.com 詳細はこちら Release notes ビルド番号が14342になりました。ほかのWindows 10に追いつきました。 普通にWindows Updateしてる pic.twitter.com/n0xH77aZzr — 中村 薫 (@kaorun5…

HoloLensの Special Mapping データ(点群)を取り出す

HoloLensの Special Mapping データ(点群)を取り出してみます。 まだメッシュがうまく取り出せていないので要調査取れたかな? 2016/06/01のHoloLensのWindows 10の更新でDevice PortalにFile Explorerが追加されたので、HoloLens内のストレージ(ドキュメン…

HoloLensの空間共有機能を使ってみる

昨日たくさんのHoloLensが集まる機会があったので、共有機能を試してみました。 HoloLensで5人のホログラムを共有したゲーム HoloLensにはAnchor(アンカー:碇、目印)の機能があり、空間に目印を置くことができます。HoloLensは空間の座標を記憶できるので、…

de:code 2016 の HoloLens 講演

5月24,25日に開催された de:code 2016に行ってきました。 初日のKeynoteと2日目のHoloLens概要を聞いてきました。そのほかはブースを回ったり挨拶したり。 HoloLens 概要 ~世界を見る新しい方法~ 講演者 日本マイクロソフト株式会社 千葉 慎二 さん 大事な…

HoloLensの環境マッピング(Spatial Mapping)の使い方

HoloLensは「Spatial Mapping」とよばれる周辺の凹凸を判別する機能を持っています。これによって現実空間にあたり判定をつけ、落下してくる仮想のオブジェクトを現実空間に配置できます。Unityで開発する場合、この凹凸情報はMeshデータとして保持していま…

HoloLens行脚で体験会した所感

5月2日にHoloLensが到着して、2週間ほどで10か所を訪問しました。体験対象はVRクラスタの方が多数です。代わりに交換でOculus RiftやHTC Vive、meta1など体験させてもらいました。 そこでの所感をまとめておきます。 体験手順 ゆたんぽ状態のまま、開封の儀…