LunchTime XR #09: SONY ToF ARの紹介

2022/6/22に開催したLunchTime XR #09: SONY ToF ARの紹介の様子
1
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

はじまた リリースされてぱっといじってみた印象をゆるーく話してみる会 #AR_Fukuoka 今日はToFセンサーの話 今まではiOSとかandroidそれぞれ別々に開発しなければだめだったところが、共通で開発できるようになったらしい 互換性リスト developer.sony.com/ja/develop/tof… iOSに至ってはインカメにもアクセス可 pic.twitter.com/HkxqVNS3H8

2022-06-22 12:16:09
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka ダウンロード Unitypackageの形で提供されている チュートリアルの説明は上級者向けっぽいらしい developer.sony.com/develop/tof-ar… それよりは、githubにサンプルが公開されているのでそちらをいじるのがおすすめとの事 github.com/SonySemiconduc… pic.twitter.com/j34VpByBSX

2022-06-22 12:24:21
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka Unity Editorで開いてみている様子 近いバージョンのものをえらぼう ToFARのサンプルなのにToFARの本体が入ってないことによるエラーが起きるけど気にしないですすもう Baseをimport(今回はiOS 赤マークのエラー:96個くらいに Handtrackingのサンプルも読み込む 赤エラーが消える pic.twitter.com/Bdt3ebgwpp

2022-06-22 12:30:03
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka 出発点 sceneを開けばそれぞれの動きが確かめられる。 BuildしてみてXCode用ファイルを吐き出せばOK M1 Macでも開発可 pic.twitter.com/YHL7cjVCQS

2022-06-22 12:34:24
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka iPadにビルドするときの画面 ToFという割にはDepthセンサ全般が使えるので実は適用範囲の広いツールである 画面共有しながらのビルドはコケるらしい 出来上がりのアプリのUI 機能に入ったら、使うカメラを明示的に選ぶことでスタートする 無事うごいた 手軽! pic.twitter.com/DP7K4Gmocb

2022-06-22 12:39:21
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka カメラのところでインカメ、LiDARを切り替えられる これがアプリ内で完結するので便利 iPad一つでデプスも手も顔も使える 人認識のセグメンテーションの様子 pic.twitter.com/TmrHEckbDr

2022-06-22 12:42:21
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka 自分で何か作りたい時に必要そうなもの 開発SDKのなかから選ぶ ToF AR Manager(基本) デプスを取りたい場合 ToF AR ToF Manager インカメ動かしたい場合はここチェック pic.twitter.com/Wi6DwoekMY

2022-06-22 12:46:25
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka #ToFAR テクスチャを貼るための板を置いている様子 ライブコーディング とりあえず見せるだけなので雑に実装→ビルド pic.twitter.com/w3S1VDOb4f

2022-06-22 12:53:01
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka コツは「なんとかManager」を探すこと(大事な事なので二回いいました) pic.twitter.com/nSyojbaTE3

2022-06-22 12:54:07
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka ColorManagerを入れておけばカメラの画像にもアクセスできるようになるので↑二つと一緒に覚えておくのが吉

2022-06-22 12:55:12
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka ロスタイムおまけ シェーダーもある カメラのセッティングを管理する部品Settingでやることも可能 ユーザー用のボタンもある pic.twitter.com/yJtwdWUjTC

2022-06-22 12:59:31
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka 切り換えボタンを入れた時には、切り換え対象のカメラも動くように設定を追加してビルドしないとこけるようだ('ω') pic.twitter.com/bj6Av2asoG

2022-06-22 13:02:44
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka #ToFAR 実行中の画面の様子 フロントのデプスカメラ、背面のLiDAR両方動いてる 昼休みで出来てしまってすごいね~ pic.twitter.com/RkSegXtLXO

2022-06-22 13:04:48
拡大
拡大
拡大
拡大
じゅん@4/17XRMTG北海道エリアのお世話 5/18VRCミートアップ 9/28💉7 @jun_mh4g

#AR_Fukuoka #ToFAR 色々な機能の動作・方法はリファレンスに載っているので、深く学んでみたい方はコチラへ developer.sony.com/develop/tof-ar… ありがとうございました~('ω') 888888888888 (朝ごはん食べに行こう) pic.twitter.com/VgWoMFtdLS

2022-06-22 13:08:09
拡大
🎼nuwaa💫 元宇宙工藝學家 🛰上級VR技術者🚢御船印:船長🌏女媧🎵Q @nuwaa_vr

今日のお昼に参加させていただいたリンク先のイベントで、SONY の ToF AR の公式サンプルを実機で試すやり方をだいたい把握できたので、つい先ほど試してみて、ちゃんとできました。ただ試すだけでも面白いし、こんなに手軽になんですね! ありがとうございます! #AR_Fukuoka xr-fukuoka.connpass.com/event/252044/ pic.twitter.com/iS2So9pcwa

2022-06-22 21:56:52
拡大
拡大