撮った風景を無重力空間にしてしまうことを可能にした人現る「これはすごい」「スタンド能力っぽい」

気軽に重力無くしてぇ〜〜〜〜!
55
Takahiro Poly Horikawa 堀川隆弘 @thorikawa

撮った風景を無重力空間にしてみた。 Turn the cityscape into zero-gravity space. #AR #ArgumentedReality #MaskRCNN pic.twitter.com/QqUVoFPhXt

2019-02-21 17:51:59
Takahiro Poly Horikawa 堀川隆弘 @thorikawa

そこそこバズってるので宣伝 1. @curiosityincjpという会社でデジタルアトラクション作ってます!お仕事依頼はメールで! 2. HapMapというプロジェクションマッピングツールを作ってるので使って! gethapmap.com 3. AR警察にしばかれる前にハッシュタグ訂正します! #AugmentedReality

2019-02-21 21:58:38
Takahiro Poly Horikawa 堀川隆弘 @thorikawa

Explore the future of entertainment. Founder and CEO of @curiosityincjp. Creator of @RememoryApp, @AVATAVI_App and "ロイと魔法の森". Ex-@Yahoo. XR/数学/音楽

https://t.co/aHOcCbRxEs

技術的な話

Takahiro Poly Horikawa 堀川隆弘 @thorikawa

技術的なことに興味がある人向けの解説。Mask R-CNNというDLのライブラリでオブジェクトを検出して、UnityにGameObjectとしてぶっこんで動かしてます。切り取った後の背景の欠落領域はPixMixというアルゴリズムで埋めています。オブジェクト検出はサーバー側で行い、iPadと通信してます。

2019-02-22 11:58:51
ユニティ・テクノロジーズ・ジャパン @unity_japan

こちらの手法で物体検出したのち、その物体をUnity上で物理挙動させているようです。面白い表現ですね! qiita.com/shtamura/items… twitter.com/thorikawa/stat…

2019-02-22 12:27:00
リンク Qiita 物体検出、セグメンテーションをMask R-CNNで理解してみる (初心者) - Qiita # はじめに CouseraのMachine Learning → Python 機械学習プログラミング → ゼロから作るDeepLearning と歩んできて、次は応用編やりたいなと思っていたところに自動運転関連のニュース。それで選... 2 users 5

みんなの反応

まいまい新子 @sinmai888

物体認識したうえで動くもの動かないものも区別できてる! すげええええ twitter.com/thorikawa/stat…

2019-02-21 22:19:16
Takahiro Poly Horikawa 堀川隆弘 @thorikawa

@asami_lin github.com/matterport/Mas… このMask R-CNNというDeepLearningのライブラリを使いつつ、Unityの物理エンジンとか画像補完のロジックと組み合わせてます!

2019-02-21 19:32:04
リンク GitHub matterport/Mask_RCNN Mask R-CNN for object detection and instance segmentation on Keras and TensorFlow - matterport/Mask_RCNN 10 users 381
リンク TIME&SPACE VRやARとどこが違う? MR(複合現実)の仕組みと代表例『Microsoft HoloLens』を解説 MR(Mixed Reality)とは複合現実のこと。コンピュータ上の仮想の世界と現実の世界をよりいっそう密接に融合させる技術である。VR(仮想現実)やAR(拡張現実)との違いはなにか、事例を交えて解説する。 1 user 144
森羅 誠人(小西六党) @Rally750

無重力というより摩擦係数を下げたイメージに見える。 twitter.com/thorikawa/stat…

2019-02-21 20:15:56
𠮷田勇太 / ysdyt @yutatatatata

ピクセルレベルで物体認識してそこだけ動くようにしてる、面白いー。くり抜いた部分は目立たないように周囲の平均色で塗りつぶしてるのかな。芸が細かい twitter.com/thorikawa/stat…

2019-02-21 20:52:19
虎豆しば2号 @mamesiba9171

なにこれ普通にやりたいwww

2019-02-21 20:59:17
愉快な生活送り太郎 @hassyX

iPad落としそうでヒヤヒヤする動画やな…

2019-02-21 20:26:00
ニシキヤ/森で @eemuemu0201

@thorikawa @jetdaisuke スゴイ... けどこの位置でiPad振ってると落としそうで怖いな

2019-02-21 21:15:10