Phygital Field



研究概要 / Abstract

Phygital Fieldは情報を重畳した映像により群ロボットを制御し,それらが協調して変化することで実世界指向のコンテンツ表現を実現するものです.空間分割型可視光通信(PVLC)を用いて,映像に重畳された情報によるロボットの自己位置推定と制御を行っています.
本技術の特徴は,可視映像に不可視情報を重畳して投影しているため,煩雑な位置合わせやキャリブレーションが不要であり,マーカの表示などで映像表現を妨げることがないということです.また,ロボットを手で払ったり,ロボットが障害物を押しのけたりといったことを行っても,ロボットが投影空間内にいる限り安定してシステムの制御下に置くことが可能です.そして,映像に重畳した情報によって同時並列的な送信を行うため,大量のロボットを用いても送信側のシステム負荷は増大しません.
Phygital Fieldでは,「Physical」なロボットと「Digital」な映像とがシームレスに統合された複合現実感システムを実現し,これにより映像だけでなくそれに同期したロボットの動作まで含めたコンテンツ表現のデザインが可能となりました.

We propose a novel method for the localization and navigation of multiple mobile robots. Our method uses coded light superimposed onto a visual image and projected onto the robots. Robots localize their position by receiving and decoding the projected light, and can follow a target using the coded velocity vector field.
Localization and navigation information can be independently conveyed in each pixel, and we can change this information over time. Thus, the system does not require measurement devices such as cameras, nor does it incur a high communication load, because we implement the localization and navigation of the robots through projection. Further, the spatial deviation between the images and robots does not occur in principle.
The idea of controlling robots by using information embedded in projected images allows users to design an integrated environment easily for the physical robots and digital images. Our findings have implications in various fields such as game environments and tangible interfaces, and we expect our proposed method to contribute to computer entertainment and user interface applications.


ビデオ / Video

発表文献 / Publications

  • Takefumi Hiraki, Shogo Fukushima, and Takeshi Naemura:
    ``Projection-based Localization and Navigation Method for Multiple Mobile Robots with Pixel-level Visible Light Communication,”
    In Proceedings of the 2016 IEEE/SICE International Symposium on System Integration (SII 2016), pp.862–868 (2016.12).
  • Takefumi Hiraki, Shogo Fukushima, and Takeshi Naemura:
    ``Phygital Field: an Integrated Field with a Swarm of Physical Robots and Digital Images,”
    In ACM SIGGRAPH Asia 2016 Emerging Technologies, Talk (SA ’16), Article No.2 (2016.12).
  • Takefumi Hiraki, Issei Takahashi, Shotaro Goto, Shogo Fukushima, and Takeshi Naemura:
    ``Phygital Field: Integrated Field with Visible Images and Robot Swarm Controlled by Invisible Images,”
    In ACM SIGGRAPH 2015 Posters (SIGGRAPH ’15), Article No.85 (2015.8).
    [PDF]
  • 高橋 一成, 平木 剛史, 福嶋 政期, 苗村 健:
    ``可視光通信プロジェクタ映像の色表現向上に向けた色空間選択手法,”
    電子情報通信学会技術研究報告, MVE2015-44, vol. 115, no. 415, pp. 149–154 (2016.1).
  • 平木 剛史, 高橋 一成, 福嶋 政期, 苗村 健:
    ``可視光通信プロジェクタを用いた映像上における群ロボット制御の基礎検討,”
    電子情報通信学会技術研究報告, MVE2015-3, vol. 115, no. 76, pp. 31–36 (2015.6).
    [PDF]

受賞 / Awards

  • Innovative Technologies 2016 (東京大学 苗村研究室: ``フィジタルフィールド”), (2016.10).
  • MVE賞 (平木 剛史, 高橋 一成, 福嶋 政期, 苗村 健: ``可視光通信プロジェクタを用いた映像上における群ロボット制御の基礎検討”), (2015.10).