映像IoT
映像 IoT（えいぞうIoT）は モノのインターネット（IoT：Internet of Things）のクラスの一つである[1]。
Iyerらにより2016年に提唱された。情報通信技術の急速な成長により、実空間（物理空間）での大量の情報・データが様々センサーによって生成され、サイバー空間（クラウドシステムなど）に蓄積されている。IoTは、各種センサー群をインターネットに接続することによりセンサーにより取得される実空間現象をサイバー空間上に再現する概念である。一般的なIoT型のセンサーと異なり、映像IoTではイメージセンサーまたはビデオセンサーをIoTセンサーと位置付ける。すなわち、映像IoTデバイスにモバイルカメラなどのビデオ伝送機器を装備し、これをインターネット接続することで映像IoTセンサーとする。
目的[編集]
映像IoTコンセプトに示す通り様々な環境に映像IoTセンサーを配備することで、社会インフラや公共設備の監視、防災・減災への取り組みなどが可能となる。映像IoTでは、映像データの広帯域幅の確保やエッジ側でのコンピューティングと通信のトレードオフなど、様々な技術課題に対処する必要がある。Iyerらは特に（1）高品質なビデオ伝送と（2）画像処理や画像認識技術による画像からの情報抽出の2点を指摘している。クレアリンクテクノロジー社が開発したHpVTプロトコルおよびそれを用いたHpVTアプリケーションは、これら2点を解決するために開発した映像伝送用の技術である。
HpVTプロトコル[編集]
HpVTプロトコルは近年のWebカメラ等で用いられているHTTP （Hyper Text Transfer Protocol）伝送の欠点を補うために設計した映像伝送プロトコルであり、2017年にクレアリンクテクノロジー社により提案された。パケットロスやジッタなど環境変動に弱いTCPベースのHTTPやHTTPSと異なり、UDPベースの独自プロトコルHpVTは動画像のフレーム送出をできるだけ平滑化し，不要なバッファリングを行わないことで，映像のストリームをより滑らかに再生することに特化した。ネットワーク環境の変化により帯域品質が低下した場合には優先フレームのみを送出することで画質よりも映像のリアルタイム性を重視している。HpVTプロトコルは，特に4G/LTE等のモバイル通信網においてその性能を発揮する。
HpVTアプリケーション[編集]
クレアリンクテクノロジー社では、HpVTプロトコルを活用し、遠隔地への映像伝送や遠隔地からのONVIF操作を行うためアプリケーションパッケージ（HpVTアプリケーション）を開発した。HpVTアプリケーションには、トランスミッターやレシーバー上で映像ストリームを編集するためのライブラリ（HpVTライブラリ）も提供される。
映像IoTシステム（SmartSightカメラ TYPE I）[編集]
Raspberry Pi 3をベースとしたSmartSightカメラ。K2GOが独自にデザインしたRaspberry Pi 3用ケース（縦置き型）を使ったスタイリッシュなカメラ。底面に1/4インチネジ穴が開いており、一般的なカメラ用スタンドが利用できる。
映像IoTシステム（SmartSightカメラ TYPE III）[編集]
映像IoT（SmartSightカメラTYPE III）では、市販の安価なIPカメラを用いて、高画質化と低価格化を両立する。図：映像IoT通信システム概要図（TYPE III）では、IPカメラをトランスミッターに接続し、映像ストリームをHpVTに変換することで、モバイル通信網等の無線ネットワーク環境でも高品質・低遅延の映像伝送が可能となる。HpVTプロトコルを用いたクレアリンクテクノロジー社のSmartSightカメラ（TYPE III）ではトランスミッターに安価なシングルボードコンピューターであるRaspberry Piを用いている。
PTZ（パン・チルト・ズーム）操作[編集]
図：映像IoT通信システム概要図（TYPE III）のIPカメラには、パン・チルト・ズーム（PTZ）機能を有するものがある。IPカメラがONVIF（Profile S）対応である場合、HpVTプロトコルにより遠隔からのPTZ操作が可能となる。
脚注[編集]
- ^ “監視カメラを使った映像IoTソリューション | 東芝テリー株式会社”. www.toshiba-teli.co.jp. 2022年4月13日閲覧。
参考文献[編集]
 |
- R. Iyer and E. Ozer, ``Visual IoT: Architectural Challenges and Opportunities; Toward a Self-Learning and Energy-Neutral IoT, vol. 36, no. 6, pp. 45-49, 2016. https://www.ipsj.or.jp/journal/info/jour_topics/topi44.html , 2018-12-02.
- Y. Kagebayashi, T. Aoki, T. Mizuhara, A. Takaki, Y. Kakizawa, K. T. Murata, P. Pavarangkoon, K. Yamamoto, K. Muranaga, E. Kimura, ``Development of Remote Monitoring Camera with HD Resolution Working on Raspberry PI, in JpGU-AGU Joint Meeting 2017, 2017.
- K. T. Murata, P. Pavarangkoon, S. Phon-Amnuaisuk, T. Mizuhara, K. Yamamoto, K. Muranaga and T. Aoki, "A Programming Environment for Visual IoT on Raspberry Pi," The 5th IEEE International Conference on Cloud and Big Data Computing (CBDCom 2019), Fukuoka, Japan, 5-8 Aug. 2019. 10.1109/DASC/PiCom/CBDCom/CyberSciTech.2019.00180
- Wu, Hao-Yu and Rubinstein, Michael and Shih, Eugene and Guttag, John and Durand, Fr{\'e}do and Freeman, William (2012). “Eulerian video magnification for revealing subtle changes in the world”. ACM transactions on graphics (TOG) (ACM New York, NY, USA) 31 (4): 1-8.
- Tae-Hyun Oh, Ronnachai Jaroensri, Changil Kim, Mohamed Elgharib, Fredo Durand, William T Freeman, and Wojciech Matusik, "Learning-based video motion magnification", In Proceedings of the European Conference on Computer Vision (ECCV), pp. 633–648, 2018. https://arxiv.org/abs/1804.02684
- S. Phon-Amnuaisuk, K. T. Murata, P. Pavarangkoon, T. Mizuhara and S. Hadi, (2019-11). Children Activity Descriptions from Visual and Textual Associations. Springer International Publishing. pp. 121-132. doi:10.1007/978-3-030-33709-4_11. ISBN 978-3-030-33709-4