イベントカメラを用いたオプティカルフロー推定：動きとは何か？ (ViEW 2022)

Optical Flow Estimation using Event Cameras. What is Motion?
Odawara Prize: Best presentation award at ViEW 2022. Code: https://github.com/tub-rip/event_base... Dec 8th, 2022

要約: イベントカメラと，イベントカメラによる最新のオプティカルフロー推定手法を紹介する．イベントカメラは，画像空間のエッジの動きに非同期的に反応し，高速，高ダイナミックレンジ，低消費電力などの利点を持つ新しいビジョンセンサである．その非同期で疎なデータに対してアルゴリズムを再考する必要があるが，近年の画像ベースの機械学習の成果を受け，イベントカメラのオプティカルフロー推定手法でも，そのような画像ベースの手法と組み合わせることを急ぎすぎた側面があった．我々の提案手法は，イベントデータの時空間的性質を掘り下げることで，イベントのみからフローを推定する原理的な方法を開発し，提案された単純な最適化手法がベンチマークにおいて教師あり学習を含む従来研究の精度を全て上回ることを示した．そもそも動き（変化）を捉えるセンサであるイベントカメラを用いて動き推定問題に取り組むことを通じて，動きとは何か？という問いに迫りたい．

Reference:
Shintaro Shiba, Yoshimitsu Aoki, Guillermo Gallego
Optical Flow Estimation using Event Cameras. What is Motion?
Vision Engineering Workshop (ViEW) 2022, Japan. https://view.tc-iaip.org/view/2022/
Code: https://github.com/tub-rip/event_base...

Event-based Vision:
Research: https://sites.google.com/view/guiller...
Event Collapse in Contrast Maximization Frameworks: https://arxiv.org/abs/2207.04007
Survey paper: https://arxiv.org/abs/1904.08405
Course at TU Berlin: https://sites.google.com/view/guiller...

Affiliation:
Shintaro Shiba and Yoshimitsu Aoki are with the Faculty of Science and Technology, Keio University, Kanagawa, Japan.
Guillermo Gallego are with TU Berlin, the Einstein Center Digital Future and the SCIoI Excellence Cluster, Berlin, Germany.