被災地の4次元モデリングによる復興状況の可視化

本研究室では2011年3月11日に起こった東日本大震災の直後から,東日本沿岸部の被災地の映像を,車載カメラを用いて定期的に記録しています.単なる被害状況の記録だけでなく,様々なコンピュータビジョン技術を駆使することで,年月ごとに街がどのように復興しているかを可視化する手法をに提案しています.


このデータセットには,二つの異なる日時に車載カメラを用いて撮影された市街地の動画像が記録されており,3次元の市街地構造における時系列変化の検出に関心のある研究者の方々などに向けて公開しています.著作権は本研究室に所属しますが,どなたでも研究目的であれば無料でご利用頂けます. 

釜石市

 

  Panoramic (5000x2500 pixels) Perspective image (640x480 pixels)
Left Right

April 2011 

56x3=168 images

panoramic_kamaishi_t0_003.jpg perspective_kamaishi_t0_left_003.jpg perspective_kamaishi_t0_right_003.jpg

July 2011

55x3=165 images

panoramic_kamaishi_t1_002.jpg perspective_kamaishi_t1_left_002.jpg perspective_kamaishi_t1_right_002.jpg


陸前高田市

  Panoramic (5000x2500 pixels) Perspective image (640x480 pixels)
Left Right

April 2011 

199x3=597 images

panoramic_takata_t0_043.jpg perspective_takata_t0_left_043.jpg perspective_takata_t0_right_043.jpg

July 2011

199x3=597 images

panoramic_takata_t1_043.jpg perspective_takata_t1_left_043.jpg perspective_takata_t1_right_043.jpg

 

データセットの詳細及びダウンロード方法へ


top_result.jpg

本研究では,異なる日時に撮影された多視点画像から,市街地の3次元構造の時系列変化を検出する手法を提案しています.実験には,市街地の道路を走行した際に車載カメラで撮影された画像を用いました.提案モデルは,多視点画像における局所画像のパッチどうしの類似度を入力として,まず市街地の構造を確率的に推定し,それらの推定をもとに構造変化の可能性を評価することで,多視点ステレオに基づくモデルを超える精度を達成しています.

詳細へ


Hybrid macro–micro visual analysis for city-scale state estimation
Computer Vision and Image Understanding (CVIU) 2016
Sakurada, K., Okatani, T., & Kitani, K. M.
[link

Change detection from a street image pair using cnn features and superpixel segmentation
Proceedings of the British Machine Vision Conference (BMVC) 2015
Sakurada, K., & Okatani, T.
[pdf

Massive City-scale Surface Condition Analysis using Ground and Aerial Imagery
Asian Conference on Computer Vision (ACCV) 2014 oral presentation
Sakurada, K., Okatani, T., & Kitani, K. M.
[pdf]

Detecting changes in 3D structure of a scene from multi-view images captured by a vehicle-mounted camera
Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition (CVPR)
Sakurada, K., Okatani, T., & Deguchi, K. 
[pdfsupplementary materialposterproject page]