セミナーレポート

遠赤外線カメラと可視カメラを利用した悪条件下における画像取得産業技術総合研究所 東京工業大学 田中 正行

本記事は、国際画像機器展2018にて開催された特別招待講演を記事化したものになります。

画像融合のためのキャリブレーション

 ハードウェアキャリブレーションの場合,ビームスプリッターを置かなければならないなど,システムが大きくなり,コストもかかります。そこで,ソフトウェアキャリブレーションが必要になります。可視画像に比べ,遠赤外線画像は歪みが大きく,ハードウェアアライメントでビームスプリッターを入れても精度の限界があります。
 キャリブレーションには,画角やレンズ歪みを調整するものと,2つのカメラの位置関係を調べるものがあります。可視カメラと可視カメラのキャリブレーションの場合,チェッカーボードを使ったZhangのキャリブレーションツールボックスがデファクトになっています。しかし,可視カメラと遠赤外線カメラの場合には,印刷したチェッカーパターンを白熱電球で温めなければならず,しかも熱拡散してすぐに不鮮明になるため,それを繰り返す必要がありました。そこで2層構造のキャリブレーションボードを開発しました。その結果,対応点が正確に得られ,長時間安定させることができました。
 キャリブレーションをするときには,チェッカーパターンの角を,可視画像と遠赤外線画像で対応するように変形させます。キャリブレーションが完璧なら再構成の誤差は出ません。その平均値を評価すると,既存のボードに比べ,われわれが開発したボードの場合,1桁程度高精度になり,レンズ歪みを高精度に補正できるようになっています。
 可視カメラでは当然ながら暗いところでは暗く映ります。それはノイズが大きいので,遠赤外線カメラを利用しノイズを取るデノイズを行います。われわれの提案手法を用いると,高画質なデノイズ画像を生成することができます。また,低解像度な遠赤外線画像を高解像度化するアップサンプリングも可能です。さらに,監視などセキュリティ用途として,2台の遠赤外線カメラと,1台の可視光魚眼カメラによる広視野・高解像のマルチモーダルカメラシステムも開発し,先ほどのキャリブレーション技術を活用して可視・遠赤外線画像の高精度な位置合わせを実現し,霧や煙のような環境でも周囲を確認できるようになっています。

<次ページへ続く>

産業技術総合研究所 東京工業大学 田中 正行

2003年 東京工業大学博士課程修了 2003年-2004年 アジレント・テクノロジー株式会社 2004年-2008年 東京工業大学研究員 2008年-2017年 東京工業大学准教授 2013年-2014年 スタンフォード大学客員研究員 2017年-現在 産業技術総合研究所主任研究員

アーカイブもっと見る

行動解析技術の最前線
行動解析技術の最前線(3/25) オムロン(株) 技術・知財本部 研究開発センタ AI制御研究室 主査 高橋 智洋
触覚情報をカメラでとらえる
触覚情報をカメラでとらえる(3/25) 立命館大学 理工学部 ロボティクス学科 教授 下ノ村 和弘
行動解析技術の最前線
行動解析技術の最前線(1/25) NEC バイオメトリクス研究所 研究マネージャー 西村 祥治
精密加工と精密位置決め技術の組み合わせによる材料内部の3次元組織観察,ならびに硬さ分布の3次元解析システム
精密加工と精密位置決め技術の組み合わせによる材料内部の3次元組織観察…(1/25) 理化学研究所 光量子工学研究センター 画像情報処理研究チーム チームリーダー 横田 秀夫
関西大学 システム理工学部 機械工学科 教授 古城 直道
画像を利用したインフラ維持管理におけるデータ管理手法
画像を利用したインフラ維持管理におけるデータ管理手法(3/25) 株式会社イクシス 代表取締役 山崎 文敬
生体視覚神経系に学んだロボットビジョン開発
生体視覚神経系に学んだロボットビジョン開発(1/25) 大阪工業大学 情報科学部 奥野 弘嗣

▼ プラチナスポンサー ▼

株式会社リンクス

東芝テリー株式会社

ダウンロード

展示会FAQ