セミナーレポート

遠赤外線カメラと可視カメラを利用した悪条件下における画像取得産業技術総合研究所 東京工業大学 田中 正行

本記事は、国際画像機器展2018にて開催された特別招待講演を記事化したものになります。

勾配ベース画像合成

 最後に,一般的な画像処理の話として,画像合成するときに使える技術を紹介します。画像を合成するときの技術にはいろいろなものがありますが,ここでは勾配に基づく処理について説明します。勾配というのはいわゆる微分情報です。微分情報に基づいて処理をすることによって2つの画像を滑らかに合成することができます。また,人間は画素値よりも微分で認識していることが知られています。したがって,画像の微分値を保存するように画像合成することによって,人にとって理解しやすいものになるのではないかというアイデアになっています。
 例えば,暗いところを走ってきた車の横に人がいる画像があります。テクスチャー画像は可視画像からしか得られないのでテクスチャーは残しますが,走ってきたタイヤや人は温度があるので,そこは遠赤外線画像から持ってきます。これらを微分に基づいて処理をすると,車も人も認識できる合成画像ができます。また,人の顔の入力画像の場合,ここに単純に別の目を重ね合わせると違和感が出ます。しかし,微分を保存する勾配ベース処理で合成すると,自然な感じで見えるようになります。
 勾配ベース処理の基本的なフローとしては,入力画像に対してまず勾配抽出(微分)し,勾配操作(マニピュレーション)を再構成(積分)します。そして,画像値調整(後処理)をし,出力画像にします。しかし,画素値の範囲は積分するまでわかりませんので,画素値が0-255の範囲を超えるといったことや,階調が不足したり白飛びしたりするなどのサチュレーションが起こることがあります。そこで,われわれは微分を保存し,かつ値域に収まるような画像を出力する近接勾配法で最適化する手法を提案しています。
 われわれの開発したソフトウェアでは,エッジの大きさを強調することもできますし,勾配が小さいときにはゼロにすると,顔の肌をつやつやにすることができます。また,暗いところの微分を明るくする処理をすることで,暗部補正もできます。さらに,クリッピングやサチュレーションされないようにすることもできるようになっています。

産業技術総合研究所 東京工業大学 田中 正行

2003年 東京工業大学博士課程修了 2003年-2004年 アジレント・テクノロジー株式会社 2004年-2008年 東京工業大学研究員 2008年-2017年 東京工業大学准教授 2013年-2014年 スタンフォード大学客員研究員 2017年-現在 産業技術総合研究所主任研究員

アーカイブもっと見る

行動解析技術の最前線
行動解析技術の最前線(3/25) オムロン(株) 技術・知財本部 研究開発センタ AI制御研究室 主査 高橋 智洋
触覚情報をカメラでとらえる
触覚情報をカメラでとらえる(3/25) 立命館大学 理工学部 ロボティクス学科 教授 下ノ村 和弘
行動解析技術の最前線
行動解析技術の最前線(1/25) NEC バイオメトリクス研究所 研究マネージャー 西村 祥治
精密加工と精密位置決め技術の組み合わせによる材料内部の3次元組織観察,ならびに硬さ分布の3次元解析システム
精密加工と精密位置決め技術の組み合わせによる材料内部の3次元組織観察…(1/25) 理化学研究所 光量子工学研究センター 画像情報処理研究チーム チームリーダー 横田 秀夫
関西大学 システム理工学部 機械工学科 教授 古城 直道
画像を利用したインフラ維持管理におけるデータ管理手法
画像を利用したインフラ維持管理におけるデータ管理手法(3/25) 株式会社イクシス 代表取締役 山崎 文敬
生体視覚神経系に学んだロボットビジョン開発
生体視覚神経系に学んだロボットビジョン開発(1/25) 大阪工業大学 情報科学部 奥野 弘嗣

▼ プラチナスポンサー ▼

株式会社リンクス

東芝テリー株式会社

ダウンロード

展示会FAQ