カラー撮影，CCD 以外の撮像系 撮像素子の制御による高度な計測

Presentation on theme: "カラー撮影，CCD 以外の撮像系 撮像素子の制御による高度な計測"— Presentation transcript:

1 カラー撮影，CCD 以外の撮像系 撮像素子の制御による高度な計測
計測情報処理論 カラー撮影，CCD 以外の撮像系 撮像素子の制御による高度な計測

2 X-Y アドレス型撮像素子 それぞれの「スイッチ」に用いられている素子の名称が撮像素子の名称となる
（例えば CMOS 型 FET が使われている場合，CMOS センサと呼ばれる） JFET型素子 CMOSセンサの基本構成

3 CMOS 型撮像素子 低消費電力 他の回路との混載可能 （通常の半導体プロセスが利用可能） 従来はノイズが多い傾向 ランダムアクセス可能
全画素に電圧をかけておく必要がない 他の回路との混載可能 （通常の半導体プロセスが利用可能） 画像処理回路を合わせて１チップ化できる 従来はノイズが多い傾向 昨今は大幅に改善 ランダムアクセス可能

4 ローリングシャッタ CMOSセンサでは各画素の露光時刻がずれるものがある（ローリングシャッタ）
各画素の読み出し時刻のずれの分だけ露光時刻がずれる） ずれないものをグローバルシャッタと呼ぶ

5 シャッターの形式と画像の歪 レンズシャッター方式 フォーカルプレーンシャッター方式 （レンズ交換にやや難） コンパクトカメラ等
（レンズ交換に向くがやや複雑） 一眼レフカメラ，レンズ交換式距離計連動カメラ等

6 シャッターによる動体歪 画面内の露光時間の差により物体の形状がひずむ

7 動体歪の例 ラルティーグ 「A.C.F グランプリレース」 世界で最も有名な？シャッターによる動体歪の例

8 スリットカメラ 被写体の動きに合わせフィルムを送る ラインＣＣＤを用いた連続撮影に応用

9 着順判定カメラ 空間 時間 ゴールラインの１次元画像を順に並べたもの

10 パノラマカメラの構造 １８０度未満タイプ ３６０度撮影タイプ

11 パノラマカメラと全方位計測 Θ 通常の写真とは異なる投影方式 （円筒座標系） １８０度以上も可能 直線が直線として写るとは限らない

12 CMOS センサの応用 ランダムアクセスを生かした研究例 CMOS 混載プロセスによる画像処理回路を用いた研究例

13 CCD での部分読み出し CCD でもビニングのような手法により部分読み出しが可能 CCD による部分読み出しの研究例

14 カラー撮影 R, G, B ３原色を順に撮影するもの 光エネルギーを R, G, B の３成分に分け， 同時に撮影するもの
filter wheel 方式等 光エネルギーを R, G, B の３成分に分け， 同時に撮影するもの ３管式，３板式(3CCD) 各画素にそれぞれ R, G, B のどれかを担当させるもの 原色フィルタ，補色フィルタ Foveon

15 フィルタホイール方式 各フィルタを任意に選ぶことが出来る ４色以上の撮影が可能 カラー化が難しい特殊なＣＣＤが利用可能
特殊な特性のフィルタが利用可能 ４色以上の撮影が可能 マルチスペクトル化（材質の認識など） カラー化が難しい特殊なＣＣＤが利用可能 超高解像度 CCD など 静止物しか撮影できない 顕微鏡撮影，天体撮影などの科学技術用 商品カタログなどの静物撮影用

16 フィルタホイール

17 ３管式カメラ プリズム 撮像管 レンズ

18 ３板式カメラ エネルギーのムダがなく，感度が高い 色再現性が高い （画素ごとに着色する必要がないため， 良いフィルタが利用できる）
各プリズムの界面には「干渉フィルタ」が蒸着により構成されている．干渉フィルタは異なる屈折率の透明物を所定の厚みで重ねることにより，波動光学的に光を反射・透過するので，入射光は波長ごとに反射率が決まり，残りの光エネルギーは透過する． エネルギーのムダがなく，感度が高い 色再現性が高い （画素ごとに着色する必要がないため， 　良いフィルタが利用できる）

19 １板式 CCD の各画素に着色 原色フィルタ 補色フィルタ 原色フィルタ （Bayer 配列) 補色フィルタ
G R G R G R G Cy Ye Cy Ye Cy Ye Cy Ye G B G B G B G B G Mg G Mg G Mg G Mg R G R G R G R G Cy Ye Cy Ye Cy Ye Cy Ye G B G B G B G B Mg G Mg G Mg G Mg G R G R G R G R G Cy Ye Cy Ye Cy Ye Cy Ye G B G B G B G B G Mg G Mg G Mg G Mg 原色フィルタ （Bayer 配列) 補色フィルタ CCD の各画素に着色 原色フィルタ ○自然な色再現　×感度が低い（ノイズが多い） 補色フィルタ ○感度的に有利　計算により R,G,B値に変換

20 カラー画像の再現(1) もしも対象全体が単一色であるとすると それぞれの画素の値を上式に従い推定
例：R = G = 2B の場合（B が ½ の明るさ） R G R G R G R G R G R G R G R G G B G B G B G B G B G B G B G B R G R G R G R G R G R G R G R G G B G B G B G B G B G B G B G B R G R G R G R G R G R G R G R G G B G B G B G B G B G B G B G B それぞれの画素の値を上式に従い推定 R の画素： G = R, B = 1/2R G の画素： R = G, B = 1/2R B の画素 : R = 2B, G = 2B ○輝度の解像度は 　落ちない ×色解像度が落ちる

21 カラー画像の再現(2) 最も単純な方法（各色の補間） 色解像度と輝度解像度はトレードオフである
エッジ検出や色の変化率の判別等の非線形なフィルタや判定（条件分岐）を用いて高性能化されている（デジタルカメラの映像エンジンなど） 欠点：解像度が落ちてしまう（赤，青では縦横各半分） G G G G R R R R G G G G G G G G R R R R G G G G G G G G R R R R G G G G

22 光学ローパスフィルタ 結晶（ニオブ酸リチウムなど）の複屈折の性質を用いて像をぼかすための素子 サンプリング（標本化）時のエリアシングを防ぐ

23 オンチップレンズ

24 CCD素子の例 ソニー 1/6inch CCD かなり小型化している 非正方格子

25 CCDの内部回路 通常，信号発生回路等は含まれない（チップセット等により供給） カラーフィルタは補色系

26 分光感度特性

27 読み出しと色の計算 フィールド毎に縦２画素を結合して読み出し（インタレースのため） 色差信号は，左右画素の和，差で計算
色差信号＝（Y, R-Y, G-Y)

28 読み出しと色の計算

29 画素 （２画素分の電荷がひとまとめにされてしまう） ４相転送方式（垂直転送で利用）

30 転送方式 ２相転送方式（水平転送で利用） 転送速度が速い

31 読み出し部 転送されてきた電荷を取り出す

32 ビニング (binning) 白黒ＣＣＤにおいて，隣同士の画素の電荷をひとまとめにする方法 通常読み出し：
垂直転送１回につき，全画素を読み出し 垂直ビニング： 垂直転送を２回連続で実行した後，全画素を読み出し 2x2 ビニング： 垂直転送を２回連続で実行した後，水平転送２回ごとに１回だけ読み出す

33 カラーＣＣＤでの ビニング

34 CMOSでの高速読み出し 多チャンネル同時読み出し LBCAST の例

35 Foveon １つのセンサーの奥行き方向にRGB各色の受光素子を配置 既に実用化 Foveon Sigma