WO2008044732A1

WO2008044732A1 - Image processing device, image processing method, and image processing program

Info

Publication number: WO2008044732A1
Application number: PCT/JP2007/069842
Authority: WO
Inventors: Erika Kanematsu
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2006-10-11
Filing date: 2007-10-11
Publication date: 2008-04-17
Anticipated expiration: 2009-04-11
Also published as: US8379106B2; US20090195670A1; EP2073167A4; EP2073167B1; JP4935822B2; EP2073167A1; JPWO2008044732A1

Description

明細書

画像処理装置、画像処理方法、画像処理プログラム

技術分野

[0001] 本発明は、ある撮像条件で撮像された画像データを、観察条件に応じた色の見えを再現する画像データに変換する画像処理装置、画像処理方法、画像処理プロダラムに関する。

背景技術

[0002] ある撮像条件で撮像した画像を、人間の色順応特性を考慮して、撮像条件とは異なる観察条件に応じた色の見えを再現する色順応変換モデルが各種提案されている。色の見えに影響を与える視環境の一つとして被写体や画像を観察する時に視覚が順応している白色点がある。そこで異なる視環境の考慮として、被写体を照明している光源の白色点を用いてデバイスに依存しない色空間に変換し、次に観察時に画像を照明している光源の白色点を用いて出力画像に変換するという色順応変換が行われている。

[0003] また、特許文献 1や特許文献 2にによれば、プリントと CRT表示画像の色変換の場合に、 CRT観察時の順応白色点として CRTの白色点だけではなぐ CRTの周囲の白色点も考慮して順応白色点を決定している。

[0004] 特許文献 1 :特開平 9 93451号公報

特許文献 2：特許第 3635673号明細書

発明の開示

発明が解決しょうとする課題

[0005] しかし、視環境の異なる両者を交互に見る場合には、第 2の視環境で出力画像を見ている場合にも第 1の視環境に順応した影響が残っており、第 2の視環境の照明条件や周囲照明のみを考慮しても正確な色の見えを再現できない。特に、第 1の視環境に於ける輝度が高!/、場合には、その影響が強レ、。

課題を解決するための手段

[0006] 本発明の第 1の態様によると、第 1の観察条件下での被写体の色の見えを、第 2の観察条件下で再現する画像処理装置は、第 1の観察条件下で被写体を撮像した第 1の画像データを取得する画像データ取得部と、第 1の観察条件下の第 1の照明光源に関する情報を取得する第 1の照明条件取得部と、第 2の観察条件下の第 2の照明光源に関する情報を取得する第 2の照明条件取得部と、第 1の観察条件下と第 2 の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出する順応白色点算出部と、算出した順応白色点に基づき、第 1の画像データを、第 1の観察条件下での被写体の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部とを備 X·る。

本発明の第 2の態様によると、第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理装置は、第 1の観察条件下で画像を提示するために使用する第 1の画像データを取得する画像データ取得部と、第 1の観察条件下の第 1の照明光源に関する情報を取得する第 1の照明条件取得部と、第 2の観察条件下の第 2の照明光源に関する情報を取得する第 2の照明条件取得部と、第 1の観察条件下と第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出する順応白色点算出部と、算出した順応白色点に基づき、第 1の画像データを、第 1の観察条件下での画像の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部とを備える。

本発明の第 3の態様によると、第 1または第 2の態様の画像処理装置において、順応白色点算出部は、順応白色点として、少なくとも第 2の観察条件下で視覚が順応している第 2の順応白色点を、取得した第 2の照明光源に関する情報に加えて第 1の照明光源に関する情報を考慮して算出し、色変換部は、算出した第 2の順応白色点に基づき、第 1の画像データから第 2の画像データへ色変換するのが好ましい。本発明の第 4の態様によると、第 1または第 2の態様の画像処理装置において、順応白色点算出部は、順応白色点として、第 1の観察条件下で視覚が順応している第 1の順応白色点を、取得した第 1の照明光源に関する情報に加えて第 2の照明光源に関する情報を考慮して算出し、第 2の観察条件下で視覚が順応している第 2の順応白色点を、取得した第 2の照明光源に関する情報に加えて第 1の照明光源に関する情報を考慮して算出し、色変換部は、第 1の順応白色点と第 2の順応白色点に基づき、第 1の画像データから第 2の画像データへ色変換するのが好ましい。

本発明の第 5の態様によると、第 1から第 4のいずれかの態様の画像処理装置において、第 1の照明光源に関する情報は、第 1の照明光源の色温度に関する情報を含み、第 2の照明光源に関する情報は、第 2の照明光源の色温度に関する情報を含むのが好ましい。

本発明の第 6の態様によると、第 5の態様の画像処理装置において、第 1の照明光源に関する情報はさらに第 1の照明光源の輝度を含み、第 2の照明光源に関する情報はさらに第 2の照明光源の輝度を含むのが好ましい。

本発明の第 7の態様によると、第 1から第 6のいずれかの態様の画像処理装置において、順応白色点算出部は、第 1の観察条件下における第 1の照明光源の明るさと第 2の観察条件下における第 2の照明光源の明るさに応じて、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を変化させるのが好ましレ、。

本発明の第 8の態様によると、第 1から第 7のいずれかの態様の画像処理装置において、第 1の観察条件下の観察と第 2の観察条件下の観察との間の時間間隔に関する情報を入力する観察方法入力部を備え、順応白色点算出部は、観察方法入力部への入力に応じて、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を変化させるのが好ましい。

本発明の第 9の態様によると、第 8の態様の画像処理装置において、観察方法入力部は、観察方法入力部への入力に応じて、第 1の観察条件下の観察と第 2の観察条件下の観察との間の時間間隔が長いか短いかの少なくとも 2つのモードから 1つを選択するのが好ましい。

本発明の第 10の態様によると、第 9の態様の画像処理装置において、順応白色点算出部は、観察方法入力部が時間間隔が短いモードを選択する場合には、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を大きくし、観察方法入力部が時間間隔が長いモードを選択する場合には、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を小さくするのが好ましい。

本発明の第 11の態様によると、第 9または第 10の態様の画像処理装置において、観察方法入力部は、少なくとも、第 2の画像データを保存するための画像保存用モードと、第 1の観察条件下の観察と第 2の観察条件下の観察を併用する併用観察モードの 2つのモードから 1つを選択し、画像保存用モードが選択された場合は時間間隔が長いモードが選択されたとし、併用観察モードが選択された場合は時間間隔が短レ、モードが選択されたとするのが好まし!/、。

本発明の第 12の態様によると、第 1の態様の画像処理装置において、第 1の照明光源に関する情報は、被写体を直接照明する光源に関する情報および被写体の周囲を照明する光源に関する情報を含み、第 2の照明光源に関する情報は、第 2の画像データを表示する表示装置の光源に関する情報および表示装置の周囲を照明する光源に関する情報を含むのが好ましレ、。

本発明の第 13の態様によると、第 2の態様の画像処理装置において、第 1の観察条件下で画像を表示する第 1の表示装置と、第 2の観察条件下で再現画像を表示する第 2の表示装置とをさらに備え、第 1の照明光源に関する情報は、第 1の表示装置の光源に関する情報および第 1の表示装置の周囲を照明する光源に関する情報を含み、第 2の照明光源に関する情報は、第 2の表示装置の光源に関する情報および第 2の表示装置の周囲を照明する光源に関する情報を含むのが好ましい。

本発明の第 14の態様によると、第 1から第 7のいずれかの態様の画像処理装置にお!/、て、第 2の観察条件下で連続して観察してレ、る時間を計測する時間計測部をさらに備え、順応白色点算出部は、第 2の観察条件下で画像を連続して観察している時間に応じて、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を変化させ、色変換部は、第 2の観察条件下での画像観察時間に応じて連続して変化する順応白色点に基づき、連続して第 2の画像データを変化させるのが好ましレ、。本発明の第 15の態様によると、第 14の態様の画像処理装置において、時間計測部は、第 1の観察条件下で連続して観察している時間をさらに計測し、順応白色点算出部は、第 1の観察条件下での観察時間と第 2の観察条件下で画像を連続して観察している時間に応じて、当該観察条件下の照明光源に関する情報に対して他方の観察条件下の照明光源に関する情報を考慮する割合を変化させるのが好ましい。本発明の第 16の態様によると、第 1から第 15のいずれかの態様の画像処理装置において、第 1の照明条件取得部と第 2の照明条件取得部の少なくともいずれかは、予め想定される複数の周囲照明条件から 1つを選択するのが好ましい。

本発明の第 17の態様によると、第 1から第 16のいずれかの態様の画像処理装置において、色変換部は、第 1の画像データから第 2の画像データへ色変換するときに使用する色変換マトリックスの構成要素に算出した順応白色点に関する値を使用するのが好ましい。

本発明の第 18の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 1の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、順応ファクタを変換対象画素の色によつて変化させるのが好ましい。

本発明の第 19の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部を備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 2の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、順応ファクタを変換対象画素の色によって変化させるのが好ましい。

本発明の第 20の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 1の観察条件下および第 2の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、順応ファクタを変換対象画素の色によって変化させるのが好ましい。

本発明の第 21の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 1の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、順応ファクタを変化させるのが好ましい。

本発明の第 22の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 2の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、順応ファクタを変化させるのが好ましい。

本発明の第 23の態様によると、第 1から第 17のいずれかの態様の画像処理装置において、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部を備え、順応白色点算出部は、順応ファクタ算出部で算出された順応ファクタを使用して第 1の観察条件下および第 2の観察条件下で視覚が順応している順応白色点を算出し、順応ファクタ算出部は、入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、順応ファクタを変化させるのが好ましい。

本発明の第 24の態様によると、第 1の観察条件下での被写体の色の見えを、第 2 の観察条件下で再現する画像処理装置は、第 1の観察条件下で被写体を撮像した第 1の画像データを取得する画像データ取得部と、第 1の画像データを、第 1の観察条件下での被写体の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部と、色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め格納する記憶部とを備え、色変換部は、記憶部に格納された複数の色変換マトリックスから、指定された観察条件に応じた色変換マトリックスを選択し、選択した色変換マトリックスを使用して第 1の画像データから第 2 の画像データへ色変換する。

本発明の第 25の態様によると、第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理装置は、第 1の観察条件下で画像を提示するために使用する第 1の画像データを取得する画像データ取得部と、第 1の画像データを、第 1の観察条件下での画像の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部と、色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め格納する記憶部とを備え、色変換部は、記憶部に格納された複数の色変換マトリックスから、指定された観察条件に応じた色変換マトリックスを選択し、選択した色変換マトリックスを使用して第 1の画像データから第 2の画像データへ色変換する。

本発明の第 26の態様によると、第 24または第 25の態様の画像処理装置において、第 1の観察条件下の観察と第 2の観察条件下の観察との間の時間間隔に関係する複数の観察方法から 1つを指定する観察方法指定部と、第 2の観察条件下の複数の周囲照明条件から 1つを指定する周囲照明指定部とをさらに備え、記憶部は、複数の観察方法と複数の周囲照明条件の組み合わせに応じた複数の色変換マトリックスを格納し、複数の色変換マトリックスは、それぞれ、第 1の観察条件下と第 2の観察条件下の少なくともいずれかの観察条件下で、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出した視覚が順応している順応白色点に関する値をマトリックスの構成要素に持ち、色変換部は、観察方法指定部により指定された観察方法と周囲照明指定部により指定された周囲照明条件の組み合わせから、記憶部に格納された複数の色変換マトリックスの中から 1つの色変換マトリックスを選択し、選択した色変換マトリックスを使用して第 1の画像データから第 2の画像データへ色変換するのが好ましい。

本発明の第 27の態様によると、第 1から第 26のいずれかの態様の画像処理装置にぉレ、て、画像データ取得部で取得した第 1の画像データは顕微鏡像を撮像して生成した画像データであるのが好ましレ、。

本発明の第 28の態様によると、第 1の観察条件下での被写体の色の見えを、第 2 の観察条件下で再現する画像処理方法は、第 1の観察条件下で被写体を撮像した第 1の画像データを取得し、第 1の観察条件下の第 1の照明光源に関する情報を取得し、第 2の観察条件下の第 2の照明光源に関する情報を取得し、第 1の観察条件下と第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出し、算出した順応白色点に基づき、第 1の画像データを、第 1の観察条件下での被写体の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する。

本発明の第 29の態様によると、第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理方法は、第 1の観察条件下で画像を提示するために使用する第 1の画像データを取得し、第 1の観察条件下の第 1の照明光源に関する情報を取得し、第 2の観察条件下の第 2の照明光源に関する情報を取得し、第 1の観察条件下と第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出し、算出した順応白色点に基づき、第 1の画像データを、第 1の観察条件下での画像の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する。

本発明の第 30の態様によると、第 1の観察条件下での被写体の色の見えを、第 2 の観察条件下で再現する画像処理方法は、第 1の観察条件下で被写体を撮像した第 1の画像データを取得し、第 1の画像データを、第 1の観察条件下での被写体の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換し、色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め記憶部に格納し、色変換は、記憶部に格納された複数の色変換マトリックスから、指定された観察条件に応じた色変換マトリックスを選択し、選択した色変換マトリックスを使用して第 1の画像データから第 2の画像データへ色変換する。

本発明の第 31の態様によると、第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理方法は、第 1の観察条件下で画像を提示するために使用する第 1の画像データを取得し、第 1の画像データを、第 1の観察条件下での画像の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換し、色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め記憶部に格納し、色変換は、記憶部に格納された複数の色変換マトリックスから指定された観察条件に応じた色変換マトリックスを選択し、選択した色変換マトリックスを使用して第 1の画像データから第 2の画像データへ色変換する。

本発明の第 32の態様によると、第 28または第 29の態様の画像処理方法において、順応白色点を算出する時に、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、考慮する順応ファクタを変換対象画素の色によって変化させるのが好ましレ、。

本発明の第 33の態様によると、第 28または第 29の態様の画像処理方法において、順応白色点を算出する時に、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、考慮する順応ファクタを変換対象画素の色によって変化させるのが好ましレ、。

本発明の第 34の態様によると、第 28または第 29の態様の画像処理方法において、順応白色点を算出する時に、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、考慮する順応ファクタを変換対象画素の色によつて変ィ匕させるのが好まし!/ヽ。

本発明の第 35の態様によると、第 28または第 29の態様の画像処理方法において、順応白色点を算出する時に、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、第 1の画像データに於ける色の分布を解析し、該解析した色の分布に基づいて、考慮する順応ファクタを変化させるのが好ましい本発明の第 36の態様によると、第 28または第 29の態様の画像処理方法において、順応白色点を算出する時に、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、第 1の画像データに於ける色の分布を解析し、該解析した色の分布に基づいて、考慮する順応ファクタを変化させるのが好ましい本発明の第 37の態様によると、第 28または第 29の態様の画像処理方法において順応白色点を算出する時に、第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタも考慮して算出し、第 1の画像データに於ける色の分布を解析し、該解析した色の分布に基づいて、考慮する順応ファクタを変化させるのが好ましい。本発明の第 38の態様によると、画像処理プログラムは、第 28から第 37のいずれかの態様の画像処理方法をコンピュータに実行させる。

本発明の第 39の態様によると、第 1の観察条件下での観察対象の色の見えを、第 2の観察条件下で再現する画像処理装置は、第 1の観察条件下の観察対象に関する第 1の画像データを取得する画像データ取得部と、第 1の観察条件下の第 1の照明光源に関する情報を取得する第 1の照明条件取得部と、第 2の観察条件下の第 2 の照明光源に関する情報を取得する第 2の照明条件取得部と、第 1の観察条件下と第 2の観察条件下の少なくともレ、ずれかの観察条件下で視覚が順応して!/、る順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出する順応白色点算出部と、算出した順応白色点に基づき、第 1の画像データを、第 1の観察条件下での観察対象の色の見えを第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部とを備える。

発明の効果

[0007] 本発明によれば、被写体を観察する視環境と、その被写体を撮像した画像を介して観察する視環境が異なる場合に、特に両者を観察する時間が短い場合や被写体観察時の輝度が高い場合にも、高精度に色の見えを再現することができる。

図面の簡単な説明

[0008] [図 1]顕微鏡 1と顕微鏡用デジタルカメラ 2とモニタ 3とからなる顕微鏡観察システムを示す図である。 [図 2]デジタルカメラ 2の制御部 21、撮像部 22、メモリ 23などを示す図である。

[図 3]第 1の実施の形態のデジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。

[図 4]時間的順応度 R の時間変化を示す図である。

tmp

[図 5]第 1の実施の形態の変形例 1のデジタルカメラ 2の制御部 21が行う処理を説明するプ'ロック図である。

[図 6]第 1の実施の形態の変形例 2のデジタルカメラ 2の制御部 21が行う処理を説明するプ'ロック図である。

[図 7]第 2の実施の形態のデジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。

[図 8]4つのモードに対応するマトリックス 1〜4を示すテーブルである。

[図 9]第 3の実施の形態の机上作業システムを示す図である。

[図 10]モニタ 3観察時の時間の計測方法の例を示す図である。

[図 11]最適な順応ファクタ D と色相角 h*の関係を示す図である。

h

[図 12]第 4の実施の形態におけるデジタルカメラ 2が実行する処理のフローチャートを示す図である。

[図 13]第 5の実施の形態におけるデジタルカメラ 2が実行する画像処理プログラムのフローチャートを示す図である。

[図 14]第 6の実施の形態におけるデジタルカメラ 2が実行する処理のフローチャートを示す図である。

[図 15]第 6の実施の形態の変形例のデジタルカメラ 2が実行する処理のフローチヤ一トを示す図である。

[図 16]パーソナルコンピュータ 100が、プログラムの提供を受ける様子を示す図であ

発明を実施するための最良の形態

第 1の実施の形態

本発明の画像処理装置の一実施の形態であるデジタルカメラについて説明する。本実施の形態のデジタルカメラは、顕微鏡像（顕微鏡によって拡大された像のことを言う）を撮影し、撮影した顕微鏡像の撮影画像をモニタに表示するとき、実際に肉眼で見た顕微鏡観察像と近い色の見えになるようにする。具体的には、デジタルカメラによって撮影した画像がデジタルカメラ内部で以下に説明するような適切な色変換処理がなされる。

[0010] 顕微鏡観察システム

図 1は、顕微鏡 1と顕微鏡用デジタルカメラ（以下単にデジタルカメラとも言う） 2とモユタ 3とからなる顕微鏡観察システムを示す図である。照明 6は、顕微鏡観察システムが置かれた室内を照明する照明であり、顕微鏡 1およびモニタ 3の後述する周囲照明となる。デジタルカメラ 2とモニタ 3は、ケーブル 4により接続される。デジタルカメラ 2 にはマウス 5が接続され、モニタ 3に表示される各種メニューをマウス 5により選択することにより各種の設定を行うことができる。

[0011] 顕微鏡 1では、照明用の光源 11により標本 (試料） 12が照明され、対物レンズ 13と接眼レンズ 14により拡大された標本像が観察できる。図 1に示すように、顕微鏡 1の上部にはデジタルカメラ 2が取り付けられている。デジタルカメラ 2は、撮影した画像をデジタルカメラ 2に接続されたモニタ 3にリアルタイムで表示することができる。

[0012] 顕微鏡 1は、視野切り替えスィッチ 15を有し、接眼レンズ 14側とデジタルカメラ 2側とに視野を切り替える。これにより、接眼レンズ 14を通して目視で標本 12を直接観察したり、デジタルカメラ 2で撮影した顕微鏡像の画像がモニタ 3に表示され、モニタ 3 上で標本 12を観察したりすることができる。視野切り替えスィッチ 15は、完全に接眼レンズ 14側とデジタルカメラ 2側に切り替えるだけでなぐ光を半分に分けることも可能である。これにより、接眼レンズ 14側からとモニタ 3側からと同時に観察することも可能となる。

[0013] 本実施の形態では、顕微鏡 1の接眼レンズ 14を介して直接観察した時の顕微鏡像と、デジタルカメラ 2で撮影しモニタ 3で表示した顕微鏡像の画像の色の見えが近くなるようにデジタルカメラ 2内で所定の色変換処理が行われる。

[0014] 顕微鏡 1とモニタ 3の表示画像の色の見えに影響を及ぼす要因として、主に、光源 11とモニタ 3の色温度の違い、光源 11とモニタ 3の照明輝度の違い、接眼レンズ 14 を通して顕微鏡像を観察する時とモニタ 3観察時の周囲照明の違いなどがある。モニタ 3の色温度は、標準視環境であれば D65と決まっている力顕微鏡照明の色温度は、光源 1 1に用いているランプの特性で決まり、 3000K〜5000K程度とモニタより低い色温度の場合が多い。従って、照明用の光源 1 1とモニタ 3の色温度の違いを考慮してモニタ 3に表示しないと、接眼レンズ 14により肉眼で直接見る顕微鏡観察像と色が異なって見えることになる。

[0015] また、モニタ 3の場合、輝度も標準視環境では 80Cd/m²と決まっており、よく使われる LCDの場合最大でも 200Cd/ m²程度までしか設定できない。実際には、最大輝度に設定して!/、ても経年劣化で輝度が落ちてくるので 200Cd/ m²以下で使用することが多い。一方、顕微鏡 1を接眼レンズ 14を介して観察している場合、輝度は 300Cd/ m 以上で観察していることが多ぐ場合によっては lOOOCd/ m²以上とモニタ観察時より一桁近く高レ、輝度で観察して!/、る条件もある。

[0016] また、周囲照明による影響も異なっている。接眼レンズ 14による顕微鏡観察時は、顕微鏡像しか見えなレ、為、周囲の影響 (周囲が明るレ、のか喑レ、のか）は余り受けて!/、ない。しかし、モニタ 3による観察時は、通常明るい実験室で使用している場合が多い。従って、接眼レンズ 14で直接観察している場合に比べ、モニタ表示画像はコントラストが低く見える。また、モニタ 3の色温度と周囲照明の色温度が違う場合には、視覚は周囲照明の色温度にも影響を受けるため、周囲照明の色温度の考慮も必要になる。

[0017] 本実施の形態では、この様な視環境の違!/、を考慮して、接眼レンズ 14を通した直接観察の場合とモニタ 3を介した間接観察の場合とで、標本 12の顕微鏡観察像の色の見えが近くなる様にデジタルカメラ 2内部で以下に説明する画像処理を行う。

[0018] 図 2は、デジタルカメラ 2の制御部 21、撮像部 22、メモリ 23などを示す図である。制御部 21は、マイクロプロセッサおよび周辺回路などから構成され、メモリ 23内に格納されたプログラムを実行することによりデジタルカメラ 2の各種の制御および後述する画像処理を行う。メモリ 23は、プログラムの格納や画像処理時の一時的なバッファーの役割をなすとともに各種の情報が格納されている。従って、メモリ 23の一部は不揮発性メモリで構成されている。

[0019] 撮像部 22は、 CCDなどの撮像素子 (イメージセンサ）から構成され、撮影レンズなどの撮影光学系（不図示)を介して入射する被写体からの光束を受光して電気信号に変換し、変換された電気信号をデジタル変換して画像データとして出力する。撮像部 22は、 RGBカラーフィルターを有し、 RGB表色系の画像データを出力する。

[0020] 図 3は、デジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。画像取得部 31は、撮像部 22から RGB表色系の画像データを取得する。

[0021] 被写体照明条件取得部 32は、顕微鏡 1における被写体である標本 12を照明する光源 11の白色点 (X ，Y ，Ζ )と照明光源 11の絶対輝度 Υ を取得する。具体的に

W W W W_abs

は、被写体照明条件取得部 32は、モニタ 3に光源 11の種類が指定できるメニュー画面を表示し、マウス 5により観察者 (ユーザー）が光源 11の種類を指定する。例えば、メニュー画面に、水銀ランプ、 LED等が表示され、顕微鏡 1に使用されている照明光源 11の種類が観察者によりマウス 5を介して指定される。光源の種類が判明すると、その光源の色温度が分かりその光源の白色点 (X ，Υ ，Ζ )は分かる。絶対輝度 Υ

W W W W_abs は、デジタルカメラ 2の測光計（不図示）からの出力から得る。

[0022] 被写体観察時の周囲照明条件取得部 33は、顕微鏡観察時の周囲照明の白色点（ X ，Υ ，Ζ )と照明の絶対輝度 Υ を取得する。被写体観察時の周囲照明条件取

SW SW SW SW.abs

得部 33は、モニタ 3に周囲照明 6の種類および輝度が指定できるメニュー画面を表示し、マウス 5により観察者が周囲照明 6の種類および輝度を指定する。例えば、メニユー画面に、白熱灯、蛍光灯等および輝度（明るい、普通、暗い等）が表示され、観察者によりマウス 5を介して指定される。照明 6の種類が判明すると、その光源の色温度が分かり、その光源の白色点 (X ，Υ ，Ζ )が分かる。また、明るい、普通、暗い等

SW SW SW

の別でその照明の絶対輝度 Υ を推定する。すなわち、予め想定される複数の周

SW.abs

囲照明条件をメニュー画面で表示し、観察者に指定させ選択するようにする。

[0023] 画像表示照明条件取得部 34は、色順応変換した画像を表示するモニタ 3の白色点 (X ',Υ ',Ζ ')とモニタ 3の絶対輝度 Υ 'を取得する。モニタ 3の白色点 (X ',Υ ',Ζ

W W W W_abs W W

')やモニタ 3の絶対輝度 Y 'は、標準視環境として予め定められ、制御部 21内のメ

W W_abs

モリに格納されているので、そのデータより取得する。本実施の形態では、標準視環境として、 sRGB標準視環境（モニタ 3の色温度は D65、輝度は 80Cd/m²)と決まってい

^ o [0024] 表示画像観察時の周囲照明条件取得部 35は、モニタ 3の観察環境に於ける周囲照明の白色点 (X ',Υ ',Ζ ')と照明の絶対輝度 Υ 'を夫々取得する。表示画像観察時の周囲照明条件取得部 35は、被写体観察時の周囲照明条件取得部 33と同様にして、モニタ 3に周囲照明 6の種類および輝度が指定できるメニュー画面を表示し、マウス 5により観察者が周囲照明 6の種類および輝度を指定する。例えば、メニュ一画面に、白熱灯、蛍光灯等および輝度（明るい、普通、暗い等）が表示され、観察者によりマウス 5を介して指定される。照明の種類が判明すると、その光源の色温度が分かり、白色点 (X ',Υ ',Ζ ')が分かる。また、明るい、普通、暗い等の別でその照明の絶対輝度 Υ 'を推定する。すなわち、予め想定される複数の周囲照明条件をメニュー画面で表示し、観察者に指定させ選択するようにする。なお、本実施の形態では、表示画像観察時の周囲照明と被写体観察時の周囲照明とは、同じ室内であるため同じ室内照明 6となる。

[0025] 被写体と表示画像の観察方法入力部 36は、モニタ 3の表示画像が顕微鏡接眼レンズからの直接観察をしながら観察される画像力、、画像保存用のための画像か、もしくは顕微鏡 1とは遠隔地でモニタ表示画像のみを観察する為の画像なのかを、メニュ一画面を使用して観察者に選択させる。

[0026] 直接観察をしながら観察される画像とは、顕微鏡観察とモニタ観察を交互に行う併用観察の場合にモニタ 3に表示する画像である。画像保存用の画像とは、とりあえずモニタ 3に表示されているが、この画像は記録媒体などに保存され、後日、顕微鏡観察をしながらではなく単独でモニタ 3に表示して観察するような画像である。すなわち、画像保存用の画像や顕微鏡 1とは遠隔地でモニタ表示画像のみを観察する為の画像は、顕微鏡観察の観察条件には影響されな!、状態で観察するための画像であ

[0027] 時間的順応度算出部 40は、被写体と表示画像の観察方法入力部 36にて選択された結果に応じて、顕微鏡 1の接眼レンズ 14を通して被写体を直接観察している時の時間的順応度 R 、並びに、モニタ 3観察時の時間的順応度 R 'を 0.0〜1.0の間

tmp tmp

で決定する。時間的順応度とは、ある視環境 1から異なる視環境 2へ視環境が変化した場合に、視覚が視環境 2にどれだけ順応しているかを示すパラメータである。 [0028] 図 4は、時間的順応度 R の時間変化を示す図である。図 4に示す様に、視環境 2

tmp

に移ってからの時間的順応度 R は、時間と共に非線形関数で 0.0から 1.0に近づい tmp

て行く。例えば、最初の短時間は急激に増加し、徐々に変化が緩やかになりながら最終的に 1.0に到達する。一方、視覚が視環境 2に順応している割合が R の場合、 tmp 残りの（1-R )は視環境 1に順応した状態が残っていることになる。本実施の形態の tmp

場合、視環境 1としてモニタ 3観察時の視環境、視環境 2として顕微鏡 1で標本 12を直接観察時の視環境と考えればよい。同様に、視環境 2から視環境 1に変化した場合の時間的順応度 R 'も決定できる。

tmp

[0029] 例えば、表示画像が画像保存用の場合、もしくは顕微鏡 1から遠隔地にあるモニタ

3において表示画像のみを観察する為の画像の場合は、視覚はモニタ観察時の視環境に完全順応していることになる。従って、顕微鏡観察時の視環境に影響を受けないので、 R =R '=1·0に設定する。

tmp tmp

[0030] 一方、顕微鏡 1の接眼レンズ 14からの直接観察をしながらモニタ 3の画像が観察される場合、モニタ観察時の視環境に完全に順応しておらず、顕微鏡観察時の視環境にも影響を受けていることになる。従って、 R =R '=0.8に設定する。この 0.8という tmp tmp

値は、実験等により求めたものである。なお、異なる視環境で観察を交互に移動するときの移動時間や移動距離などが変化すれば、それに応じた時間的順応度 R 、 R

tmp tm

'を、実験やシミュレーションなどで求め、求めた値を使用すればよい。

P

[0031] RGB/LMS変換部 37は、画像取得部 31から出力された画像データの各画素値 RG Bを、式 (1)に示すようにカメラ固有の色空間 RGBから測色値 XYZに変換し、さらに、式 (2)に示すように XYZから人間の錐体応答に近い色空間である LMS空間に変換する。ここで、式 (1)のマトリックス Aは、予めカメラの分光特性に合わせて記憶された 3 X 3のマトリックスである。式 (2)のマトリックス M は、 XYZから錐体応答 LMSへの変換マトリ

CAT02

ックスである。本実施の形態では、 M として式 (3)に示す CIEの定めた CAT02を使

CAT02

用する。

[数 1] 【数 1】

【数 2】

【数 3】

0.7328 0.4296 -0.1624

Mr -0.7036 1.6975 0.0061 ΐ3)

0.0030 0.0136 0.9834；

[0032] 被写体観察時完全順応白算出部 38は、被写体照明条件取得部 32で取得された被写体照明光源の測色値 (X ，γ ，ζ )と被写体観察時の周囲照明条件取得部 33で

w w w

取得された被写体照明光源の測色値 (X ，Υ ，ζ )から、被写体観察環境に完全に順応している場合の順応白色点 (X ，Υ ，ζ )を算出する。なお、異なる視環境の白を混合するには、人間の錐体応答に近い色空間である LMS空間で行うのが望ましい

[0033] そこで、まず、（X ，Υ ，Ζ )、（X ，Υ ，Ζ )を、次式 (4)(5)により LMS空間に於ける応答に変換する。

[数 4]

【数 4】

[数 5]

【数 5】

[0034] 次に、被写体を観察している場合の、被写体照明光源と周囲照明光源の影響の比率 R と、夫々の照明の絶対輝度 Υ , Y を用いて、被写体観察視環境に完全 mix W_abs SW_abs

に順応している場合の順応白 f色点の LMS応答 (L ,M ,S )、及び順応輝度 Y を

WO WO WO WO.abs 式 (6)より求める。ここで、 R について R =0.9程度の値が予め記憶してあり、その値を mix mix

使用する。式 (6)は、混合照明下の順応白色点として、次の文献に記載の方法と同様である。文献" CIE 162:2004 CHROMATIC ADAPTATION UNDER MIXED ILLUMI NATION CONDITION WHEN COMPARING SOFTCOPY AND HARDCOPY IMAG ES"， CIE, 2004。

關

【数 6】

, ^ira+(l-

[0035] 被写体照明光源と周囲照明光源の影響の比率 R は、 0〜1の範囲の値であり、周 mix

囲照明の影響が小さいほど 1に近い値になり、周囲照明の影響が大きいほど小さい値になる。従って、 R は、被写体照明光源 11と周囲照明光源 6の影響し合う度合い mix

によって適宜異なる値を使用すればよい。例えば、顕微鏡観察において周囲照明光源 6の影響は全くないとするのであれば、比率 R . =1としてもよい。そのようにすれば、順応白色点の LMS応答 (L ,M S )=(L ,M S )となる。ただし、本実施の形態では

WO wo wo w w w

、接眼レンズ 14を司見くときの視野にわずかであるが周囲照明光源 6の照明が入る。従つて、上記の通り R =0.9程度の値を使用する。

mix

[0036] 表示画像観察時完全順応白算出部 39は、被写体観察時完全順応白算出部 38と同様にして、画像表示照明光源の測色値 (X ',Υ ',Ζ ')と、表示画像観察時の周囲

W W W

照明光源の測色値 (X ',Υ ',ζ ')と、夫々の照明絶対輝度 Υ ' Υ 'を用いて、

SW SW SW W_abs SW.abs

モニタ表示画像観察視環境に完全に順応している場合の順応白色点の LMS応答 (L ',Μ ' S ')、及び順応輝度 Y 'を求める。ただし、表示画像観察時での周囲照

WO WO WO WO.abs

明 6の影響は大きく受けるので、被写体観察時とは異なり R =0·5 0·6の値を使用す

mix

る。この値は、半々の影響より少しモニタ 3自体の影響の方が強いことを意味する。

[0037] 次に、被写体観察時順応白算出部 41は、被写体観察時完全順応白算出部 38にて算出された順応白色点 (L ,M S )と、表示画像観察時完全順応白算出部 39に

WO WO W0

て算出された順応白色点 (L ',Μ ' S ')、及び時間的順応度算出部 40で算出され

WO WO W0

た時間的順応度 R を用いて、顕微鏡 1にて被写体である標本 12を観察時に実際に

tmp

観察者が順応している白色点の錐体応答 (L ,M S )、及び順応輝度 Y を次式

Wl Wl Wl WLabs より算出する。すなわち、顕微鏡 1による被写体観察の観察条件下での順応白色点（ L ,M S )を算出するとき、モニタ 3による表示画像観察の観察条件下の照明条件

Wl Wl W1

を、時間的順応度 R を用いて考慮する。

tmp

[数 7]

【数 7】

' · YwO · SwO+(l - *S (

>Jwl

YwO +(l~ YwO_abs'^llZ 表示画像観察時順応白算出部 42は、被写体観察時順応白算出部 41と同様にして、

被写体観察時完全順応白算出部 38にて算出された順応白色点 (L ，M ，S )と、表

WO WO W0 示画像観察時完全順応白算出部 39にて算出された順応白色点 (L '，M '，S ')、及

WO WO WO

び時間的順応度算出部 40で算出された時間的順応度 R 'を用いて、モニタ 3に表

t即

示された画像観察時に実際に観察者が順応している白色点の錐体応答 (L ',Μ '，

Wl W1

S ')、及び順応輝度 Υ 'を次式より算出する。すなわち、モニタ 3による表示画像

W1 WLabs

観察の観察条件下での順応白色点 (し ',Μ '，S ')を算出するとき、顕微鏡 1による

Wl Wl W1

被写体観察の観察条件下の照明条件を、時間的順応度 R tmp 'を用いて考慮する。

[数 8]

【数 8】

- Rtmp ') - Yv,0 ^WjrRtmp' . YwO_abs'¹¹³' ' 本実施の形態では、色順応変換として von Kriesの色順応式を用いる。色順応変換計算部 43は、被写体観察時順応白算出部 41と表示画像観察時順応白算出部 42 にて算出された夫々の視環境にて実際に順応している白色点の錐体応答 (L ，

Wl M ， W1

S )、（L ',Μ '，S ')を用いて式 (10)に示すように M を作成する。色順応変換

Wl Wl Wl Wl vot Kries

後の錐体応答，M',S')は、 RGB/LMS変換部 37で算出した顕微鏡照明下の撮影画像の各画素に於ける錐体応答 (L，M，S)と M を用いて、以下の式 (9)で算出できる。

vonKries

ほ夂 9] 【数 9】

[数 10]

【数 1 o】

じ M'S'/R'G'B'変換部 44は、錐体応答 LMS空間から測色値 XYZに変換し、表示画像用の sRGBに変換する。ここでマトリックス M ¹は式 (3)で定義したマトリックスの逆

CAT02

変換であり、マトリックス Bは sRGBの規格で決まっているマトリックスである。また画像表示モニタの特性が sRGBからずれて!/、る場合には、このマトリックス Bをモニタの条件に合わせて変更する。

[数 11]

【数 1 1】

[数 12]

【数 1 2】

[数 13] 【数 1 3】

3.2406 -1.5372 -0.4986

-0.9689 1.8758 0.0415 (13)

0.0557 -0.2040 1.0570ソ

[0041] 顕微鏡照明下の撮影画像の各画素について、上記式 (9)〜式 (13)の変換を行い、モニタ表示用画像を作成する。作成した画像は、画像表示部 45によりモニタ 3に表示される。

[0042] なお、 RGB/LMS変換部 37、色順応変換計算部 43、じ M'S'/R'G'B'変換部 44の処理（式 (1)〜(3)、（9)〜(13)の変換）を一つにまとめたマトリックス C

[数 14]

【数 1 4】

C = B · Μ_αΓ02 "- - - Μ^₇₀₂ - A . . . (14)

を作成し、各画素については以下の計算を行うのみとしてもよい。

[数 15]

：数 1 5】

[0043] 以上説明した本実施の形態によれば、以下のような作用効果を得ることができる。

(1)色順応変換で考慮する白色点として、被写体照明条件取得部 32と画像表示照明条件取得部 34で得られる白色点や、被写体観察時完全順応白算出部 38と表示画像観察時完全順応白算出部 39で得られる白色点を用いるだけでは、お互いの視環境の影響が無視できない場合に正確な色再現が出来ない。しかし、本実施の形態では、被写体観察時の順応白色点や表示画像観察時の順応白色点を求めるとき、お互いの視環境の影響を考慮して算出するようにしているので、正確な色再現が可能となる。 [0044] (2)視環境の異なる両者を交互に見る場合には、特に、他方の視環境に於ける輝度が高い場合にその影響が強くなる。本実施の形態では、それぞれの視環境での輝度の情報も取得し、順応白色点を算出する時、互いの視環境での輝度の大きさも考慮している。従って、色の見えが他方の視環境の輝度の影響を受けるという事実を正確に反映させながら色変換処理を行うことができ、正確な色再現が可能となる。

[0045] (3)順応白色点を算出する時、異なる視環境の影響を時間的順応度 R というパラメ

tmp

ータを利用して行うようにした。これにより、簡単な考え方で、し力、も正確に異なる視環境の影響を考慮することができる。また、 2つの視環境の異なる状況が変化した場合でも、時間的順応度 R の値を変えるだけで対応できる。

tmp

[0046] 一変形例 1

上記第 1の実施の形態においては、被写体観察時の周囲照明条件取得部 33にて顕微鏡観察時の周囲照明条件を取得し、被写体観察時完全順応白算出部 38にて顕微鏡観察視環境に完全に順応している場合の白色点を算出していた。しかし、顕微鏡専用のデジタルカメラ 2で顕微鏡像を撮像したり、接眼レンズ 14を介して顕微鏡像を観察したりする場合、周囲照明の影響を無視してもよい場合がある。すなわち、標本 12には周囲照明が完全に当たらないとし、デジタルカメラ 2や観察者の視野には周囲照明が入らないとした場合、被写体観察時の周囲照明条件取得部 33と、被写体観察時完全順応白算出部 38を省略することができる。

[0047] 図 5は、この変形例 1のデジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。被写体観察時の周囲照明条件取得部 33、被写体観察時完全順応白算出部 38が省略され、構成が簡略化されている。顕微鏡観察時には、周囲照明は標本 12には当たらず、観察者の視野にも入らない為、照明の絶対輝度 Y =0と見なすこと力 Sできる。この場合、式 (6)は、次式に置き換えられる。

[数 16]

【数 16】

Ϊ wo^abs - ^w_abs [0048] このように、被写体観察時の周囲照明条件を考慮しない場合であっても、被写体観察時の順応白色点や表示画像観察時の順応白色点を求めるとき、お互いの視環境の影響を考慮して算出するようにしているので、正確な色再現が可能となる。なお、変形例 1は、第 1の実施の形態において、被写体観察時の R を R =1とした場合と

mix mix

等価である。

[0049] 一変形例 2—

また、上記第 1の実施の形態においては、被写体観察時順応白算出部 41にて表示画像観察時の順応白色点を考慮している。しかし、顕微鏡専用のデジタルカメラ 2 の様に被写体視環境が限られている場合には、前述した様に顕微鏡 1とモニタ 3の照明輝度を比較すると Y 》 Y 'である。また、一般的に順応は図 4のグラフの様

W_abs W_abs

に、最初の短時間で 5割以上順応し完全順応に近づくに連れ変化が遅くなる為 R >

tmp

(1-R )と考えてよい。従って、式 (7)を次式のように簡略化しても見えへの影響は小さ tmp

い。

[数 17]

【数 1 7】 · . · {17)

[0050] 図 6は、この変形例 2のデジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。変形例 1の図 5から、さらに被写体観察時順応白算出部 41を省略することができ、構成を簡略化することができる。少なくとも、表示画像観察時の順応白色点を求めるときに、お互いの視環境の影響を考慮して算出するようにしているので、モユタ 3での正確な色再現が可能となる。なお、変形例 2は、第 1の実施の形態において、被写体観察時の R を R =1とし、 R を R =1とした場合と等価である。

mix mix tmp tmp

[0051] 一変形例 3—

上記第 1の実施の形態においては、モニタ 3観察時の時間的順応度 R 'を固定値

tmp

として説明した。しかし実際には、モニタを見ている時間によって図 4のグラフに示す様に順応状態が変化する。従って、図 4のグラフを用いて、モニタ観察時間に応じて R 'を徐々に変え、色変換も時間に応じて徐々に変えていくと、常に色の見えを正確 tmp

に再現する事が可能となる。

[0052] 図 10は、モニタ 3観察時の時間の計測方法の例を示す図である。図 10 (a)は、顕微鏡 1の接眼部にセンサ 51を取り付け、センサ 51の出力をデジタルカメラ 2に入力する方法を示す。観察者が接眼レンズ 14を司見いているときセンサ 51が働き、デジタルカメラ 2はそれを検出する。デジタルカメラ 2は、センサ 51が働いているとき観察者が顕微鏡 1を司見いていると判断し、それ以外は、接眼部から目が離れてモニタ 3を観察している時間として判断する。この場合、顕微鏡観察時の時間も正確に計測できるので、この時間と図 4のグラフから、顕微鏡観察時の時間的順応度 R も算出し、この値

tmp

を使用しても良い。

[0053] 図 10 (b)は、モニタ前面撮影用カメラ 52をモニタ 3に取り付け、モニタ前面撮影用カメラ 52の出力をデジタルカメラ 2に入力する方法を示す。デジタルカメラ 2は、モニタ前面撮影用カメラ 52の出力に基づき人間の顔を認識し、人間の顔が認識されたらモニタ観察時間計測を開始し、人間の顔が認識されなくなったらモニタ観察時間計測を終了する。このようにしてモニタ観察時間を計測することができる。なお、顔が正面（モニタ側）を向いてレ、るかどうかまで判断し、顔が正面（モニタ側）を向いて!/、る時間からモニタ 3観察時間を算出しても良い。また、これらの処理はモニタ前面撮影用カメラ 52内で行い、デジタルカメラ 2へはモニタ 3観察時間のみ出力するようにしてもよい。さらに、モニタ 3観察時の時間は別の方法で計測しても良い。

[0054] 第 2の実施の形態

第 1の実施の形態では、 2つの視環境の照明条件を夫々取得し、白色点を求める計算を幾つ力、行う構成について説明をした。第 2の実施の形態では、照明条件や観察条件が標準視環境として予め定まってレ、る場合に、被写体と表示画像の観察方法入力部 36の入力結果に応じて予め色順応変換を幾つかのマトリックスや LUTを求めておき、条件に合わせて色順応変換を切り替える例について説明する。

[0055] 顕微鏡観察システムは第 1の実施の形態と同様であるので、第 1の実施の形態の図 1および図 2を参照することとし、その説明を省略する。図 7は、第 2の実施の形態のデジタルカメラ 2の制御部 21が行う処理を説明するブロック図である。

[0056] 顕微鏡観察時の視環境は、カメラ撮影モードスィッチ（不図示）を ONにすることで被写体照明白色点 (X ，Υ，Ζ )や照明輝度 Υ が予め定めた値に設定されるものとす

W W W w_abs

る。また、モニタ 3で表示した画像の視環境は、 sRGB標準視環境（デバイス色温度 =D 65，デバイス輝度 =80Cd/m²，周囲輝度 =4.1Cd/m²)と、周囲輝度のみ通常オフィス環境 (約 160Cd/m²)に沿って明るくした環境の 2種類のモードを用意する。時間的順応度 R 、R 'として、「顕微鏡と併用して観察用」の R =R '=0.8、「モニタ表示画像の tmp tmp tmp tmp

み観察用、または保存用」の R =R '=1.0の 2種類のモードを用意する。

tmp tmp

[0057] 上記、 sRGB標準視環境と通常オフィス環境の 2種類のモードと、「顕微鏡と併用して観察用」と「モニタ表示画像のみ観察用、または保存用」の 2種類のモードの組み合わせによる 4つのモードに対して、第 1の実施の形態で説明した方法により、式 (14) のマトリックス Cを予め算出し、デジタルカメラ 2内のメモリ 23に記憶しておく。図 8は、 4つのモードに対応するマトリックス 1〜4を示すテーブルである。

[0058] 画像取得部 31は、第 1の実施の形態と同様に、顕微鏡画像の撮影画像すなわち画像データを取得する。周囲照明環境選択部 46は、被写体である顕微鏡像観察時の周囲環境について、「A.薄暗い（sRGB環境準拠）」、「B.明るい居室」から近い視環境を選択する。周囲照明環境選択部 46は、デジタルカメラ 2の測光センサ（不図示）の測光結果や専用センサ（不図示）の検出結果を利用して判断してもよいし、観察者にメニュー画面から指定させるようにしてもょレ、。

[0059] 被写体と表示画像の観察方法選択部 47は、「1.顕微鏡と併用して観察用」、「2.モユタ表示画像のみ観察用、または保存用」から近い環境を選択する。これは、観察者にメニュー画面から指定させるようにする。

[0060] 色順応変換選択部 48は、周囲照明環境選択部 46、被写体と表示画像の観察方法選択部 47の選択結果を用いて、図 7に示すように最適なマトリックス Cを選ぶ。色順応変換部 49は、色順応変換選択部 48で選択された Cと第 1の実施の形態で説明した式 (15)を用いて、画像取得部 31で取得した画像の各画素に対し色順応変換を行う。色順応変換した画像データは、画像表示部 45によりモニタ 3に表示される。

[0061] 以上説明した第 2の実施の形態によれば、以下のような作用効果を得ることができ (1)複数の色変換用マトリックスを予め準備してメモリに格納し、条件に応じて適切なマトリックスを使用して色変換を行なうようにした。これにより、簡易な構成で、迅速に、最適な色の再現が行なわれる。照明条件や観察条件が予め定まっているような場合に、特に有効である。なお、予め作成した複数の色変換用マトリックスは、第 1の実施の形態で説明したように、お互いの視環境の影響を考慮して算出した順応白色点を使用して決定されるので、第 1の実施の形態と同様により精度の高い色の再現が可能となる。

[0062] 第 3の実施の形態

第 1の実施の形態では、顕微鏡観察システムでの例について説明をした。このような顕微鏡システムでの色再現を適切に行う手法は、机上にある対象物をデジタル力メラ 2で撮影しモニタ 3で表示するような場合にも適用できる。第 3の実施の形態では、机上にある対象物をデジタルカメラ 2で撮影し、机上での色の見えをモニタ 3上でも最適に再現する例について説明する。

[0063] 図 9は、第 3の実施の形態の机上作業システムを示す図である。机上に置かれた対象物 16にはスポットライト 17により照明されている。また、室内には室内照明 18が設けられている。デジタルカメラ 2は、机上の対象物 16を撮像し、机上での色と同じ色の見えになるようモニタ 3に対象物 16の画像を表示する。

[0064] このような机上作業システムの応用としては、机上で開発商品の評価や議論をしたり、出版物やデザインや美術品の評価をしたりする場合などが考えられる。その他にも、種々の応用が考えられる。対象物 16は、印刷物（プリント）であったり実際の物であったりする。

[0065] デジタルカメラ 2、モニタ 3、ケーブル 4、マウス 5は、第 1の実施の形態と同様である。従って、第 1の実施の形態の図 2および図 3を参照して以下説明する。

[0066] 第 1の実施の形態と第 3の実施の形態の違いは、対象物 16を顕微鏡を介して観察するのではなく肉眼で直接観察していること、および、各種の照明が異なっていることだけである。従って、第 1の実施の形態での画像処理の内容はそのまま第 3の実施の形態でも適用される。以下では、第 3の実施の形態における照明条件の取得の概略についてのみ説明をし、詳細な具体的な内容は第 1の実施の形態の内容を参照する

[0067] 画像取得部 31は、撮像部 22から RGB表色系の対象物 16の画像データを取得する。被写体照明条件取得部 32は、対象物 16を照明するスポットライト 17の白色点 (X ，Y ，Ζ )とスポットライト 17の絶対輝度 Υ を取得する。被写体観察時の周囲照明

W W W W_abs

条件取得部 33は、室内周囲照明 18の白色点 (X ，Y ，Ζ )と照明 18の絶対輝度 Υ

SW SW SW SW

を取得する。画像表示照明条件取得部 34は、第 1の実施の形態と同様に、色順

_abs

応変換した画像を表示するモニタ 3の白色点 (X ',Υ ',Ζ ')とモニタ 3の絶対輝度 Υ

W W W W_ab

'を取得する。表示画像観察時の周囲照明条件取得部 35は、モニタ 3の観察環境に於ける周囲照明である室内照明 18の白色点 (X ',Υ ',Ζ ')と室内照明 18の絶対輝

SW SW SW

度 Υ 'を夫々取得する。

SW.abs

[0068] 被写体と表示画像の観察方法入力部 36は、モニタ 3の表示画像が机上の対象物を肉眼で観察をしながら観察される画像力、、画像保存用の画像か、もしくは机上とは遠隔地でモニタ表示画像のみを観察する為の画像なのかを、メニュー画面を使用して観察者に選択させる。

[0069] このようにして画像データや、照明条件や、被写体と表示画像の観察方法を取得すると、第 1の実施の形態と同様にして、机上での対象物 16の色の見えをモニタ 3でも適切に再現するように色変換処理がなされる。その結果、机上での肉眼で見る対象物 16とモニタ 3で表示される対象物 16の色再現一致し、適切な作業を行うことができる。

[0070] 第 4の実施の形態

第 4の実施の形態では、第 1の実施の形態の処理において、さらに顕微鏡観察時の照明条件における不完全順応の度合いを表す順応ファクタと、表示画像観察時の照明条件における不完全順応の度合いを表す順応ファクタとを考慮するものである。そして、この不完全順応の度合いを表す順応ファクタを、変換対象色の色相に依存して変えることにより、色の見え再現をより精度よく行うようにしていることが特徴である

〇

[0071] 顕微鏡観察システムは第 1の実施の形態と同様であるので、第 1の実施の形態の図 1および図 2を参照することとし、その説明を省略する。

[0072] (色の見え実験結果）

まず、色の見え実験について説明する。色の見えに熟練した被験者に、色温度の異なる 2つの視環境に於いて、色の見えが近く見える色を選択してもらう実験である。色温度の異なる視環境にて、順応ファクタを変えて色変換した複数の色の中から、見えが最も近くなる色を選んでもらう色の見え実験を行うと、色相に依存して最適な順応ファクタ Dが変化する結果が得られる。

[0073] 色温度 Tの視環境下に参照色 A(h*)を表示する。参照色 A(h*)は、色相 h*により表

1

される色である。なお、色相 h*は色相角で表される。色温度 Tの視環境に、参照色 A( h*)から色温度 T Tの違いを考慮して CIECAM02にて色変換した結果を表示する。こ

1 2

のとき、順応ファクタ Dは照明輝度や周囲の明るさ等の視環境から予測される値ではなぐ D=0.0 1.0の間で変えた複数の色 B(h*)(D)を選択肢として表示する。被験者は、色温度 Tの視環境下で A(h*)を見たときの色の見えと、色温度 Tの視環境下で B(h*

1 2

)(D) (D=0.0… ）を見たときの色の見えを比較し、両者の見えが最も近い色 B(h*)( D )を選択する。この様な実験を、参照色 A(h*)の輝度や彩度は変えずに色相角 h* h

のみ変えた複数の色について行う。

[0074] 更に複数被験者に複数回ずつ実験を行ってもらい、結果を集計すると図 11の様な結果が得られた。図 11は最適な順応ファクタ D と色相角 h*の関係を示しており、横 h

軸は色相角 h* (単位は deg)、縦軸は夫々の実験で最も見えが近!/、と選ばれた最適順応ファクタ D の被験者平均値である。本実施の形態では、 h*=30deg (赤）、 h*=90d

h

eg (黄）、 h*=150deg (緑）、 h*=210deg (シアン）、 h*=270deg (青）、 h*=330deg (マゼンタ）の 6色につ!/、ての実験を行った。図 11の結果から色相に依存して最適な順応ファクタが変化しており、 h*=90deg (黄）で D を大きぐ h*=270deg (青）で D を小さくした h h

方がより色の見えが近くなることが分かる。

[0075] (変換処理）

次に、色変換処理について説明する。図 12は、第 4の実施の形態におけるデジタルカメラ 2が実行する処理のフローチャートを示す図である。予め上述の様な実験を行って、最適な順応ファクタと色相の関係 D (h*)をテーブルや近似式の形で画像処理を行うプログラム内に保有する。

[0076] まずステップ S21にて、撮影画像を取得する。撮影画像は、複数の画素から構成され、カメラの分光感度に固有の色空間 RGBで記述されている。

[0077] 次にステップ S22に進む。ステップ S22では、第 1の実施の形態の被写体観察時順応白算出部 41 (図 3)の処理と同様の処理を行い、顕微鏡 1にて被写体である標本 1

2を観察時に実際に観察者が順応している白色点の錐体応答 (L ,M ，S )、及び

Wl Wl W1 順応輝度 Y を求める（第 1の実施の形態の式 (7)を参照）。

Wl.abs

[0078] ステップ S23では、第 1の実施の形態の表示画像観察時順応白算出部 42 (図 3)の処理と同様の処理を行い、モニタ 3に表示された画像観察時に実際に観察者が順応している白色点の錐体応答 (L ',Μ '，S ')、及び順応輝度 Y 'を求める（第 1の

Wl Wl Wl Wl.abs

実施の形態の式 (8)を参照）。

[0079] なお、ここで第 1の実施の形態の被写体観察時順応白算出部 41の処理と表示画像観察時順応白算出部 42の処理と同様の処理を行うということは、第 1の実施の形態の被写体照明条件取得部 32、被写体観察時の周囲照明条件取得部 33、画像表示照明条件取得部 34、表示画像観察時の周囲照明条件取得部 35、被写体と表示画像の観察方法入力部 36、時間的順応度算出部 40、被写体観察時完全順応白算出部 38、表示画像観察時完全順応白算出部 39が行う処理を含むことを意味する。また、上記処理（第 1の実施の形態の処理 32〜36、 38〜40)は、ステップ S22の前にあらかじめ行ってお!/、てもよレ、。

[0080] 次にステップ S24に進む。ステップ S24〜28の処理は、全画素について処理が終了するまで繰り返す。カメラ RGBはカメラの分光感度で決まる固有の色空間 RGBで記述されているので、予め決まっているカメラ RGB→XYZマトリックス M を使用して

RGB→XYZ

、 CIE 1931 XYZ色空間へ変換する。

[数 18]

【数 18】

[0081] 次にステップ S25に進み、変換対象画素の色相角 h*を算出する。色相角 h*の算出は、 CIE XYZから CIE LABに変換し、 a* b*の座標でなす角を 0 360° で算出した値を使用する。

[0082] ステップ S26では、予め色の見え実験結果から決定しておいた最適な順応ファクタと色相の関係 D (h*)より、ステップ S25で算出した h*の時の最適な色の見えを与える

h

順応ファクタ D (h*)を算出する。順応ファクタは周囲の明るさや順応輝度によっても

h

変化する為、撮影時の視環境と画像観察時の視環境では最適な順応ファクタが異なる。従って画像観察時の順応ファクタ D '(h*)も算出する。

h

[0083] ステップ S27では、ステップ S22 S23で読み込んだ視環境の違いと、ステップ S26 で算出した D (h*)、D '(h*)を使用して、顕微鏡観察時の照明条件下における色 LM h h

Sと色の見えが近くなる表示画像観察時の照明条件下の色じ M'S'を算出する。ここで使用する色の見えモデルとしては、第 1の実施の形態と同様に von Kries色順応式を使用する。 Von Kriesの色順応式を使用する場合には、第 1の実施の形態の式 (9)および次式にて色変換を行う。尚、 Y Y 'は、（L ,M S )、（L ',Μ ' S ')から次

Wl Wl Wl Wl Wl Wl Wl W1 式により算出する。

[数 19]

【数 19】

【数 20】

(20)

【数 21】

Lwi '

L WI,D'~

Ywi'- Bif 'ih) + Lwi'- (1 -

Mm'

Yw,'- Dif W+ Mwi' . (1 -Dif 'ih))

S

Ywi' • D_h* '(h)+ Swi' - (1-

(21)

[0084] ステップ S27の処理は、第 1の実施の形態の色順応変換計算部 43の処理と同様である。ただし、ステップ S27の処理では、ステップ S24で XYZ空間から LMS色空間へ変換しているので、さらに、第 1の実施の形態の式 (2)を使用して RGB空間から XYZ色空間へ変換してから色順応変換計算部 43と同様の処理を行う。

[0085] ステップ S28に進み、第 1の実施の形態のじ M'S'/R'G'B'変換部 44の処理と同様にして、錐体応答 LMS空間から測色値 XYZに変換し、表示画像用の sRGBに変換する。なお、この処理は、ステップ S29において全画素の色の見え変換が終了したと判断してから行ってもよい。

[0086] ステップ S29では、全画素処理が終了していなければ、上記ステップ S24に戻し、処理を繰り返す。全画素終了したら、ステップ S30に進み画像を出力して終了する。 [0087] 以上のようにして、顕微鏡観察時の照明条件と表示画像観察時の照明条件とが異なる場合に、精度良く近い色の見えを再現できる。上述の様に、本実施の形態の画像処理装置では、変換対象画素の色すなわち色相により最適な順応ファクタを使用して変換している為、より正確な色の見え予測をすることができる。

[0088] 尚、本実施の形態は、 CIECAM02の様な色の見えモデルなど、色順応を考慮した多様な色変換方法に適用可能である。

[0089] 上記第 4の実施の形態では、色相方向について行った実験結果を利用する例を説明した。しかし、彩度や明度方向にも色相方向と同様の実験を行い、順応ファクタ算出に用いてもよい。この場合、 CIE LABにおいて、彩度は C*=(a*²+b*²)^1/2、明度は L* の値を使用する。

[0090] また、色相、明度、彩度として CIE LABの h*， L*， C*を使用する例で説明したが、 CI E LAB以外の色空間に於けるパラメータを使用してもよい。例えば、 CIECAM02の相対的な明度、彩度、色相のパラメータである J， C， h等を使用してもよい。

[0091] 第 5の実施の形態

第 5の実施の形態は、第 4の実施の形態と同様に順応ファクタを考慮する実施の形態である。第 5の実施の形態では、輝度差の大きい視環境間の色の見え再現、特に輝度差によってコントラストが強く見える見え特性を簡単に実現できることが特徴であ

[0092] 顕微鏡観察システムは第 1の実施の形態と同様であるので、第 1の実施の形態の図 1および図 2を参照することとし、その説明を省略する。

[0093] 図 13は、第 5の実施の形態におけるデジタルカメラ 2が実行する画像処理プロダラムのフローチャートを示す図である。

[0094] まず、第 4の実施の形態（図 12)と同様に、ステップ S21にて、撮影画像を取得する。撮影画像はカメラの分光感度に固有の色空間 RGBで記述されている。

[0095] 次にステップ S41に進む。ステップ S41では、第 4の実施の形態と同様に、第 1の実施の形態の被写体観察時順応白算出部 41 (図 3)の処理と同様の処理を行い、顕微鏡 1にて被写体である標本 12を観察時に実際に観察者が順応している白色点の錐体応答 (L ,M ，S )、及び順応輝度 Y を求める（第 1の実施の形態の式 (7)を参昭）

[0096] ステップ S42では、第 4の実施の形態と同様に、第 1の実施の形態の表示画像観察時順応白算出部 42 (図 3)の処理と同様の処理を行い、モニタ 3に表示された画像観察時に実際に観察者が順応している白色点の錐体応答 (L ',Μ ' S ')、及び順応

Wl Wl W1

輝度 Y 'を求める（第 1の実施の形態の式 (8)を参照）。

Wl.abs

[0097] ステップ S43では、ステップ S41すなわち図 3の被写体照明条件取得部 32、被写体観察時の周囲照明条件取得部 33で取得した被写体観察時の照明条件から、無彩色に対する順応ファクタ D 、有彩色に対する順応ファクタ D を算出する。 D は

achr chr chr

CIECAM02で定められた次式等で算出される値を使用する。

[数 22]

【数 22】

[0098] ここで、順応輝度 Lは、通常し =Y /5を用いる。また Fはデバイス輝度と周囲輝

A A Wl.abs

度の比に応じて決まるパラメータである。一方無彩色（白やグレー）に対する順応ファクタ D =1.0と設定する。輝度が高い場合、照明の色が変わっても白は白く感じる（完 achr

全順応に近くなる）人が多いという視覚特性を考慮したもので、結果として生物顕微鏡観察像で言えば標本の有る部分 (染色されて!、る部分 =有彩色）と無!、部分 (染色のな!/、部分 =無彩色）でコントラストが付!/、て見える。

[0099] 次にステップ S44では、ステップ S42すなわち画像表示照明条件取得部 34、表示画像観察時の周囲照明条件取得部 35で取得した表示画像観察時の視環境から、表示画像観察時の視環境に於ける無彩色に対する順応ファクタ D '、及び有彩色

achr

に対する順応ファクタ D 'を算出する。有彩色に対する順応ファクタ D 'は、ステップ

chr chr

S43同様、画像観察時の順応輝度 L 'と周囲の明るさで決まるパラメータ F'を用いて

A

次式で算出できる。

[数 23] 【数 23】

【数 24】

ム 4 '= Ywi- nbs l ί>

(24)

[0100] また無彩色に対する順応ファクタ D '=1.0と設定する。

achr

[0101] ステップ S45にて、ステップ S41〜S44にて取得 '算出したデータを用いて白色点変換マトリックス（無彩色に対するマトリックス M 、有彩色に対するマトリックス M )を

achr chr 算出する。白色点変換は人間の錐体応答に近い色空間である LMS空間で行う [0102] このとき、 M 、および M を次式で算出する。

chr actir

25]

【数 25】

Wl,chr / Lwichi- 0.0 0.0

0.0 0.0 (25) 0.0 0.0 Swi.chr' / Swi.chr

【数 26】

Lwi.achr / Lwi.achr 0.0 0.0

M_3l 0- Mwiach / Mwi.nchr 0.0 (26)

0-0 0.0 Sw achr' / Swi._a

但し、

[数 27] W

【数 27】

(27)

【数 28】

【数 29】

- (29)

【数 30】

Ywi ' + Swi ' 次にステップ S46に進む。ステップ S46では、ステップ S21で取得した画像の各画素のカメラ RGBを取得する。ステップ S47に進み、カメラ RGBはカメラの分光感度で決まる固有の色空間 RGBで記述されているので、予め決まっているカメラ RGB→XYZマトリックス M を使用して、機器に依存しない色空間である CIE 1931 XYZ色空間

RGB→XYZ

へ変換する。

[数 31]

【数 31】

[0104] ステップ S48に進み、第 1の実施の形態と同じ M を使用して LMS空間へ変換

CAT02

[数 32]

【数 32】

[0105] ステップ S49に進み、対象画素が有彩色か否（無彩色）かの判断を行う。有彩色か否（無彩色）かの判断は、 CIE ΧΥΖ力、ら CIE LABに変換し、彩度 C*=(a*²+b*²)¹⁷²と閾値 C*を用いて、 C*≥C*の場合有彩色、 C*く C*の時無彩色と判断する。

0 0 0

[0106] ステップ S49にて肯定された場合は、ステップ S50に進み、ステップ S45で作成した M を使用して白色点変換を行う。

chr

[数 33]

【数 33】

[0107] ステップ S49にて否定された場合は、ステップ S51に進み、ステップ S45で作成した M を使用して白色点変換を行う。

achr

[数 34]

【数 3 4】

[0108] ステップ S52では、ステップ S48の逆変換、すなわち LMS色空間力、ら XYZ色空間に色変換する。

[数 35]

【数 3 5】

ステップ S53では、 X'Y'Z，から出力画像の色空間 R'G'B，に変換する。 M は X

XYZ→sRGB

YZから出力画像の色空間 RGBに変換するマトリックスであり、出力画像の色空間を sR GBとすれば、規格で決まって!/、るマトリックスを使用すればよ!/、。

[数 36]

【数 3 6】

[0110] ステップ S54では、全画素処理が終了していなければ、上記ステップ S46に戻し、処理を繰り返す。全画素終了したら、ステップ S55に進み画像を出力して終了する。

[0111] 以上の様にして、顕微鏡観察時のシーンの照明輝度と撮影画像表示観察時の照明輝度が、 1.5倍以上と大きく異なる場合でも、彩度に応じて順応ファクタを変えることで、簡単に色の見えを再現することができる。更に顕微鏡観察時とモニタ観察時の輝度比が大きい場合には、本発明がより効果的に作用する。また、白など無彩色に対しては順応ファクタを高くし、有彩色については順応ファクタを低く（より光源色を反映した色再現)するようにした。これにより、輝度の高さによりコントラストが強く見える人間の視覚特性を反映した色変換が再現可能となる。

[0112] (第 5の実施の形態の変形例）

尚、ステツップ S47から S53で使用したマトリックスをまとめた以下の 2つのマトリックス

[数 37]

【数 3 7】

[数 38] 【数 3 8】

をチめステップ S45で t jしてお!/、ても J:レゝこ ( 、ステップ S47、 S48、 S52、 S53の処理を省略でき、ステップ S46の後はステップ S49に進む。ステップ S49で肯定された場合は、ステップ S50に進み、 M の代わりに M 'を使用して、 RGBから R'G' chr chr

B'に変換し、ステップ S 54に進む。ステップ S49で否定された場合は、ステップ S 51 に進み、 M の代わりに M 'を使用して、 RGBから R'G'B'に変換し、ステップ S54に

achr achr

進む。このようにすれば、ステップ S47、 S48、 S52、 S53の処理を省略できるので、処理を軽くできる。

[0113] 第 6の実施の形態

第 6の実施の形態は、第 4および第 5の実施の形態と同様に順応ファクタを考慮する実施の形態である。第 4および第 5の実施の形態は、各画素の色変換を行う際、各画素の色（色相、彩度等）に応じて順応ファクタ Dを変化させる例で説明した。しかし、第 6の実施の形態では、画素毎に変化させるのではなぐ画像データにおいて複数の近傍画素を一つの領域として捉え、その領域毎に代表色を決定し、代表色の色（色相、彩度等）によってその領域内の画素の変換に適応する順応ファクタ Dを決定する。すなわち、画像データの色（色相、彩度等）の分布を解析し、解析した色の分布に基づレ、て順応ファクタを決定する。

[0114] 領域分割の方法としては、エッジ抽出結果により被写体毎に領域分割する場合や

、画像をブロックに分割する方法などが考えられる。エッジ抽出結果により被写体毎に領域分割している場合、 Dの変化と被写体の輪郭は一致する為、 Dの変化による境界が目立つなど不自然さが目立たな!/、。

[0115] ブロック分割してブロック領域毎に Dを変える場合、領域の境界では使用する Dに不連続が生じる。この様に分割領域境界近傍において Dの変化による不自然さが生じる場合、境界領域の複数画素については Dが連続につながるよう隣接する領域の代表順応ファクタ Dから補間して求めてもよ!/、。

[0116] 顕微鏡観察システムは第 1の実施の形態と同様であるので、第 1の実施の形態の図 1および図 2を参照することとし、その説明を省略する。

[0117] 図 14は、第 6の実施の形態におけるデジタルカメラ 2が実行する処理のフローチヤートを示す図である。

[0118] ステップ S21 S23は第 4の実施の形態（図 12)と同様の処理なので説明を省略す

[0119] ステップ S141では、撮影画像を複数領域に分割する。領域の分割は、例えばプロック分割や、エッジ抽出により抽出された複数の閉空間とその外側という分割方法がある。ステップ S 142では、各領域毎に、代表色を決定する。代表色は、領域の中心近傍画素から抽出したり、領域内の画素値を平均した色を使用したり、領域内に頻出する色を求めたりして、代表色を決定する。

[0120] ステップ S143では代表色の色相角 h*を算出する。ステップ S144では、代表色の色相角 h*からその領域の画素に適応する順応ファクタ D (h*) D '(h*)を算出する。

h h

すなわち、順応ファクタ D (h*) D '(h*)の 2次元分布を算出する。

h h

[0121] ステップ S24 S28は第 4の実施の形態（図 12)と同様の処理なので説明を省略する。各画素の色変換で用いる順応ファクタは、ステップ S144で算出した変換対象領域毎に決定した D (h*) D '(h*)や、近傍の代表色との間で補間して求めた D (h*) 、D '(h*)を使用する。

h

[0122] ステップ S145では、領域内の全画素の変換が終了したか否か判断し、否であればステップ S24に戻って処理を続ける。肯定されたらステップ S146に進む。ステップ S1 46では、分割した全領域についてステップ S143〜ステップ S145の処理が終了したか否かの判断を行う。否であればステップ S143に戻って処理を続ける。肯定されたらステップ S30に進み、画像を出力して終了する。

[0123] 以上のようにして、領域毎に領域の代表色に応じた最適順応ファクタを決めるようにした。これにより、画素毎に色相判断をする必要がなくなり、処理を簡略化することができる。しかも、変換対象画素の大体の色に応じた最適な順応ファクタを使用して色変換をするので、正確な色の見えも再現することができる。

[0124] (第 6の実施の形態の変形例）

ステップ S141の画像分割を行わず、画像全体で代表色を 1つ決定してもよい。図 1 5は、この変形例のデジタルカメラ 2が実行する処理のフローチャートを示す図である

[0125] ステップ S21〜S23は第 4の実施の形態（図 12)と同様なので説明を省略する。ステツプ S 152では、画像全体の代表色を決定する。代表色の決定方法は、第 6の実施の形態（図 14)のステップ S 142と同様なので、説明を省略する。ステップ S 143〜 S 144、 S24、 S27、 S28は、第 6の実施の形 (図 14)と同様なので、説明を省略す

[0126] ステップ S145では、全画素の変換が終了したか否か判断し、否であればステップ S24に戻って処理を続ける。肯定されたらステップ S30に進み、画像を出力して終了する。この様にすれば、領域毎にも色相判断をする必要がなくなり、より一層処理を簡略化することができる。

[0127] 上記第 4〜第 6の実施の形態では、第 1の実施の形態の処理において順応ファクタを考慮する例を説明した。同様に、第 2、第 3の実施の形態においても順応ファクタを考慮してもよい。

[0128] 一変形例一

なお、上述した実施の形態は、以下のように変形することもできる。 (1)上記実施の形態では、色順応変換モデルとして von Kriesの色順応式を使用した場合を例に説明した。しかし、 CIECAM02など他の色の見えモデルを使用しても良い。 CIECAM02を使用する場合には、第 1の実施の形態で求めた被写体観察時順応白色点（L ,M ，S )、表示画像観察時順応白色点（L ',Μ '，S ')を、それぞれ撮

Wl Wl Wl Wl Wl W1 像時の照明白色点の三刺激値 (X ，Υ ，ζ )、観察照明白色点の三刺激値 (X ',Υ '，

W W W W W

z ')へ変換し適用すればよい。

W

[0129] (2)上記実施の形態では、測色値 XYZから錐体応答 LMSへの変換マトリックスとして CAT02を用いて説明した力 Bradfordなどその他の色空間を用いてもよ!/、。

[0130] (3)上記実施の形態では、デジタルカメラ 2内で撮影から画像処理まで行う例で説明した。しかし、デジタルカメラ 2で撮影した画像をパーソナルコンピュータに読み込み、パーソナルコンピュータ内のアプリケーションプログラムにて画像処理を行ってもよい。その場合は、パーソナルコンピュータのモニタを使用する。

[0131] パーソナルコンピュータで処理を行う場合、上記実施の形態で説明したプログラムは、 CD— ROMなどの記録媒体やインターネットなどのデータ信号を通じて提供すること力 Sできる。図 16はその様子を示す図である。パーソナルコンピュータ 100は、 CD — ROM104を介してプログラムの提供を受ける。また、パーソナルコンピュータ 100 は通信回線 101との接続機能を有する。コンピュータ 102は上記プログラムを提供するサーバーコンピュータであり、ハードディスク 103などの記録媒体にプログラムを格納する。通信回線 101は、インターネットあるいは専用通信回線などである。コンビュータ 102はハードディスク 103を使用してプログラムを読み出し、通信回線 101を介してプログラムをパーソナルコンピュータ 100に送信する。すなわち、プログラムをデータ信号として搬送波にのせて、通信回線 101を介して送信する。このように、プロダラムは、記録媒体やデータ信号 (搬送波）などの種々の形態のコンピュータ読み込み可能なコンピュータプログラム製品として供給できる。

[0132] (4)上記実施の形態では、被写体観察と表示画像観察の両者の観察形態は、表示画像のみ観察用と両者併用の主に 2種類のモードを想定して時間的順応度 R 、 R

tmp tm

'を決める例について説明した力 R は上述 2値に限定される物ではなぐ想定され p tmp

る観察形態に応じて 0.0〜1.0の間で適宜設定できる。また本実施の形態では、どちらのモードに付いても R =R 'として説明した力観察方法によっては R ≠R 'として

tmp tmp tmp tmp 適切に設定する。

[0133] (5)顕微鏡観察時の時間的順応度 R とモニタ表示画像観察時の時間的順応度 R

tmp tmp

'を別々に定義せず、常に R 'と考え、入力を R —つにしてもよい。

tmp tmp tmp

[0134] (6)上記実施の形態では、デジタルカメラ 2で撮像した画像をモニタ 3に表示する例を説明した。しかし、モニタ 3に表示する代わりにプリンタで印刷したものを観察する場合でもよい。すなわち、肉眼での観察とプリンタで出力したプリントを見比べる場合にも本発明は適用できる。

[0135] (7)第 1、第 4〜第 6の実施の形態では、被写体と表示画像の観察方法入力部 36は、同時観察用、保存用、遠隔で観察用の 3種類の内容とした力 S、この他に印刷用というモードも選択肢に追加しておいてもよい。印刷用が選択された場合には、画像表示照明条件取得部 34、並びに表示画像観察時の周囲照明条件取得部 35は、夫々印刷された画像を観察する時に印刷画像を照明している照明条件をユーザの入力によつて取得する。

[0136] (8)第 2の実施の形態では、表示画像の観察方法として印刷して観察するモードも含めた 3種類のモードを用意しておいてもよい。この場合、画像表示照明条件、並びに表示画像観察時の周囲照明条件のどちらも印刷用の標準視環境である白色点の色温度 =D50とする。また輝度は、通常のオフィス環境に沿った明るい視環境に設定する。時間的順応度のモードは、モニタ観察時と同様に「顕微鏡と併用して観察用」と「印刷表示画像のみ観察用、または保存用」の 2種類用意しておく。

[0137] (9)上記第 1、第 2、第 4〜第 6の実施の形態では、顕微鏡観察の色の見えとモニタ 3 に表示した画像の色の見えを精度よく一致させる方法につ!/、て、第 3の実施の形態では、机上の対象物の色の見えとモニタ 3に表示した画像の色の見えを精度よく一致させる方法について説明した。このような手法は、例えば、モニタ 3の画像の見えと同じ対象物のプロジェクタによる画像の色の見えを一致させる場合にも適用できる。また、モニタ 3の画像の見えと同じ対象物のプリンタで出力された印刷物（プリント）上の画像の色の見えを一致させる場合にも適用できる。すなわち、異なる観察環境下でのそれぞれの画像の色の見えを一致させる場合、言い換えれば、異なる観察環境下で色の再現を正確に行わせる場合全般について適用できる。

[0138] モニタ 3の画像の見えとプロジェクタによる画像の色の見えを一致させる場合について、第 1の実施の形態の図 3を参照して説明する。この場合は、図 3の被写体照明条件取得部 32と被写体観察時の周囲照明条件取得部 33を、図 3の画像表示照明条件取得部 34と表示画像観察時の周囲照明条件取得部 35と同様な内容に置き換え、図 3の画像表示照明条件取得部 34と表示画像観察時の周囲照明条件取得部 3 5を、プロジェクタ環境下の照明条件や周囲照明条件を取得する内容に置き換えればよい。

[0139] プロジェクタによる画像観察条件はモニタ観察時と異なり、標準視環境が決まっていないので、画像照明条件取得部 34は、表示画像観察時の周囲照明条件取得部 3 5と同様にして、照明条件を取得する。即ち、モニタ 3にプロジェクタの照明の種類 (色温度)および輝度が指定できるメニューを表示し、マウス 5により観察者がプロジェクタの照明の種類 (色温度)、および輝度を指定する。例えば、メニューに、照明の種類（色温度)として 9000K、 6500Κ、 5000Κ、 4000Κの様に想定される幾つかの色温度と、輝度 (明るい、普通等)が表示され、観察者によりマウス 5を介して指定される。照明の色温度が判明すると、その光源の色温度がわかり、白色点 (X ', Υ ', Ζ ')がわかる。

W W W

また明るい、普通等の別で、その照明の絶対輝度 Y 'を推定する。周囲照明条件

W_abs

の取得方法は、第 1の実施の形態の表示画像観察時の周囲照明条件取得部 35と同しである。

[0140] また、図 3の被写体と表示画像の観察方法入力部 36に相当するものとして、プロジェクタによる表示画像がモニタ 3の表示画像を観察をしながら観察される画像力、、画像保存用のための画像力、、もしくはモニタ 3とは遠隔地でプロジェクタ表示画像のみを観察する為の画像なのかを、メニュー画面などを使用して観察者 (ユーザ）に選択させる入力部を備えればょレ、。

[0141] (10)上記第 1、第 2、第 4〜第 6の実施の形態ではの顕微鏡観察システム、および、第 3の実施の形態の机上作業システムにおいて、さらに上記で説明したようなプロジェクタ環境を加えるようにしてもよい。すなわち、 3つ以上の複数の異なる観察環境下での色の見えを一致させる場合も、上記実施の形態で説明した内容を適用すれば実現できる。

[0142] (11)モニタ 3の画像の見えと、印刷物 (プリント)による画像の色の見えを一致させる場合について、第 1の実施の形態の図 3を参照して説明する。この場合は、図 3の被写体照明条件取得部 32と被写体観察時の周囲照明条件取得部 33を、図 3の画像表示照明条件取得部 34と表示画像観察時の周囲照明条件取得部 35と同様な内容に置き換え、図 3の画像表示照明条件取得部 34と表示画像観察時の周囲照明条件取得部 35を、プリント観察視環境下の照明条件や周囲照明条件を取得する内容に置き換えればよい。

[0143] 画像表示照明条件取得部 34は、プリント観察視環境下の照明条件として、プリント視環境下でプリントを照明している照明の白色点 (X ', Υ ', Ζ ')と絶対輝度 Υ 'を

W W W W_abs ユーザーによるメニュー選択結果から取得する。プリント観察視環境に於いて周囲照明条件はプリント観察視環境下の照明条件と同一である為、表示画像観察時の周囲照明条件取得部 35は、画像表示照明条件取得部 34が取得した値を参照し、周囲照明の白色点 (X ', Υ ', Ζ ')= (Χ '， Υ '， Ζ ')と照明の絶対輝度 Υ '=Υ 'とし

SW SW SW W W W SW.abs W_abs て取得する。

[0144] 上記では、種々の実施の形態および変形例を説明したが、本発明はこれらの内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。

[0145] 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。

日本国特許出願 2006年第 277745号（2006年 10月 11日出願）

日本国特許出願 2006年第 287918号（2006年 10月 23日出願）

日本国特許出願 2006年第 317391号（2006年 11月 24日出願）

日本国特許出願 2006年第 317748号（2006年 11月 24日出願）

Claims

請求の範囲

[1] 第 1の観察条件下での被写体の色の見えを、第 2の観察条件下で再現する画像処理装置であって、

前記第 1の観察条件下で前記被写体を撮像した第 1の画像データを取得する画像データ取得部と、

前記第 1の観察条件下の第 1の照明光源に関する情報を取得する第 1の照明条件取得部と、

前記第 2の観察条件下の第 2の照明光源に関する情報を取得する第 2の照明条件取得部と、

前記第 1の観察条件下と前記第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出する順応白色点算出部と、

前記算出した順応白色点に基づき、前記第 1の画像データを、前記第 1の観察条件下での被写体の色の見えを前記第 2の観察条件下で再現するときに使用する第 2 の画像データへ色変換する色変換部とを備える画像処理装置。

[2] 第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理装置であって、

前記第 1の観察条件下で前記画像を提示するために使用する第 1の画像データを取得する画像データ取得部と、

前記第 1の観察条件下と前記第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出する順応白色点算出部と、前記算出した順応白色点に基づき、前記第 1の画像データを、前記第 1の観察条件下での前記画像の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部とを備える画像処理装置。

[3] 請求項 1または 2に記載の画像処理装置において、

前記順応白色点算出部は、前記順応白色点として、少なくとも前記第 2の観察条件下で視覚が順応して!/、る第 2の順応白色点を、前記取得した第 2の照明光源に関する情報に加えて前記第 1の照明光源に関する情報を考慮して算出し、

前記色変換部は、前記算出した第 2の順応白色点に基づき、前記第 1の画像データから前記第 2の画像データへ色変換する画像処理装置。

[4] 請求項 1または 2に記載の画像処理装置において、

前記順応白色点算出部は、前記順応白色点として、前記第 1の観察条件下で視覚が順応している第 1の順応白色点を、前記取得した第 1の照明光源に関する情報に加えて前記第 2の照明光源に関する情報を考慮して算出し、前記第 2の観察条件下で視覚が順応してレ、る第 2の順応白色点を、前記取得した第 2の照明光源に関する情報に加えて前記第 1の照明光源に関する情報を考慮して算出し、

前記色変換部は、前記第 1の順応白色点と前記第 2の順応白色点に基づき、前記第 1の画像データから前記第 2の画像データへ色変換する画像処理装置。

[5] 請求項 1から 4の!/、ずれかに記載の画像処理装置にお!/、て、

前記第 1の照明光源に関する情報は、前記第 1の照明光源の色温度に関する情報を含み、前記第 2の照明光源に関する情報は、前記第 2の照明光源の色温度に関する情報を含む画像処理装置。

[6] 請求項 5に記載の画像処理装置において、

前記第 1の照明光源に関する情報はさらに前記第 1の照明光源の輝度を含み、前記第 2の照明光源に関する情報はさらに前記第 2の照明光源の輝度を含む画像処理装置。

[7] 請求項 1から 6の!/、ずれかに記載の画像処理装置にお!/、て、

前記順応白色点算出部は、前記第 1の観察条件下における前記第 1の照明光源の明るさと前記第 2の観察条件下における前記第 2の照明光源の明るさに応じて、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を変化させる画像処理装置。

[8] 請求項 1から 7の!/、ずれかに記載の画像処理装置にお!/、て、

前記第 1の観察条件下の観察と前記第 2の観察条件下の観察との間の時間間隔に関する情報を入力する観察方法入力部を備え、

前記順応白色点算出部は、前記観察方法入力部への入力に応じて、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を変化させる画像処理装置。

[9] 請求項 8に記載の画像処理装置において、

前記観察方法入力部は、前記観察方法入力部への入力に応じて、前記第 1の観察条件下の観察と前記第 2の観察条件下の観察との間の時間間隔が長いか短いかの少なくとも 2つのモードから 1つを選択する画像処理装置。

[10] 請求項 9に記載の画像処理装置において、

前記順応白色点算出部は、前記観察方法入力部が前記時間間隔が短いモードを選択する場合には、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を大きくし、前記観察方法入力部が前記時間間隔が長いモードを選択する場合には、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を小さくする画像処理装置。

[11] 請求項 9または 10に記載の画像処理装置において、

前記観察方法入力部は、少なくとも、前記第 2の画像データを保存するための画像保存用モードと、前記第 1の観察条件下の観察と前記第 2の観察条件下の観察を併用する併用観察モードの 2つのモードから 1つを選択し、前記画像保存用モードが選択された場合は前記時間間隔が長いモードが選択されたとし、前記併用観察モードが選択された場合は前記時間間隔が短いモードが選択されたとする画像処理装置。

[12] 請求項 1に記載の画像処理装置において、

前記第 1の照明光源に関する情報は、前記被写体を直接照明する光源に関する情報および前記被写体の周囲を照明する光源に関する情報を含み、前記第 2の照明光源に関する情報は、前記第 2の画像データを表示する表示装置の光源に関する情報および前記表示装置の周囲を照明する光源に関する情報を含む画像処理装置。

[13] 請求項 2に記載の画像処理装置において、

前記第 1の観察条件下で前記画像を表示する第 1の表示装置と、

前記第 2の観察条件下で再現画像を表示する第 2の表示装置とをさらに備え、前記第 1の照明光源に関する情報は、前記第 1の表示装置の光源に関する情報および前記第 1の表示装置の周囲を照明する光源に関する情報を含み、前記第 2の照明光源に関する情報は、前記第 2の表示装置の光源に関する情報および前記第 2 の表示装置の周囲を照明する光源に関する情報を含む画像処理装置。

[14] 請求項 1から 7の!/、ずれかに記載の画像処理装置にお!/、て、

前記第 2の観察条件下で連続して観察している時間を計測する時間計測部をさらに備え、

前記順応白色点算出部は、前記第 2の観察条件下で画像を連続して観察している時間に応じて、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を変化させ、

前記色変換部は、前記第 2の観察条件下での画像観察時間に応じて連続して変化する順応白色点に基づき、連続して第 2の画像データを変化させる画像処理装置

[15] 請求項 14に記載の画像処理装置において、

前記時間計測部は、前記第 1の観察条件下で連続して観察している時間をさらに計測し、

前記順応白色点算出部は、前記第 1の観察条件下での観察時間と前記第 2の観察条件下で画像を連続して観察している時間に応じて、前記当該観察条件下の照明光源に関する情報に対して前記他方の観察条件下の照明光源に関する情報を考慮する割合を変化させる画像処理装置。

[16] 請求項 1から 15のいずれかに記載の画像処理装置において、

前記第 1の照明条件取得部と前記第 2の照明条件取得部の少なくともいずれかは、予め想定される複数の周囲照明条件から 1つを選択する画像処理装置。

[17] 請求項 1から 16のいずれかに記載の画像処理装置において、

前記色変換部は、前記第 1の画像データから前記第 2の画像データへ色変換するときに使用する色変換マトリックスの構成要素に前記算出した順応白色点に関する値を使用する画像処理装置。

[18] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、

前記順応白色点算出部は、前記順応ファクタ算出部で算出された順応ファクタを使用して前記第 1の観察条件下で視覚が順応している順応白色点を算出し、前記順応ファクタ算出部は、前記順応ファクタを変換対象画素の色によって変化させる画像処理装置。

[19] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部を備え、

前記順応白色点算出部は、前記順応ファクタ算出部で算出された順応ファクタを使用して前記第 2の観察条件下で視覚が順応している順応白色点を算出し、前記順応ファクタ算出部は、前記順応ファクタを変換対象画素の色によって変化させる画像処理装置。

[20] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、前記第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、

前記順応白色点算出部は、前記順応ファクタ算出部で算出された順応ファクタを使用して前記第 1の観察条件下および前記第 2の観察条件下で視覚が順応している順応白色点を算出し、

前記順応ファクタ算出部は、前記順応ファクタを変換対象画素の色によって変化させる画像処理装置。

[21] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記順応白色点算出部は、前記順応ファクタ算出部で算出された順応ファクタを使用して前記第 1の観察条件下で視覚が順応している順応白色点を算出し、前記順応ファクタ算出部は、前記入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、前記順応ファクタを変化させる画像処理装置。

[22] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部をさらに備え、

前記順応白色点算出部は、前記順応ファクタ算出部で算出された順応ファクタを使用して前記第 2の観察条件下で視覚が順応している順応白色点を算出し、前記順応ファクタ算出部は、前記入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、前記順応ファクタを変化させる画像処理装置。

[23] 請求項 1から 17のいずれかに記載の画像処理装置において、

前記第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、前記第 2の観察条件下の照明条件に順応している度合いを示す順応ファクタを算出する順応ファクタ算出部を備え、

前記順応ファクタ算出部は、前記入力画像に於ける色の分布を解析し、該解析した色の分布に基づいて、前記順応ファクタを変化させる画像処理装置。

[24] 第 1の観察条件下での被写体の色の見えを、第 2の観察条件下で再現する画像処理装置であって、

前記第 1の画像データを、前記第 1の観察条件下での被写体の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部と、

前記色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め格納する記憶部とを備え、

前記色変換部は、前記記憶部に格納された前記複数の色変換マトリックスから、指定された観察条件に応じた色変換マトリックスを選択し、前記選択した色変換マトリツタスを使用して前記第 1の画像データから前記第 2の画像データへ色変換する画像処理装置。

[25] 第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理装置であって、

前記第 1の画像データを、前記第 1の観察条件下での前記画像の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部と、

[26] 請求項 24または 25に記載の画像処理装置において、

前記第 1の観察条件下の観察と前記第 2の観察条件下の観察との間の時間間隔に関係する複数の観察方法から 1つを指定する観察方法指定部と、

前記第 2の観察条件下の複数の周囲照明条件から 1つを指定する周囲照明指定とをさらに備え、

前記記憶部は、前記複数の観察方法と前記複数の周囲照明条件の組み合わせに応じた前記複数の色変換マトリックスを格納し、前記複数の色変換マトリックスは、それぞれ、前記第 1の観察条件下と前記第 2の観察条件下の少なくともいずれかの観察条件下で、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出した視覚が順応している順応白色点に関する値をマトリックスの構成要素に持ち、前記色変換部は、前記観察方法指定部により指定された観察方法と前記周囲照明指定部により指定された周囲照明条件の組み合わせから、前記記憶部に格納された前記複数の色変換マトリックスの中力、ら 1つの色変換マトリックスを選択し、前記選択した色変換マトリックスを使用して前記第 1の画像データから前記第 2の画像デ一タへ色変換する画像処理装置。

[27] 請求項 1から 26の!/、ずれかに記載の画像処理装置にお!/、て、

前記画像データ取得部で取得した前記第 1の画像データは顕微鏡像を撮像して生成した画像データである画像処理装置。

[28] 第 1の観察条件下での被写体の色の見えを、第 2の観察条件下で再現する画像処理方法であって、

前記第 1の観察条件下で前記被写体を撮像した第 1の画像データを取得し、前記第 1の観察条件下の第 1の照明光源に関する情報を取得し、

前記第 2の観察条件下の第 2の照明光源に関する情報を取得し、

前記第 1の観察条件下と前記第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出し、

前記算出した順応白色点に基づき、前記第 1の画像データを、前記第 1の観察条件下での被写体の色の見えを前記第 2の観察条件下で再現するときに使用する第 2 の画像データへ色変換する画像処理方法。

[29] 第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理方法であって、

前記第 1の観察条件下で前記画像を提示するために使用する第 1の画像データを取得し、

前記第 1の観察条件下の第 1の照明光源に関する情報を取得し、前記第 2の観察条件下の第 2の照明光源に関する情報を取得し、前記第 1の観察条件下と前記第 2の観察条件下の少なくともいずれかの観察条件下で視覚が順応している順応白色点を、当該観察条件下の照明光源に関する情報に加えて他方の観察条件下の照明光源に関する情報を考慮して算出し、

前記算出した順応白色点に基づき、前記第 1の画像データを、前記第 1の観察条件下での前記画像の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する画像処理方法。

[30] 第 1の観察条件下での被写体の色の見えを、第 2の観察条件下で再現する画像処理方法であって、

前記第 1の観察条件下で前記被写体を撮像した第 1の画像データを取得し、前記第 1の画像データを、前記第 1の観察条件下での被写体の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換し、

前記色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め記憶部に格納し、

前記色変換は、前記記憶部に格納された前記複数の色変換マトリックスから、指定された観察条件に応じた色変換マトリックスを選択し、前記選択した色変換マトリックスを使用して前記第 1の画像データから前記第 2の画像データへ色変換する画像処理方法。

[31] 第 1の観察条件下での画像の色の見えを、第 2の観察条件下で再現する画像処理方法であって、

前記第 1の画像データを、前記第 1の観察条件下での前記画像の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換し、前記色変換に使用する複数の観察条件に応じた複数の色変換マトリックスを予め求め記憶部に格納し、

前記色変換は、前記記憶部に格納された前記複数の色変換マトリックスから指定された観察条件に応じた色変換マトリックスを選択し、前記選択した色変換マトリックスを使用して前記第 1の画像データから前記第 2の画像データへ色変換する画像処理方法。

[32] 請求項 28または 29に記載の画像処理方法において、

前記順応白色点を算出する時に、前記第 1の観察条件下の照明条件に順応して

V、る度合レ、を示す順応ファクタも考慮して算出し、

前記考慮する順応ファクタを変換対象画素の色によって変化させる画像処理方法

[33] 請求項 28または 29に記載の画像処理方法において、

前記順応白色点を算出する時に、前記第 2の観察条件下の照明条件に順応して

V、る度合レ、を示す順応ファクタも考慮して算出し、

[34] 請求項 28または 29に記載の画像処理方法において、

前記順応白色点を算出する時に、前記第 1の観察条件下の照明条件に順応している度合いを示す順応ファクタ、および、前記第 2の観察条件下の照明条件に順応してレ、る度合レ、を示す順応ファクタも考慮して算出し、

[35] 請求項 28または 29に記載の画像処理方法において、

V、る度合レ、を示す順応ファクタも考慮して算出し、

前記第 1の画像データに於ける色の分布を解析し、

該解析した色の分布に基づ!/、て、前記考慮する順応ファクタを変化させる画像処理方法。

[36] 請求項 28または 29に記載の画像処理方法において、

V、る度合レ、を示す順応ファクタも考慮して算出し、

前記第 1の画像データに於ける色の分布を解析し、該解析した色の分布に基づ!/、て、前記考慮する順応ファクタを変化させる画像処理方法。

[37] 請求項 28または 29に記載の画像処理方法において、

前記第 1の画像データに於ける色の分布を解析し、

[38] 請求項 28から 37のいずれかに記載の画像処理方法をコンピュータに実行させる画像処理プログラム。

[39] 第 1の観察条件下での観察対象の色の見えを、第 2の観察条件下で再現する画像処理装置であって、

前記第 1の観察条件下の観察対象に関する第 1の画像データを取得する画像データ取得部と、

前記算出した順応白色点に基づき、前記第 1の画像データを、前記第 1の観察条件下での観察対象の色の見えを前記第 2の観察条件下で再現するときに使用する第 2の画像データへ色変換する色変換部とを備える画像処理装置。