JP2005123790A - Image processing device - Google Patents

Image processing device Download PDF

Info

Publication number
JP2005123790A
JP2005123790A JP2003355091A JP2003355091A JP2005123790A JP 2005123790 A JP2005123790 A JP 2005123790A JP 2003355091 A JP2003355091 A JP 2003355091A JP 2003355091 A JP2003355091 A JP 2003355091A JP 2005123790 A JP2005123790 A JP 2005123790A
Authority
JP
Japan
Prior art keywords
image
fading
data
image data
printed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003355091A
Other languages
Japanese (ja)
Other versions
JP4235905B2 (en
Inventor
Yoshihiko Nakajima
義彦 中嶋
Sukehisa Miyazaki
資久 宮崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Noritsu Koki Co Ltd
Original Assignee
Noritsu Koki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Noritsu Koki Co Ltd filed Critical Noritsu Koki Co Ltd
Priority to JP2003355091A priority Critical patent/JP4235905B2/en
Publication of JP2005123790A publication Critical patent/JP2005123790A/en
Application granted granted Critical
Publication of JP4235905B2 publication Critical patent/JP4235905B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Abstract

【課題】 退色した画像をデジタル化して取り込み、この画像を元の画像に復元してプリントする画像処理装置を構成する。
【解決手段】 受付ブロックにおいて、退色した画像をフラットベッドスキャナで画像データに変換して取り込み、ディスプレイ8に表示された入力部75、76、77に入力した退色要因データから参照テーブルの退色特性データを抽出し、この退色特性データと、ディスプレイ8に表示されたスライドスイッチ78で入力される経過時間とに基づいて退色補正システムが、画像データを退色前の画像データに復元し、プリントブロックに伝送してプリントを実現する。
【選択図】 図14
PROBLEM TO BE SOLVED: To configure an image processing apparatus that digitizes and captures a faded image, restores the image to the original image, and prints it.
In a reception block, a faded image is converted into image data by a flatbed scanner and is taken in, and the color fading characteristic data of a reference table is obtained from fading factor data input to input units 75, 76 and 77 displayed on a display 8. The fading correction system restores the image data to the pre-fading image data based on the fading characteristic data and the elapsed time input by the slide switch 78 displayed on the display 8 and transmits the image data to the print block. To achieve printing.
[Selection] FIG.

Description

本発明は、メディアにプリントされた多色の画像を画像データに変換して取り込むスキャナと、このスキャナからの画像データから退色前の画像データを復元する復元手段とを備えている画像処理装置に関する。   The present invention relates to an image processing apparatus including a scanner that converts a multicolor image printed on a medium into image data and captures the image data from the scanner, and a restoration unit that restores image data before fading from the image data from the scanner. .

画像データを退色前の状態に復元する復元手段を備えた背景技術として、特許文献1に記載されたものが存在する。この特許文献1では、画像データに基づいて色分解を行い、カラーバランスや色味から画像がセピア色ないし色味がセピア色となっていると判断した場合には、カラーバランスないし色味を戻すようにパラメータを設定し、逆補正を施すことにより、画像形成当初の色を再現する点が記載されている。また、この特許文献1には、写真プリントの周部の白縁の色を読み込んで、退色を生じているか否かを判断し、退色補正のためのパラメータを設定する点も記載されている。   As a background art provided with a restoring means for restoring image data to a state before fading, there is one described in Patent Document 1. In Patent Document 1, color separation is performed based on image data, and when it is determined that the image is sepia or tint is sepia from the color balance and tint, the color balance or tint is restored. In this way, the parameters are set and the reverse correction is performed to reproduce the color at the beginning of image formation. Further, this Patent Document 1 also describes that the white color of the peripheral portion of a photographic print is read to determine whether or not fading has occurred, and parameters for fading correction are set.

画像データを復元する復元手段を備えた背景技術として、特許文献2に記載されたものが存在する。この特許文献2では、日付が写し込まれた銀塩フィルムの画像を画像データに変換し、日付を読み取り、この日付に応じて画像データに画像処理を施すので、撮影日付が古い画像については、保存された期間に応じた退色に応じた画像処理を施すことによって初期の画像を再現する点が記載され、日付に応じて画像の階調特性の統計をとり、統計に基づき階調特性変換処理を行うことにより、保存された期間に対する退色の程度を統計的に求める点が記載され、画像をデジタイズする際に画像処理を行い、階調特性変換処理を施すことにより退色補正をすることができる点が記載されている。   As a background art provided with a restoring means for restoring image data, there is one described in Patent Document 2. In this Patent Document 2, an image of a silver salt film on which a date is imprinted is converted into image data, the date is read, and image processing is performed on the image data according to this date. The point that the initial image is reproduced by performing image processing according to fading according to the saved period is described, and the gradation characteristics of the image is taken according to the date, and the gradation characteristics conversion processing based on the statistics Is described in that the degree of fading is statistically calculated for the stored period, image processing is performed when digitizing the image, and fading correction can be performed by performing gradation characteristic conversion processing. Points are listed.

特開2002‐287270号公報 (段落番号〔0192〕〜〔0194〕)JP 2002-287270 A (paragraph numbers [0192] to [0194]) 特開2001‐331781号公報 (段落番号〔0025〕、〔0027〕、〔0043〕〜〔0045〕)JP 2001-331781 A (paragraph numbers [0025], [0027], [0043] to [0045])

印画紙やペーパ類にプリントされた画像の退色現象について考えると、銀塩式の印画紙にプリントされた画像では、印画紙中に残留した微量の現像処理液の影響や紫外線や空気中の酸素やオゾンの影響により時間経過とともに退色が進むことが知られている。また、近年デジタルカメラで撮影した画像データを簡便にプリントするために、染料系のインクを用いたインクジェット型のプリンタが多く用いられている。しかしながら、この染料系のインクを用いたインクジェットプリンタは写真画質でのプリントが可能である反面、プリントされた画像は、銀塩式の印画紙より顕著に退色が進むことが知られつつある。   Considering the fading phenomenon of images printed on photographic papers and papers, images printed on silver-salt type photographic papers are affected by a small amount of developing solution remaining in the photographic paper, ultraviolet rays and oxygen in the air. It is known that fading progresses with time due to the influence of ozone and ozone. In recent years, in order to easily print image data taken with a digital camera, an ink jet printer using dye-based ink is often used. However, while ink jet printers using dye-based inks can be printed with photographic image quality, it has been known that printed images are significantly more discolored than silver salt photographic paper.

染料系のインクを用いるインクジェット型のプリンタでプリントした画像が退色することについての認識は低く、例えば、デジタルカメラで撮影した画像データをプリントした後に、そのプリント物を従来からの写真と同様にアルバムに貼り付けることや、額縁に収めて室内に飾り、この後に、デジタルカメラの画像データを消去してしまうのが普通であった。このような使用形態では、このプリントから時間が経過して画像が退色したことに気付いても元の画像をプリントすることが出来ず、退色した画像から退色以前の画像のプリントを望む声もあった。   The recognition that images printed with ink-jet printers that use dye-based inks fade is low. For example, after printing image data taken with a digital camera, the printed material is an album like a conventional photo. Ordinarily, the image data of the digital camera is erased after it is pasted on the frame or displayed in a frame and decorated in the room. In such usage, the original image cannot be printed even if it notices that the image has faded over time from this print, and some people want to print the image before the fade from the faded image. It was.

そこで、特許文献1に示される技術によって、本来の画像に復元することを考えるに、特許文献1では、パラメータを用いて退色補正を行う点が記載されるものの、このパラメータは、カラーバランスないし色味を戻すように設定されるとの記載があるものの、どのような構造のパラメータであるか明らかではなく、本来の画像に復元するためのパラメータを設定するために困難性がある。また、特許文献2に示される技術によって、本来の画像に復元することを考えるに、特許文献2では画像が撮影された日付に基づいて画像の復元を行うので、日付が存在しないものでは対応できないものである。また、この特許文献2では階調特性の統計をとり、統計に基づき階調特性変換処理を行う点が記載されるものの、退色はプリントペーパの種類、色素の種類、保管環境、プリントから経過時間等の要素に大きく影響を受けるものであり、適正な復元を行い難いことが想像できる。   Therefore, considering that the original image is restored by the technique disclosed in Patent Document 1, Patent Document 1 describes that fading correction is performed using a parameter. Although there is a description that it is set so as to restore the taste, it is not clear what kind of structure the parameter is, and it is difficult to set a parameter for restoring the original image. Further, considering that the original image is restored by the technique disclosed in Patent Document 2, since the image is restored based on the date when the image was taken in Patent Document 2, it cannot be handled if there is no date. Is. In addition, although this Patent Document 2 describes that the gradation characteristics are taken and gradation characteristics are converted based on the statistics, the color fading is the type of print paper, the type of pigment, the storage environment, the elapsed time from printing. It can be imagined that it is difficult to perform proper restoration.

また、染料系のインクでプリントされた画像の退色を考えるに、光線の照射による退色が重要な要因であり、インクの種類(メーカ名、ブランド名で認識される種類を含む)にも退色の重要な要因があり、これらの要因に基づき、退色した画像を適正な画像に復元する技術が望まれる。   In addition, when considering the fading of images printed with dye-based ink, fading due to light irradiation is an important factor, and the type of ink (including the types recognized by the manufacturer name and brand name) is also fading. There are important factors, and a technique for restoring a faded image to an appropriate image based on these factors is desired.

本発明の目的は、退色した画像をデジタル化された画像データとして取り込んだ後には、できるだけ元の画像に近い画像データを容易に復元する画像処理装置を合理的に構成する点にある。   An object of the present invention is to rationally configure an image processing apparatus that easily restores image data that is as close to the original image as possible after taking a faded image as digitized image data.

本発明の特徴は、メディアにプリントされた多色の画像を画像データに変換して取り込むスキャナと、このスキャナからの画像データから退色前の画像データを復元する復元手段とを備えている画像処理装置において、退色要因データを入力する入力部を備えると共に、前記復元手段が、前記プリントに用いられた複数種の色素における退色要因データに基づいた退色度を規定した退色特性データで成る参照テーブルを備えて構成され、前記入力部を介して前記退色要因データを入力することにより、前記参照テーブルに基づいて各色素の退色度を特定し、この退色度に基づいて前記スキャナから取り込んだ前記画像データを前記復元手段が退色前の画像データに復元する点にある。   A feature of the present invention is that image processing includes a scanner that converts a multicolor image printed on a medium into image data and captures the image data, and a restoration unit that restores image data before fading from the image data from the scanner. The apparatus includes an input unit for inputting fading factor data, and the restoration unit includes a reference table including fading characteristic data that defines a fading degree based on the fading factor data for a plurality of types of pigments used in the printing. The image data fetched from the scanner based on the fading degree is specified by specifying the fading degree of each pigment based on the reference table by inputting the fading factor data via the input unit. The restoration means restores the image data before fading.

この構成により、入力部から退色要因データを入力することにより、参照テーブルに備えられた複数種の色素における退色特性データから各色の退色度が特定され、スキャナで取り込んだ画像データを復元手段が元の画像データに復元する。つまり、退色時には画像を構成する画素(ピクセル)における濃度が低下するものであるが、この画像を、例えば、C(シアン)・M(マゼンタ)・Y(イエロー)の三原色の色素の濃度として捉えると、退色現象は、画素を構成する色素の濃度の低下として捉えることが可能である。退色時には各色の色素の濃度が退色要因データに従って低下するため、本発明のように退色特性データから退色度を特定することにより、退色した濃度データを変換する処理によって元の画像データに復元できるのである。その結果、退色要因として時間ばかりでなく、光線の照射や、保管環境等の要因を考慮することにより退色した画像をデジタル化された画像データとして取り込んだ後には、比較的簡単な処理によって元の画像データに適正に復元する画像処理装置が合理的に構成されたのである。   With this configuration, by inputting the color fading factor data from the input unit, the color fading degree of each color is specified from the color fading characteristic data for a plurality of types of dyes provided in the reference table, and the restoration means restores the image data captured by the scanner. Restore to image data. That is, at the time of fading, the density of the pixels (pixels) constituting the image is lowered, but this image is regarded as, for example, the density of the three primary color pigments of C (cyan), M (magenta), and Y (yellow). The fading phenomenon can be regarded as a decrease in the density of the dye constituting the pixel. At the time of fading, since the density of each color pigment decreases according to the fading factor data, it is possible to restore the original image data by converting the fading density data by specifying the fading degree from the fading characteristic data as in the present invention. is there. As a result, after capturing the faded image as digitized image data by taking into account factors such as light irradiation and storage environment as well as time as a fading factor, the original color can be restored by a relatively simple process. The image processing apparatus that properly restores the image data is rationally configured.

本発明は、前記入力部をディスプレイに表示し、このディスプレイに表示された入力部を介して前記退色要因データの入力を実現するインタフェースを備えると共に、前記復元手段が、前記スキャナで取り込んだ画像データと、この復元手段で復元した画像データとを前記ディスプレイに表示するよう構成しても良い。   The present invention includes an interface that displays the input unit on a display and realizes input of the fading factor data via the input unit displayed on the display, and the restoration unit captures image data captured by the scanner. And the image data restored by the restoration means may be displayed on the display.

この構成により、ディスプレイに表示された入力部に対してインタフェースを介して退色要因データを入力することが可能となり、また、スキャナで取り込んだ画像データと、復元した画像データとが出力手段を介してディスプレイに表示されるので、ディスプレイで夫々の画像データを確認できる。   With this configuration, it is possible to input the color fading factor data to the input unit displayed on the display via the interface, and the image data captured by the scanner and the restored image data are output via the output unit. Since it is displayed on the display, each image data can be confirmed on the display.

本発明は、前記退色要因データとして、メディアに画像がプリントされてからの経過時間と、メディアにプリントされた画像の色素の種類と、画像がプリントされたメディアの保存環境との各条件を含み、前記参照テーブルは、前記各条件に基づいて退色度を特定する複数の退色特性データを備えても良い。   The present invention includes, as the color fading factor data, each condition of an elapsed time after an image is printed on the medium, a type of pigment of the image printed on the medium, and a storage environment of the medium on which the image is printed. The reference table may include a plurality of fading characteristic data for specifying a fading degree based on the respective conditions.

この構成により、画像がメディアにプリントされてからの経過時間、メディアにプリントされた画像の色素の種類、メディアの保存環境との各条件に基づいて退色特性データから退色度を特定できるものとなる。つまり、色素の種類はプリンタのメーカ毎の機種名で特定できるものであり、メディアの保存環境とは、アルバムに貼り付ける形態や額縁に収める形態のように、光線に対して晒された程度を把握できるものを指し、これらのデータとプリントされてからの経過時間とを組み合わせた退色特性データから退色度を的確に把握できるのである。   With this configuration, the degree of fading can be specified from the fading characteristic data based on the elapsed time since the image was printed on the medium, the type of dye of the image printed on the medium, and the storage environment of the medium. . In other words, the type of pigment can be specified by the model name of each printer manufacturer, and the media storage environment is the extent to which it is exposed to light rays, such as the form pasted on an album or the form stored in a frame. The color fading degree can be accurately grasped from the color fading characteristic data obtained by combining these data and the elapsed time since printing.

本発明は、前記参照テーブルとして、前記色素の種類と、画像がプリントされた画像の保存環境との各条件を一般化した退色特性データをデフォルト値として備えても良い。   In the present invention, the reference table may include, as a default value, fading characteristic data that generalizes conditions of the type of the dye and the storage environment of the image on which the image is printed.

この構成により、退色要因データを入力しなくともデフォルト値として退色特性データが与えられているので、画像がメディアにプリントされてからの経過時間を入力するだけで、本来の画像データに近似する画像データに復元できるものとなる。   With this configuration, since fading characteristic data is given as a default value without inputting fading factor data, an image that approximates the original image data can be obtained simply by inputting the elapsed time since the image was printed on the media. Data can be restored.

本発明は、前記退色要因データとしての経過時間を入力するために、前記入力部としての時間入力部が形成され、この時間入力部は前記経過時間の値を連続的に変更可能なインタフェースを備えても良い。   In the present invention, in order to input an elapsed time as the fading factor data, a time input unit as the input unit is formed, and the time input unit includes an interface capable of continuously changing the value of the elapsed time. May be.

この構成により、時間入力部において経過時間を連続的に変更することにより、復元後の画像データを時間経過に従ってシミュレートすることが可能となる。そして、復元後の画像データをディスプレイに表示するものでは、シミュレートの結果をディスプレイの表示に基づいて確認できるのである。   With this configuration, it is possible to simulate the restored image data over time by continuously changing the elapsed time in the time input unit. When the restored image data is displayed on the display, the simulation result can be confirmed based on the display on the display.

本発明は、該画像処理装置として、復元した画像データをプリント装置においてプリント可能なデータ形式に変換するプリンタドライバを備えると共に、このプリンタドライバで変換した画像データをプリント装置に伝送する伝送手段を備えても良い。   The image processing apparatus includes a printer driver that converts the restored image data into a data format that can be printed by the printing apparatus, and a transmission unit that transmits the image data converted by the printer driver to the printing apparatus. May be.

この構成により、復元した画像データを簡単な操作でプリント装置に伝送してプリントできものとなる。   With this configuration, the restored image data can be transmitted to the printing apparatus with a simple operation and printed.

以下、本発明の実施の形態を図面に基づいて説明する。
〔全体構成〕図1に示すように、画像データの取得、及び、オーダ情報の取得を行い、必要な補正処理を行う受付ブロックAと、この受付ブロックAから通信ケーブル1を介して伝送される画像データをオーダ情報に基づきメディアとしてのプリントペーパPにプリントするプリントブロックBとを備えてインクジェット型のプリントシステムが構成されている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[Entire Configuration] As shown in FIG. 1, image data and order information are acquired and a reception block A for performing necessary correction processing is transmitted via the communication cable 1 from the reception block A. An ink jet printing system is configured including a print block B that prints image data on print paper P as a medium based on order information.

〔受付ブロック〕前記受付ブロックAは、ワゴン型のフレーム5の上部に画像処理装置として機能する受付装置6と、その表示面にタッチパネル7を形成した液晶型のディスプレイ8とを備え、フレーム5の上下方向の中間位置にフラットベッドスキャナFSを備えている。前記受付装置6の前面にはフラッシュメモリで成る半導体型の記憶媒体Msに保存された画像データを読み出す半導体ドライブ9、及び、CD−RやDVD等のディスク型の記憶媒体Mdに保存された画像データを読み出すディスクドライブ10を備えている。 [Reception Block] The reception block A includes a reception device 6 that functions as an image processing device above a wagon frame 5 and a liquid crystal display 8 having a touch panel 7 formed on its display surface. A flat bed scanner FS is provided at an intermediate position in the vertical direction. On the front surface of the accepting device 6 is a semiconductor drive 9 for reading out image data stored in a semiconductor storage medium Ms made of flash memory, and an image stored in a disk storage medium Md such as a CD-R or DVD. A disk drive 10 for reading data is provided.

前記フラットベッドスキャナFSは、本体11と、本体11に対して開閉自在に支持したプラテンカバー12とを備え、本体11には透明ガラス製のスキャニングテーブル13と、このスキャニングテーブル13の下側に配置したスキャニングヘッド14とを備えている。このスキャニングヘッド14には主走査方向に多数のCCD等の光電変換素子と、光源とを備え、主走査方向と直交する副走査方向に作動することにより、スキャニングテーブル13に載置されたスキャニング対象物の画像をR(赤)・G(緑)・B(青)の三原色の色分解した画像データとして取り込むよう構成されている。   The flat bed scanner FS includes a main body 11 and a platen cover 12 supported so as to be openable and closable with respect to the main body 11. The main body 11 has a scanning table 13 made of transparent glass, and is disposed below the scanning table 13. The scanning head 14 is provided. The scanning head 14 includes a number of photoelectric conversion elements such as CCDs in the main scanning direction and a light source, and operates in the sub-scanning direction orthogonal to the main scanning direction, thereby scanning objects placed on the scanning table 13. An image of an object is captured as image data obtained by color separation of the three primary colors R (red), G (green), and B (blue).

〔プリントブロック〕前記プリントブロックBは、筐体15の下部に2つマガジン収容部Ba、Baを配置し、筐体15の上部にはプリントペーパPに画像データをプリントするプリント部Bbを配置している。また、筐体15の側部にはカートリッジセット部Bcを配置し、筐体15の上面部には比較的小さいサイズのプリントペーパPが横送りベルト16を介して送り出される仕分け部17と、大きいサイズのプリントペーパPを受け止めるラック板18とを備えている。 [Print Block] In the print block B, two magazine accommodating portions Ba and Ba are arranged at the lower part of the casing 15, and a printing part Bb for printing image data on the print paper P is arranged at the upper part of the casing 15. ing. Further, a cartridge setting portion Bc is arranged on the side portion of the housing 15, and a sorting portion 17 to which a relatively small print paper P is sent out via the lateral feed belt 16 on the upper surface portion of the housing 15 is large. And a rack plate 18 for receiving the size of the printed paper P.

図2に示すように、前記2つマガジン収容部Ba、Baは、前壁体15Aと一体的なスライド作動によって開閉自在なドロワー20を備え、このドロワー20に対してマガジン21に保持されたロール状のプリントペーパPを収容するよう構成されている。前記プリント部Bbは、透明な樹脂板で成る窓部22を形成した開閉自在な壁体15Bの内部にプリントヘッドHを備え、このプリントヘッドHはプリントペーパPに対してインクを吹き付けることにより画像をプリントする。前記カートリッジセット部Bcは、縦向き姿勢の軸芯周りで揺動開閉自在な壁体15Cの内部に対して複数のインクカートリッジ23を挿抜自在に構成されている。尚、この複数のインクカートリッジ23は、ブラック(K)、ライトブラック(LK)、シアン(C)、マゼンタ(M)、ライトシアン(LC)、ライトマゼンタ(LM)、イエロー(Y)のインクを封入した7種の樹脂製のタンクで構成されている。   As shown in FIG. 2, the two magazine housing portions Ba, Ba are provided with a drawer 20 that can be opened and closed by a sliding operation integral with the front wall body 15 </ b> A, and a roll held by the magazine 21 with respect to the drawer 20. It is configured to accommodate the printed paper P in the form of a sheet. The print section Bb includes a print head H inside an openable / closable wall body 15B in which a window section 22 made of a transparent resin plate is formed. The print head H sprays ink onto the print paper P to generate an image. Print. The cartridge set portion Bc is configured such that a plurality of ink cartridges 23 can be inserted into and removed from the inside of a wall body 15C that can be swingably opened and closed around a vertically oriented axis. The plurality of ink cartridges 23 enclose black (K), light black (LK), cyan (C), magenta (M), light cyan (LC), light magenta (LM), and yellow (Y) ink. 7 types of resin tanks.

〔ペーパ搬送構造〕図4に示すように、プリントペーパPに画像データのプリントを行う際には、2つのマガジン収容部Ba、Baの何れか一方に収容したロール状のプリントペーパPを圧着ローラ型の前搬送ユニットU1で前記プリント部Bbに搬送し、このプリント部BbのプリントヘッドHで画像データのプリントを行い、このようにプリントされたプリントペーパPをカッターユニットU2でプリントサイズに切断した後、反転ユニットU3で表裏を反転させ、この反転ユニットU3から圧着ローラ型の後搬送ユニットU4で筐体上面の横送りベルト16又はラック板18に送り出すよう構成されている。 [Paper Conveying Structure] As shown in FIG. 4, when printing image data on the printed paper P, the roll-shaped printed paper P accommodated in one of the two magazine accommodating portions Ba and Ba is used as a pressure roller. The paper is conveyed to the printing unit Bb by the front conveyance unit U1 of the mold, the image data is printed by the print head H of the printing unit Bb, and the printed paper P printed in this way is cut into a print size by the cutter unit U2. Thereafter, the reversing unit U3 reverses the front and back, and the reversing unit U3 is fed to the lateral feed belt 16 or the rack plate 18 on the upper surface of the casing by a pressure roller type rear transport unit U4.

具体的に説明すると、前記2つのマガジン収容部Ba、Baに対してマガジンに21とともにロール状のプリントペーパPを交換自在に構成されており、このマガジン21には、収容されたロール状のプリントペーパPに回転力を作用させる電動モータ(図示せず)を備えている。このマガジン収容部BaにおいてプリントペーパPを搬送する搬送系によって前記前搬送ユニットU1が構成され、また、前記マガジン21はマガジン収容部Baに対して交換自在に構成されている。このマガジン21にはマガジン21の種類を識別するコードプレート24を備え、マガジン収容部Baにはコードプレート24の識別情報を取得する識別手段としてのコードセンサ25を備えている。このコードセンサ25は、コードプレート24の情報を光学的に取得するよう光センサを備えたものや、コードプレート24としてRFタグのように電磁式に信号を送り出すものを用いたものでは受信装置を備えたもの等の適用が可能である。   More specifically, a roll-shaped print paper P is exchanged together with the magazine 21 with respect to the two magazine storage portions Ba, Ba, and the magazine 21 has a roll-shaped print stored therein. An electric motor (not shown) for applying a rotational force to the paper P is provided. The front transport unit U1 is configured by a transport system for transporting the print paper P in the magazine housing section Ba, and the magazine 21 is configured to be replaceable with respect to the magazine housing section Ba. The magazine 21 is provided with a code plate 24 for identifying the type of the magazine 21, and the magazine housing portion Ba is provided with a code sensor 25 as identification means for acquiring identification information of the code plate 24. The code sensor 25 may be a receiver provided with an optical sensor that optically acquires information on the code plate 24, or a code plate 24 that uses an electromagnetic signal to be sent out like an RF tag. It is possible to apply what is provided.

前記プリント部Bbは、プリントペーパPを搬送する圧着型の搬送ローラ26と、プリントペーパPの裏面側を案内する案内プレート27と、前記プリントヘッドHとを備えている。プリントヘッドHはガイドレール28と、プリントヘッドHを往復作動させる無端ベルト型の駆動機構29とによってプリントペーパPの搬送方向(副走査方向)と直交する主走査方向に作動自在に構成されている。   The print unit Bb includes a pressure-type conveyance roller 26 that conveys the print paper P, a guide plate 27 that guides the back side of the print paper P, and the print head H. The print head H is configured to be operable in a main scanning direction orthogonal to the transport direction (sub-scanning direction) of the print paper P by a guide rail 28 and an endless belt type driving mechanism 29 that reciprocates the print head H. .

前記カッターユニットU2は、固定刃30と可動刃31とを備え、反射型の光センサを有したカット位置センサCSを備え、プリントペーパPを送り出す排出ローラ32を備えている。そして、カット位置センサCSで検出した切断マークmに基づいてプリントペーパPを切断し、この切断後のプリントペーパPを排出ローラ32で排出するように作動する。尚、プリント部Bbで画像データのプリントが行われる際には、図3に示すように、間隔dを隔てた領域Gに画像のプリントを行うと共に、この間隔dの領域に前記切断マークmが形成され、カッターユニットU2で切断を行う際には、カット位置センサCSの検出結果に基づき切断マークmを基準にして間隔dより僅かに広い間隔となる領域を取り除き得ることにより、フチナシプリントでも画像の周囲に余白を残さないように切断作動が行われる。   The cutter unit U2 includes a fixed blade 30 and a movable blade 31, a cut position sensor CS having a reflective optical sensor, and a discharge roller 32 that feeds out the print paper P. Then, the print paper P is cut based on the cut mark m detected by the cut position sensor CS, and the cut print paper P is discharged by the discharge roller 32. When the image data is printed by the printing unit Bb, as shown in FIG. 3, the image is printed in the region G with the interval d, and the cut mark m is displayed in the region with the interval d. When cutting is performed by the cutter unit U2, an image that is slightly wider than the interval d on the basis of the detection result of the cut position sensor CS can be removed based on the detection result of the cut position sensor CS. The cutting operation is performed so as not to leave a margin around.

前記反転ユニットU3は、プリントペーパPを圧着する一対の圧着ローラ33を備えると共に、この一対の圧着ローラ33を正逆両方向に駆動する搬送駆動機構(図示せず)と、この一対の圧着ローラ33をローラの軸芯周りで90度回転させる反転機構とを備えている。そして、カッターユニットU2からの先端側から送り込まれるプリントペーパPを圧着ローラ33で更に搬送して後端側を搬送する位置まで搬送した後、図4に矢印で示すように、ユニットを90度回転させた後、圧着ローラ33を逆転させることにより、プリントペーパPを後端側から後搬送ユニットU4に送り出すよう作動する。   The reversing unit U3 includes a pair of pressure rollers 33 for pressure-bonding the print paper P, a conveyance drive mechanism (not shown) for driving the pair of pressure rollers 33 in both forward and reverse directions, and the pair of pressure rollers 33. And a reversing mechanism that rotates the roller 90 degrees around the axis of the roller. Then, after the print paper P fed from the front end side from the cutter unit U2 is further transported by the pressure roller 33 and transported to the position for transporting the rear end side, the unit is rotated by 90 degrees as shown by the arrow in FIG. Thereafter, the pressure roller 33 is reversed to operate to feed the print paper P from the rear end side to the rear transport unit U4.

前記後搬送ユニットU4は、プリントペーパPを搬送する複数の搬送ローラ34を備えると共に、この搬送ローラ34で搬送されるプリントペーパPを横送りベルト16とラック板18との何れかに送り出す経路切り換え機構(図示せず)を備えている。   The post-conveying unit U4 includes a plurality of conveying rollers 34 that convey the print paper P, and a path switch for sending the print paper P conveyed by the conveying roller 34 to either the lateral feed belt 16 or the rack plate 18. A mechanism (not shown) is provided.

〔インク供給系〕前記カートリッジセット部Bcにセットされたインクカートリッジ23に貯留されたインクは、リザーブタンク36(図2を参照)に貯留され、このリザーブタンク36からフレキシブル型の管路(図示せず)を介して前記プリントヘッドHに送られる。このようにインクカートリッジ23からのインクをリザーブタンク36に貯留することにより、プリント処理を中断することなくインクカートリッジ23の交換を行えるようにしている。 [Ink supply system] The ink stored in the ink cartridge 23 set in the cartridge setting portion Bc is stored in the reserve tank 36 (see FIG. 2), and a flexible pipe (not shown) is provided from the reserve tank 36. )) To the print head H. Thus, by storing the ink from the ink cartridge 23 in the reserve tank 36, the ink cartridge 23 can be replaced without interrupting the printing process.

〔制御系〕このプリントブロックの制御系を図5のように示すことが可能である。つまり、受付ブロックAの受付装置6は、マイクロプロセッサ(CPU)を備えると共に、このマイクロプロセッサ(CPU)に対してデータバスを介して情報がアクセスする前記タッチパネル7、ディスプレイ8、半導体ドライブ9、ディスクドライブ10、半導体メモリRAM・ROM、ハードディスクHD、I/Oインタフェース40、通信インタフェース41を備え、また、マイクロプロセッサ(CPU)で処理を実現するようソフトウエアで成るオペレーションシステム42、マニュアル補正システム43、復元手段としての退色補正システム44、この退色補正システム44に退色特性データを与える参照テーブル44T、プリンタドライバ45を備え、更に、前記I/Oインタフェース40を介して前記フラットベッドスキャナFSからの情報がアクセスする入出力系を形成し、通信インタフェース41を介して前記プリントブロックBに対して情報をアクセスする信号系を形成している。 [Control System] The print block control system can be shown as shown in FIG. That is, the receiving device 6 of the receiving block A includes a microprocessor (CPU), and the touch panel 7, display 8, semiconductor drive 9, disk for accessing information to the microprocessor (CPU) via a data bus. Drive 10, semiconductor memory RAM / ROM, hard disk HD, I / O interface 40, communication interface 41, operation system 42 made of software so as to realize processing by a microprocessor (CPU), manual correction system 43, A fading correction system 44 as restoration means, a reference table 44T for giving fading characteristic data to the fading correction system 44, and a printer driver 45 are provided, and further, the flatbed scanner is connected via the I / O interface 40. Information from the FS to form input and output system to be accessed to form a signal system for accessing information to the print block B via the communication interface 41.

前記プリントブロックBは、マイクロプロセッサ(CPU)を備えると共に、このマイクロプロセッサ(CPU)に対してデータバスを介して情報がアクセスする前記前搬送ユニットU1、プリント部Bb、カッターユニットU2、反転ユニットU3、後搬送ユニットU4、半導体メモリRAM・ROM、ハードディスクHD、コードセンサ25、カット位置センサCS、通信インタフェース51を備え、また、マイクロプロセッサ(CPU)で処理を実現するようソフトウエアで成るペーパ搬送手段52、プリント制御手段53、ペーパ残量管理手段54、インク残量管理手段55を備えている。   The print block B includes a microprocessor (CPU), and the front transport unit U1, the printing unit Bb, the cutter unit U2, and the reversing unit U3 that access information to the microprocessor (CPU) via a data bus. , A rear transport unit U4, a semiconductor memory RAM / ROM, a hard disk HD, a code sensor 25, a cut position sensor CS, a communication interface 51, and a paper transport means made of software so as to realize processing by a microprocessor (CPU) 52, a print control unit 53, a paper remaining amount managing unit 54, and an ink remaining amount managing unit 55.

〔受付処理形態・データからプリント〕前記受付ブロックAの受付装置6では、前記オペレーションシステム42が必要な情報をディスプレイ8に表示し、その表示に基づいてオペレータがタッチパネル7に指を接触させる等の操作を行うことによりオペレータが望む処理を実現するGUI(Graphical User Interface)を備えている。 [Printing from Acceptance Processing Form / Data] In the accepting device 6 of the accepting block A, the operation system 42 displays necessary information on the display 8, and the operator touches the touch panel 7 based on the display. A GUI (Graphical User Interface) that realizes processing desired by the operator by performing operations is provided.

具体的に説明すると、初期状態においては、前記オペレーションシステム42がディスプレイ8に対して図10に示すように、「データからプリント」の選択スイッチSW1と「プリントからプリント」の選択スイッチSW2を表示する。「データからプリント」の選択スイッチSW1に指等を接触させて操作した場合には、前記半導体ドライブ9又はディスクドライブ10を介して前記記憶媒体Ms、Mdの画像データを取り込み、その画像データをプリントペーパPにプリントする処理を実現し、また、「プリントからプリント」の選択スイッチSW2を操作した場合には、前記フラットベッドスキャナFSによってプリント物(画像がプリントされた印画紙や、印刷物等)の画像を画像データに変換して取り込み、その画像データをプリントペーパPにプリントする処理を実現する。   More specifically, in the initial state, the operation system 42 displays the "print from data" selection switch SW1 and the "print to print" selection switch SW2 on the display 8 as shown in FIG. . When operated by bringing a finger or the like into contact with the “print from data” selection switch SW1, the image data of the storage media Ms and Md is taken in via the semiconductor drive 9 or the disk drive 10 and the image data is printed. When a process of printing on the paper P is realized and the selection switch SW2 of “print to print” is operated, a printed matter (such as a photographic paper on which an image is printed or a printed matter) is printed by the flatbed scanner FS. A process of converting an image into image data and taking it in and printing the image data on the print paper P is realized.

オペレータが「データからプリント」の選択スイッチSW1に指等を接触させて操作した後には、図7のフローチャートに示すように、前記オペレーションシステム42が、前記記憶媒体Ms、Mdの画像データの取り込みに必要なガイダンスをディスプレイ8に表示し、この表示に従ってオペレータが必要な操作を行うことにより、前記半導体ドライブ9又はディスクドライブ10を介して画像データを取り込み、取り込んだ画像データが複数(複数フレーム)存在する場合には、前記オペレーションシステム42が夫々の画像データを一覧化してディスプレイ8に表示する(#101、#102ステップ)。   After the operator operates the “print from data” selection switch SW1 by touching it with a finger or the like, as shown in the flowchart of FIG. 7, the operation system 42 takes in the image data of the storage media Ms and Md. Necessary guidance is displayed on the display 8, and the operator performs necessary operations in accordance with the display, so that image data is captured via the semiconductor drive 9 or the disk drive 10, and a plurality of captured image data (multiple frames) exist. If so, the operation system 42 lists each image data and displays it on the display 8 (steps # 101 and # 102).

このようにディスプレイ8に表示された画像データからオペレータがプリント対象を選択した場合には、更に、オペレーションシステム42が、プリントサイズとプリント枚数との入力を求め、入力された情報をオーダ情報として取得すると共に(#103ステップ)、補正を行う必要がある場合には、ディスプレイ8に表示されたスイッチ類を操作することにより、補正処理画面(図示せず)が表示され、オペレータが必要とする処理の実行が可能となる(#104、#105ステップ)。この後、プリント処理を実行可能な状態となり、オペレータが確認操作を行うことにより、前記プリンタドライバ45がプリントブロックBでプリント可能な画像データに変換した画像データと、オーダ情報とがプリントブロックBに伝送され、プリント処理を実現するものとなっている(#106ステップ)。   When the operator selects a print target from the image data displayed on the display 8 as described above, the operation system 42 further requests the input of the print size and the number of prints, and acquires the input information as order information. In addition, if correction is necessary, a correction processing screen (not shown) is displayed by operating the switches displayed on the display 8, and processing required by the operator is performed. Can be executed (steps # 104 and # 105). After that, the print process is ready to be executed, and the operator performs a confirmation operation so that the printer driver 45 converts the image data converted into image data printable in the print block B and the order information into the print block B. The data is transmitted and print processing is realized (step # 106).

前記補正処理画面を表示した状態での補正処理は、前記マニュアル補正システム43が実現するものであり、ディスプレイ8に対する表示形態を図面に示していないが、後述する「プリントからプリント」での処理におけるマニュアル補正と同様の画面(図13を参照)が表示され、この画面中において、カラーバランス、明るさ、コントラストの処理を行えるものとなっている。   The correction processing in the state where the correction processing screen is displayed is realized by the manual correction system 43, and the display form on the display 8 is not shown in the drawing, but in the processing in “print to print” described later. A screen similar to the manual correction (see FIG. 13) is displayed, and color balance, brightness, and contrast can be processed in this screen.

尚、前記半導体ドライブ9、ディスクドライブ10で取得した画像データはR(赤)・G(緑)・B(青)の三原色に対して8ビットの濃度データ(所謂、フルカラー)を与えた構造を有するものであり、前記プリンタドライバ45は、この三原色データを前記ブラック(K)、ライトブラック(LK)、シアン(C)、マゼンタ(M)、ライトシアン(LC)、ライトマゼンタ(LM)、イエロー(Y)の7色に対応して8ビットの濃度データを与えた構造のプリントデータに色分解する処理を実現する。   The image data acquired by the semiconductor drive 9 and the disk drive 10 has a structure in which 8-bit density data (so-called full color) is given to the three primary colors of R (red), G (green), and B (blue). The printer driver 45 supplies the three primary color data to the black (K), light black (LK), cyan (C), magenta (M), light cyan (LC), light magenta (LM), yellow ( A process of color separation into print data having a structure in which 8-bit density data is provided corresponding to seven colors of Y) is realized.

前記プリントブロックBでは、前記受付ブロックAから伝送された前記画像データとオーダデータ(プリントサイズデータ、プリント枚数データ)とに基づき、前記ペーパ搬送手段52と前記プリント制御手段53とが前記前搬送ユニットU1、プリント部Bb、カッターユニットU2、反転ユニットU3、後搬送ユニットU4夫々を制御することにより、マガジン収容部BbからプリントペーパPを引き出し、そのプリントペーパPに対して画像データのプリントを行い、プリントサイズに切断する処理を行い、前記仕分け部17又はラック板18に送り出す処理をシーケンシャルに実行するよう基本的な処理形態が設定されている。また、前記プリントヘッドHは、駆動電力の調節によりインク滴の大きさを複数種に切換え得る性能のものが使用され、画像データに基づいてプリントを行う際には画像データの階調に基づいて、1画素あたりのインク滴の数と、インク滴の大きさとを調節することで画像データに対応した階調を表現できるものが用いられている。   In the print block B, based on the image data and order data (print size data, print number data) transmitted from the receiving block A, the paper transport unit 52 and the print control unit 53 are connected to the front transport unit. By controlling U1, print unit Bb, cutter unit U2, reversing unit U3, and rear transport unit U4, the print paper P is pulled out from the magazine housing unit Bb, and image data is printed on the print paper P. A basic processing form is set such that processing for cutting to a print size is performed, and processing for sending to the sorting unit 17 or the rack plate 18 is sequentially executed. The print head H has a performance capable of switching the size of the ink droplets to a plurality of types by adjusting the driving power. When printing based on the image data, the print head H is based on the gradation of the image data. One that can express gradation corresponding to image data by adjusting the number of ink droplets per pixel and the size of the ink droplets is used.

〔プリントからプリント〕オペレータが「プリントからプリント」の選択スイッチSW2を操作した後には、図8のフローチャートに示すように、前記オペレーションシステム42が、フラットベッドスキャナFSによるスキャニングを実行し、取り込んだ画像データをディスプレイ8に表示した状態で、オペレーションシステム42がプリントサイズとプリント枚数との入力を求めてオーダ情報として取得する(#201、#202ステップ)。 [Print to Print] After the operator operates the “Print to Print” selection switch SW2, as shown in the flowchart of FIG. 8, the operation system 42 performs scanning by the flatbed scanner FS and captures the image. In a state where the data is displayed on the display 8, the operation system 42 obtains input of the print size and the number of prints and obtains it as order information (Steps # 201 and # 202).

また、スキャニングを実行する際には、図11に示すように、「スキャニングを実行して下さい」とのメッセージと、フラットベッドスキャナFSの操作の概要を示すアニメーションとのガイダンスをディスプレイ8に表示し、このフラットベッドスキャナFSに対して画像がプリントされたペーパ類等のプリント物をスキャニングテーブル13に対して適正にセットした後に画面中の「OK」スイッチを操作した後にプリント物の画像がフラットベッドスキャナFSによって画像データとして取り込まれる。   Further, when performing scanning, as shown in FIG. 11, guidance on a message “Please execute scanning” and an animation showing an outline of the operation of the flatbed scanner FS is displayed on the display 8. After the printed material such as papers on which the image is printed on the flat bed scanner FS is properly set on the scanning table 13, the image of the printed material is displayed after the “OK” switch in the screen is operated. It is captured as image data by the scanner FS.

また、オーダ情報を取得する場合には、図12に示すように、前記オペレーションシステム42がオーダ画面60を表示し、このオーダ画面60の表示部60Aに取り込んだ画像データを表示すると共に、「プリントサイズとプリント枚数とを入力して下さい」のメッセージを表示し、また、プリントサイズデータとプリントサイズとの入力部60B、60Cを表示してオーダ情報の入力を求め、更に、補正の可否を求め、補正を行わない場合には「NO」スイッチ61を操作し、補正を行う場合には「YES」スイッチ62を操作することになる。   In order to obtain the order information, as shown in FIG. 12, the operation system 42 displays the order screen 60, displays the image data taken in the display section 60A of the order screen 60, and “print”. Please enter the size and number of prints "message, display the print size data and print size input sections 60B and 60C, ask for the input of order information, and ask for the possibility of correction When the correction is not performed, the “NO” switch 61 is operated, and when the correction is performed, the “YES” switch 62 is operated.

前述した「YES」スイッチが操作された場合に(#203ステップ)、補正処理を行えるものとなり、この補正処理を行うための処理画面65がディスプレイ8に表示される(#204ステップ)。   When the above-described “YES” switch is operated (step # 203), correction processing can be performed, and a processing screen 65 for performing this correction processing is displayed on the display 8 (step # 204).

前記#204ステップでは、前記マニュアル補正システム43が処理画面65として図13に示すようにマニュアル補正ページ66が表示され(マニュアル補正タブ66Tが選択された状態にある)、この処理画面65のイメージ表示部67に、フラットベッドスキャナFSで取り込んだ画像データが表示される。この処理画面65にはカラーバランス調節部68、明るさ調節部69、コントラスト調節部70が表示され、夫々を操作した場合には補正結果が、イメージ表示部67に反映され、視覚によって補正状態を確認できるものとなっている。尚、補正処理として、色相、明度、彩度の補正や、レベル補正、ガンマ補正を行えるよう処理形態を設定しても良い。   In step # 204, the manual correction system 43 displays the manual correction page 66 as the processing screen 65 as shown in FIG. 13 (the manual correction tab 66T is selected), and the image display of this processing screen 65 is displayed. The image data captured by the flatbed scanner FS is displayed on the section 67. The processing screen 65 displays a color balance adjustment unit 68, a brightness adjustment unit 69, and a contrast adjustment unit 70. When each of them is operated, the correction result is reflected in the image display unit 67, and the correction state is visually confirmed. It can be confirmed. As a correction process, a processing form may be set so that hue, brightness, and saturation correction, level correction, and gamma correction can be performed.

そして、フラットベッドスキャナFSで取り込んだ画像データをイメージ表示部67で確認した結果、補正を必要としない場合には、「OK」スイッチを操作し、補正を必要とする場合には、必要な補正を行った後に「OK」スイッチを操作することにより、プリント処理を実行可能な状態となり、オペレータが確認操作を行うことにより、前記プリンタドライバ45がプリントブロックBでプリント可能な画像データに変換した画像データと、オーダ情報とがプリントブロックBに伝送され、プリント処理を実現するものとなっている(#205、#207ステップ)。この#207ステップでの処理と、前記通信インタフェース41とで伝送手段が構成されている。   If the image data captured by the flatbed scanner FS is confirmed by the image display unit 67 and correction is not required, the “OK” switch is operated. If correction is required, the correction is required. By operating the “OK” switch after performing the above, the print process can be executed, and when the operator performs a confirmation operation, the printer driver 45 converts the image data into printable image data in the print block B. Data and order information are transmitted to the print block B to implement the print process (steps # 205 and # 207). The processing in step # 207 and the communication interface 41 constitute a transmission means.

また、処理画面65に表示された退色補正タブ72Tを選択した場合には、図14に示す退色補正画面72が表示され、図9のフローチャートに示す退色補正ルーチン(#206、#300ステップ)が実行される。この退色補正ルーチン(#300ステップ)は、プリントぺーパP(メディア)に対してインクジェットプリンタでプリントされた画像を復元するための処理を想定しているが、銀塩式の印画紙にプリントされた画像や、雑誌に印刷された画像の復元に適用することも可能である。   When the fading correction tab 72T displayed on the processing screen 65 is selected, the fading correction screen 72 shown in FIG. 14 is displayed, and the fading correction routine (steps # 206 and # 300) shown in the flowchart of FIG. 9 is performed. Executed. This fading correction routine (# 300 step) assumes processing for restoring an image printed by an ink jet printer on the print paper P (media), but is printed on a silver salt type photographic paper. The present invention can also be applied to the restoration of images printed on magazines and images printed on magazines.

前記#300ステップでは、前記退色補正システム44が前記退色補正画面72をディスプレイ8に表示すると共に、オリジナルイメージ表示部73にオリジナルの画像データを表示し、復元イメージ表示部74に復元後の画像データを表示し、この退色補正画面72に、退色要因データの入力部として、「メディア」、「インク」、「保管環境」で成る3種の入力ボックス75、76、77と、「経過時間」を入力するスライドスイッチ78(時間入力部の一例)とを表示し、更に、補正オプションスイッチ79を表示する(#301、#302ステップ)。   In step # 300, the fading correction system 44 displays the fading correction screen 72 on the display 8, displays original image data on the original image display unit 73, and restores image data on the restoration image display unit 74. Are displayed on the fading correction screen 72 as three types of input boxes 75, 76, 77 including “media”, “ink”, and “storage environment”, and “elapsed time”. An input slide switch 78 (an example of a time input unit) is displayed, and a correction option switch 79 is further displayed (steps # 301 and # 302).

前記「経過時間」を除いた退色要因データは、3種に限るものでなく、精度の高い復元を求めるために4種以上の情報の入力を求めるものであって良く、また、入力の煩雑さを避けるために、退色の要因として大きい2種、あるいは、1種の情報の入力を求めるものであっても良い。また、入力部はディスプレイ8に表示されるものの他に、キーボードや専用のスイッチ類を用いて構成することも可能である。特に、本発明では、退色要因データとして「経過時間」のみを用いることも考えられる。この場合、参照テーブル44Tとして特定のインクに対応したものや、汎用性が高いものが規定値として設定される。   The fading factor data excluding the “elapsed time” is not limited to three types, but may be input of four or more types of information in order to obtain highly accurate restoration, and the input is complicated. In order to avoid this, two types of information that are large as a cause of fading, or one type of information may be requested. Further, in addition to what is displayed on the display 8, the input unit can be configured by using a keyboard and dedicated switches. In particular, in the present invention, it is possible to use only “elapsed time” as the color fading factor data. In this case, a reference table 44T corresponding to a specific ink or highly versatile is set as a specified value.

前記「メディア」、「インク」、「保管環境」で成る3種の入力ボックス75、76、77には、退色要因データを一般化したデフォルトデータがセットされ、その入力ボックス75、76、77に指を接触させることにより、ドロップダウンリストを表示し、そのリスト中から必要とするデータを選択して入力できるように構成されている。また、このデフォルトデータに基づき経過時間のみを設定すること、あるいは、一部の入力ボックスにデータを入力することにより退色補正を実現することも可能である(#302ステップ)。   The three types of input boxes 75, 76, and 77 including "media", "ink", and "storage environment" are set with default data that generalizes the color fading factor data. A drop-down list is displayed by touching a finger, and necessary data can be selected and input from the list. It is also possible to realize fading correction by setting only the elapsed time based on this default data, or by inputting data in some input boxes (step # 302).

具体的に説明すると、前記「メディア」の退色要因データを入力する入力ボックス75は、プリントペーパの種類を特定するデータの入力部であり、光沢紙(メーカ名毎に入力可能)、半光沢紙(メーカ名毎に入力可能)等のデータを入力できるよう構成され、光沢紙がデフォルトデータにセットされている。また、「インク」の退色要因データを入力する入力ボックス76には、染料系であるか顔料系であるかを判別するデータを入力するものであるが、プリンタの機種名を入力することでインクの種類を判別できるようにしており、販売数が最も多い機種名がデフォルトデータにセットされている。また、「保管環境」の退色要因データを入力する入力ボックス77には、プリント物の保管環境を示すデータを入力するものであるが、プリント物が光線に晒される環境にあったことを示す『屋外』、強い光線には晒されないが空気に触れる環境にあったことを示す『額縁』、光線の影響も空気の影響も受け難い環境にあったことを示す『アルバム』かの基本的に3種の環境の何れかを選択できるものとなっており、『額縁』がデフォルトデータにセットされている。同図には、この「保管環境」の退色要因データを入力する入力ボックス77におけるドロップダウンリストを示している。   More specifically, the input box 75 for inputting the “media” fading factor data is an input unit for specifying the type of print paper, and can be glossy paper (can be entered for each manufacturer name), semi-glossy paper. (It is possible to input for each manufacturer name) and the like, and glossy paper is set as default data. Further, in the input box 76 for inputting the “ink” fading factor data, data for determining whether it is a dye system or a pigment system is input. The model name with the largest number of sales is set in the default data. Further, in the input box 77 for inputting the “storage environment” fading factor data, data indicating the storage environment of the printed material is input, and this indicates that the printed material was in an environment exposed to light. Basically, “outside”, “picture frame” indicating that the subject was in an environment that was not exposed to strong light but was exposed to the air, and “album” indicating that the subject was less susceptible to the effects of light and air. One of the kinds of environments can be selected, and “frame” is set as default data. This figure shows a drop-down list in the input box 77 for inputting the fading factor data of the “storage environment”.

前記「経過時間」を入力するスライドスイッチ78は指を接触させて横方向にスライド操作することにより、経過時間の値を連続的に変更可能なインタフェースとして機能するものであり、このスライドスイッチ78をスライド操作することにより画像がプリントされてからの経過時間を容易に増減して入力することが可能であり、入力された経過時間を年を単位とした表示ボックス78A、時間を単位として表示ボックス78Bから確認できるように構成されている。   The slide switch 78 for inputting the “elapsed time” functions as an interface capable of continuously changing the value of the elapsed time by performing a sliding operation in the horizontal direction with a finger in contact with the slide switch 78. By performing a slide operation, it is possible to easily input an increased or decreased elapsed time after the image is printed. A display box 78A in which the input elapsed time is a year, and a display box 78B in which the time is a unit. It is configured to be able to confirm from.

前記退色補正システム44には、前記3種の退色要因データに基づき、時間経過に従って退色度を規定した複数の退色特性データが参照テーブル44Tから与えられるよう構成されている。この退色特性データは3種の退色要因データに基づいて退色試験の結果に基づくものであり、この退色特性データの一例を図6のように示すことが可能である。   The fading correction system 44 is configured to be provided with a plurality of fading characteristics data defining a fading degree over time based on the three types of fading factor data from the reference table 44T. The fading characteristic data is based on the result of the fading test based on the three types of fading factor data, and an example of the fading characteristic data can be shown as shown in FIG.

つまり、同図から明らかなように、プリントされた画像が退色する現象は、画像の画素(ピクセル)を構成するC(シアン)・M(マゼンタ)・Y(イエロー)・K(ブラック)の各色素の残存率が時間経過と伴に低下する現象として捉えることが可能であり、このC(シアン)・M(マゼンタ)・Y(イエロー)・K(ブラック)の色素の時間経過における退色特性をデータ化したものが前記退色特性データである。このように退色特性データを規定することにより、画像データがどのように退色していても、その退色した画像データから本来の画像データを復元できるのである。また、復元を行う際には、C(シアン)・M(マゼンタ)・Y(イエロー)・K(ブラック)の色素の残存率を100%に変換する処理が実行される。   In other words, as is apparent from the figure, the phenomenon in which the printed image fades is caused by each of C (cyan), M (magenta), Y (yellow), and K (black) constituting the pixel (pixel) of the image. It can be understood as a phenomenon in which the residual ratio of the dye decreases with time, and the fading characteristics of the C (cyan), M (magenta), Y (yellow), and K (black) dyes over time. The data is the fading characteristic data. By defining the fading characteristic data in this way, the original image data can be restored from the fading image data, no matter how the image data is fading. Further, when performing restoration, processing for converting the remaining ratio of C (cyan), M (magenta), Y (yellow), and K (black) pigments to 100% is executed.

つまり、退色した画像データから本来の画像データを復元する場合には、3種の退色要因データに基づいて参照テーブル44Tから退色特性データを抽出し、経過時間(T)に基づき、退色度(D)を特定し、各色の退色度(D)から画像データを復元し、復元イメージ表示部74に表示する処理が実行されるのである(#303〜#305ステップ)。   That is, when the original image data is restored from the faded image data, the fading characteristic data is extracted from the reference table 44T based on the three types of fading factor data, and the fading degree (D ) Is specified, the image data is restored from the degree of fading (D) of each color, and displayed on the restored image display unit 74 (steps # 303 to # 305).

前記復元イメージ表示部74に表示された、画像データで復元状態を確認した場合には、「OK」スイッチを操作することにより、前述したマニュアル補正での処理と同様にプリントが実行される(#306、#307ステップ)。   When the restoration state is confirmed by the image data displayed on the restoration image display unit 74, the printing is executed in the same manner as the above-described manual correction process by operating the “OK” switch (# 306, step # 307).

また、復元イメージ表示部74に表示された画像データから更に補正が必要であると判断した場合には、前記補正オプションスイッチ79を操作することにより、図14に示すように、ダイアログボックス80が表示され、このダイアログボックス80において前記マニュアル補正画面に示されたものと同様の補正を行えるものとなっている。   When it is determined that further correction is necessary from the image data displayed on the restored image display unit 74, a dialog box 80 is displayed as shown in FIG. 14 by operating the correction option switch 79. In this dialog box 80, correction similar to that shown on the manual correction screen can be performed.

このように、本発明によると、プリント物からプリントを行う際には、プリント物にプリントされた画像をフラットベッドスキャナFSでデジタル信号化した画像データとして取り込む操作を行い、この操作の後に、ディスプレイ8に退色補正画面72を表示させた状態で「メディア」、「インク」、「保管環境」で成る3種の入力ボックス75、76、77に必要なデータを入力し、「経過時間」を入力するスライドスイッチ78を操作するだけで、参照テーブル44Tからの退色特性データに基づき、失われた色素が復元された状態の画像データを生成でき、このように復元された画像データを復元イメージ表示部74で確認できるので、プリントの可否を判断してプリントを実現できるのである。   As described above, according to the present invention, when printing from a printed material, an operation is performed in which an image printed on the printed material is captured as image data converted into a digital signal by the flatbed scanner FS. 8 with the fading correction screen 72 displayed, enter the necessary data into the three input boxes 75, 76, 77 consisting of “media”, “ink”, and “storage environment”, and enter “elapsed time”. By simply operating the slide switch 78, the image data in a state where the lost pigment is restored can be generated based on the fading characteristic data from the reference table 44T, and the restored image data is restored to the restored image display unit. Since it can be confirmed at 74, printing can be realized by determining whether printing is possible.

特に、ドロップダウンリストに該当するデータが存在しない場合や、プリンタの機種等が不明である場合のように「メディア」、「インク」、「保管環境」で成る3種の入力ボックス75、76、77に対して適正なデータを入力できない場合には、デフォルトデータに基づいて画像データの復元も可能であり、更に、復元イメージ表示部74に表示された画像データから適正な復元が行われていないと判断した場合には、補正オプションスイッチ79を操作することにより、カラーバランス、明るさ、コントラストを任意に調節して適正な画像データを生成し、この画像データからプリントを行うことも可能である。   In particular, when there is no data corresponding to the drop-down list, or when the printer model or the like is unknown, there are three types of input boxes 75, 76 including “media”, “ink”, and “storage environment”. In the case where appropriate data cannot be input to 77, it is possible to restore the image data based on the default data, and further, proper restoration is not performed from the image data displayed on the restored image display unit 74. If it is determined that the color balance, brightness, and contrast are arbitrarily adjusted by operating the correction option switch 79, appropriate image data can be generated, and printing can be performed from this image data. .

〔別実施の形態〕
本発明は、上記した実施の形態以外に以下のように構成しても良い。
[Another embodiment]
The present invention may be configured as follows in addition to the embodiment described above.

(イ)前記実施の形態では、タッチパネル7を形成したディスプレイ8に対して必要な情報を表示し、指等をディスプレイ8の画面に接触させる形態で、操作情報を入力するものであったが、汎用コンピュータを用い、キーボードやマウスを利用して「メディア」、「インク」、「保管環境」で成る3種の入力ボックス75、76、77に対して必要なデータを入力することや、「経過時間」を入力するスライドスイッチ78をマウス等を用いて操作するよう画像処理装置を構成することも可能である。 (A) In the above embodiment, necessary information is displayed on the display 8 on which the touch panel 7 is formed, and operation information is input in a form in which a finger or the like is brought into contact with the screen of the display 8. Using a general-purpose computer, the necessary data can be input to the three input boxes 75, 76, and 77 consisting of “media”, “ink”, and “storage environment” using a keyboard and a mouse. It is also possible to configure the image processing apparatus so that the slide switch 78 for inputting “time” is operated using a mouse or the like.

(ロ)画像がプリントされてからの経過時間を入力するために、画像がプリントされたプリントペーパに撮影日のデータが表示されているものでは、その撮影日をOCR的に取り込んで経過時間に設定することが可能である。また、プリント装置を製造しているメーカが本発明の画像処理装置を製造する場合には、退色補正を実現するため、プリント日をバーコードでプリントしておく、あるいは、紫外線等を照射することで情報の読み取りが可能となる等の不可視コードでプリント日をプリントしておき、これらのコードに基づいてプリント日からの経過時間を求めて自動的に設定することも可能である。 (B) If the shooting date data is displayed on the print paper on which the image has been printed in order to input the elapsed time since the image was printed, the shooting date is captured in an OCR and the elapsed time It is possible to set. In addition, when the manufacturer that manufactures the printing apparatus manufactures the image processing apparatus of the present invention, in order to achieve fading correction, the print date is printed with a barcode or irradiated with ultraviolet rays or the like. It is also possible to print the print date with an invisible code such that the information can be read with, and automatically set the elapsed time from the print date based on these codes.

(ハ)本発明は、白フチが形成された写真等の画像から元の画像を復元する際に、白フチの退色程度に基づいて、画像がプリントされてからの経過時間を求めるよう処理系を構成するものであっても良い。 (C) The present invention relates to a processing system for obtaining an elapsed time after an image is printed based on the degree of fading of the white border when restoring the original image from an image such as a photograph with a white border formed. May be configured.

(ニ)画像がプリントされてからの経過時間を入力するために実施例に記載したスライドスイッチ78に代えて、経過時間を増大させるボタンと、経過時間を減少させるボタンとを備えたスピンボタンをディスプレイに表示することや、設定されたインターバルで経過時間を増大させることや、減少させる処理を行うスイッチ類をディスプレイ8に表示して経過時間の入力を容易にすることにより、復元イメージ表示部74に表示される画像データにオペレータの意識を集中できるよう構成することも可能である。 (D) A spin button having a button for increasing the elapsed time and a button for decreasing the elapsed time in place of the slide switch 78 described in the embodiment for inputting the elapsed time after the image is printed. By displaying switches on the display 8 for displaying on the display, increasing the elapsed time at a set interval, or displaying switches for performing a decrease process, the restored image display unit 74 can be easily input. It is also possible to configure so that the operator's awareness can be concentrated on the image data displayed on the screen.

(ホ)更に、この実施の形態では、プリンタブロックBとしてインクジェット型のものを使用しているが、銀塩式のプリント装置において復元された画像データをプリントするようシステムを構成することも可能である。 (E) Further, in this embodiment, an ink jet type is used as the printer block B. However, it is also possible to configure the system so as to print the image data restored in the silver salt type printing apparatus. is there.

プリントシステムの全体側面図Overall side view of the printing system プリントブロックの斜視図Perspective view of print block 画像のプリント領域と切断マークとを示す図Diagram showing print area and cut mark of image プリントブロックのプリントペーパの搬送経路を示す模式図Schematic diagram showing the print paper transport path of the print block 制御系のブロック回路図Block diagram of control system 退色特性データを示すグラフGraph showing fading characteristics data 「データからプリント」ルーチンのフローチャートFlowchart of "Print from data" routine 「プリントからプリント」ルーチンのフローチャートFlowchart of “Print to Print” routine 退色補正ルーチンのフローチャートFlow chart of fading correction routine ディスプレイに表示された選択スイッチを示す図The figure which shows the selection switch which is indicated on the display ディスプレイに表示されたガイダンスを示す図Figure showing the guidance displayed on the display オーダ画面を示す図Diagram showing the order screen マニュアル補正タブが選択された処理画面を示す図Diagram showing the processing screen with the manual correction tab selected 退色補正タブが選択された処理画面を示す図The figure which shows the processing screen where the fading correction tab is selected

符号の説明Explanation of symbols

8 ディスプレイ
44 復元手段
44T 参照テーブル
75、76、77 入力部
78 時間入力部
FS スキャナ
8 Display 44 Restoring means 44T Reference table 75, 76, 77 Input unit 78 Time input unit FS Scanner

Claims (6)

メディアにプリントされた多色の画像を画像データに変換して取り込むスキャナと、このスキャナからの画像データから退色前の画像データを復元する復元手段とを備えている画像処理装置であって、
退色要因データを入力する入力部を備えると共に、前記復元手段が、前記プリントに用いられた複数種の色素における退色要因データに基づいた退色度を規定した退色特性データで成る参照テーブルを備えて構成され、
前記入力部を介して前記退色要因データを入力することにより、前記参照テーブルに基づいて各色素の退色度を特定し、この退色度に基づいて前記スキャナから取り込んだ前記画像データを前記復元手段が退色前の画像データに復元する画像処理装置。
An image processing apparatus comprising: a scanner that converts and captures multicolor images printed on a medium into image data; and a restoration unit that restores pre-fading image data from the image data from the scanner,
An input unit for inputting fading factor data is provided, and the restoration unit includes a reference table including fading characteristic data that defines a fading degree based on the fading factor data for a plurality of types of dyes used in the printing. And
By inputting the fading factor data through the input unit, the fading degree of each pigment is specified based on the reference table, and the restoration means restores the image data captured from the scanner based on the fading degree. An image processing apparatus that restores image data before fading.
前記入力部をディスプレイに表示し、このディスプレイに表示された入力部を介して前記退色要因データの入力を実現するインタフェースを備えると共に、前記復元手段は、前記スキャナで取り込んだ画像データと、この復元手段で復元した画像データとを前記ディスプレイに表示するよう構成されている請求項1記載の画像処理装置。   The input unit is displayed on a display, and an interface for realizing the input of the fading factor data via the input unit displayed on the display is provided, and the restoration unit includes the image data captured by the scanner and the restoration The image processing apparatus according to claim 1, wherein the image data restored by the means is displayed on the display. 前記退色要因データが、メディアに画像がプリントされてからの経過時間と、メディアにプリントされた画像の色素の種類と、画像がプリントされたメディアの保存環境との各条件を含み、前記参照テーブルは、前記各条件に基づいて退色度を特定する複数の退色特性データを備えている請求項1又は2に記載の画像処理装置。   The fading factor data includes each condition of an elapsed time since an image is printed on a medium, a type of pigment of an image printed on the medium, and a storage environment of the medium on which the image is printed, and the reference table The image processing apparatus according to claim 1, further comprising a plurality of fading characteristics data that specifies a fading degree based on each of the conditions. 前記参照テーブルが、前記色素の種類と、画像がプリントされた画像の保存環境との各条件を一般化した退色特性データをデフォルト値として備えている請求項3記載の画像処理装置。   4. The image processing apparatus according to claim 3, wherein the reference table includes, as a default value, fading characteristic data that generalizes conditions of the type of the dye and the storage environment of the image on which the image is printed. 前記退色要因データとしての経過時間を入力するために、前記入力部としての時間入力部が形成され、この時間入力部は前記経過時間の値を連続的に変更可能なインタフェースを備えて構成されている請求項3記載の画像処理装置。   In order to input the elapsed time as the fading factor data, a time input unit as the input unit is formed, and this time input unit is configured with an interface capable of continuously changing the value of the elapsed time. The image processing apparatus according to claim 3. 該画像処理装置は、復元した画像データをプリント装置においてプリント可能なデータ形式に変換するプリンタドライバを備えると共に、このプリンタドライバで変換した画像データをプリント装置に伝送する伝送手段を備えている請求項1〜5のいずれか1項に記載の画像処理装置。   The image processing apparatus includes a printer driver that converts the restored image data into a data format that can be printed by the printing apparatus, and transmission means that transmits the image data converted by the printer driver to the printing apparatus. The image processing apparatus according to any one of 1 to 5.
JP2003355091A 2003-10-15 2003-10-15 Image processing device Expired - Fee Related JP4235905B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003355091A JP4235905B2 (en) 2003-10-15 2003-10-15 Image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003355091A JP4235905B2 (en) 2003-10-15 2003-10-15 Image processing device

Publications (2)

Publication Number Publication Date
JP2005123790A true JP2005123790A (en) 2005-05-12
JP4235905B2 JP4235905B2 (en) 2009-03-11

Family

ID=34612806

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003355091A Expired - Fee Related JP4235905B2 (en) 2003-10-15 2003-10-15 Image processing device

Country Status (1)

Country Link
JP (1) JP4235905B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007074579A (en) * 2005-09-08 2007-03-22 Casio Comput Co Ltd Image processing apparatus and program
JP2007074578A (en) * 2005-09-08 2007-03-22 Casio Comput Co Ltd Image processing apparatus, photographing apparatus, and program
JP2009088681A (en) * 2007-09-27 2009-04-23 Canon Inc Color processing apparatus and method
EP2515521A1 (en) * 2011-04-18 2012-10-24 Samsung Electronics Co., Ltd. Image Compensation Device, Image Processing Apparatus And Methods Thereof
JP2023076257A (en) * 2021-11-22 2023-06-01 コニカミノルタ株式会社 IMAGE CORRECTION APPARATUS, IMAGE CORRECTION METHOD AND IMAGE FORMING APPARATUS

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007074579A (en) * 2005-09-08 2007-03-22 Casio Comput Co Ltd Image processing apparatus and program
JP2007074578A (en) * 2005-09-08 2007-03-22 Casio Comput Co Ltd Image processing apparatus, photographing apparatus, and program
JP2009088681A (en) * 2007-09-27 2009-04-23 Canon Inc Color processing apparatus and method
US8203759B2 (en) 2007-09-27 2012-06-19 Canon Kabushiki Kaisha Color processing apparatus and method thereof
US8339668B2 (en) 2007-09-27 2012-12-25 Canon Kabushiki Kaisha Color processing apparatus and method thereof
EP2515521A1 (en) * 2011-04-18 2012-10-24 Samsung Electronics Co., Ltd. Image Compensation Device, Image Processing Apparatus And Methods Thereof
US9270867B2 (en) 2011-04-18 2016-02-23 Samsung Electronics Co., Ltd. Image compensation device, image processing apparatus and methods thereof
JP2023076257A (en) * 2021-11-22 2023-06-01 コニカミノルタ株式会社 IMAGE CORRECTION APPARATUS, IMAGE CORRECTION METHOD AND IMAGE FORMING APPARATUS
JP7775666B2 (en) 2021-11-22 2025-11-26 コニカミノルタ株式会社 Image correction device, image correction method, and image forming device

Also Published As

Publication number Publication date
JP4235905B2 (en) 2009-03-11

Similar Documents

Publication Publication Date Title
WO1999048289A1 (en) Photograph image printing system, photograph image printing machine, computer-readable storage medium stored with photograph image printing program
CN101600038A (en) Image processing device and image processing method
JP4235905B2 (en) Image processing device
US20090028426A1 (en) Coloring picture, coloring picture generating apparatus, and coloring picture generating method
US8149426B2 (en) Image forming apparatus with copy function
US20070109601A1 (en) Printing method, multi-function printing apparatus, and printing system
JP6087334B2 (en) Image processing apparatus and image forming apparatus
JP5070157B2 (en) Image processing apparatus, image processing method, and program
JP3161427B2 (en) Printer
JP2011004010A (en) Profile creation system and profile creation server
JP5454419B2 (en) Display image printing device
JP3037499B2 (en) Printing method and apparatus
JP4564603B2 (en) Image printing system
JP4432826B2 (en) Print system and print order receiving apparatus
JP5447297B2 (en) DISPLAY IMAGE PRINTING SYSTEM, DISPLAY IMAGE PRINTING METHOD, AND STORAGE MEDIUM CONTAINING PROGRAM FOR READING AND RUNNING THE PRINTING METHOD TO A CONTROL DEVICE
GB2412264A (en) Improvements in and relating to multiple printing passes
JP3314737B2 (en) Printer
JPH11320987A (en) Photo image printing equipment
JPH11321018A (en) Photo image printing equipment
JP2009015438A (en) Image reception device and image reception processing program
JP2005144950A (en) Printing apparatus, printing method, printing program, and printing medium
JP2003320733A (en) Photo printing equipment
JP4858049B2 (en) Printer, control method thereof, and program thereof
JP4693218B2 (en) Image recording apparatus and image recording method
JP4506736B2 (en) Image forming apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060725

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080521

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080529

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080711

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080918

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081027

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081120

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081203

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111226

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111226

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121226

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121226

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131226

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees