WO1999000701A1 - Image processor and recording medium bearing voice code image - Google Patents

Image processor and recording medium bearing voice code image Download PDF

Info

Publication number
WO1999000701A1
WO1999000701A1 PCT/JP1998/002494 JP9802494W WO9900701A1 WO 1999000701 A1 WO1999000701 A1 WO 1999000701A1 JP 9802494 W JP9802494 W JP 9802494W WO 9900701 A1 WO9900701 A1 WO 9900701A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
information
audio
code
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP1998/002494
Other languages
English (en)
French (fr)
Inventor
Iwao Nozaki
Shinichi Imade
Kenji Yoshioka
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Noritsu Koki Co Ltd
Olympus Corp
Original Assignee
Noritsu Koki Co Ltd
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Noritsu Koki Co Ltd, Olympus Optical Co Ltd filed Critical Noritsu Koki Co Ltd
Priority to DE69833434T priority Critical patent/DE69833434T2/de
Priority to US09/194,811 priority patent/US6421470B1/en
Priority to AU75508/98A priority patent/AU711544B2/en
Priority to EP98923138A priority patent/EP0928986B1/en
Priority to KR1019980709773A priority patent/KR20000065228A/ko
Publication of WO1999000701A1 publication Critical patent/WO1999000701A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B31/00—Associated working of cameras or projectors with sound-recording or sound-reproducing means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00265—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with a photographic printing apparatus
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B27/00—Photographic printing apparatus
    • G03B27/32—Projection printing apparatus, e.g. enlarger, copying camera
    • G03B27/52—Details
    • G03B27/521—Arrangements for applying a supplementary information onto the sensitive material, e.g. coding
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B31/00—Associated working of cameras or projectors with sound-recording or sound-reproducing means
    • G03B31/06—Associated working of cameras or projectors with sound-recording or sound-reproducing means in which sound track is associated with successively-shown still pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector

Definitions

  • the present invention is intended to perform printing by adding an optically readable audio code image to an image obtained by a silver halide camera, a digital still camera that handles image data, or an image capturing scanner.
  • a silver halide camera a digital still camera that handles image data
  • an image capturing scanner an image processing apparatus.
  • Images picked up by various image acquisition devices have been used for many years by being printed on photographic paper using a silver halide photographic method, or printed on paper or film using an inkjet printer or thermal printer.
  • the information of the subject is transmitted to the wide area and the region over time in a form that relies on the visual sense of a still image.
  • the new media technologies described above include the sound of the animal in an animal photo, or the voice of each subject in a snapshot of multiple people, at the same time as shooting, or before and after shooting, It is possible to create a photo with a voice code in which multiple pieces of image information (still images such as photos) and voice code images corresponding to multiple pieces of voice information are arranged. Will expand dramatically compared to the past. Can be. However, what is important here is that when the image information and the audio information are both recorded on a recording medium such as a printed matter, the information is accurately correlated. Similarly, Japanese Patent Application Laid-Open No.
  • the reason why the correspondence is important is that the audio code image of the completed photo with audio code cannot be visually confirmed by itself, so depending on the arrangement of the image image and audio code image, a certain audio code This is because a situation may occur in which it is not possible to determine which of a plurality of image images corresponds to which image. In the case of photographs with audio codes in which audio code images are collectively arranged in a specific area in consideration of the readability of audio code scanning by a scanner, it is particularly difficult to collate them.
  • An object of the present invention is to provide an image processing apparatus and a plurality of image images and a plurality of audio codes which can easily and surely deal with such two types of information having different forms of audio and image.
  • An object of the present invention is to provide a photograph with a voice code so that an image and a voice code can be easily collated even if the photograph has a voice code in which an image is arranged. Disclosure of the invention
  • an image processing apparatus comprises: an image input unit for inputting image information; a voice input unit for inputting audio information; and link information for linking the image information and the audio information.
  • Link processing means for converting the audio information into an optically readable audio code image; and an image image corresponding to the image information and the audio code image based on the link information.
  • a printing device for recording the image on a predetermined recording medium.
  • link information for linking image information and audio information is set, and based on the link information, an image corresponding to the image information is associated with an audio code image corresponding to the audio information, and a predetermined recording is performed. It can be recorded on a medium.
  • Recording media refer to various hard copy materials, such as ordinary printing paper and printing film, and photographic photosensitive materials such as photographic paper and film (negative / positive).
  • the code conversion unit includes a compression encoding unit that compresses and encodes the audio information, and an optically readable audio information that is compressed and encoded. It is provided with an audio code image generating means for converting into an audio code image, whereby audio information can be converted into an audio code image which can be compactly and reliably read optically.
  • the code conversion means converts both the audio information and the link information into an optically readable audio code image.
  • the code conversion means converts both the audio information and the link information into an optically readable audio code image.
  • the link information includes a layout information indicating an arrangement of the image image and the audio code image to be recorded on the recording medium, so that the read audio code image is obtained. Only by decoding the information, the layout information can be grasped, which is particularly advantageous when a copy is created. Further, the link information includes image information of the image image to be recorded on the recording medium, a storage location of the source thereof, audio information of the audio code image, and address information indicating a storage location of the source thereof. Then, it becomes easy to know the location of the original data, which simplifies the duplication work.
  • the link information is commonly given to the image information and the audio information, and is used as a recognition symbol indicating a mutual relationship, and the printing device visualizes and records the recognition symbol.
  • the relationship between the image information and the audio information can be grasped more visually.
  • the printing apparatus records the audio code image in a margin area or a back surface outside the image image recording area of the recording medium. Since the location can be separated from the recording area of the image information, the image information can be surely grasped, and the read voice code image can be decoded well. Further, the printing device may include the sound on the image. By superimposing and recording the code image, the audio code image can be recorded without reducing the image image recording area.
  • the printing apparatus synthesizes and records the image image and the audio code image, so that the audio code image can be recorded without reducing the image image recording area.
  • the printing apparatus records the image image and the audio code image on a print recording medium
  • the image information and the information recorded by the audio code image can be stored in a cheap and simple print recording medium.
  • the new print recording medium can be spread widely and generally.
  • the printing apparatus records the image image and the audio code image on a photosensitive recording medium, for example, a negative film, a positive film, a photographic paper, or the like
  • a photosensitive recording medium for example, a negative film, a positive film, a photographic paper, or the like
  • the image information and the information recorded on the code image are used.
  • a high-quality photosensitive recording medium it can be grasped more accurately, and the high-quality specifications can be satisfied.
  • the image input means includes: a scanner for reading a photographed image formed on a photographic film or a photographic print; and a photographer photographed by a digital still camera or a video movie camera. Some image information is obtained by using at least one of an image signal input unit that captures an image and an image signal input unit that captures an image created or edited by a computer.
  • various image input means including a public communication network (telephone, Internet, etc.) can be applied, and can be used for various applications.
  • the link processing means includes an ID information giving means for giving ID information for specifying at least one of the image information and the audio information as the link information. And setting link information for linking one of the image information and the audio information to the other information based on the ID information.
  • the link processing means monitors at least one of the image information and the audio information, and the image information monitored by the monitor means.
  • Information designating means for designating information such that one of the information and the voice information is linked to the other information, and based on the output from the information designating means and the ID information. It can also be configured to set link information. In this case, by specifying information to be linked while monitoring the image information and the audio information by a monitor means such as a CRT and adding the link information, the correspondence relationship between the image information and the audio information is not duplicated. Link information can be reliably set according to the user's request.
  • a pointing device such as a keypad, a mouse, a trackpad, a touch panel, etc., which allows an operator to specify desired information regarding the image information or audio information output to the monitor means.
  • link information can be set more easily and reliably according to the user's request.
  • an image image corresponding to a plurality of image information and a plurality of audio code images corresponding to the image information are arranged. It is characterized in that the recognition symbols indicating the correspondence between the image information and the audio information are visualized and recorded.
  • a recognition symbol is provided so that the image image and the corresponding voice code image can be visually confirmed, so that the scanner can also handle the image image when scanning the voice code.
  • Voice code images can be selected visually.
  • Recognition symbols used here are used in a broad sense and include not only numbers and letters, but also lines that connect image code and voice code, as well as codes that emit sound and light. Is defined as
  • each voice code image is arranged at a position distant from the corresponding image image.
  • the voice code image corresponding to the image image can be surely grasped by the identification symbol, particularly, This is a particularly important advantage in the field where many image images and audio code images are arranged on one sheet (one page) such as a photo book.
  • FIG. 1 is a block diagram showing a schematic configuration of a photographic processing apparatus which is one embodiment of an image processing apparatus according to the present invention
  • FIG. 2 is an explanatory diagram showing reproduction of sound from a photograph with a sound code image according to the present invention
  • Figure 3 is a block diagram showing the main functions of the controller.
  • FIG. 4 is an explanatory diagram showing a link structure between image data and audio code data
  • FIG. 5 is a block diagram showing a schematic configuration of another embodiment of the image processing apparatus according to the present invention.
  • FIG. 6 is a block diagram showing a schematic configuration of still another embodiment of the image processing apparatus according to the present invention.
  • FIG. 7 is a block diagram showing a schematic configuration of still another embodiment of the image processing apparatus according to the present invention.
  • FIG. 8 is a block diagram of one embodiment of the image processing apparatus of the present invention created by aiming at the function of the link processing means,
  • FIG. 9 is a flowchart showing the processing steps of the image processing apparatus according to FIG.
  • FIG. 10 is a schematic diagram showing a monitor screen of the image processing apparatus according to the present invention.
  • FIG. 11 is a schematic diagram illustrating an image ID, image information with an image ID, and audio information with an image ID.
  • Fig. 12 is a diagram showing a New Year's postcard with a photo as an example of a recording medium with an audio code.
  • Fig. 13 is another implementation of the image processing device of the present invention created by aiming at the function of the link processing means. Block diagram of the form,
  • FIG. 14 is a block diagram of still another embodiment of the image processing apparatus of the present invention created by aiming at the function of the link processing means,
  • FIG. 15 is a schematic diagram illustrating audio ID and link information
  • Fig. 16 is a schematic diagram illustrating a simple image ID and audio ID.
  • FIG. 17 shows a photograph with a voice code by the photographing device with a voice code according to the present invention. Explanatory diagram explaining the flow of creation,
  • Fig. 18 is a schematic diagram showing the link relationship between image data, audio data, and ID code in one object.
  • Figure 19 is a schematic diagram showing a photo with audio code
  • FIG. 20 is a functional block diagram showing an embodiment of a photograph creation device with a voice code according to the present invention.
  • FIG. 1 is a block diagram showing a photo processing device 1 as one embodiment of an image processing device for producing a recording medium (photo) with an audio code according to the present invention.
  • the photographic processing apparatus 1 includes a projection exposure unit 20 for projecting and exposing a photographed image of a photographic film (hereinafter, referred to as a film) 2 to a photographic paper 3 as a photo-sensitive material, and an audio copier for the photographic paper 3.
  • a projection exposure unit 20 for projecting and exposing a photographed image of a photographic film (hereinafter, referred to as a film) 2 to a photographic paper 3 as a photo-sensitive material, and an audio copier for the photographic paper 3.
  • Printing equipment for printing printed images 10
  • Projection exposure unit 20 and printers 31 for photosensitive materials A loop forming section 40 that forms a loop of the photographic paper 3 for independently transporting the photographic paper 3 in the processing, a developing processing section 50 that develops the photographic paper 3 that has been subjected to the printing processing, and obtains an audio signal.
  • An audio signal input unit 6, which controls the operation of each unit of the photo processing apparatus 1 and arithmetic processing of various data, are provided.
  • An operation console 101 and a monitor 102 for inputting various information are connected to the controller 100.
  • the photographic paper 3 pulled out from the photographic paper magazine 4 that holds the photographic paper 3 in a stirrup shape is used to print the image taken from the film by the projection exposure unit 20 and print the voice code image by the CRT printer 31.
  • the film After being exposed, the film is developed in a development processing section 50, and as shown in FIG. 2, is cut into a size including a photograph (image image) 6 for one frame of film and an audio code image 7, and has an audio code. Emitted as photo print 5.
  • the voice code image 7 is manually scanned by the dedicated reading scanner 8, the sound corresponding to the voice code image 7 is output from the speaker by the function of the voice reproducing circuit built in the scanner 8.
  • the projection exposure unit 20 includes a projection exposure light source 21, a dimming filter 22 that adjusts the color balance of the light applied to the film 2, and a mirror tunnel that uniformly mixes the light that has passed through the dimming filter 22. 23, a printing lens 24 for forming an image of the film 2 on the photographic paper 3 and a shirt 25, and a paper mask 26 for setting the exposure area for the photographic paper 3 are provided on the same optical axis forming the exposure optical path. Have been.
  • a photographed image scanner 9 that scans a photographed image formed on the film 2 to obtain a digital image is provided upstream of the projection exposure unit 20 on the film transport path.
  • the scanner 9 irradiates the film 2 with white light, decomposes the intensity of the reflected light or transmitted light into the three primary colors of red, green, and blue, and makes the CCD line sensor detect it. D-convert and send to controller 100.
  • the controller 100 mainly processes an exposure control unit 110 for performing exposure control of the projection exposure unit 20 and an audio signal input from the audio input unit 60.
  • a code data generation unit 120 for generating corresponding audio code data and a central control unit 130 for controlling these units 110 and 120 are provided.
  • the exposure control unit 110 uses the first storage unit 111 that stores the image data sent from the scanner 9 and the image data that is stored in the first storage unit 111 to perform exposure conditions. Exposure condition calculation unit 1 1 and 2 and exposure control unit 1 that controls the operation of the dimming filter 22 and the shutter 25 of the projection exposure unit 20 based on the exposure condition calculated by the exposure condition calculation unit 1 12 13 and the image data read from the first storage unit 11 1
  • An image data conversion unit 114 converts the image data into simulated image data to be displayed on the monitor display 102 based on the exposure conditions obtained by the unit 112.
  • Various parameters registered in the image data conversion unit 114 and used for conversion processing such as negative-positive conversion of image data are captured images of the photo film 2 under the exposure conditions obtained by the exposure condition calculation unit 112.
  • the image is set so that an image equivalent to the image formed on the photographic paper 3 by projecting and exposing the frame onto the photographic paper 3 can be displayed on the monitor display 102. If the simulated image displayed on the monitor display 102 is not satisfactory, use the console 101 to manually change the Y (yellow), M (magenta), and C (cyan) values. Increase / decrease in exposure of each color or average increase / decrease in exposure corresponding to change in density of photograph The exposure condition can be changed by inputting.
  • the code data generation unit 120 includes a compression unit 122 for compressing the digital audio signal, and an error correction coding unit 122 for adding an error correction code by an error correction code algorithm based on coding theory.
  • the code conversion unit for converting the input audio information into the audio code image 7 includes a compression unit 121, an error correction encoding unit 122, a code data expansion unit 123, It is composed of
  • the code data generation unit 120 further includes a playback unit 126 that accesses the second storage unit 124 and performs processing such as inverse conversion and error correction. You can check the audio.
  • the image information of the photographed image of the film 2 obtained by the scanner 19 and stored in the first storage unit 111 is transmitted to the image data conversion unit 114 in an interface.
  • the printer 3 1 is used to print both the image 6 and the audio code image 7 of the film 2 taken by the printer 31. It is also possible to print on paper 3.
  • the loaded film 2 has a plurality of transport rollers 71 and a motor for driving the transport rollers.
  • each captured image is scanned by the scanner 9, and the acquired digital image data is stored in the first storage unit 111 as described above.
  • the audio signal is also sent to the controller 100 through the audio input unit 60, and stored in the second storage unit 124 in the form of audio code data as described above.
  • the order information recorded on the print order card is automatically or manually given to the controller 100 so that the central control unit 130 can display the image corresponding to the photographed image frame number as shown in FIG. ID and audio ID are assigned, and the image ID is linked to the address of the corresponding image data stored in the first storage unit 111, and the audio ID is stored in the second storage unit 124.
  • Such link information is generated and managed by the central control unit 130, and is stored in the link information storage unit 131. That is, here, the central control unit 130 and the link information storage unit 131 function as link processing means for linking the captured image of the film 2 and the audio signal corresponding thereto. Thus, the captured image and the sound input to the photo processing device 1 are surely combined with each other and printed on the photographic paper 3.
  • the exposure control unit 110 controls the dimming filter 22 based on the image data acquired by the scanner 19, whereby The irradiation light from the projection exposure light source 21 is adjusted to a color balance according to the color density of the image on the film 2.
  • the projection exposure section 20 irradiates the film 2 with the adjusted light by the operation of the shutter 25 and prints the photographed image of the film 2 on the photographic paper 3.
  • the paper mask 26 can be operated to change the exposure area on the photographic paper 3 in various ways.
  • the printing paper 3 after the printing process is sequentially conveyed by the photographic paper conveyance mechanism 80.
  • the photographic paper conveyance mechanism 80 is provided with the above-described loop forming section 40.
  • the loop forming section 40 includes transport rollers 81 and 82 for transporting the photographic paper 3 and a motor 84 for rotating and driving the transport roller 81, and although not shown, transports the photographic paper 3 A flap that can be switched between a state in which the rollers are guided linearly between the rollers 81 and 82 and a state in which a loop of the photographic paper 3 is allowed to be formed as shown in FIG. And a roller 82 on the downstream side in the photographic paper transport direction.
  • the film 2 scanned by the scanner 9 is pulled out as it is not used by the projection exposure unit 20.
  • the captured image converted into a digital image is printed on the photographic paper 3 by the CRT printer 31 after undergoing conversion processing by the image data conversion unit 114 and the interface 125 for the CRT printer 31.
  • the image data of the captured image and the voice code image data may be combined in the controller 100 in advance and sent to the CRT printer 31 as one print data, or two separate print data may be sent.
  • the printing paper 3 may be moved by a predetermined amount between each print as data and printed.
  • the development processing section 50 is provided with a plurality of tanks filled with a processing solution for developing the photographic paper 3 after printing, and the photographic paper 3 sequentially passes through the plurality of tanks. And is developed.
  • the transport control of the photographic paper 3 in the developing section 50 and the control of the motor 72 of the film transport mechanism and the motors 84, 85 of the photographic paper transport mechanism 80 are centrally controlled by the controller 100.
  • the photo processing device 1 shown in FIG. 5 has a higher cost than the photo processing device 1 shown in FIG.
  • the controller 100 is provided with an image signal input unit 10 for receiving image data from a flatbed scanner 10a as an example of a device for acquiring digital images from photographic prints. Is different. This is where the user
  • the image data of the photographic print obtained by the flatbed scanner 110 is stored in the first storage unit 111 of the exposure control unit 110, and processed by the image data conversion unit 114 and the interface 125. After printing, the image is printed on photographic paper 3 by a photosensitive material printer 31 such as a CRT printer or PLZT printer together with the voice code image, developed by the development processing unit 50, and discharged as a photo 5 with a voice code. Is done.
  • the image signal input section 10 has a video movie camera 10b or a digital still camera.
  • An interface that can receive image data from digital photographing equipment such as 100c and a computer that can create or edit images 10d is facilitated. It is possible to receive data.
  • the controller 100 can also receive image data and audio data using a communication line.
  • the photographic processing apparatus 1 shown in FIG. 6 is a modification of the apparatus shown in FIG. 5, and uses a non-photosensitive material printer 32 such as a thermal printer or an ink jet printer in place of the photosensitive material printer 31.
  • a non-photosensitive material printer 32 such as a thermal printer or an ink jet printer in place of the photosensitive material printer 31.
  • thermal printers are also used to create sticker prints in addition to index prints in ordinary DPE processing, and can be used as is for prints of Photo 5 with audio code.
  • the use of the sticker paper can provide an additional advantage that the printed photo with the voice code can be easily attached to the surface of an album or other article.
  • a laser beam printer or an ink jet printer which prints the audio code image at a large magnification on a transparent film 11 instead of the photographic paper 3 as the printing apparatus 30 is used.
  • Printers for non-photosensitive materials such as 32 are used to form this enlarged voice code image.
  • the projection exposure unit 20 prints the audio code image on the photographic paper 3 by using the transparent film 11 and reducing the size accordingly.
  • Digital images created or edited using 10d image creation software digital images sent from image acquisition devices such as scanners and digital cameras, and read from recording media such as FD and CD-R.
  • the digital image is the image information to be processed, and by synthesizing it with an audio code image based on audio information obtained from a microphone, cassette tape, or CD, it can be used as a photo with audio code by a hard copy device such as a printer. Can output.
  • the link processing means for generating and managing the link information is used. It is constructed by a central control unit 130 and a link information storage unit 131.
  • the unit 10 includes an image input processing unit 210, an image editing unit 212, and an image selecting unit 214, and the audio input unit 60 includes an audio input processing unit 218, an audio editing unit 2 20 and an audio selection unit 222 are provided, and playback of input audio and monitoring of images are performed by operating the user input setting unit 216 formed on the console 101. This is performed through the speaker 102 and the speaker 103.
  • the link processing means constructed by the central control unit 130 and the link information storage unit 131 is now replaced by the ID information giving unit 230 and the link information setting unit 23 6
  • the code data generation unit 120 is composed of an audio data compression / encoding unit 238 and an audio data compression / encoding unit 238 constructed by an appropriate one selected from known encoding methods such as waveform encoding and analysis / synthesis encoding.
  • This is shown as a code conversion section 242 including a voice code image generation section 240 for expanding the coded voice code data into a two-dimensional code image.
  • the synthesis processing unit 140 that synthesizes the audio code image stored in the unit 244 includes an image / audio code image layout editing unit 234 and an image / audio code image synthesis processing unit 246, and the link processing unit 130a
  • the image image and the voice code image are combined in a desired layout based on the link information set in the step (1), and sent to the printing device 30.
  • Image information is input to the section 210 (# 1).
  • the image information is sent to the image editing unit 2 12, and editing processing such as color tone / gradation conversion and enlargement / reduction is performed through operation from the user input setting unit 2 16 while checking the image on the monitor 102 ( # 2).
  • the edited image is sent to the image selection unit 214, where the image to be printed is selected.
  • audio information is input to the audio input processing unit 218 from a microphone, a cassette tape recorder, a CD (compact disk), a digital voice recorder, or the like (# 1).
  • the voice information is sent to the voice editing unit 220, and the voice editing process is performed through an operation from the user input setting unit 216 while confirming the sound with the speaker 103 (# 3).
  • the edited audio data is sent to the audio selection unit 222, and the audio linked to the image selected by the image selection unit 214 is selected (# 6).
  • the image monitor 102 is a monitor screen as shown in FIG.
  • the user input setting unit 210 includes a personal computer keyboard 101a, a mouse 101b, and an interface circuit for these.
  • the user selects an image to be printed and a voice to be converted into a voice code image by using a cursor 102 a in the screen linked to the mouse 101 b while watching a plurality of images displayed on the monitor 102.
  • an image is selected by placing a cursor on the image to be printed (IMG4 in Fig. 10) and clicking (# 4), and a sound symbol indicating the sound to be linked to the image (Fig. 10:
  • the audio to be linked is selected by dragging to SP 1) and dropping there (# 6).
  • the audio symbols displayed on the screen are, for example, symposiums for distinguishing each other's audio, such as song titles and song numbers.
  • the desired audio symbol on the monitor screen with the cursor In order to check the audio content, specify the desired audio symbol on the monitor screen with the cursor, and double-click to play the actual audio from the speaker 103 for confirmation. It is configured.
  • the selected image data is sent to the ID information adding section 230, where the image ID information supplied from the ID information supplying section 228 is added by the image ID information adding section 226 (# 5).
  • the actual image ID information is set by an input from the keyboard 101a by the user as shown in FIG.
  • the image ID information D 1 assigned to the image in the image ID information assigning section 2 26 is sent to the link information setting section 2 36, and the image information D 2 assigned with this image ID as a header is the image
  • the data is temporarily stored in the data storage and storage section 2 32.
  • the image ID information D1 is composed of an image serial number, an individual number, an input form number, an identification number, a frame number, and the like.
  • the personal number is the customer's phone number or date of birth
  • the input form number identifies the medium that has been the source of the image, for example, a code indicating a photographic film, photographic print, or digital camera.
  • the number corresponds to the film number including the lab number for photographic film, and the ID number and volume name for storage media such as smart media.
  • the image information D2 with the image ID has the above-described image ID in the header portion and the image data in an appropriate format (JPEG, GIF, PICT etc.).
  • the audio information selected by the audio selection unit 222 to be combined with the specific image is sent to the link information setting unit 236.
  • Fig. 11 (c) shows the data format of audio information D3 with link information.
  • the audio information D3 with link information is sent to the audio data compression and encoding unit 238, where only the audio data is subjected to compression processing.
  • the audio code image generation unit 240 outputs the compressed audio data and
  • the link information is converted into an optically readable audio code image (# 8).
  • the voice code image data is stored in the voice code image storage / storage unit 244.
  • the image data stored in the image data storage and storage section 232 and the audio code image stored in the audio code image storage and storage section 244 to be linked to this image are described above.
  • the image and audio code image layout editing sections 2 and 3 are respectively loaded into the image and audio code image layout editing sections 2 and 4 to perform the layout editing process of the image image and the audio code image based on the mutual link information provided as described above (# 9). .
  • a layout editing screen is displayed on the screen 102b of the monitor 102 shown in FIG. 10, and the layout editing of the image image and the voice code image is performed by the instruction of the cursor. For example, after the editing process, a screen of an image / voice code image synthesized as desired is displayed.
  • the audio code image is determined to be NG, and the processing returns to the image editing unit 212 or the audio code image generation unit 240, and the necessary processing is performed again. For example, if the length of the audio code image exceeds the printable length, it is re-edited such that it is split into two parts to form a two-stage configuration. Also, by specifying the audio code image displayed on the monitor screen 102b with the mouse 101b and double-clicking it, the corresponding audio source power is read from the temporary storage medium not shown here. And output from the speaker 103.
  • the image'sound code image synthesis processing section 246 Upon receiving the rate information from the image's voice code image layout editing section 234, the image'sound code image synthesis processing section 246 receives the image data storage section 232 and the voice code image storage section 24. 4 transmits a request signal to each of them, and receives corresponding image data and audio code image data obtained from the layout information and the link information. Combine the received image data and audio code image data to synthesize print image data. The print image data is transmitted to the printing device 30, and the combined image is printed out (# 10).
  • the image / voice code image layout editing section 234 first takes in the voice code image stored in the voice code image storage / storage section 244 and extracts it from the voice code image.
  • image data having link information that matches the extracted link information is taken out of the image data stored in the image data storage and storage section 232, and a layout editing process can be performed.
  • the image data stored in the image data storage / storage section 232 is first taken in, and stored in the voice code image storage / storage section 244 based on the link information extracted from the image data. From the audio code image that matches the extracted link information. It is configured to be capable of both taking in a voice code image having link information and performing a layout editing process.
  • Fig. 12 shows a New Year's postcard with a photo as an example of a recording medium with a voice code to be printed out
  • Fig. 12 (a) shows a photo of the back of the New Year's postcard, a blank space where no text is recorded.
  • Figure 12 (b) shows a photo of the back of a New Year's postcard and a white undercoat sticker in the image recording area where characters are recorded.
  • the voice code image 7 is placed in the masking area.
  • Fig. 12 (c) shows an image of a photo, text, etc. printed on the back of a New Year's postcard, and a voice code image 7 printed above the New Year's number on the front.
  • the speech code image synthesis processing unit 246 also has a function of developing images and voice code images on a plurality of print papers.
  • Fig. 12 (d) shows that the voice code image 7 is superimposed on the image and recorded as a Stills-type code image that is invisible under visible light at a location in the image image recording area on the back of the New Year's postcard. It is.
  • a fluorescent material that is transparent under visible light and emits light when irradiated with ultraviolet light can be used as the material used for recording the Stills-type voice code image.
  • the embodiment shown in FIG. 13 is different from the embodiment shown in FIG. 8 in that a code conversion unit 242 is provided with a precode image generation unit 252.
  • the precode image generation unit 252 calculates the size (outside dimensions) of the audio code image for the audio information combined with the image, and sends it to the image / audio code image layout editing unit 2334.
  • the image / voice code image layout editing unit 234 performs a layout editing process of the image image and the voice code image using the calculated size of the voice code image, and thereafter, the layout information is converted to the voice code image. It is sent to the generator 240.
  • the layout process can be performed efficiently.
  • the audio information is encoded, and the audio code image generation unit 240 combines the audio code data with the link information including the layout information to form one audio code. Encoded as data and imaged.
  • the printed voice code image has the layout information, the printed information should be read again when a request for a duplicated product is made, and in the case of an audio photograph, when a print order is requested, the layout information is read. With this, the layout editing work can be omitted.
  • the embodiment shown in FIG. 14 is different from the embodiment shown in FIG. 8 in that the link processing means 130a is provided with a voice ID information provision unit 2554 for providing voice ID information and link information.
  • the difference is that a link information management unit 258 for management is added, and a link information setting unit for management 258 is provided instead of the link information setting unit 236.
  • the audio ID information supply unit 254 adds the audio ID information supplied by the ID information supply unit 228 to the selected audio information.
  • the data format of this audio ID is similar to the above-mentioned image ID (Fig. 11 (b)), and the input format numbers are dubbing, cassette, A code indicating an audio source medium such as MD or FD.
  • the ID information supply section 2 28, the image ID information addition section 2 26 and the audio ID information addition section 2 54 constitute an ID information addition section 230, and the set image ID and audio ID are used for management.
  • the link information is integrated by the link information setting unit 258 to become management link information.
  • the data format of the management link information is shown in Fig. 15 (b), which is based on the serial number, image ID, audio ID, and date information as the ID of the recording medium with the audio code to be created. It is configured.
  • the layout information indicating the layout of the image and the voice code image determined by the image and voice code image layout editing unit 234 is also added via the management link information setting unit 258. It is possible to do so.
  • the management link information generated by the management link information setting unit 256 is sent to the link information management unit 256, and the link information management unit 256 manages the management link information in a database. .
  • the link information management unit 256 transmits the management link information in response to the request signal from the video / audio code image synthesis processing unit 2464.
  • Image ⁇ audio code The image synthesizing processing unit 246 transmits a request signal relating to the image data to be printed to the image data storage / storage unit 232, and receives the corresponding image data. Also, a request signal relating to the voice code image is transmitted to the voice code image storage / storage unit 244, and the corresponding voice code image is received.
  • the received image data and audio code image data are integrated and generated as print image data.
  • the management link information is used as source address information of images and sounds.
  • the image source input from the image input processing unit 210 not only the image source input from the image input processing unit 210 but also a large number of images are stored in advance.
  • the data read from the stored image database 280 or the voice database 290 storing a large number of voices can be freely used.
  • the configuration using the image ID for the link information has been described, but a configuration using the audio ID for the link information may be adopted.
  • the image ID used as the link information is, as shown in FIG. 16 (a), a film number as an identification number and a frame number for specifying the image.
  • the voice ID may include only the identification number.
  • a CRT printer or a PLZT printer is used as the printing device 30 for forming an image image and a voice code image on the photographic paper 3.
  • a liquid crystal printer, a fluorescent tube printer, and a laser exposure heat source are used.
  • a developing device may be employed, and in this case, the projection processing device 20 can be omitted, and the photographic processing device 1 can be configured as a complete digital photographic printer.
  • FIG. 4 is a diagram showing a flow of creating a photo with a voice code by the photographing device with a voice code according to the embodiment.
  • a customer who orders a photo with an audio code uses an image recording medium such as a still image source such as a photograph or a negative film; Alternatively, submit audio and image recording media such as a digital still camera or digital video movie camera in which both audio and images are recorded, and specify the image and audio to be combined.
  • the received audio and image data are encoded as necessary from the recording medium, and temporarily stored in a storage medium such as a hard disk as image data and audio data in a format that can be processed in the apparatus.
  • This storage medium stores not only image data and audio data received from customers, but also data such as various landscapes, illustrations, environmental sounds, etc., so that customers can select them for inclusion in photographs with audio codes. It has become.
  • the operator combines the image data and the audio data temporarily stored in the storage medium according to the customer's request to generate a photo object with an audio code.
  • This photo object with audio code corresponds to one photo with audio code, and one photo object with audio code is composed of at least one image data and at least one audio data. It just has a pointer to the data link.
  • the image data and the audio data are provided with an ID code as a recognition symbol indicating a mutual relationship as link information.
  • This ID code is generated for each combination of image data and audio data in one object and is assigned in common.
  • link relationships are shown schematically in Figure 18.
  • the ID code a simple ordinal number may be used, or a character string describing the content of the voice code may be used.
  • a configuration may be adopted in which a line connecting the corresponding image data and audio data is provided instead of the ID code as a recognition symbol.
  • the recognition symbol may be a mark that emits sound (such as a voice code) or light (such as fluorescent light).
  • any form may be used as long as the correspondence between each still image and each audio code can be represented.
  • the image data is two-dimensionally expanded and the audio data is expanded into a two-dimensional code based on the object configuration information of the object.
  • the ID code is also developed as an image, and these are combined and stored in the frame memory. Using the composite data stored in the frame memory, a composite image that is finally printed out as a photo with audio code is displayed on the monitor screen as shown in FIG.
  • the operator can check the image content for a photo with a predetermined audio code, check the arrangement of the still image and audio code, and check the combination of the still image and audio code through the ID code You can also.
  • the content of the audio code that is, the sound itself, cannot be confirmed on the monitor screen.
  • select the voice code displayed on the screen or the frame indicating the voice code by using a mouse or the like and clicking the keypad of the ID code from the console.
  • the voice corresponding to the selected voice code is emitted from the speaker in the following two ways.
  • One method for listening to audio is to find the storage location of the audio data corresponding to the clicked, or selected, audio code using the object configuration information, and to perform appropriate decoding processing on the audio data. And send it to the speaker to produce sound.
  • the prerequisite for this method is that the audio data corresponding to the audio code is stored in an accessible form.
  • Another method used when such prerequisites are not met is to extract the two-dimensional code corresponding to the selected audio code from the frame memory separately from the still image data, The original audio data is restored by inverting the code, the decoded audio data is subjected to appropriate decoding processing, sent to the speaker, and sounds are output.
  • the composite image confirmed on one screen of the monitor is sent from the frame memory to a silver halide printer ⁇ thermal printer, and a photo with an audio code is output.
  • the photo with the audio code finished in this way is given to the customer, and the sound can be heard by scanning the audio code with a known audio code reading scanner.
  • the input unit 300 is a flatbed scanner that uses still images such as photos and posters as input sources, a film scanner that uses still images such as negative film as an input source, and a digital still camera or digital video movie camera. This is a generic term for dedicated readers or various audio players that use cassette tapes or CDs as input sources.
  • the image encoding unit 311 converts the input image information into a digital format that can be used in the device, and the audio encoding unit 312 converts the input audio information into the device. It converts to a usable digital format.
  • 320 stores the image data and audio data converted by the two encoding units 311 and 312, and temporarily stores the data brought in by the customer, but stores the data provided by the customer in advance. Image data and audio data that can be used as desired are stored until they are forcibly deleted.
  • the object generation unit 330 selectively reads out image data and audio data from the storage unit 320 using file names and the like, and creates one image with an audio code to create one image with an audio code. Generate a photo object with audio code. At this time, every time a combination of image data and audio data is determined, an ID code as a recognition symbol for the combination is assigned by an ID code generation unit 335 as an example of a recognition symbol assignment unit. Therefore, as can be understood from Figs. 17 and 18, this photo object with audio code is composed of image data, audio data, and ID code, and the object of the determined object has The configuration pattern is held in the form of object configuration information by the object configuration information management unit 331.
  • the image data of the determined object is expanded by the image data two-dimensional expansion part 341 and sent to the frame memory 350, and the audio data is converted to the audio data two-dimensional code conversion part 3 It is expanded in 42 and sent to the frame memory 350.
  • the ID code is also developed as an image (image) and placed at a predetermined position. Each data loaded in the frame memory 350 is converted into an audio code as shown in FIG. 19 by an ink-jet / thermal printer 370. Printed as a photo with a password.
  • Reference numeral 390 denotes a control unit for controlling each functional component of the photograph creating apparatus with a voice code.
  • the control unit 390 identifies the corresponding audio data from the object configuration information, and the audio data search unit.
  • the corresponding audio data is read out from the storage section 320 through 382.
  • the read audio data is subjected to necessary decoding processing in an audio reproducing unit 383, and is sent to a speaker 384 as an amplified analog audio signal.
  • the original sound flows from the speaker 3 84.
  • the operator can check whether the audio code displayed on the monitor 360 is correctly combined with the still image displayed at the same time by interrupting the audio.
  • the control unit 390 reads out only the voice code corresponding to the selected voice code frame from the frame memory 350, and It is sent to the converter 3 8 5.
  • the inverse conversion section 385 performs processing opposite to that of the audio data two-dimensional coding section 342 to convert the audio code into audio data.
  • the audio data obtained by the inverse converter 385 is subjected to necessary decoding processing in the audio reproducer 385, sent to the speaker 384 as an amplified analog audio signal, and The original sound of the code will be played.
  • the ID code generation unit 335 is adopted as the recognition symbol assigning means.
  • this is configured as a mark generation unit, and the ID code is used as the recognition symbol instead of the ID code.
  • a line connecting the image data and audio data to be added may be added to the composite image.
  • the mark generation unit may generate a mark that emits sound (such as a voice code) or light (such as fluorescent light).
  • the fluorescent mark can be overprinted using a fluorescent ink printer.
  • the image data and the audio code are used as the recognition codes.
  • the ID code is recorded on the same page together with all the ID codes. In this way, when the recognition code (ID code) is recorded near the image data and the audio code, respectively, the image data and the audio code are recorded separately. They may be recorded on different pages.
  • the recognition code is recorded on the image data and the voice code, the correspondence between the image data and the voice code and the recognition code can be specified more reliably.
  • the audio code is not limited to the dot code disclosed in the above-mentioned Japanese Patent Application Laid-Open No. Hei 7-186006, but may be an optically readable audio code such as a two-dimensional bar code. Any known voice code that can recover the audio data can be used.
  • the image processing apparatus can process two pieces of information having different forms of sound and image in a state of being linked through link information, the image processing apparatus can cope with the image and sound information corresponding to the image information. This is convenient for producing a photo with an audio code recorded on the same recording medium as the audio code image to be reproduced.
  • the link information includes the layout information indicating the arrangement of the image image and the audio code image to be recorded on the recording medium, the recording medium can be easily copied.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Facsimiles In General (AREA)
  • Television Signal Processing For Recording (AREA)
  • Projection-Type Copiers In General (AREA)
  • Record Information Processing For Printing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Description

明 細 書 画像処理装置及び音声コード付き記録媒体 技 術 分 野
本発明は、 銀塩式カメラや画像データを扱うデジタルスチルカメラ、 さらには画 像取り込み用スキャナーなどによって取得された画像に光学的に読取可能な音声コ 一ドイメージを付加してプリントを行うための画像処理装置に関する。 背 景 技 術
種々の画像取得機器によつて撮像された画像は、 銀塩写真方式でもつて印画紙に プリン卜されたり、 インクジェッ トプリンターゃサーマルプリンターなどで紙ゃフ イルムにプリントされることにより、 長年にわたって、 被写体の情報を静止画像と いう視覚に頼つた形態で広レ、地域に、 時間を越えて伝達されている。
近年、 マルチメディア時代を迎えて、 情報の伝達を視覚だけに頼るのではなく、 聴覚も利用することが積極的に試みられており、 本出願の共同出願人の一方である ォリンパス光学工業株式会社も、 例えば、 日本国特開平 6— 2 3 1 4 6 6号公報、 及び、 日本国特開平 7— 1 8 1 6 0 6号公報において、 図や写真、 文字に加えて音 声を光学的に読取可能に変換したドッ トコード （音声コードイメージ） を同一の用 紙上に印刷して記録した記録媒体と、 前記ドッ トコードを読み取る専用のスキャナ 一により、 視覚だけではなく、 聴覚からも情報が得られる新しいメディアを提案し てきている。 この新しいメディアは、 特に発音を繰り返し勉強するための語学教材、 動物の鳴き声を収録する写真図鑑、 音の出る絵本、 あるいは、 結婚式、 成人式、 七 五三などの記念行事を記録する写真など様々な用途に適している。
上述した新しいメディアの技術は、 例えば、 動物写真にその動物の鳴き声を入れ たり、 複数の人物のスナップ写真に各被写人物の声を撮影と同時又は撮影の前後の 時点で入れたりして、 複数の画像情報 （写真等の静止画像） と複数の音声情報に対 応する音声コードイメージを配置した音声コード付き写真を作成することが可能と なり、 取得画像のもつ臨場感や伝達可能な情報が従来に比べて飛躍的に拡大するこ とができる。 しかしながら、 ここで重要なのは、 画像情報と音声情報とを共に印刷 物等の記録媒体に記録する際に、 これらの情報を正確に対応付けることである。 上記した特開平 6— 2 3 1 4 6 6号公報を含め、 同様に、 画像情報とコード化さ れた音声情報とを共に記録媒体に記録することを開示した、 日本国特開昭 5 6— 5 6 0 0号公報、 日本国特開昭 6 0— 2 4 4 1 4 6号公報、 日本国特開平 5— 2 2 4 3 2 0号公報、 及び日本国特開平 7— 1 8 1 6 0 6号公報には、 何れにもそ のような画像情報と音声情報との対応づけに関する詳細な開示はされていない。 なぜ、 対応づけが重要かというと、 出来上がった音声コード付き写真の音声コー ドイメージは、 それ自体では目視で内容を確認できないため、 画像イメージと音声 コ一ドイメージの配置によっては、 ある音声コードイメージが複数の画像イメージ のどれに対応するものであるのかが判別できなくなるという事態が生じ得るためで ある。 スキャナによる音声コードの読取走査のしゃすさを考慮して音声コードィメ ージを特定のエリアにまとめて配置させているような音声コード付き写真では、 特 に、 その照合が困難となる。
本発明の目的は、 このような音声と画像という形態の異なる 2つの情報を対応づ けて簡単にかつ確実に极うことができる画像処理装置及び複数の画像ィメージと複 数の音声コ一ドイメージが配置された音声コード付き写真であっても画像と音声コ 一ドが容易に照合できるような音声コード付き写真を提供することである。 発 明 の 開 示
上記目的を達成するため、 本発明による画像処理装置は、 画像情報を入力する画 像入力手段と、 音声情報を入力する音声入力手段と、 前記画像情報と音声情報とを リンクするリンク情報を設定するリンク処理手段と、 前記音声情報を光学的に読み 取り可能な音声コードイメージに変換するコード変换手段と、 前記リンク情報に基 づき、 前記画像情報に対応する画像イメージと前記音声コードイメージとを所定の 記録媒体に記録するプリント装置とを備えたことを特徴とする。
この構成では、 画像情報と音声情報とをリンクするリンク情報を設定し、 このリ ンク情報に基づき前記画像情報に対応する画像ィメージと音声情報に対応する音声 コードィメージとを対応づけて所定の記録媒体に記録することができる。 ここでい う記録媒体とは、 通常の印刷用紙や印刷用フィルム、 印画紙やフィルム（ネガ ·ポジ） などの写真感光材料など、 種々のハードコピー材料を指している。
本発明の好適な実施形態の 1つでは、 前記コード変換手段は、 前記音声情報を圧 縮して符号化する圧縮符号化手段と、 圧縮符号化された音声情報を光学的に読み取 り可能な音声コ一ドイメージに変換する音声コードイメージ生成手段とをそなえた ものであり、 このことにより、 音声情報をコンパク トかつ確実に光学読み取り可能 な音声コードイメージに変換することができる。
さらに、 本発明の好適な実施形態の 1つでは、 前記コード変換手段は、 前記音声 情報と前記リンク情報をともに光学的に読み取り可能な音声コードイメージに変換 するものであり、 このことにより、読み取ったコードデータをデコードするだけで、 音声情報を再生することができるとともに、 画像情報と音声情報の関係を、 確実に 把握することができる。
また、 本発明の好適な実施形態として、 前記リンク情報に、 前記記録媒体に記録 されるべき前記画像イメージと前記音声コードイメージの配置を示すレイァゥト情 報を含ませることにより、 読み取った音声コードイメージをデコードするだけで、 それらのレイァゥ卜情報を把握することができ、 複製を作成する場合に特に利点を もたらす。 さらに、 前記リンク情報に、 前記記録媒体に記録されるべき前記画像ィ メージの画像情報やそのソースの格納場所及び前記音声コードィメ一ジの音声情報 やそのソースの格納場所を示すァドレス情報を含ませるならば、 元になつているデ —タの所在場所を知ることが容易となり、 複製作業を簡単化する。
さらに、 前記リンク情報を、 前記画像情報及び前記音声情報に対して共通に付与 し、 互いの対応関係を示す認識記号とし、 前記プリント装置が、 前記認識記号を可 視化表示して記録することで、 より確実に、 画像情報と音声情報の関係を、 目視に よつて把握することができる。
本発明の別な好適実施形態において、 前記プリント装置が、 前記記録媒体の画像 ィメ一ジ記録領域外である余白領域又は裏面に、 前記音声コードィメージを記録す るならば、 コードィメージの記録場所を画像情報の記録領域と分離できるので、 画 像情報を確実に把握でき、 また、 読み取った音声コードイメージを良好にデコード することができる。 さらに、 前記プリント装置が、 前記画像イメージ上に前記音声 コードイメージを重畳して記録することにより、 画像イメージ記録領域を縮小する ことなく、 音声コードィメージを記録することができる。
また、 前記プリント装置が、 前記画像イメージと前記音声コードイメージとを合 成して記録することにより、 画像イメージ記録領域を縮小することなく、 音声コー ドイメージを記録することができる。
また、 前記プリント装置が、 前記画像イメージと前記音声コードイメージとを印 刷記録媒体に記録するものとするならば、 画像情報と音声コードイメージにより記 録された情報を安価で簡便な印刷記録媒体を用いて把握することが可能となり、 広 く一般に、 この新しい印刷記録媒体を普及させることができる。
さらに、 前記プリント装置が、 前記画像イメージと前記音声コードイメージとを 感光記録媒体、 例えばネガ、 ポジフィルム、 印画紙等に記録するものであるならば、 画像情報とコードイメージに記録された情報を、 高画質な感光記録媒体を用いて、 把握することがより正確にでき、 高画質の仕様を満足させられる。
本発明のさらに別な好適実施形態として、 前記画像入力手段が、 写真フィルムに 形成された又は写真プリントに形成された撮影画像を読み取るスキャナーと、 デジ タルスチルカメラやビデオムービーカメラによって撮影された撮影画像を取り込む 画像信号入力部と、 コンピュータにより作成又は編集された画像を取り込む画像信 号入力部とのうちの少なくとも 1つを用いて画像情報を取得するものがある。 この 場合、 公衆通信ネッ トワーク （電話、 インターネッ ト等） をはじめ、 さまざまな画 像入力手段を適用することが可能であり、 種々の用途に対応できる。
本発明のさらに別な好適実施形態において、 前記リンク処理手段が、 前記画像情 報及び前記音声情報の少なくとも一方の情報を特定するための I D情報を前記リン ク情報として付与する I D情報付与手段を備え、 前記 I D情報に基づいて、 前記画 像情報又は前記音声情報のうちの一方の情報に対して、 他方の情報をリンクするリ ンク情報を設定する。 この構成では、 特定可能な I D情報に基づいてリンク情報を 付与することにより、 画像情報と音声情報の対応関係を重複すること無く、 確実に 維持した状態で、 作業を進めることができる。
さらに、 前記リンク処理手段が、 前記画像情報及び前記音声情報の少なくとも一 方をモニタするモニタ手段と、 前記モニタ手段によりモニタされている前記画像情 報又は前記音声情報のうちの一方の情報に対して他方の情報がリンクするように情 報を指定する情報指定手段とを備え、 この情報指定手段からの出力及び前記 I D情 報とに基づいて、 リンク情報を設定するように構成されることも可能である。 この 場合、 C R T等のモニタ手段により画像情報、 音声情報をモニタしながらリンクさ せる情報を指定して、 リンク情報を付与することにより、 画像情報と音声情報の対 応関係を重複すること無く、 ユーザーの希望に応じて確実にリンク情報を設定する ことができる。
その際、 前記情報指定手段として、 前記モニタ手段に出力されている前記画像情 報又は音声情報に関して所望の情報を操作者が指定するボインティングデバイス、 例えばキーパッド、 マウス、 トラックパッド、 タツチパネル等、 を採用することで、 より簡便に、 ユーザーの希望に応じて確実にリンク情報を設定することができる。 さらに本発明の他の目的を達成するため、 本発明による音声コード付き記録媒体 では、 複数の画像情報に対応した画像イメージと、 これに対応する複数の音声コー ドイメージとを配置するとともに、 各画像情報と音声情報との対応関係を示す認識 記号を可視化表示して記録したことを特徴とする。
この構成では、 画像イメージとこれに対応する音声コ一ドイメージを目で確認す ることができる認識記号が付与されているので、 スキャナーで音声コードを走査す る際にも画像ィメージに対応する音声コードイメージを目視で確実に選択すること ができる。 ここでいう認識記号は広い意味で使われており、 数字や文字だけではな く、 画像イメージと音声コードを結ぶ線なども含むことはもちろん、 音や光を発す るコ一ドなども含む用語として定義されている。
さらに本発明の好適な実施形態として、 複数の音声コードイメージを所定の音声 コードイメージ記録領域にまとめて配置するならば、 例えば、 写真の下部を音声コ 一ドエリアとして設定することにより、 音声コード読取走査時のスキャナーの位置 決めが容易となる。 この場合、 各音声コードイメージは対応する画像イメージとは 離れた位置に配置されることになるが、 前記識別記号により画像ィメージに対応す る音声コードイメージを確実に把握することができるので、 特に写真図鑑のような 1枚 （1頁） に多くの画像イメージや音声コードイメージが配置される分野では特 に重要な利点となる。 本発明によるその他の特徴及び利点は、 以下図面を用いた発明の実施の形態の説 明により明らかになるだろう。 図面の簡単な説明
図 1は、 本発明による画像処理装置の 1つの実施形態である写真処理装置の概略 構成を示すブロック図、
図 2は、 本発明による音声コードイメージ付き写真からの音声の再生を示す説明 図、
図 3は、 コントローラの主要な機能を示すブロック図、
図 4は、 画像データと音声コードデータのリンク構造を示す説明図、
図 5は、 本発明による画像処理装置の別な実施形態の概略構成を示すプロック図、 図 6は、 本発明による画像処理装置のさらに別な実施形態の概略構成を示すプロ ック図、
図 7は、 本発明による画像処理装置のさらに別な実施形態の概略構成を示すプロ ック図、
図 8は、 リンク処理手段の機能に照準を合わせ作成された本発明の画像処理装置 の 1つの実施形態のブロック図、
図 9は、 図 8による画像処理装置の処理過程を示すフローチヤ一ト、
図 1 0は、 本発明による画像処理装置のモニター画面を示す模式図、
図 1 1は、 画像 I Dと画像 I D付き画像情報や画像 I D付き音声情報を説明する 模式図、
図 1 2は、 音声コード付き記録媒体の例としての写真付き年賀はがきを示す図、 図 1 3は、 リンク処理手段の機能に照準を合わせ作成された本発明の画像処理装 置の別な実施形態のプロック図、
図 1 4は、 リンク処理手段の機能に照準を合わせ作成された本発明の画像処理装 置のさらに別な実施形態のプロック図、
図 1 5は、 音声 I Dとリンク情報を説明する模式図、
図 1 6は、 簡易な画像 I Dと音声 I Dを説明する模式図、
図 1 7は、 本発明による音声コード付き写真作成装置による音声コード付き写真 作成の流れを説明する説明図、
図 1 8は、 1つのオブジェク トにおける画像データと音声データと I Dコードの リンク関係を示す模式図、
図 1 9は、 音声コード付き写真を示す模式図、
図 2 0は、 本発明による音声コ一ド付き写真作成装置の一実施形態を示す機能ブ 口ック図である。 発明を実施するための最良の形態
本発明による音声コード付き記録媒体 （写真） を作成するための画像処理装置の 1つの形態としての写真処理装置 1を示すブロック図が図 1に示されている。 この 写真処理装置 1には、 写真用フィルム （以下、 フィルムと言う。） 2の撮影画像を写 真感光材料としての印画紙 3に投影露光する投影露光部 2 0と、 印画紙 3に音声コ 一ドイメージを焼付プリントするプリント装置 3 0としての銀塩カラー印画紙 （感 光材料） 用プリンター 3 1 としての C R Tプリンターや P L Z Tプリンター、 投影 露光部 2 0と感光材料用プリンター 3 1による各焼付処理における印画紙 3の搬送 をそれぞれ独立に行うために印画紙 3のループを形成するループ形成部 4 0と、 焼 付処理された印画紙 3を現像する現像処理部 5 0、 音声信号を取得する音声信号入 力部 6◦、 及び、 写真処理装置 1の各部の制御や各種データの演算処理を行ぅコン トローラ 1 0 0が設けられている。 コントローラ 1 0 0には各種の情報入力を行う ための操作卓 1 0 1及びモニタ 1 0 2が接続されている。
印画紙 3を口ール状に収納している印画紙マガジン 4から引き出された印画紙 3 は、 投影露光部 2 0でフィルムから撮影画像を、 そして C R Tプリンター 3 1で音 声コードイメージを焼付露光された後、 現像処理部 5 0にて現像され、 図 2に示す 如く、 フィルム一駒分の写真 （画像イメージ） 6と音声コードイメージ 7を含む大 きさに切断されて、 音声コード付き写真プリント 5として排出される。 この音声コ 一ドイメージ 7を専用の読み取りスキャナー 8で手動走査すると、 このスキャナー 8に内蔵されている音声再生回路の働きで、 音声コードイメージ 7に対応する音が スピーカより出力される。
以下、 図 1に示された各構成要素について説明する。 投影露光部 2 0には、 投影露光用光源 2 1、 フィルム 2に照射する光の色バラン スを調整する調光フィルタ 2 2、 調光フィルタ 2 2を通過した光を均一に混色する ミラートンネル 2 3、 フィルム 2の画像を印画紙 3上に結像させる焼付レンズ 2 4 及びシャツタ 2 5、 及び印画紙 3に対する露光エリアを設定するペーパーマスク 2 6が露光光路をなす同一光軸上に設けられている。
フィルム 2に形成されている撮影画像を走査してデジタル画像として取得する撮 影画像用スキャナー 9が、 投影露光部 2 0のフィルム搬送経路上流側に設けられて いる。 このスキャナー 9は、 フィルム 2に対して白色光を照射し、 その反射光ある いは透過光の強度を赤色， 緑色， 青色の 3原色に分解して、 C C Dラインセンサに 検出させて、 A/D変換し、 コントローラ 1 0 0に送り込む。
コントローラ 1 0 0は、 図 3に示されているように、 主に投影露光部 2 0の露光 制御を行う露光制御ュニッ ト 1 1 0と音声入力部 6 0から入力された音声信号を処 理して対応する音声コードデータを生成するコ一ドデータ生成ュニッ ト 1 2 0とこ れらのュニッ ト 1 1 0、 1 2 0をコントロールする中央制御ュニッ ト 1 3 0とを備 えている。
露光制御ュニッ ト 1 1 0は、 スキャナー 9から送られてきた画像データを記憶す る第 1記憶部 1 1 1と、 第 1記憶部 1 1 1に格納された画像データを利用して露光 条件を求める露光条件演算部 1 1 2と、 露光条件演算部 1 1 2が求めた露光条件に 基づいて投影露光部 2 0の調光フィルタ 2 2やシャツタ 2 5の動作を制御する露光 制御部 1 1 3と、 第 1記憶部 1 1 1から読み出した画像データを露光条件演算部
1 1 2が求めた露光条件に基づいてモニターディスプレイ 1 0 2に表示するための シミュレート画像データに変換する画像データ変換部 1 1 4とを備えている。 画像 データ変換部 1 1 4に登録されている、 画像データのネガポジ変換等の変換処理に 供する種々のパラメータは、 露光条件演算部 1 1 2で求めた露光条件にて写真フィ ルム 2の撮影画像コマを印画紙 3に投影露光して印画紙 3上に形成する画像と同等 の画像をモニターディスプレイ 1 0 2に表示できるように設定されている。 もし、 モニターディスプレイ 1 0 2に表示されたシミュレ一ト画像が満足できるものでな い場合、 操作卓 1 0 1を用いてマニュアルで Y (イェロー）， M (マゼンタ）， C (シ アン） の各色の露光量の増減又は写真の濃度変化に相当する露光量の平均的な増減 を入力することで露光条件を変更することも可能である。
マイクロフォンやテープレコーダ、 C D、 MD、 メモリーカードなどの音声記録 メディア、 あるいは、 電話、 インターネットなどの公衆通信ネットワークを通じて 音声入力部 6 0に入力された音声情報が、 アナログ音声信号の場合は AZ D変換さ れ、 ディジタル信号の場合はデータとして、 コードデータ生成ュニッ ト 1 2 0に送 られる。 コードデータ生成ュニット 1 2 0は、 ディジタル音声信号を圧縮する圧縮 部 1 2 1 と、 符号化理論に基づくエラ一訂正コードアルゴリズムによってエラー訂 正コードを付加するエラ一訂正コード化部 1 2 2と、 圧縮されエラー訂正コードを 付加された音声データを所定のルールに従ってコ一ドデータに変換展開するコ一ド データ展開部 1 2 3と、 展開されたコードデータを格納する第 2記憶部 1 2 4と、 第 2記憶部 1 2 4からコードデータを読み出し、 対応する印字データである音声コ ―ドイメージ 7に変換して C R Tプリンタに送り出すインターフェース 1 2 5とを 備えている。 この実施の形態では、 入力された音声情報を音声コードイメージ 7に 変換するコ一ド変換部は、 圧縮部 1 2 1とエラー訂正コード化部 1 2 2とコードデ —タ展開部 1 2 3とから構成されている。このコードデータ生成ュニット 1 2 0は、 さらに、 第 2記憶部 1 2 4にアクセスして、 逆変換 'エラー訂正などの処理を行う 再生部 1 2 6も備えており、 モニタースピーカ 1 0 3によって音声を確認すること ができる。
なお、 この実施の形態の写真処理装置 1では、 スキャナ一 9によって取得され第 1記憶部 1 1 1に格納されたフィルム 2の撮影画像の画像情報を、 画像データ変換 部 1 1 4とインタ一フェース 1 2 5を経て感光材料用プリンタ 3 1に送ることがで きる構成を採用しており、 このプリンタ 3 1によってフィルム 2の撮影画像からな る画像イメージ 6と音声コードイメージ 7の両方を印画紙 3に焼き付けることも可 能である。
次にこの写真処理装置 1による音声コード付き写真 5の作成過程を図 1に従って 説明する。
ユーザが撮影済みのフィルム 2と組み合わせたい音声を録音したテープ、 デイス ク、 又はメモリーカード等を D P E店に提出し、 所定のプリントオーダカードに音 声コード付き写真 5としたい撮影画像コマ番号とその撮影画像と組み合わせる音声 の録音箇所を書き込む。 なお、 組み合わせたい音声を録音した何らかのメディアを 持参していない場合、 D P E店に備えられたマイク口フォンから直接音声入力部
6 0に入力する。 持ち込まれたフィルム 2が未現像の場合は現像処理した後、 現像 済みの場合はそのまま写真処理装置 1に装填する。
装填されたフィルム 2は、 複数の搬送ローラ 7 1と搬送ローラを駆動するモータ
7 2から構成されるフィルム搬送機構 7 0によって投影露光部 2 0に送られる。 そ の際、 各撮影画像はスキャナー 9によって走査され、 取得したデジタル画像データ は前述したように第 1記憶部 1 1 1に格納される。 同時に、 音声信号も音声入力部 6 0を通じてコントローラ 1 0 0に送り込まれ、 前述したように音声コードデータ の形で第 2記憶部 1 2 4に格納される。 プリントオーダカードに記録されたオーダ 情報は、 自動的又はマニュアルでコントローラ 1 0 0に与えられることにより、 中 央制御ュニッ ト 1 3 0は、 図 4に示すように撮影画像コマ番号に対して画像 I Dと 音声 I Dを付与されており、 さらにこの画像 I Dは第 1記憶部 1 1 1に格納される 該当画像データのァドレスとリンクされ、 音声 I Dは第 2記憶部 1 2 4に格納され る該当音声コードデータのアドレスとリンクされる。 このようなリンク情報は、 中 央制御ュニッ ト 1 3 0によって生成 ·管理され、 リンク情報記憶部 1 3 1に格納さ れる。 つまり、 ここでは、 中央制御ユニッ ト 1 3 0とリンク情報記憶部 1 3 1がフ イルム 2の撮影画像とこれに対応する音声信号をリンクするリンク処理手段として 機能する。 これにより、 この写真処理装置 1に入力された撮影画像と音声は、 確実 に対応する相手同士組み合わされ、 印画紙 3に焼き付けられる。
フィルム 2の撮影画像を投影露光部 2 0で印画紙 3に焼き付ける場合、 スキャナ 一 9にて取得した画像データに基づいて露光制御ュニット 1 1 0が調光フィルタ 2 2を制御し、 これにより、 投影露光用光源 2 1の照射光をフィルム 2の画像の色 濃度に応じた色バランスに調整する。 投影露光部 2 0では、 その調整後の光でもつ てシャツタ 2 5の動作でフィルム 2を照射し、 フィルム 2の撮影画像を印画紙 3に 焼き付ける。 その際、 ペーパーマスク 2 6を操作し、 印画紙 3への露光エリアを種々 に変更することができる。 例えば、 撮影画像のなかで重要でない領域をマスクする ことで、 その領域を焼き付けることなく現像後白色背景となるように処理し、 その 領域に C R Tプリンター 3 1によって音声コードイメージを焼き付けることも可能 であり、 これにより、 一般的なプリントサイズの写真の中に音声コードを組み込む ことができる。
焼付処理後印画紙 3は印画紙搬送機構 8 0によつて順次搬送されるが、 この印画 紙搬送機構 8 0には前述したループ形成部 4 0が設けられている。 このループ形成 部 4 0は印画紙 3を搬送する搬送ローラ 8 1 、 8 2と搬送ローラ 8 1を回転駆動す るモータ 8 4とを備えており、 図示を省略するが、 印画紙 3を搬送ローラ 8 1と 8 2の間において直線状に案内する状態と、 図 1に示すような印画紙 3のループを 形成するのを許容する状態とに切り換え自在のフラップが、 印画紙搬送方向上流側 のローラ 8 1 と印画紙搬送方向下流側のローラ 8 2との間に設けられている。 印画 紙 3のループを形成することにより、 投影露光部 2 0と感光材料用の C R Tプリン ター 3 1における搬送処理を独立して行うことができ、 その搬送速度をそれぞれ最 適に設定することができる。
フィルム 2の撮影画像を投影露光部 2 0ではなく C R Tプリンター 3 1によって 印画紙 3に焼き付ける場合、 スキャナー 9によって走査されたフィルム 2は投影露 光部 2 0で用いられないので、 そのまま引き出される。 デジタル画像化された撮影 画像は、 画像データ変換部 1 1 4と C R Tプリンター 3 1用のインタフェース 1 2 5での変換処理を経て C R Tプリンター 3 1により印画紙 3に焼き付けられる。 その際、 撮影画像の画像イメージのデータと音声コードイメージのデータとを予め コントローラ 1 0 0内で合成して、 1つのプリントデータとして C R Tプリンター 3 1に送っても良いし、 別々に 2つのプリントデータとして各プリン卜の間で印画 紙 3を所定量動かして焼き付けても良い。 もちろん、 予めコントローラ 1 0 0内で 合成する場合、 その合成の際種々のデジタル処理を施すことができるという自由度 力 sある。
現像処理部 5 0には、 図示を省略するが、 焼付処理後の印画紙 3を現像するため の処理液を充填した複数のタンクが備えられ、 印画紙 3はその複数のタンクを順次 通過して行き現像処理される。 現像処理部 5 0における印画紙 3の搬送制御及び、 フィルム搬送機構のモータ 7 2や印画紙搬送機構 8 0のモータ 8 4 、 8 5の制御は コントローラ 1 0 0によって集中制御される。
図 5で示された写真処理装置 1は、 図 1で示された写真処理装置 1に比べて、 コ ントローラ 1 0 0に写真プリントからデジタル画像を取得するための機器の一例と してのフラッ トべッ トスキャナー 1 0 aから画像データを受け取るための画像信号 入力部 1 0が備えられていることで異なっている。 これは、 ユーザが写真フィルム
2の代わりに写真プリントを持参した場合でも、 その写真プリントに音声コードィ メージを組み合わせた新たな音声コード付き写真 5を作成するためである。 フラッ トベッ トスキャナ一 1 0によって取得された写真プリントの画像データは露光制御 ユニット 1 1 0の第 1記憶部 1 1 1に格納され、 画像データ変換部 1 1 4、 インタ 一フェース 1 2 5で処理された後、 音声コードイメージとともに C R Tプリンター や P L Z Tプリンターなどの感光材料用プリンター 3 1によつて印画紙 3に焼き付 けられ、現像処理部 5 0で現像処理され、音声コード付き写真 5として排出される。 画像信号入力部 1 0には、 ビデオムービーカメラ 1 0 bやデジタルスチルカメラ
1 0 cなどのデジタル撮影機器や画像を作成或いは編集可能なコンピュータ 1 0 d からの画像データを受け取ることができるインターフェースが容易されており、 コ ン卜ローラ 1 0 0は、 種々のメディアで画像データを受け取ることが可能となって いる。 もちろん、 図示されていないが、 通信回線を用いて画像データや音声データ をコントローラ 1 0 0が受け取ることも可能である。
図 6で示された写真処理装置 1は、 図 5による装置の変形であり、 感光材料用プ リンター 3 1の代わりにサ一マルプリンターやインクジエツ トプリンターなどの非 感光材料用プリンター 3 2を用いて、 音声コード付き写真 5を印画紙 3ではなく、 感熱紙やコート紙などに形成するように構成されている。 特に、 サーマルプリンタ 一は通常の D P E処理におけるインデックスプリン卜に加えてシールプリントを作 成するためにも用いられており、 そのまま音声コード付き写真 5のプリン卜ァゥト 用に流用することができるだけではなく、 シール紙を用いることにより、 プリント アウトした音声コ一ド付き写真が容易にアルバムやその他の物品の表面に貼り付く といった付加的な利点も与えることができる。
図 7で示された写真処理装置 1では、 プリント装置 3 0として印画紙 3に対して ではなく透明なフィルム 1 1に音声コードイメージを大きな拡大倍率でプリントァ ゥトするレーザービームプリンターやインクジエツ トプリンターなどの非感光材料 用プリンター 3 2が使用されており、 この拡大された音声コードイメージを形成し ている透明フィルム 1 1を用いて投影露光部 2 0が相応に縮小して印画紙 3に音声 コードイメージを焼き付けることで、 図 1で示された写真処理装置 1 と異なってい る。 投影露光部 2 0の焼き付けレンズ 2 4を精度の高いものに交換することで、 よ り微細な音声コードィメージを形成することができる。
図 5、 図 6、 図 7で示された写真処理装置 1の実施形態では、 コンピュータ
1 0 dによる画像作成ソフトを用いて作成あるいは編集したディジタル画像、 スキ ャナーやデジタルカメラなどの画像取得機器から送り込まれたディジタル画像、 さ らには F Dや C D— Rなどの記録メディアから読み込まれたデイジタル画像が処理 すべき画像情報であり、 マイクやカセッ トテープや C Dから得られた音声情報に基 づく音声コードイメージと合成することにより、 例えばプリンタ一等のハードコピ 一機器によって音声コード付き写真として出力できる。 その際、 写真処理装置 1内 において、 対応させるべき画像情報と音声情報をリンクさせておく必要があり、 こ の目的のために、 前述したように、 リンク情報を生成 ·管理するリンク処理手段が 中央制御ュニット 1 3 0とリンク情報記憶部 1 3 1によって構築されている。
以下、 図 8〜図 1 6を用いて、 このリンク処理手段の機能に照準を合わせた本発 明の画像処理装置 1の働きをいくつかの実施形態とともに説明するが、 ここでは、 画像信号入力部 1 0は、 画像入力処理部 2 1 0や画像編集部 2 1 2や画像選択部 2 1 4を備えており、 音声入力部 6 0は、 音声入力処理部 2 1 8や音声編集部 2 2 0や音声選択部 2 2 2を備えており、 入力された音声の再生や画像のモニタリ ングは、 操作卓 1 0 1に形成されているユーザ入力設定部 2 1 6の操作により、 モ 二ター 1 0 2やスピーカ 1 0 3を通じて行われる。 さらに、 先の説明では、 中央制 御ュニット 1 3 0とリンク情報記憶部 1 3 1によって構築されていたリンク処理手 段は、 ここでは I D情報付与部 2 3 0とリンク情報設定部 2 3 6といった機能プロ ックの集合体で表現されたリンク処理部 1 3 0 aとして示されている。 さらに、 コ 一ドデータ生成ュニッ ト 1 2 0は、 波形符号化、 分析合成符号化など公知の符号化 手法から選ばれた適当なもので構築された音声データ圧縮符号化部 2 3 8とこれに より符号化された音声コードデータを二次元のコードイメージに展開する音声コー ドイメージ生成部 2 4 0とを備えたコード変換部 2 4 2として示されている。 画像 データ記憶蓄積部 2 3 2に格納された画像ィメージと音声コードィメージ記憶蓄積 部 244に格納された音声コードイメージを合成する合成処理部 1 40は、 画像 · 音声コードイメージレイァゥト編集部 234と画像 ·音声コードイメージ合成処理 部 246を備えており、 リンク処理部 1 30 aで設定されたリンク情報に基づいて 所望のレイァゥ卜で画像イメージと音声コードイメージを組み合わせ、 プリント装 置 30に送り出す。
まず、 図 8に示された実施形態を、 図 9のフローチャートを用いて説明する； フィルムスキャナ、 スキャナ、 デジタルカメラ、 ビデオカメラ、 FD (フロッピ 一ディスク）、 PC (パーソナルコンピュータ） 等から画像入力処理部 21 0に画像 情報が入力される （# 1)。 画像情報は画像編集部 2 1 2に送られ、 モニター 1 02 で画像を確認しながらユーザー入力設定部 2 1 6からの操作を通じて色調 ·階調変 換、 拡大縮小等の編集処理が行われる （# 2)。 編集処理された画像は画像選択部 2 14に送られ、 そこでプリン卜するべき画像が選択される。
一方、 マイク、 カセットテープレコーダ、 CD (コンパク トディスク）、 デジタル ボイスレコーダ等から、 音声入力処理部 21 8に音声情報が入力される （# 1)。 音 声情報は音声編集部 220に送られ、 スピーカ 1 03で音を確認しながらユーザー 入力設定部 2 1 6からの操作を通じて音声編集処理が行われる （# 3)。 編集処理さ れた音声データは音声選択部 222に送られ、 画像選択部 2 1 4で選択された画像 にリンクされる音声が選択される （# 6)。
ここで図 1 0を用いて、 画像選択部 2 1 4及び音声選択部 2 22について説明す る。 この実施形態では、 画像モニタ 1 02は図 1 0に示されるようなモニタ画面
1 02 bを有し、 ユーザ入力設定部 2 1 6は、 パソコンキーボ一卜 1 0 1 aとマウ ス 1 0 1 b及びこれらのインターフェース回路から構成されている。 ユーザはモニ タ 1 02に表示された複数の画像を見ながら、 マウス 1 01 bに連動する画面中の カーソル 1 02 aを用いてプリントする画像と音声コードイメージに変換する音声 を選択する。 選択方法としてはプリントする画像 （図 1 0では IMG4) 上にカー ソルをおいてクリックすることで画像が選択され （# 4)、 さらに画像にリンクさせ る音声を示す音声シンボル （図 1 0では S P 1 ) のところまでドラッグしてそこで ドロップすることでリンクすべき音声が選択される （# 6)。 画面に表示されている 音声シンボルは、 例えば、 曲名、 曲番等を示す互いの音声を区別するためのシンポ ルイメージに過ぎないので、 音声内容の確認のためにはモニタ画面の所望の音声シ ンボルをカーソルで指定し、 更にダブルクリックして実際の音声をスピーカ 1 0 3 から再生し、 確認するように構成されている。
選択された画像データは I D情報付与部 2 3 0に送られ、 そこで I D情報供給部 2 2 8から供給される画像 I D情報が画像 I D情報付与部 2 2 6によって付与され る （# 5 )。 実際の画像 I D情報は、 図 1 0に示されるようにユーザによるキーボー ド 1 0 1 aからの入力で設定される。 画像 I D情報付与部 2 2 6で画像に付与され た画像 I D情報 D 1はリンク情報設定部 2 3 6に送られ、 又、 この画像 I Dがへッ ダとして付与された画像情報 D 2は画像データ記憶蓄積部 2 3 2に一旦記憶される。 例えば画像 I D情報 D 1は、 図 1 1 ( a ) に示したように、 画像シリアル N o .、 個 人番号、 入力形態番号、 識別番号、 コマ番号等で構成される。 個人番号とは顧客の 電話番号や生年月日であり、 入力形態番号とは画像のソースとなった媒体を識別す るもので、 例えば写真フィルム、 写真プリント、 デジタルカメラを示す符号であり、 識別番号とは、 写真フィルムならラボ店番号も含むフィルム番号、 スマートメディ ァなど記憶媒体ではその I D番号やボリューム名などがそれに相当する。 また、 画 像 I D付き画像情報 D 2は、 図 1 1 ( b ) に示したように、 ヘッダ部に前述した画 像 I Dが、 データ部にその画像データが適当なフォーマッ ト （J P E G、 G I F、 P I C Tなど） で割り当てられたものである。
一方、 音声選択部 2 2 2で特定の画像と組み合わせられるべく選択された音声情 報はリンク情報設定部 2 3 6に送られる。 リンク情報設定部 2 3 6で、 画像 I D情 報付与部 2 2 6から送られた組み合わせ相手の画像 I Dがリンク情報としてこの音 声情報のヘッダとして付加される （# 7 )。 図 1 1 ( c ) にリンク情報付き音声情報 D 3のデータ形式を示す。 リンク情報付き音声情報 D 3は音声データ圧縮符号化部 2 3 8に送られ、 音声データのみの圧縮処理が行われ、 続いて、 音声コードィメー ジ生成部 2 4 0にて、 音声の圧縮データとリンク情報とが光学的に読取り可能な音 声コードイメージに変換される （# 8 )。 音声コードイメージのデータは音声コード ィメージ記憶蓄積部 2 4 4にー且記憶される。
画像データ記憶蓄積部 2 3 2に記憶された画像データと、 この画像にリンクすベ き音声コ一ドイメージ記憶蓄積部 2 4 4に記憶された音声コードイメージは、 上述 したように付与された互いのリンク情報を頼りに、 画像 ·音声コードイメージレイ ァゥ ト編集部 2 3 4にそれぞれ取り込まれて画像イメージと音声コードイメージの レイアウト編集処理がなされる （# 9 )。 実際のレイアウト編集処理では図 1 0に示 されるモニタ 1 0 2の画面 1 0 2 bにレイァゥ ト編集画面が表示され、 カーソルの 指示により画像イメージや音声コードイメージのレイアウ ト編集が行われる。 例え ば、 編集処理後には所望通りに合成レイァゥトされた画像 ·音声コードイメージの 画面が表示される。 レイァゥト編集でプリン卜する画像 ·音声コードイメージが N Gと判断された場合には、 画像編集部 2 1 2、 又は音声コードイメージ生成部 2 4 0における処理に戻り、 必要な処理をやり直す。 例えば、 音声コードイメージ の長さが印刷可能長さを越えると、 これを 2つに分離して 2段構成にするなどの再 編集が行われる。 また、 モニター画面 1 0 2 b上に表示された音声コードイメージ をマウス 1 0 1 bで指定してダブルクリックすることにより、 対応する音声ソース 力 ここでは図示されていない一時記憶媒体から読み出されて、 スピーカ 1 0 3か ら出力されるように構成されている。
画像 '音声コードイメージ合成処理部 2 4 6は、 画像 '音声コードイメージレイ ァゥト編集部 2 3 4からのレイァゥト情報を受け取ると、 画像データ記憶蓄積部 2 3 2及び音声コードイメージ記憶蓄積部 2 4 4にそれぞれリクエス ト信号を送信 し、 レイァゥト情報及びリンク情報から得られる対応画像データ及び音声コードィ メージデータを受け取る。 受け取った画像イメージのデータと音声コードイメージ のデータとを一体化し、 プリント画像データを合成する。 プリント画像データはプ リント装置 3 0に送信され、 合成されたイメージがプリント出力される （# 1 0 )。 ここで、 画像 ·音声コードイメージレイアウ ト編集部 2 3 4は、 先ず、 音声コー ドイメージ記憶蓄積部 2 4 4に記憶された音声コ一ドイメージを取り込み、 その音 声コ一ドイメージから抽出したリンク情報を頼りに、 画像データ記憶蓄積部 2 3 2 に記憶されている画像データの中から当該抽出されたリンク情報と一致するリンク 情報を持つ画像データを取り込んでレイァゥト編集処理を行うことや、 また逆に、 画像データ記憶蓄積部 2 3 2に記憶された画像データを先ず取り込み、 その画像デ —タから抽出したリンク情報を頼りに、 音声コードイメージ記憶蓄積部 2 4 4に記 憶されている音声コードイメージの中から当該抽出されたリンク情報と一致するリ ンク情報を持つ音声コードイメージを取り込んでレイァゥト編集処理を行うことの 何れも可能なように構成されている。
図 1 2はプリント出力される音声コード付き記録媒体の例として写真付き年賀は がきを示すものであり、 図 1 2 ( a ) は、 年賀はがきの裏面の写真、 文字の記録さ れていない余白領域に音声コードイメージ 7を配置したもの、 図 1 2 ( b ) は、 年 賀はがきの裏面の写真、 文字の記録されている画像イメージ記録領域中に白のアン ダーコ一ト用シールによって形成したマスキング領域内に音声コードイメージ 7を 配置したものである。 図 1 2 ( c ) は、 年賀はがきの裏面に写真、 文字等の画像ィ メージをプリントし、 表面のお年玉番号の上側に音声コードイメージ 7をプリント したものであり、 この目的のために、 画像 '音声コードイメージレイアウ ト編集部 2 3 4と画像 '音声コードイメージ合成処理部 2 4 6は、 複数のプリント用紙に画 像や音声コードイメージを展開する機能も備えている。
さらに、 図 1 2 ( d ) は、 年賀はがき裏面の画像イメージ記録領域中の箇所に可 視光下では不可視のスティルス型コードイメージとして音声コードイメージ 7が画 像上に重畳されて記録されたものである。 スティルス型音声コードイメージの記録 に用いられる材料は可視光の下では透明で紫外光の照射で発光する蛍光材料を用い ることができる。
図 1 3に示された実施形態は、 図 8に示された実施形態に比べて、 コード変換部 2 4 2にプリコードイメージ生成部 2 5 2が備えられていることで異なっている。 このプリコードイメージ生成部 2 5 2は、 画像と組み合わされる音声情報のための 音声コードイメージのサイズ （外形寸法） を算出して、 画像 ·音声コードイメージ レイァゥト編集部 2 3 4に送る。 画像 ·音声コードイメージレイァゥト編集部 2 3 4では、 前記算出した音声コ一ドイメージのサイズを用いて画像イメージと音 声コードイメージのレイアウト編集処理が行われ、 その後、 レイアウト情報が音声 コードイメージ生成部 2 4 0に送られる。 使用する音声コードイメージのサイズが わかっているので、 レイアウト編集作業において、 無駄な空白のないレイアウトで 画像イメージと音声コードイメージを配置することができるし、 必要に応じて音声 コードイメージを自動的に分割することも可能である。 また、 時間を要する音声コ ードイメージの生成を行うことなく、 短い処理時間で済むプリコードイメージ生成 によってレイァゥトが可能であるから、 レイァゥト処理を効率的に行える。
このようなレイアウト編集が完了した後、 音声情報のコード化が行われ、 音声コ 一ドイメージ生成部 2 4 0では音声コードデータとレイァゥト情報を含むリンク情 報とが組み合わされて 1つの音声コードデータとしてェンコ一ドされ、 イメージ化 される。 これにより、 プリントされた音声コードイメージがレイアウ ト情報をもつ ていることから、 プリントされたものから、 再度複製品の依頼、 音声写真では焼き 増し注文を依頼された場合このレイァゥ ト情報を読み取ることでレイァゥト編集作 業を省略することが可能となる。
図 1 4に示された実施形態は、 図 8に示された実施形態に比べて、 リンク処理手 段 1 3 0 aに音声 I D情報を付与する音声 I D情報付与部 2 5 4とリンク情報を管 理するリンク情報管理部 2 5 6が追加され、 リンク情報設定部 2 3 6に代えて管理 用リンク情報設定部 2 5 8が設けられていることで異なっている。 音声 I D情報付 与部 2 5 4では選択された音声情報に対して I D情報供給部 2 2 8で供給される音 声 I D情報を付与する。 この音声 I Dのデータ形式は図 1 5 ( a ) に示されている ように、 前述した画像 I D (図 1 1 ( b ) ) に類似するものであり、 入力形態番号は、 アフレコ、 カセッ ト、 MD、 F Dなどの音声ソース媒体を示す符号となる。
I D情報供給部 2 2 8、 画像 I D情報付与部 2 2 6及び音声 I D情報付与部 2 5 4で I D情報付与部 2 3 0を構成しており、 設定された画像 I Dと音声 I Dは 管理用リンク情報設定部 2 5 8で統合されて、管理用リンク情報となる。図 1 5 ( b ) に管理用リンク情報のデータ形式が示されているが、 作成すべき音声コード付き記 録媒体の I Dとしてのシリアル番号、 画像 I D、 音声 I D、 そして日付情報によつ て構成されている。 さらに、 このリンク情報には、 画像 '音声コードイメージレイ ァゥト編集部 2 3 4で決定された画像イメージと音声コードイメージのレイァゥト を表すレイァゥト情報も管理用リンク情報設定部 2 5 8を介して付加することが可 能である。
管理用リンク情報設定部 2 5 8で生成された管理用リンク情報は、 リンク情報管 理部 2 5 6に送られ、 リンク情報管理部 2 5 6では管理用リンク情報をデータべ一 ス管理する。 リンク情報管理部 2 5 6は画像音声コードイメージ合成処理部 2 4 6 力、らのリクエス ト信号に応じ、 管理用リンク情報を送信する。 画像 ·音声コードィ メ一ジ合成処理部 2 4 6はプリントする画像データに係るリクエス ト信号を画像デ ータ記憶蓄積部 2 3 2に送信し、 該当する画像データを受け取る。 又、 音声コード イメージに係るリクエスト信号を音声コードイメージ記憶蓄積部 2 4 4に送信し、 該当する音声コードイメージを受け取る。 受け取った画像データと音声コードィメ ージデータは一体化されプリント画像データとして生成される。 この構成では、 記 憶蓄積されている複数の画像データ及び音声コードイメージからプリント出力する 場合、 これを効率よく処理することができる。 このため、 前記管理用リンク情報が 画像や音声のソースアドレス情報として利用される結果、 画像ソースとして、 その 都度画像入力処理部 2 1 0から入力されるものだけではなく、 予め多数の画像を格 納した画像データベース 2 8 0や多数の音声を格納した音声データベース 2 9 0か ら読み出したデータを自在に利用することができる。
なお、 図 8による実施形態では、 画像 I Dをリンク情報に使用する構成で説明し ているが、 音声 I Dをリンク情報に使用する構成を採用しても良い。 また、 画像ソ ースを写真フィルムに限定した実施の形態では、 リンク情報として用いる画像 I D は、 図 1 6 ( a ) に示すような、 識別番号としてのフィルム番号と画像を特定する コマ番号とで構成することができ、 音声 I Dは識別番号だけを備えるようにしても よい。
上述した実施の形態では、 印画紙 3に画像ィメージゃ音声コードィメージを形成 するためのプリント装置 3 0として C R Tプリンタ一や P L Z Tプリンターが用い られていたが、 液晶プリンター、 蛍光管プリンター、 レーザー露光熱現像装置を採 用してもよく、 この場合投影露光装置 2 0を省いて、 写真処理装置 1を完全なデジ タル式の写真プリンターとして構成することができる。
音声信号を光学的に読み取り可能なようにコードイメージ化するコードデータ生 成ユニッ ト 1 2 0、 つまりコード変換部 2 4 2としては、 それ自体公知な種々な技 術を利用できるが、 例えば特開平 6— 2 3 1 4 6 6号公報に詳しく説明されている ドッ トコ一ドを用いた情報記録再生システムの技術を流用したり、 スタックタイプ やマトリックスタイプの二次元バーコ一ドの技術を流用することも可能である。 次に、 本発明の他の実施の形態として、 音声コード付き記録媒体及び、 その作成 までの流れについて、 図 1 7〜 2 0を用いて説明する。 図 1 7はこの実施の形態に よる音声コード付き写真作成装置による音声コード付き写真作成の流れを示す図で あ 。
まず、音声コード付き写真を注文する顧客は、画像情報源及び音声情報源として、 静止画像のソースである写真やネガフィルムなどの画像記録メディア、 カセットテ ープ、 C D、 MDなどの音声記録メディア、 或いは、 音声と画像が両方記録された ディジタルスチルカメラやディジタルビデオムービーカメラなど音声 ·画像記録メ ディアを提出し、 組み合わせたい画像と音声を指示する。 受け取った音声や画像の 記録メディアから必要に応じて符号化し、 装置内で処理可能なフォーマツ卜の形を 有する画像データと音声データとして一時的にハードディスクなどの記憶媒体に格 納される。 この記憶媒体には、 顧客から受け取った画像データや音声データだけで はなく、 種々の風景やイラスト、 環境音などのデータも格納しており、 顧客が音声 コード付き写真に組み込むために選択できるようになつている。
オペレータは、 記憶媒体に一時的に格納されている画像データや音声データを顧 客の要望に合うように組み合わせて、音声コード付き写真オブジェクトを生成する。 この音声コード付き写真オブジェクトとは一枚の音声コード付き写真に対応するも のであり、 1つの音声コード付き写真オブジェクトは少なくとも 1つの画像データ と少なくとも 1つの音声データとから構成されるが、 実際は各データのリンク先を 示すポィンタを有しているだけである。
所定の画像データと音声デ一タが組み合わされると、 この画像データと音声デー タには、 互いの対応関係を示す認識記号としての I Dコードが、 リンク情報として 付与される。 この I Dコードは、 1つのオブジェク トにおける画像データと音声デ ータの組み合わせ毎に生成され共通して付与される。 これらのリンク関係は、 図 1 8で模式的に示されている。 I Dコードとしては、 単なる順序数を用いることも できるし、 その音声コードの内容を説明する文字列を用いても良い。 事情によって は、 認識記号として I Dコードに代えて、 対応する画像データと音声データを結び つける線が付与される構成を採用しても良い。 さらに、 認識記号としては、 音 （音 声コードなど） や光 （蛍光など） を発するマークでもよい。 とにかく、 各静止画像 と各音声コ一ドの互いの対応関係を表すことができるのであれば、 どのような形態 のものでもよい。 音声コード付き写真オブジェクトが決定されると、 このオブジェクトがもつォブ ジェクト構成情報に基づいて画像データが 2次元展開されるとともに音声データが 2次元コードに展開される。 さらに I Dコードも画像として展開され、 これらが合 成されて、 フレームメモリに格納される。 このフレームメモリーに格納された合成 データを用いて最終的に音声コード付き写真としてプリントァゥ卜される合成画像 が図 1 9に示すように、 モニター画面に表示される。
オペレータはモニター画面を見ることにより、 所定の音声コード付き写真のため の画像内容のチェックや静止画像と音声コードの配置チェックを行うことができる し、 I Dコードを通じて静止画像と音声コードの組み合わせを確認することもでき る。 ただし、 音声コードの内容は、 つまりその音自体は、 モニター画面で確認する ことができない。 音声コードの音そのものを確認するためには、 画面に表示されて いる音声コ一ド又は音声コードを示す枠をマウスなどを用いてクリックカ 操作卓 より I Dコードをキー入力して選択する。選択された音声コ一ドに対応する音声は、 以下の 2つの方法でスピーカから発せられる。
音声を聞くための 1つの方法では、 クリックされた、 つまり選択された音声コー ドに対応する音声データの格納位置をォブジェク 卜構成情報を利用して見つけ出し、 その音声データに適当な複号化処理を施して、 スピーカに送り、音を出すのである。 この方法は、 音声コードに対応する音声データがアクセス可能な形で格納されてい ることが前提条件となる。 そのような前提条件が満たされていない場合に利用され る他の 1つの方法では、 選択された音声コードに対応する二次元コードをフレーム メモリから静止画像データと分離して取り出し、 その音声二次元コードを逆変換す ることにより元の音声データに復元し、 この復元された音声データに適当な復号化 処理を施して、 スピーカに送り、 音を出すのである。
モニタ一画面で確認された合成画像は、 フレームメモリから銀塩方式プリンター ゃサーマルプリンタに送られ、 音声コード付き写真が出力される。 このようにして 仕上げられた音声コード付き写真は顧客に渡され、 公知の音声コード読取スキャナ —によって音声コードを走査することにより、 その音を聞くことができる。
上述した流れで音声コード付き写真を作成する音声コード付き写真作成装置の一 例を図 2 0の機能プロック図を用いて説明する。 入力部 3 0 0は、 写真やポスターなどの静止画像を入力ソースとするフラッ 卜べ ットスキヤナーゃネガフィルムなどの静止画像を入力ソースとするフィルムスキヤ ナー、 デジタルスチルカメラやデジタルビデオムービーカメラを入力ソースとする 専用リーダ、 或いはカセッ トテープや C Dなどを入力ソースとする各種オーディオ プレーヤなどの総称である。 画像符号化部 3 1 1は入力された画像情報をこの装置 内で利用可能なデジタルフォーマツ卜に変換するものであり、 音声符号化部 3 1 2 は入力された音声情報をこの装置内で利用可能なデジタルフォーマッ トに変換する ものである。 記憶部
3 2 0は両符号化部 3 1 1 , 3 1 2によって変換された画像データと音声データを 格納するもので、 顧客によって持ち込まれたデータは一時的に格納するが、 予め用 意された顧客の希望に応じて利用可能な素材としての画像データや音声データは強 制的に削除されるまでは格納される。
オブジェク ト生成部 3 3 0は、 記憶部 3 2 0から画像データと音声データをファ ィル名等を利用して選択的に読み出して、 1枚の音声コード付き写真を作成すべく、 1枚の音声コード付き写真オブジェク トを生成する。 その際、 画像データと音声デ —タの組み合わせが決定する毎にその組み合わせのための認識記号としての I Dコ 一ドが、 認識記号付与手段の一例としての I Dコード生成部 3 3 5によって付与さ れるので、 この音声コード付き写真オブジェク トは、 図 1 7と図 1 8から理解でき るように、 画像データと音声データと I Dコードから構成されるもので、 決定され たオブジェク トがもつオブジェク ト構成パターンはォブジェク ト構成情報管理部 3 3 1によってォブジュク ト構成情報の形で保持される。
決定されたオブジェク 卜が現出する音声コード付き写真をモニター 3 6 0で表示 したり、 プリンター 3 7 0で出力するためには、 フレームメモリ一 3 5 0に展開す る必要がある。 このため、 決定されたオブジェク トがもつ画像データは画像データ 2次元展開部 3 4 1で展開され、 フレームメモリー 3 5 0に送り込まれ、 音声デ一 タは音声データ 2次元コ一ド化部 3 4 2で展開され、 フレームメモリー 3 5 0に送 り込まれる。 さらに、 I Dコードも画像 （イメージ） として展開され、 所定の位置 に配置される。 フレームメモリー 3 5 0内にロードされた各データは、 インクジヱ ッ ト方式ゃサーマル方式のプリンター 3 7 0によって図 1 9に示すような音声コー ド付き写真としてプリントァゥトされる。 この音声コード付き写真における対応す る静止画像と音声コードには共通の I Dコードとしての順序数、 ここでは 「0 1」 と 「0 2」 が付与されているので、 静止画像に対応する音声コードを容易に確認す ることができる。 3 9 0はこの音声コード付き写真作成装置の各機能構成要素を制 御する制御部である。
次に、 モニター 3 6 0に表示された音声データの内容チェックのための構成を説 明する。
マウスや操作卓等のポインティングデバイス 3 8 1を用いて、 内容チェックすべ き音声コードを選択することにより、 制御部 3 9 0は、 オブジェクト構成情報から 対応する音声データを特定し、 音声データ検索部 3 8 2を通じて記憶部 3 2 0から 対応する音声データを読み出す。 読み出された音声データは音声再生部 3 8 3で必 要な複号化処理を施され、 増幅されたアナログ音声信号としてスピーカ 3 8 4に送 り込まれる。 これより、 スピーカ 3 8 4から元の音声が流れる。 オペレータは音声 を間くことにより、 モニター 3 6 0に表示された音声コードが同時に表示されてい る静止画像と正しく組み合わされたものかどうかをチェックすることができる。 選択された音声コードが記憶部 3 2 0に格納されていない場合、制御部 3 9 0は、 選択された音声コ一ド枠に対応する音声コードだけをフレームメモリ一 3 5 0から 読み出し、 逆変換部 3 8 5に送る。 逆変換部 3 8 5は、 音声データ 2次元コード化 部 3 4 2とは逆の処理を行い、 音声コードを音声データに変換する。 この逆変換部 3 8 5によって得られた音声データは、 音声再生部 3 8 3で必要な復号化処理を施 され、 増幅されたアナログ音声信号としてスピーカ 3 8 4に送り込まれ、 選択され た音声コードの元の音声が流れることになる。
図 2 0に示す実施の形態では、 認識記号付与手段として I Dコード生成部 3 3 5 が採用されていたが、 これをマーク生成部として構成し、 認識記号として I Dコ一 ドに代えて、 対応する画像データと音声データを結びつける線などが合成画像に加 えられるようにしても良い。 さらには、 このマーク生成部が、 音 （音声コードなど） や光 （蛍光など） を発するマークを生成するものでもよい。 蛍光マークは蛍光イン クプリンターを用いて重ね打ちすることができる。
また、 この実施形態 （図 1 9 ) では、 画像データと音声コードとを認識符号とし ての I Dコードとともに同一頁内に記録しているが、 このように、 画像データと音 声コードの近傍にそれぞれ認識符号 （ I Dコード） を記録する場合には、 画像デー タと音声コードがそれぞれ異なる頁に記録されていても構わない。
さらに、 認識符号を画像データと音声コード上に記録する場合は、 画像データや 音声コードと認識符号との対応関係をより確実に特定することができる。
なお、 音声コードとしては上述した特開平 7— 1 8 1 6 0 6号公報に示されたド ッ トコ一ドだけではなく、 2次元バーコードなどのような、 光学的に読み取り可能 で、 音声を復元できるあらゆる公知の音声コードが使用可能である。 産業上の利用可能性
以上のように、 本発明による画像処理装置は、 音声と画像という形態の異なる 2 つの情報をリンク情報を通じてリンクした状態で処理することができるので、 画像 情報に対応する画像ィメージと音声情報に対応する音声コードィメージとが同一の 記録媒体に記録された音声コード付き写真などを制作するために便利である。特に、 リンク情報に、 記録媒体に記録されるべき画像イメージと音声コードイメージの配 置を示すレイァゥト情報を含ませている場合、 その記録媒体の複製が容易となる。

Claims

請 求 の 範 囲
1 . 画像情報を入力する画像入力手段と、
音声情報を入力する音声入力手段と、
前記画像情報と前記音声情報とをリンクするリンク情報を設定するリンク処理手 段と、
前記音声情報を光学的に読み取り可能な音声コードイメージに変換するコード変 換手段と、
前記リンク情報に基づき、 前記画像情報に対応する画像イメージと前記音声コー ドイメージとを所定の記録媒体に記録するプリント装置とを備えたことを特徴とす る画像処理装置。
2 . 前記コード変換手段は、 前記音声情報を圧縮して符号化する圧縮符号化手段 と、 圧縮符号化された音声情報を光学的に読み取り可能な音声コードイメージに変 換する音声コードィメージ生成手段とからなることを特徴とする請求の範囲第 1項 に記載の画像処理装置。
3 . 前記コード変換手段は、 前記音声情報と前記リンク情報をともに光学的に読 み取り可能な音声コードィメ一ジに変換するものであることを特徴とする請求の範 囲第 1又は 2項に記載の画像処理装置。
4 . 前記リンク情報は、 前記記録媒体に記録されるべき前記画像イメージと前記 音声コードイメージの配置を示すレイァゥト情報を含んでいることを特徴とする請 求の範囲第 1〜 3項のいずれかに記載の画像処理装置。
5 . 前記リンク情報は、 前記記録媒体に記録されるべき前記画像イメージの画像 情報又はそのソースの格納場所及び前記音声コードイメージの音声情報又はそのソ ースの格納場所を示すソースァドレス情報を含んでいることを特徴とする請求の範 囲第 1 〜 3項のいずれかに記載の画像処理装置。
6 . 前記リンク情報は、 前記画像情報及び前記音声情報に対して、 共通に付与さ れ、 互いの対応関係を示す認識記号であり、
前記プリント装置は、 前記認識記号を前記記録媒体における前記画像ィメージ及 び前記音声コードイメージ又はその近傍にそれぞれ可視化表示して記録するもので あることを特徴とする請求の範囲第 1項に記載の画像処理装置。
7 . 前記プリント装置は、 前記記録媒体の画像ィメージ記録領域外である余白領 域又は裏面に、 前記音声コードイメージを記録することを特徴とする請求の範囲第 1〜 6項のいずれかに記載の画像処理装置。
8 . 前記プリント装置は、 前記画像イメージ上に前記音声コードイメージを重畳 して記録することを特徴とする請求の範囲第 1〜 6項のいずれかに記載の画像処理
9 . 前記プリント装置は、 前記画像イメージと前記音声コードイメージとを合成 して記録することを特徴とする請求の範囲第 1〜 6項のいずれかに記載の画像処理 装置。
1 0 . 前記プリント装置は、 前記画像イメージと前記音声コードイメージとを印刷 記録媒体に記録するものであることを特徴とする請求の範囲第 1〜 9項のいずれか に記載の画像処理装置。
1 1 . 前記プリント装置は、 前記画像イメージと前記音声コードイメージとを感光 記録媒体に記録するものであることを特徴とする請求の範囲第 1〜 9項のいずれか に記載の画像処理装置。
1 2 . 前記画像入力手段は、 写真フィルムに形成された撮影画像又は写真プリント に形成された撮影画像を読み取るスキャナーと、 デジタルスチルカメラやビデオム 一ビーカメラによって撮影された撮影画像を取り込む画像信号入力部と、 コンビュ —タにより作成又は編集された画像を取り込む画像信号入力部のうちの少なくとも 1つを用いて画像情報を取得するものであることを特徴とする請求の範囲第 1〜 1 1項のいずれかに記載の画像処理装置。
1 3 . 前記リンク処理手段は、 前記画像情報及び前記音声情報の少なくとも一方の 情報を特定するための I D情報を前記リンク情報として付与する I D情報付与手段 を備え、 前記 I D情報に基づいて、 前記画像情報又は音声情報のうちの一方の情報 に対して、 他方の情報をリンクするリンク情報を設定することを特徴とする請求の 範囲第 1〜1 2項のいずれかに記載の画像処理装置。
1 4 . 前記リンク処理手段は、 前記画像情報及び前記音声情報の少なくとも一方を モニタするモニタ手段と、 前記モニタ手段によりモニタされている前記画像情報又 は前記音声情報のうちの一方の情報に対して他方の情報がリンクするように情報を 指定する情報指定手段とを備え、 この情報指定手段からの出力及び前記 I D情報と に基づいて、 リンク情報を設定することを特徴とする請求の範囲第 1 3項に記載の 画像処理装置。
1 5 . 前記情報指定手段は、 前記モニタ手段に出力されている前記画像情報又は前 記音声情報に関して所望の情報を操作者が指定するボインティングデバイスである ことを特徴とする請求の範囲第 1 4項に記載の画像処理装置。
1 6 . 請求の範囲第 1項〜第 1 5項のいずれかに記載の画像処理装置によって作成 された音声コード付き記録媒体において、 各画像情報と音声情報との対応関係を示 す認識記号が可視化表示して記録されていることを特徴とする音声コード付き記録 媒体。
1 7 . 画像情報に対応した画像イメージと、 この画像情報に関連した音声情報に対 応する音声コードイメージとを同一の記録媒体に記録した音声コード付き記録媒体 において、 複数の画像情報に対応した画像イメージと、 これに対応する複数の音声 コードイメージとを配置するとともに、 各画像情報と音声情報との対応関係を示す 認識記号を可視化表示して記録したことを特徴とする音声コード付き記録媒体。
1 8 . 前記複数の音声コードイメージは、 所定の音声コードイメージ記録領域にま とめて配置したことを特徴とする請求の範囲第 1 7項に記載の音声コード付き記録 媒体。
PCT/JP1998/002494 1997-06-30 1998-06-05 Image processor and recording medium bearing voice code image Ceased WO1999000701A1 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE69833434T DE69833434T2 (de) 1997-06-30 1998-06-05 Bildverarbeitungsanlage und aufzeichnungsmedium mit einem sprachkodierten bild
US09/194,811 US6421470B1 (en) 1997-06-30 1998-06-05 Image processing apparatus and audio-coded recording media
AU75508/98A AU711544B2 (en) 1997-06-30 1998-06-05 Image processing apparatus and audio-coded recording media
EP98923138A EP0928986B1 (en) 1997-06-30 1998-06-05 Image processor and recording medium bearing voice code image
KR1019980709773A KR20000065228A (ko) 1997-06-30 1998-06-05 영상처리장치및음성코드화기록매체

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP17441697 1997-06-30
JP9/174416 1997-06-30
JP28482897 1997-10-17
JP9/284828 1997-10-17

Publications (1)

Publication Number Publication Date
WO1999000701A1 true WO1999000701A1 (en) 1999-01-07

Family

ID=26496034

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP1998/002494 Ceased WO1999000701A1 (en) 1997-06-30 1998-06-05 Image processor and recording medium bearing voice code image

Country Status (9)

Country Link
US (1) US6421470B1 (ja)
EP (1) EP0928986B1 (ja)
KR (3) KR20000065228A (ja)
CN (1) CN1163794C (ja)
AT (1) ATE317562T1 (ja)
AU (1) AU711544B2 (ja)
DE (1) DE69833434T2 (ja)
TW (1) TW455736B (ja)
WO (1) WO1999000701A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002006422A (ja) * 2000-06-21 2002-01-09 Noritsu Koki Co Ltd 写真処理装置
JP2002023286A (ja) * 2000-07-10 2002-01-23 Noritsu Koki Co Ltd 音声付き写真のプリント装置及び音声付き写真の音声再生装置
US6577458B2 (en) 2001-04-20 2003-06-10 Richard Paul Day Memo tape recorder and reader system and method

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11122401A (ja) 1997-10-17 1999-04-30 Noritsu Koki Co Ltd 音声コード付き写真作成装置
US20020081112A1 (en) * 1999-01-18 2002-06-27 Olympus Optical Co., Ltd. Printer for use in a Photography Image Processing System
US7009728B1 (en) * 1999-02-03 2006-03-07 Minolta Co., Ltd. Image printer system with print and save functions
US6449617B1 (en) * 1999-06-15 2002-09-10 Microsoft Corporation Edit command delegation program for editing electronic files
JP2001022865A (ja) * 1999-07-06 2001-01-26 Canon Inc 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体
US7145597B1 (en) * 1999-10-28 2006-12-05 Fuji Photo Film Co., Ltd. Method and apparatus for image processing
US7877766B1 (en) 2000-05-04 2011-01-25 Enreach Technology, Inc. Method and system of providing a non-skippable sub-advertisement stream
DE10037781A1 (de) * 2000-08-03 2002-02-21 Agfa Gevaert Ag Vorrichtung und Verfahren zum Beschreiben von Aufzeichnungsmaterial mit Bildinformationen
US7024109B2 (en) * 2000-09-12 2006-04-04 Canon Kabushiki Kaisha Information processing apparatus
US6647369B1 (en) * 2000-10-20 2003-11-11 Silverbrook Research Pty Ltd. Reader to decode sound and play sound encoded in infra-red ink on photographs
GB2374225A (en) * 2001-03-28 2002-10-09 Hewlett Packard Co Camera for recording linked information associated with a recorded image
DE10115342A1 (de) * 2001-03-28 2002-10-02 Philips Corp Intellectual Pty Einrichtung zum Abtasten von Filmen
US20020154327A1 (en) * 2001-04-24 2002-10-24 Jones Michael J. Incorporating data in hardcopy correspondence
JP2002342191A (ja) * 2001-05-15 2002-11-29 Olympus Optical Co Ltd 印刷物、情報取得方法、情報取得システム、情報資源、及びプログラム
JP2003087724A (ja) * 2001-09-12 2003-03-20 Alpine Electronics Inc ディスク再生装置
US7127271B1 (en) 2001-10-18 2006-10-24 Iwao Fujisaki Communication device
US7107081B1 (en) 2001-10-18 2006-09-12 Iwao Fujisaki Communication device
US7466992B1 (en) 2001-10-18 2008-12-16 Iwao Fujisaki Communication device
US20040205481A1 (en) * 2001-12-17 2004-10-14 Zuniga Oscar A. Multimedia delivery methods and multifunction device therefor
US7292681B2 (en) * 2002-02-15 2007-11-06 Apple Corporate Technologies, Inc. Technique and an apparatus for producing postcards having an audio message for playback by recipient
GB2388242A (en) * 2002-04-30 2003-11-05 Hewlett Packard Co Associating audio data and image data
JP2004134985A (ja) * 2002-10-09 2004-04-30 Olympus Corp データ編集装置及びデータ編集プログラム
JP2004134984A (ja) * 2002-10-09 2004-04-30 Olympus Corp データ編集装置、データ編集方法及びデータ編集プログラム
JP4005470B2 (ja) 2002-10-09 2007-11-07 オリンパス株式会社 情報処理装置及び情報処理プログラム
US8271489B2 (en) * 2002-10-31 2012-09-18 Hewlett-Packard Development Company, L.P. Photo book system and method having retrievable multimedia using an electronically readable code
US20040135888A1 (en) * 2003-01-10 2004-07-15 Oakeson Kenneth Lee Camera systems, systems of offering photographs for sale, and methods of offering photographs for sale
US8229512B1 (en) 2003-02-08 2012-07-24 Iwao Fujisaki Communication device
US8241128B1 (en) 2003-04-03 2012-08-14 Iwao Fujisaki Communication device
JP2005084980A (ja) * 2003-09-09 2005-03-31 Fuji Photo Film Co Ltd 顔画像付きカード用データ生成装置および方法並びにプログラム
US8090402B1 (en) 2003-09-26 2012-01-03 Iwao Fujisaki Communication device
US7917167B1 (en) 2003-11-22 2011-03-29 Iwao Fujisaki Communication device
TWI463806B (zh) * 2003-12-19 2014-12-01 Creative Tech Ltd 處理數位影像之方法及系統
ATE485672T1 (de) * 2003-12-19 2010-11-15 Creative Tech Ltd Digitale standbildkamera mit audio-decodierung und -codierung, einem druckbaren audioformat und verfahren
US8041348B1 (en) 2004-03-23 2011-10-18 Iwao Fujisaki Communication device
US7626736B2 (en) * 2004-10-08 2009-12-01 Wen-Yuan Peng Scanning apparatus
US8271872B2 (en) * 2005-01-05 2012-09-18 Apple Inc. Composite audio waveforms with precision alignment guides
US8208954B1 (en) 2005-04-08 2012-06-26 Iwao Fujisaki Communication device
US20060245730A1 (en) * 2005-04-28 2006-11-02 Ultmost Industrial Corp. [identifier recorder for identifying picture identification code]
KR100718083B1 (ko) * 2006-01-03 2007-05-16 삼성전자주식회사 파일을 링크시켜 기록/재생하는 영상기기 및 그기록／재생방법
KR20080046552A (ko) * 2006-11-22 2008-05-27 가구모토 주니치 스피치 코드를 가지는 프린트, 기록 재현을 위한 방법 및장치, 그리고 상용 모드
US8559983B1 (en) 2007-05-03 2013-10-15 Iwao Fujisaki Communication device
US7890089B1 (en) 2007-05-03 2011-02-15 Iwao Fujisaki Communication device
US8676273B1 (en) 2007-08-24 2014-03-18 Iwao Fujisaki Communication device
US8639214B1 (en) 2007-10-26 2014-01-28 Iwao Fujisaki Communication device
US8472935B1 (en) 2007-10-29 2013-06-25 Iwao Fujisaki Communication device
US8744720B1 (en) 2007-12-27 2014-06-03 Iwao Fujisaki Inter-vehicle middle point maintaining implementer
WO2009101610A2 (en) * 2008-02-13 2009-08-20 In-Dot Ltd. A method and an apparatus for managing games and a learning plaything
CN101546110B (zh) * 2008-03-24 2011-05-25 联想(北京)有限公司 一种投影机和记录投影机信息的方法
US8543157B1 (en) 2008-05-09 2013-09-24 Iwao Fujisaki Communication device which notifies its pin-point location or geographic area in accordance with user selection
US8340726B1 (en) 2008-06-30 2012-12-25 Iwao Fujisaki Communication device
US8452307B1 (en) 2008-07-02 2013-05-28 Iwao Fujisaki Communication device
KR200449793Y1 (ko) * 2008-08-05 2010-08-12 에프엘 테크놀로지(주) 엘이디 조명기구
US20110265001A1 (en) * 2010-04-21 2011-10-27 Roniie Neil Patton Cameraless A/V documenting of user interactions with MFP device user interface
US9015249B2 (en) * 2012-03-20 2015-04-21 Seemail, LLC System and method for associating audio data with image file data
US9039483B2 (en) 2012-07-02 2015-05-26 Hallmark Cards, Incorporated Print-level sensing for interactive play with a printed image
JP6642032B2 (ja) * 2016-01-21 2020-02-05 セイコーエプソン株式会社 プロジェクター及びプロジェクターの制御方法
US12014186B2 (en) * 2022-03-25 2024-06-18 Sap Se Reducing downtime during operating system patching

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05224320A (ja) * 1991-11-19 1993-09-03 Eastman Kodak Co 音声記録を備えた写真フィルムスチルカメラシステム
JPH07181606A (ja) * 1993-12-22 1995-07-21 Olympus Optical Co Ltd オーディオ情報記録再生システム
JPH07214939A (ja) * 1994-01-29 1995-08-15 Kozuka Shigeko 情報提示システム
JPH0865645A (ja) * 1994-02-17 1996-03-08 Thomson Consumer Electron Sales Gmbh テレビジョン信号で送られるデータの受信方法
JPH09149365A (ja) * 1995-11-20 1997-06-06 Ricoh Co Ltd デジタルスチルビデオカメラ

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE1045716B (de) * 1956-12-21 1958-12-04 Merck Ag E Bekaempfung von Nematoden in der Landwirtschaft
JP3235903B2 (ja) * 1992-06-11 2001-12-04 株式会社リコー スチルカメラ
US5873735A (en) * 1994-12-28 1999-02-23 Sharp Kabushiki Kaisha Information reproducer and information creating unit
US5757468A (en) * 1996-08-29 1998-05-26 Eastman Kodak Co Method and apparatus for producing photographic prints with sound indicia thereon

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05224320A (ja) * 1991-11-19 1993-09-03 Eastman Kodak Co 音声記録を備えた写真フィルムスチルカメラシステム
JPH07181606A (ja) * 1993-12-22 1995-07-21 Olympus Optical Co Ltd オーディオ情報記録再生システム
JPH07214939A (ja) * 1994-01-29 1995-08-15 Kozuka Shigeko 情報提示システム
JPH0865645A (ja) * 1994-02-17 1996-03-08 Thomson Consumer Electron Sales Gmbh テレビジョン信号で送られるデータの受信方法
JPH09149365A (ja) * 1995-11-20 1997-06-06 Ricoh Co Ltd デジタルスチルビデオカメラ

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002006422A (ja) * 2000-06-21 2002-01-09 Noritsu Koki Co Ltd 写真処理装置
JP2002023286A (ja) * 2000-07-10 2002-01-23 Noritsu Koki Co Ltd 音声付き写真のプリント装置及び音声付き写真の音声再生装置
US6577458B2 (en) 2001-04-20 2003-06-10 Richard Paul Day Memo tape recorder and reader system and method

Also Published As

Publication number Publication date
CN1163794C (zh) 2004-08-25
DE69833434D1 (de) 2006-04-20
US6421470B1 (en) 2002-07-16
TW455736B (en) 2001-09-21
EP0928986A4 (en) 1999-09-22
AU711544B2 (en) 1999-10-14
EP0928986A1 (en) 1999-07-14
EP0928986B1 (en) 2006-02-08
KR20030097579A (ko) 2003-12-31
AU7550898A (en) 1999-01-19
DE69833434T2 (de) 2006-08-31
ATE317562T1 (de) 2006-02-15
CN1226977A (zh) 1999-08-25
US20020057457A1 (en) 2002-05-16
KR100805811B1 (ko) 2008-02-21
KR20000065228A (ko) 2000-11-06
KR20070046981A (ko) 2007-05-03

Similar Documents

Publication Publication Date Title
KR100805811B1 (ko) 영상 처리 장치 및 음성 코드화 기록 매체
EP0909978B1 (en) Apparatus for making recording media with audio code images
JPH11352600A (ja) 画像及び関連する音声デ―タ処理を含む自動化された先進式サ―ビスのための写真仕上げ用のシステム及び方法
JP6996212B2 (ja) 履歴書作成システム
JP2001333378A (ja) 画像処理機及びプリンタ
JP2005345632A (ja) 印刷システム
JPWO1999000701A1 (ja) 画像処理装置及び音声コード付き記録媒体
JP2004233409A (ja) 写真プリントシステム
JP3751443B2 (ja) 音声付き写真処理装置
JP4257588B2 (ja) 写真プリント装置
JP3593202B2 (ja) ファイリング・システムおよび方法
JPH11110519A (ja) 画像再生方法およびシステムならびにその方法に使用する記録媒体
JP2002057975A (ja) 撮影画像記録装置
JPH1124190A (ja) 音声付き写真処理装置
JP2006309323A (ja) 画像編集方法および画像形成装置
JP2002031860A (ja) 写真処理方法、写真処理装置、及びインデックスプリント
JP2002027177A (ja) 音声・画像処理装置
JP2005236774A (ja) 写真プリント装置
JP2006126287A (ja) 写真プリント装置
JP2006115366A (ja) 写真処理装置
JP2001060100A (ja) 音声コード記録装置
JP2005347802A (ja) プリント処理方法及びプリント処理システム
JP2001042448A (ja) 音声コード付き写真作成システム
JP2008525853A (ja) 序列付きデータ・フレームを使用する写真仕上げのコントロール
JPH09168082A (ja) 複写装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 98800706.1

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 1998923138

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 75508/98

Country of ref document: AU

Ref document number: 1019980709773

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 09194811

Country of ref document: US

AK Designated states

Kind code of ref document: A1

Designated state(s): AU CN JP KR US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWP Wipo information: published in national office

Ref document number: 1998923138

Country of ref document: EP

WWG Wipo information: grant in national office

Ref document number: 75508/98

Country of ref document: AU

WWP Wipo information: published in national office

Ref document number: 1019980709773

Country of ref document: KR

WWR Wipo information: refused in national office

Ref document number: 1019980709773

Country of ref document: KR

WWG Wipo information: grant in national office

Ref document number: 1998923138

Country of ref document: EP