WO2007125825A1 - カメラ装置および画像記録再生方法 - Google Patents

カメラ装置および画像記録再生方法 Download PDF

Info

Publication number
WO2007125825A1
WO2007125825A1 PCT/JP2007/058610 JP2007058610W WO2007125825A1 WO 2007125825 A1 WO2007125825 A1 WO 2007125825A1 JP 2007058610 W JP2007058610 W JP 2007058610W WO 2007125825 A1 WO2007125825 A1 WO 2007125825A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
video
area
sound
enlarged
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2007/058610
Other languages
English (en)
French (fr)
Inventor
Tatsuro Ogawa
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OPT Corp
Original Assignee
OPT Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OPT Corp filed Critical OPT Corp
Priority to EP07742045A priority Critical patent/EP2018065A4/en
Priority to US12/298,559 priority patent/US20090185028A1/en
Publication of WO2007125825A1 publication Critical patent/WO2007125825A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING SYSTEMS, e.g. PERSONAL CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695—Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/915—Television signal processing therefor for field- or frame-skip recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus

Definitions

  • the present invention relates to a camera device using a wide-angle photographic lens and an image recording / reproducing method.
  • a surveillance system having a camera device for photographing the inside of the store or the like has been used as a countermeasure against crimes such as robbery, theft, or vacant nest.
  • surveillance systems have begun to spread to ordinary households as crime has increased in recent years.
  • a camera device used in such a monitoring system is required to be able to shoot with a wide angle and a shooting angle of view so that the monitoring range can be taken without blind spots.
  • a camera device using an omnidirectional imaging lens as a camera device having a wide angle of view is disclosed in Patent Document 1, for example.
  • Patent Document 1 Japanese Patent Application Laid-Open No. 2003-303335
  • the present invention is a camera device that can record an image of a wide range and displays a narrow range of images based on predetermined information, thereby making it easy to determine the contents of a necessary image. It is another object of the present invention to provide an image recording / reproducing method.
  • the camera device of the present invention includes a wide-angle shooting lens and a camera unit having an imaging unit that forms an image of the light of the subject that has passed through the imaging lens, and a sound or / And a microphone that collects the sound around the subject and an image formed on the imaging means
  • Processing control means for performing image processing of the image data of the image image and recording the image processed image data and sound collected by the microphone, and collecting the video of the image data processed by the processing control means.
  • the processing control means includes a process for recording the entire captured image and a video on the display means. When displaying, the processing is performed to cut out and display the area in the direction of sound or the specified area based on the collected sound or other information from the entire captured image.
  • the processing control means generates a reduced video in which the entire captured image is displayed in a partial area of the display screen and the data amount of the image is reduced.
  • Reduced video generation processing, and enlarged video generation processing that corrects distortion caused by the photographic lens for one or more parts of the captured image and generates a clipped video that is enlarged compared to the reduced video.
  • control for displaying reduced video and enlarged video on the display screen According to the present invention, it is possible to view an image of the details of the shooting range with the enlarged image whose distortion has been corrected, and it is possible to see the entire state of the shooting range with the reduced image.
  • another invention is based on the above-described invention, and a reduced video is displayed indicating a range corresponding to the enlarged video.
  • the reduced video is displayed indicating the range corresponding to the enlarged video, so that the positional relationship of the enlarged video in the reduced video can be easily confirmed.
  • the area to be cut out is a direction in which sound is generated, a change area in which the area changes as the sound moves, and a direction fixed in a specific direction. It is assumed that there are at least two areas, the fixed area, that are displayed on the display screen at the same time.
  • the direction of the blackboard is set as a fixed area and the speaker is set as a change area, so that the state of the conference can be displayed appropriately and all areas can be displayed. It can be saved as a record.
  • the image recording / reproducing method of the present invention includes a recording step of recording the entire captured image captured by the wide-angle imaging lens and recording the sound collected by the microphone, and the entire captured image.
  • the entire photographed image is a circular image having a 360-degree circumference
  • the limited image is an enlarged image enlarged by interpolation processing or the like.
  • the image data for the enlarged image can be made to be image data of only the portion corresponding to the enlarged image in the image data of the captured image, and the transfer time of the image data to be displayed Can be shortened. For this reason, the enlarged image can be smoothly displayed.
  • an area in the direction of sound can be appropriately displayed later.
  • the camera device and the image recording / reproducing method of the present invention it is possible to record an image obtained by photographing a wide range, and to display an image in a narrow range based on predetermined information. For this reason, if the user wishes to view the image, the entire photographing range can be viewed at any time, and the necessary portion can be viewed as an image that can be easily discriminated.
  • FIG. 1 is a diagram showing an overall configuration of a camera device according to a first embodiment of the present invention.
  • FIG. 2 is a perspective view showing a configuration of a camera unit of the camera device in FIG. 1.
  • FIG. 3 is a block diagram showing a configuration of the camera device of FIG. 1.
  • FIG. 4 is a diagram showing a video display mode in the camera device of FIG. 1.
  • FIG. 5 is a diagram showing another display mode of video in the camera device of FIG. 1.
  • FIG. 6 is a diagram showing another display mode of video in the camera device of FIG. 1.
  • FIG. 7 is a diagram showing a configuration of a camera device according to a second embodiment of the present invention. 8] FIG. 8 is a block diagram showing the configuration of the camera device of FIG. Explanation of symbols
  • a camera apparatus 100 according to a first embodiment of the present invention will be described with reference to FIGS.
  • the image recording / reproducing method will be described together with the operation of the camera device 100.
  • the camera device 100 can be used as a conference camera, a home or office surveillance camera, and can also be used as a camera device for taking an image for product inspection. It can also be used via communication means such as the Internet.
  • FIG. 1 shows an overall appearance configuration of the camera apparatus 100.
  • This camera device 100 has a camera 200, a monitor 300 as a display means, three microphones 311, 312, 313 which have a functioning effect and an operation device 400 as an operation means.
  • a monitor 300 is attached to the operating device 400.
  • An image taken by the camera unit 200 is displayed on the monitor 300.
  • the operation device 400 includes an operation switch 410, a speaker 420, and the like for operating the camera device 100, such as switching display contents displayed on the monitor 300 of the power switch of the camera device 100.
  • the camera unit 200 includes an exterior housing 210, an optical system 220, an imaging element 230 as an imaging unit, and a circuit device 240, which are illustrated by dotted lines in the drawing.
  • the outer casing 210 has a small form, for example, having a substantially rectangular parallelepiped shape of 3 cm square.
  • the optical system 220 includes a photographing lens 221 and a lens barrel 222.
  • the lens barrel 222 is accommodated in the outer casing 210, and the photographing lens 221 is exposed to the outside of the outer casing 210.
  • the taking lens 221 is a lens having a wide angle of 180 degrees or more (about 200 degrees) and an optical characteristic of an angle of view.
  • This photographic lens 221 has a front surface on the object light incident side bulging like a normal convex lens. It is close to.
  • the glass inside the lens is devised, has an angle of view of 180 degrees or more, and can shoot all around the optical axis, that is, all around 360 degrees. .
  • An imaging element 230 is disposed at the imaging position of the photographic lens 221.
  • CMOS complementary metal oxide semiconductor
  • CCD Charge Coupled Device
  • photoelectric conversion element may be used instead of CMOS.
  • the lens barrel 222 is provided with a focus adjustment knob 223.
  • the lens barrel 222 is configured to advance and retreat in the optical axis direction with respect to the imaging element 230 when the pin adjustment knob 223 is picked up with a finger and rotated around the optical axis. Therefore, the position of the photographic lens 221 in the optical axis direction can be adjusted by the focus adjustment knob 223 so that the imaging position of the photographic lens 221 becomes the imaging surface of the imaging device 230.
  • the size of the imaging surface of the imaging device 230 and the imaging lens 221 and the imaging device 230 are such that the image formed by the imaging lens 221 is entirely within the imaging surface of the imaging device 230. And the arrangement is configured. Therefore, a circular image is formed on the imaging surface of the imaging element 230 corresponding to the shape of the photographing lens 221.
  • the camera unit 200 includes a microphone 201, a USB connection unit 203 to which a USB (Univereal Serial Bus) cable 202 as a communication means is connected, and an AV signal output unit 204 that outputs audio and video signals.
  • a USB connection unit 203 to which a USB (Univereal Serial Bus) cable 202 as a communication means is connected
  • an AV signal output unit 204 that outputs audio and video signals.
  • the microphone 201 and the microphones 311, 312, and 313 are used to capture sound in a place where shooting is performed. That is, the microphone 201 and the microphones 31 1, 312, and 313 collect sounds emitted from the subject and sounds around the subject.
  • the camera unit 200 and the operation device 400 are connected to each other via a USB cable 202 connected to the USB connection unit 203 so that they can communicate with each other.
  • the AV signal output unit 204 is used when outputting the image data on the camera unit 200 side and the audio signal collected by the microphone 201, the microphones 311, 312, and 3 13 to the monitor 300 and the speaker 420.
  • FIG. 3 is a block diagram showing the configuration of the circuit device 240 serving as the processing control means and the overall configuration of the camera device 100. The operation and the like of the camera device 100 will be described with reference to FIG.
  • the circuit device 240 can also be configured as an image processing device.
  • the light of the subject that has passed through the photographing lens 221 forms an image on the image pickup surface of the image pickup device 230, and an image signal based on this formed image is output from the image pickup device 230.
  • the image signal output from the image sensor 230 is input to the circuit device 240.
  • the circuit device 240 includes an image signal processing unit 241, an image compression processing unit 242, a control unit 243, a memory 244 provided for the control unit 243, a coordinate conversion unit 245, and the coordinate conversion unit 245. About equipped with memory 246.
  • the image signal output from the image sensor 230 is input to the image signal processing unit 241.
  • predetermined image processing such as color processing is performed on the image signal from the image sensor 230.
  • the image compression processing unit 242 compresses the image data of the image signal subjected to the image processing by the image signal processing unit 241, and generates compressed image data in which the data amount of the image data is reduced.
  • JPEG Joint Photographic Experts Group
  • the control unit 243 controls the operation of the camera device 100, including video generation processing and audio signal reproduction in accordance with the display mode of the captured image displayed by the imaging lens 221 displayed on the monitor 300. As shown in FIGS. 4, 5, and 6, which will be described later, the camera device 100 according to this embodiment selects a plurality of display modes having different video contents and displays them on the monitor 300. can do.
  • the control unit 243 performs image processing and sound processing for generating a video image that is displayed in various display modes from the image data of the captured image.
  • the control unit 243 is configured by, for example, a CPU (Central Processing Unit).
  • the memory 244 includes a work memory for executing this program in addition to a program for operating each part of the camera device 100.
  • the memory 244 is used in the processing in the image signal processing unit 241 and the image compression processing unit 242.
  • the memory 244 records sound signals collected by the microphone 201 and the microphones 311, 312, and 313, and also records the entire image (circular image) compressed by the image compression processing unit 242.
  • the direction of the sound to be described later is determined based on the sound collected by the three microphones 311, 312, and 313.
  • the direction of the sound including the sound picked up by the microphone 201 is determined. It may be detected.
  • the coordinate conversion unit 245 performs image processing for generating a video corresponding to each display mode based on the image data from the image compression processing unit 242 together with the control unit 243.
  • the coordinate conversion unit 245 processes the captured image on the imaging surface of the image sensor 230 so as to be an image displayed in each display mode and displays the image on the monitor 300. It has a function of converting the coordinate position into the coordinate position of the video on the monitor 300.
  • the memory 246 is a work memory when image processing is performed using the coordinate conversion unit 245.
  • the monitor 300 displays a video based on the image signal output from the circuit device 240.
  • it is composed of a liquid crystal display device, a CRT display device, or a plasma display device.
  • the operation device 400 includes a power switch of the camera device 100, an operation switch 410 for operating the camera device 100 for switching display contents displayed on the monitor 300, a speaker 420, and the like (see FIG. 1). It is done. Based on the operation content of the operation switch 410, the camera device 100 operates via the control unit 243. The instruction of the operation switch 410 is transmitted to the control unit 243, and a predetermined operation is executed. The operation switch 410 is used when designating the position of the area display described later.
  • the operation switch 410 is provided with a main selection button 411 and a sub-selection button 412 for switching a video display mode by the photographing lens 221 displayed on the monitor 300.
  • a main selection button 411 and a sub-selection button 412 for switching a video display mode by the photographing lens 221 displayed on the monitor 300.
  • the initial display mode when the photographic image of the photographic lens 221 is displayed after the power is turned on is the entire image 310 shown in FIG. 4 (A).
  • the overall display mode is displayed.
  • the camera unit 200 is installed, for example, on a desk in the center of the conference room, and in the entire image 310 shown in the drawing, the vertical direction of the page is the conference room.
  • the following explanation will be given on the assumption that the front-rear direction and the left-right direction of the page correspond to the left-right direction of the conference room.
  • the entire image 310 is a display in which the image of the photographing lens 221 formed on the imaging surface of the image sensor 230 is displayed as it is. As described above, the imaging size of the photographic lens 221 is within the imaging plane of the imaging element 230.
  • the imaging contour of the imaging lens 221 on the imaging surface of the imaging element 230 is circular, and the portion of the imaging surface other than the imaging portion is a dark portion with a small amount of light.
  • pixel data is treated as 0-brightness data for portions other than the imaging portion of the photographing lens 221 on the imaging surface. Therefore, in the entire image 310, the image formed by the imaging lens 221 is displayed in a circle, and the other portions are displayed in black. Note that the entire image 310 is an image captured at a field angle of 200 degrees by the photographic lens 221, so that the so-called distortion aberration increases from the center toward the periphery.
  • the entire video 310 is compressed by the image compression processing unit 242 and then stored in the memory 244.
  • Microphones 311, 312 and 313 are placed around camera B200 at intervals of 120 degrees.
  • the sounds collected by the three microphones 311, 312, 313 are processed by the control unit 243 and stored in the memory 244 as digital signals. These images and sound are all stored in the memory 244 during the conference.
  • the recording operation and the recording step are completed by turning off the power of the camera device 100. It is also possible to provide a recording button that switches the start and end of recording when the power is turned off and start the recording by pressing the recording button.
  • the display of the monitor 300 is displayed by pressing the main selection button 411 to display the enlarged image 320 shown in FIG. 4 (B) from the whole display mode in which the whole image 310 shown in FIG. 4 (A) is displayed.
  • the ability to switch to the enlarged display mode and the combined display mode I for displaying the combined video 330 shown in FIG. To change the display mode, every time the main selection button 411 is pressed, the entire display mode (Fig. 4 (A)) ⁇ enlarged display mode (Fig. 4 (B)) ⁇ combined display mode I (Fig. 4 (C)) ) ⁇ Overall table
  • the display mode is switched in the order (Fig. 4 (A)). In other words, by pressing the main selection button 411, three display modes (Fig. 4 (A)), enlarged display mode (Fig. 4 (B)), and combined display mode 1 (Fig. 4 (C)) are displayed. A display mode can be selected.
  • An enlarged image 320 in the enlarged display mode shown in FIG. 4 (B) is an entire image shown in FIG. 4 (A).
  • a substantially rectangular area 320A indicated by a dotted line is cut out at the center of 310 (cutout step), and the distortion aberration caused by the photographing lens 221 is corrected according to the image of the cut out area. It is an enlarged image that has been enlarged to be displayed on the display screen.
  • the area 320A is set to include an image of a subject having a vertical field angle of 90 degrees and a horizontal field angle of 120 degrees with the optical axis of the taking lens 221 as the center.
  • the enlarged image 320 is a panoramic image that has a 90 ° field of view in the vertical direction and a 120 ° field of view in the left / right direction centered on the optical axis of the taking lens 221. Yes.
  • This enlargement process includes various enlargement processes such as interpolation using the zero-order hold method, linear interpolation method, etc., and enlargement processing to non-integer multiples and integer multiples using digital filters. Adopt treatment methods as appropriate.
  • the enlarged video 320 is generated based on image data of a captured image corresponding to the portion of the area 320A. That is, the image data of the image sensor 230 output from the image compression processing unit 242 is generated by performing image processing such as pixel data compensation processing on the image data of the portion corresponding to the region 320A. Through such image processing, the enlarged video 320 is generated as a video that has been subjected to distortion correction processing and enlargement processing for the captured image of the portion corresponding to the region 320A. The enlarged video 320 is generated based on a part of the image data of the image sensor 230, and is generated based on the extracted image data. Therefore, the enlarged video 320 is compared with the case where the enlarged video 320 is generated from the video data of the entire video 310. As a result, the display processing speeds up and the image displayed on the monitor 300 is less deteriorated.
  • the combined image 330 in the combined display mode I shown in FIG. 4 (C) is an enlarged image shown in FIG. 4 (B).
  • the reduced image 340 of the entire image 310 is displayed at the upper left of the display screen of the monitor 300.
  • the reduced video 340 is output from the image compression processing unit 242.
  • the image data of the image pickup device 230 is generated by performing pixel data thinning processing or the like. Since the reduced video 340 is generated by thinning out the pixel data, the amount of image data is smaller than the data amount of the entire video 310. As a result, the processing speed of various processes performed on the reduced video 340, such as transfer of image data of the reduced video 340, is increased.
  • the means for reducing the image data of the reduced video 340 may be performed by reducing image data such as color information in addition to the above-described pixel data thinning-out process. Further, when shooting the reduced video 340, the image data may be reduced by lowering the frame rate of the shooting.
  • the reduced image 340 can be viewed in the center of the shooting range while observing the entire range taken by the taking lens 221. The details can be seen in the enlarged video.
  • an area display 341 is displayed as a display indicating a range corresponding to the area 320A. By displaying this area display 341, the positional relationship of the enlarged image 320 in the reduced image 340 can be known.
  • each display mode of the overall display mode (Fig. 4 (A)
  • a plurality of display modes can be selected for each display mode.
  • the display mode of the monitor 300 is the entire display mode (Fig. 4 (A))
  • the sub-select button 412 is pressed once
  • the enlarged image 320 shown in Fig. 5 (A) is displayed as the display mode of the monitor 300.
  • the enlarged image 320 shown in FIG. 5 (A) is the same image as the enlarged image 320 shown in FIG. 4 (B). That is, in the entire display mode (FIG. 4A), when the sub selection button 412 is pressed once, the same enlarged image 320 as when the main operation button 411 is pressed is displayed.
  • the display mode of the monitor 300 is changed to the display of the two video power monitors 300 of the 2-split video 350 and the 2-split video 351 as shown in FIG. You can switch to the 2-split display mode displayed at the top and bottom of the screen.
  • the two-divided images 350 and 351 are images respectively corresponding to the regions 350A and 351A having a substantially fan-shaped area indicated by a dotted line in the entire image 310 illustrated in FIG. 2 split
  • the image 350 is an image corresponding to the image of the extracted region 350A (cutout step) and the divided region 351A, and the two-part video 351 is cut out of the region 351A (cutout step) and the cut-out region It is a video corresponding to the video of.
  • the areas 350A and 351A are areas that are set vertically symmetrical with respect to the center of the entire image 310, and each area is, for example, an image of 60 degrees with respect to the optical axis from the peripheral side of the photographing lens 221. It is set to include the image of the subject within the angular range and 110 ° angle of view around the optical axis.
  • the two split images 350 and 351 have an image angle of 60 degrees from the periphery of the photographing lens 221 to the optical axis side and 110 degrees in the left-right direction at a position above and below the optical axis of the photographing lens 221. It is a panoramic image that extends in the horizontal direction of the angle of view.
  • the images of the regions 350A and 351A are cut out (cutout step), and the distortion aberration caused by the photographing lens 221 is corrected and enlarged for the cut-out region images.
  • the two-divided video 350 and 351 are also obtained by performing pixel data interpolation processing on the image data of the image sensor 230 output from the image compression processing unit 242.
  • a captured image of a part corresponding to 350A and 351A is generated as an image that has been subjected to distortion correction processing and enlargement processing. Therefore, compared with the generation of the two-divided images 350 and 351 from the image data of the entire image 310, the image displayed on the monitor 300 is less deteriorated.
  • the display mode of the monitor 300 is changed to a 4-split video 360, a 4-split video 361, a 4-split video 362, and a 4-split video as shown in FIG. 3 63 4 images can be switched to the 4-split display mode displayed on the top, bottom, left and right of the monitor 300 display screen.
  • 4 harm IJ images 360, 361, 362, and 363 are the arc 360-shaped areas 360A, 361A, 362A, and 363A in the overall image 310 shown in Fig. 5 (E). This is an image that has been cut out and enlarged.
  • Quadruple video 360 corresponds to area 360A
  • quadrant video 361 corresponds to area 361A
  • quadrant video 362 corresponds to area 362A
  • quadrant video 363 corresponds to area 363A.
  • Region 360A, 361A, 362A, 363Af An area that is set at an upper angle of 45 degrees and a lower angle of 45 degrees. Is set to include images of subjects in the 90 ° field of view.
  • the four-divided images 360, 361, 362, 363 are 50 degrees from the periphery of the photographing lens 221 to the optical axis side at the positions 45 degrees above and below the left and right of the photographing lens 221. This is a panoramic image with an angle of view of 60 degrees in the horizontal direction.
  • Quadrant ij image 360, 361, 362, 363f image of region 360A, 361A, 362A, 363A
  • This is a magnified image that has been enlarged so that it will be displayed in full on the display screen of the 4th harm ij video 360, 361, 362, and 363 also have the above-mentioned magnified video 320 and the 2nd harm ij video.
  • the image data of the image sensor 230 output from the image compression processing unit 242 is subjected to pixel data complementation processing, etc., thereby corresponding to the regions 360A, 361A, 362A and 363A. Therefore, it is necessary to generate 4 divided images 360, 361, 362, 363 from the image data of the entire image 310.
  • the video displayed on the monitor 300 is less That.
  • the display on the monitor 300 again becomes the enlarged overall display mode (Fig. 5 (A)).
  • the enlarged display mode FIG. 5 (A)
  • Fig. 5 (B) ⁇ 4 split display mode I
  • Fig. 5 (C) Enlarged display mode
  • Fig. 5 (A) ⁇ ⁇ ⁇
  • the display mode of the monitor 300 is switched in this order.
  • the display mode of the monitor 300 is an enlarged display mode (Fig. 4 (B))
  • the display mode of the monitor 300 is changed to the 2-split display mode shown in Fig. 5 (B). Can be switched.
  • the display mode of the monitor 300 can be switched to the 4-split display mode shown in FIG.
  • the display mode of the monitor 300 is shown in FIG. 5 (A) in which the same video as the enlarged video 320 shown in FIG. 4 (B) is displayed. It becomes an enlarged display mode.
  • the display mode of the monitor 300 is the enlarged display mode (FIG. 4B)
  • the sub-select button 412 is pressed
  • the 2-split display mode (FIG. 5B) is displayed.
  • ⁇ 4 split display mode (Fig. 5 (C))
  • Enlarged display mode (Fig. 5 (A))
  • the display mode of the monitor 300 can be switched in this order.
  • the display mode of the monitor 300 is the combined display mode I (Fig. 4C) when the combined video 330 is displayed
  • the display mode of the monitor 300 is changed by pressing the sub-select button 412 once.
  • the combined video 370 is a video in which the reduced video 340 and the enlarged video 371 are displayed together.
  • the enlarged image 371 is an image corresponding to an area designated by an area display 342 having an arch-like substantially fan shape displayed superimposed on the reduced image 340.
  • the area display 342 is, for example, a range of an angle of view of 50 degrees with respect to the optical axis from the peripheral side of the photographing lens 221 and a range of an angle of view of 90 degrees around the optical axis in the reduced image 340. It is set to be included in the subject image. That is, the enlarged image 371 is a panoramic image having a field angle of 50 degrees from the periphery of the imaging lens 221 toward the optical axis and a field angle of 90 degrees in the left-right direction.
  • the area display 342 can be moved to an arbitrary position in the circumferential direction of the reduced image 340 by rotating the ball switch 413.
  • the area designated by the area display 342 moved to a desired position by operating the ball-shaped switch 413 is cut out (cutout step).
  • the distortion aberration is corrected and enlarged, and is displayed on the display screen of the monitor 300 (display step).
  • the area display 342 is also generated by pressing the sound following switch 414 that does not operate the ball-type switch 413. That is, when the sound following switch 414 is pressed, the control unit 243 automatically displays the area of the loudest voice direction, that is, the area display 342 in the reduced video 340 based on the stored audio signal.
  • the corresponding enlarged video 371 is automatically displayed.
  • the enlarged image 371 has a 45-degree range in the left-right direction, centered on the direction where the sound is loudest (90 degrees in the reduced image 340). However, this angle range is not 90 degrees but 60 degrees, 45 degrees, etc.
  • the direction of the loudest sound Is extracted by the control unit 243 from the arrangement positions of the three microphones 311, 312, and 313 and the volume of sound collected by them.
  • the enlarged video 371 is displayed on the region display 342 by performing pixel data interpolation processing or the like on the image data of the imaging element 230 output from the image compression processing unit 242.
  • the captured image of the corresponding part is generated as an image that has been subjected to distortion correction processing and enlargement processing. Therefore, compared to generating the enlarged video 371 from the video data of the reduced video 340 generated by thinning out the pixel data, the video displayed on the monitor 300 is less deteriorated. .
  • the reduced video 340 is displayed at the upper left of the display screen of the monitor 300.
  • the reduced image 340 shows the entire range captured by the taking lens 221 and the shooting range of the area display 342. Can see the details in the enlarged video.
  • the positional relationship of the enlarged image 371 in the reduced image 340 can be known.
  • the area display 342 and the enlarged image 371 can be changed by operating the ball switch 413.
  • the area display 342 and the enlarged video 371 change together with the direction of the sound if the direction in which the sound is loudest changes. With this configuration, even if the speaker changes, the direction of the speaker continues to be enlarged and displayed, and the entire landscape is displayed, so that the situation of the conference can be properly grasped.
  • FIG. 6 (A) Display mode power of the monitor 300
  • the display mode of the monitor 300 is also shown in Fig. 6 (B). It is possible to switch to the combined display mode III in which the image 380 is displayed.
  • This combined video 380 is a video in which two videos, a two-split video 381A and a two-split video 381B, are displayed together with the reduced video 360.
  • the two-divided images 381A and 381B are images corresponding to the areas specified by the two area displays 343A and 343B that have an arch-like substantially fan shape displayed superimposed on the reduced image 340.
  • the split video 381A corresponds to the area display 343A
  • the split video 381B corresponds to the area display 343B.
  • the area displays 343A and 343B are, for example, symmetrically on both sides of the optical axis of the photographing lens 221 and within a range of an angle of view of 60 degrees with respect to the optical axis from the peripheral side of the photographing lens 221.
  • the two-divided images 381A and 381B have an image angle of 60 degrees from the periphery of the photographing lens 221 to the optical axis side and 110 degrees in the left-right direction at a position symmetrical to the optical axis of the photographing lens 221. It is a panoramic video that spreads in the horizontal direction of the angle of view.
  • the area displays 343A and 343B may be adjacent to each other and not symmetrical with respect to the optical axis.
  • the area displays 343A and 343B can be moved to arbitrary positions in the circumferential direction of the reduced image 340 by rotating the ball switch 413.
  • Divided images 38 1A and 381B are clipped from the region specified by the region display 343A and 343B that are moved to the desired position by operating the ball switch 413 (cutout step).
  • the distortion aberration of the photographic lens 221 is corrected and enlarged, and is displayed on the entire display screen above and below the monitor 300 (display step).
  • the area indications 343A and 343B are displayed in the direction in which the sound is loudest when the sound tracking switch 414 is pressed and the sub-selection button 412 is pressed again when the sound tracking function is working.
  • the direction in which the sound is loud is automatically extracted by the control unit 243 and displayed in the reduced video 340.
  • the 2-split video 381A which is an enlarged video, is an image in the area with the loudest sound
  • the 2-split video 381B is the video in the area with the next loudest sound. Note that the 2-split video 3 81A and 381B are within the range of 55 degrees left and right from the center of the sound (110 degrees in the reduced video 340), or the angle is not 110 degrees but 90 degrees, 60 degrees, 45 It is good as degree.
  • the two-divided images 381A and 381B are pixel data complement processing for the image data of the image sensor 230 output from the image compression processing unit 242.
  • a captured image of a portion corresponding to the area displays 343A and 343B is generated as an image that has been subjected to distortion correction processing and enlargement processing.
  • the video displayed on the monitor 300 is less degraded than when the two-segment video 381A and 381B are generated from the video data of the reduced video 340 generated by thinning the pixel data. It has become a thing.
  • the reduced video 340 is displayed at the upper left of the display screen of the monitor 300.
  • the reduced image 340 shows the entire area captured by the taking lens 221.
  • the shooting range of 343A and 343B it is possible to see the detailed situation with the enlarged image.
  • the area displays 343A and 343B it is possible to know the positional relationship in the reduced image 340 of the two-divided images 381A and 381B.
  • the display mode of the monitor 300 is the above-described combined display mode III (Fig. 6B)
  • the sub-select button 412 is pressed once
  • the display mode of the monitor 300 is shown in Fig. 6C. It is possible to switch to the combined display mode IV in which the combined video 390 is displayed.
  • pressing the sub-select button 412 described above means that the sound following function is canceled, and only the ball-type switch 413 is operated. Is possible.
  • This combined video 390 is a video in which four video images of four-divided video 391A, four-divided ij video 391 B, four-divided video 391C, and four-divided video 391D are displayed together with reduced video 340.
  • Yes. 4 harm ij images 391A, 391B, 391C, 391D are in the area specified by the four area displays 344A, 344B, 344C, 344D, which are displayed in the form of a substantially fan-shaped display superimposed on the reduced image 340.
  • the corresponding video is a video in which four video images of four-divided video 391A, four-divided ij video 391 B, four-divided video 391C, and four-divided video 391D are displayed together with reduced video 340.
  • Yes. 4 harm ij images 391A, 391B, 391C, 391D are in the area specified by the four area displays 344A, 344B, 344
  • 4 split video 391A corresponds to area display 344A
  • 4 split video 391B corresponds to area display 344B
  • 4 split video 391 C corresponds to area display 344C
  • 4 split video 391 D corresponds to area display 344D It responds to.
  • Area indications 344A, 344B, 344C, and 344D are scaled / J, and in image 340, symmetrically around the optical axis of the taking lens 221 at an interval of 45 degrees, for example, from the peripheral side of the taking lens 221 to the optical axis. It is set to include images of subjects in the range of 50 degrees and 90 degrees around the optical axis.
  • the four-division video 391A, 391B, 391C, and 391D are symmetrical about the optical axis of the photographing lens 221, with an angle of view of 50 degrees from the periphery of the photographing lens 221 to the optical axis, It is a panoramic image with an angle of view of 90 degrees left and right.
  • the area displays 344A, 344B, 344C, and 344D can be moved to arbitrary positions in the circumferential direction of the reduced image 340 by rotating the ball type switch 413.
  • 4 harm ij video 391A, 391B, 391C , 391D is an area display that has been moved to the desired position by operating the ball-type switch 413.
  • 344 ⁇ , 344 ⁇ , 344C, 344D [Image from the specified region is displayed. Aberrations are corrected, and the enlarged images are enlarged so that they are displayed on the upper, lower, left, and right display screens of the monitor 300.
  • the four-divided video 391A, 391B, 391C, 391D is the same as the above-described four-delay U video 360, 361, 362, 363 for the image data of the image sensor 230 output from the image compression processing unit 242.
  • a portion of the captured image corresponding to the region display 344 ⁇ , 344 ⁇ , 344C, 344D is generated as an image that has been subjected to distortion correction processing and enlargement processing. Therefore, the video data displayed on the monitor 300 is less deteriorated than the four-division video 391A, 391B, 391C, and 391D. It has become.
  • the reduced video 340 is displayed at the upper left of the display screen of the monitor 300.
  • the reduced image 340 can be used to view the entire image captured by the taking lens 221.
  • the area display 344 ⁇ , 344 ⁇ , 344C, 344D the details can be seen in the enlarged image.
  • the display mode 1 of the monitor 300 when the display mode 1 of the monitor 300 is displayed together with the display mode 1 (FIG. 4C), when the sub-select button 412 is pressed, the display mode II
  • the display mode of the monitor 300 can be switched in the order of (Fig. 6 (A))-> combined display mode III (Fig. 6 ( ⁇ ))-> combined display mode IV (Fig. 6 (C)).
  • the combined video 330 (Fig. 4 (C)
  • the combined video 370 (Fig. 6 ( ⁇ ))
  • the combined video 380 (Fig. 6 ( ⁇ ))
  • the combined video 390 (Fig. 6 (C))
  • the circuit device 240 power, image data transfer to the monitor 300, the image data of the reduced video 340 and other video (enlarged video 320, enlarged video 371, 2 split video 381A, 381 ⁇ , (4) Harmful ij images 391A, 391B, 391C, 391D (hereinafter these images are collectively referred to as other images)) and transferred at different timings.
  • the image of the reduced video 340 Compared to transferring data and image data of another video at the same timing, the transfer time of the image data can be shortened.
  • the shooting range shot as another video is shown.
  • the image data of the reduced video 340 is displayed in real time in all frames.
  • the image data of the other video may be transferred at regular intervals, for example, every 10 frames.
  • the image data of the reduced video 340 and the image data of the other video are transferred at a predetermined ratio, for example, the transfer time of the image data of the other video with respect to the transfer time 1 of the image data of the reduced video 340.
  • the data may be transferred alternately at a ratio of 4.
  • the operation device 400 may be a personal computer.
  • the monitor 300 corresponds to a personal computer monitor
  • the operation switch 410 corresponds to a personal computer keyboard or mouse.
  • the main operation button 411 and the sub operation button 412 are respectively predetermined keys on the keyboard.
  • the movement of the area display 342, area display 343A, 343B, and area display 344A, 344B, 344C, 344D by the ball type switch 413 is performed using a mouse.
  • a camera unit 200 is connected to a server 500 via a USB cable 202, and a plurality of operation devices 400 (personal computers) are connected to the server 500.
  • the camera device 100 in this embodiment has a configuration in which a plurality of operation devices 400 (personal computers) are connected to the camera unit 200. With this configuration, the image data and audio information recorded in the memory 244A are transferred to a plurality of operation devices 400 (personal computers). )).
  • USB connection units 203 are provided on the camera unit 200 side, and a plurality of operation devices 400 (PCs) can be directly connected to the camera unit 200 without going through the server 500.
  • PCs operation devices 400
  • the connection between the camera unit 200 and the Sarno 500 or the connection between the camera unit 200 and the operation device 400 is not limited to the USB connection, and may be connected by other connection means such as wireless means. .
  • the configuration of the circuit device 240 is operated with the circuit device 240A on the camera unit 200 side as shown in FIG. Divide it into a circuit device 240B on the construction device 400 (PC) side. That is, the configuration of the circuit device 240A on the camera unit 200 side is the image signal processing unit 241, the image compression processing unit 242, the control unit 243A, the memory unit B244A, the microphone 201, and the sensor 247.
  • the configuration of the circuit device 240B on the operation device 400 (node, computer) side is configured to include a control unit 243B, a memory 244B, a coordinate conversion unit 245, and a memory 246.
  • the coordinate conversion unit 245 and the memory 246 have the same functions as those described with reference to FIG.
  • the sensor 247 is a human sensor that detects moving objects, and is an infrared sensor. In FIG. 8, only one sensor 247 is shown. In fact, four sensors 247 are arranged, one on each of the four sides of the force camera unit 200.
  • the control unit 243A, the memory 244A, the control unit 243B, and the memory 244B as a whole have the same functions as the control unit 243 and the memory 244 described in FIG.
  • the video generation processing corresponding to each display mode is mainly performed by the control unit 243B, the memory 244B, the coordinate conversion unit 245, and the memory 246 provided in the operation device 400 (personal computer).
  • an enlarged video 320 or the like (two-divided video 350 351, 4-division U video 360, 361, 362, 363, 2-split video 381A, 381B, 4-division, J video 391A, 391B, 391C, 391D.
  • these videos are collectively referred to as enlarged video 320 etc.
  • enlarged video 320 etc. Can be generated.
  • the camera unit 200 when the camera unit 200 generates various enlarged images 320 and the like based on instructions from a plurality of operation devices 400 (personal computers), the camera unit 200 displays various enlarged images 3. 20 mag will be generated. For this reason, a huge amount of processing work is executed in the camera unit 200, which takes a long time and causes problems such as an increase in the time required until an image is displayed on the operation device 400 (personal computer).
  • the controller 243B, the memory 244B, the coordinate converter 245, and the memory 246 are provided on the operation device 400 (personal computer) side, different enlarged images are independently provided in each operation device 400 (personal computer). 320 etc. can be displayed quickly.
  • the force that cuts out the area in the direction of the sound by the sound following switch 414 is performed by the four sensors 247.
  • an area in that direction is cut out to be an enlarged image.
  • the image is controlled so that the image in FIG. 6 (A) is displayed in one direction, the image in FIG. 6 (B) is displayed in two directions, and the image in FIG. 6 (C) is displayed in three directions or more.
  • the image data of the area display (original image) may be the image data corresponding to the area display exactly, but it corresponds to the area display when the enlarged video 320 or the like is generated. Image data of pixels around the part may be required. In such a case, the image data of the pixels around the area may be transferred together with the image data of the area display as appropriate. Note that in the camera device 100 shown in the first embodiment or the second embodiment, when playback or display is performed simultaneously with recording, transfer of image data, that is, an image in an enlargement area is performed. You can transfer images and / or thumbnails when sound is produced or the subject moves.
  • the reduced image 340 is displayed, and when a speaker comes out, the image of the speaker's area is cut out, and the portion is enlarged (first embodiment) or processing thereof.
  • the data is transferred to the monitor 300 side (without the second embodiment).
  • the monitor 300 displays an enlarged image and a reduced image 340 of the speaker area.
  • the data for reproduction can be transferred to the monitor 300 side in the same manner.
  • the detection signal of the sensor 247 may be received to similarly transfer image data.
  • the display content of the monitor 300 at these times is a reduced image 340 and other images including a direction in which sound is emitted or a moving object (person, etc.) (enlarged image 320, enlarged image 371, 2-divided image) 3 81A, 381B, 4 harm 'J video 391A, 391B, 391C, 391D.)
  • the area to be cut out from the entire video 310 various information such as a thing that does not move other than a sound or a moving thing, a specific person or thing designated in advance, and the like can be adopted.
  • three microphones 311, 312, 313 and four sensors 247 have been illustrated as means for detecting information.
  • one sensor, one microphone, or two or more (multiple) sensors may be used. It may be a sensor or a microphone.
  • the camera apparatus 100 is taken as an example.
  • the image data captured by the imaging means such as a camera is recorded on a recording means such as a hard disk or a DVD (Digital Versatile Disc), and the image data is processed by the circuit device 240 as an image processing apparatus. You can display it on the monitor 300.
  • the image processing device (circuit device 240) and the recording means on which the image data is recorded may be connected via a network.
  • image data recorded on a recording means separate from or integrated with the camera device 100 such as a hard disk or a DVD is subjected to image processing by the above-described image processing method by the above-described circuit device 240, and a video to the monitor 300 is recorded. May be displayed. That is, a control processing method similar to that of the circuit device 240 or the circuit device 240 is applied to the reduced image with respect to the image data captured by the wide-angle lens similar to the photographing lens 221 described above and recorded in the recording means.
  • Reduced video generation processing for generating 340 and other video (enlarged video 320, enlarged video 371) that has been corrected compared to the reduced video 340 while correcting distortion caused by the taking lens 221 for one or more parts of the captured image 2 split video 381A, 381B, 4 split video 391A, 391B, 391C, 391D.) And the reduced video 340 and the other video are displayed on the monitor 300.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

　広い範囲を撮影した画像を記録できるとともに、所定の情報に基づいて、狭い範囲の画像を拡大して表示することにより、必要な画像の内容を判別し易くすること。 　このカメラ装置は、広角の撮影レンズ２２１および撮像手段２３０を有するカメラ部２００と、被写体が発する音または／および被写体周辺の音を集めるマイク３１１，３１２，３１３と、画像処理された画像データおよびマイク３１１など集められた音を記録する処理制御手段２４０と、画像処理された画像データの映像を集音された音の再生とともに表示する表示画面を備える表示手段３００と、表示画面を操作する操作手段４００とを備える。そして、処理制御手段２４０は、撮像画像の全体を記録する処理と、表示手段３００に映像を表示する際に、集音された音またはその他の情報に基づいて音がする方向のエリアまたは特定されたエリアを、撮影画像全体から切り出して表示する。

Description

明 細 書
カメラ装置および画像記録再生方法
技術分野
[0001] 本発明は、広角の撮影レンズを用いるカメラ装置および画像記録再生方法に関す るものである。
背景技術
[0002] 従来から、銀行あるいはコンビニエンスストアの店舗等では、強盗や盗難あるいは 空き巣等の犯罪への対策として店舗内等を撮影するためのカメラ装置を有する監視 システムが用いられている。また、近年の犯罪の増加に伴い、一般家庭にも監視シス テムが普及し始めている。このような監視システムに用いられるカメラ装置には、監視 範囲を死角なく撮影できるように広レ、撮影画角で撮影できることが要求される。広レヽ 撮影画角を有するカメラ装置として全方位撮像レンズを用いたカメラ装置が、たとえ ば特許文献 1に開示されてレ、る。
[0003] 特許文献 1 :特開 2003— 303335号公報
発明の開示
発明が解決しょうとする課題
[0004] し力 ながら、広い範囲を撮影した画像は、その画像の一部、たとえば音が出てい る方向のエリアの画像のみを常に見ていたいと思っても、そのエリアは広い範囲の画 像の一部に過ぎないため、見づらい上に解像度が落ち、画像の内容が判別し難いと レ、う問題がある。このような問題は、観察したいエリアが変化する場合に顕著となる。
[0005] そこで、本発明は、広い範囲を撮影した画像を記録できるとともに、所定の情報に 基づいて、狭い範囲の画像を表示することにより、必要な画像の内容を判別し易くし たカメラ装置および画像記録再生方法を提供することを課題とする。
課題を解決するための手段
[0006] 上述の課題を解決するため、本発明のカメラ装置は、広角の撮影レンズおよび撮 影レンズを透過した被写体の光が結像する撮像手段を有するカメラ部と、被写体が 発する音または/および被写体周辺の音を集めるマイクと、撮像手段に結像した撮 像画像の画像データの画像処理を行うとともにその画像処理された画像データおよ びマイクで集められた音を記録する処理制御手段と、処理制御手段により画像処理 された画像データの映像を集音された音の再生とともに表示する表示画面を備える 表示手段と、表示画面を操作する操作手段とを備えるカメラ装置において、処理制 御手段は、撮像画像の全体を記録する処理と、表示手段に映像を表示する際に、集 音された音またはその他の情報に基づいて音がする方向のエリアまたは特定された エリアを、撮影画像全体から切り出して表示する処理を行ってレ、る。
[0007] カメラ装置をこのような構成とすることにより、広い範囲を撮影した画像を記録できる とともに、所定の情報に基づいて、狭い範囲の画像を表示することにより、必要な画 像の内容を判別し易くなる。
[0008] 他の発明は、上述の発明に加え、処理制御手段は、撮像画像の全体が表示画面 の一部の領域に表示され、かつ画像のデータ量が低減処理された縮小映像を生成 する縮小映像生成処理と、撮像画像の 1または複数の部分について撮影レンズによ る歪みを補正するとともに縮小映像に比べて拡大された拡大映像であって切り出さ れた映像を生成する拡大映像生成処理と、縮小映像および拡大映像を表示画面に 表示する制御と、を行なうこととしている。この発明では、歪みが補正された拡大映像 により撮影範囲の細部についての映像を観ることができるとともに、縮小映像により撮 影範囲の全体の様子を観ることができる。
[0009] また、他の発明は、上述の発明にカ卩え、縮小映像には、拡大映像に対応する範囲 を示す表示が行われることとする。カメラ装置をこのような構成とすることにより、縮小 映像に、拡大映像に対応する範囲を示す表示が行われるため、拡大映像の縮小映 像内における位置関係を容易に確認することができる。
[0010] また、他の発明は、上述の発明にカ卩え、切り出されるエリアは、音のする方向であつ て音の移動によってそのエリアが変化する変化エリアと、特定方向に固定された方向 固定エリアとの少なくとも 2つのエリアであって、そのエリアが表示画面に同時に表示 されるものとしてレ、る。カメラ装置をこのような構成とすることにより、たとえば、会議の 場合、黒板方向を固定エリアとし、発言者を変化エリアとすることで、会議の様子を適 切に表示できると共に、全てのエリアを記録として保存できることとなる。 [0011] また、本発明の画像記録再生方法は、広角の撮影レンズによって撮影された撮像 画像の全体を記録すると共にマイクで集音された音を記録する記録ステップと、撮影 画像全体力 集音された音に基づいてその音がする方向のエリアを切り出す切り出 しステップと、切り出されたエリアの限定画像を歪み補正し、音の再生と共に表示する 表示ステップと、を有している。
[0012] この画像記録再生方法では、広い範囲を撮影した画像を記録できるとともに、所定 の音に基づいて、狭い範囲の画像を表示することにより、音の発生場所である画像 の内容を判別し易くなると共に、音の発生状況を容易に確認できる。
[0013] また、他の発明は、上述の発明にカ卩え、撮影画像全体は 360度全周を有する円形 画像であり、限定画像は補間処理等によって拡大された拡大画像とすることとしてい る。このような方法を採用することにより、拡大映像用の画像データを、撮像画像の画 像データのうち、拡大映像に対応する部分のみの画像データとすることができ、表示 する画像データの転送時間を短くすることができる。このため、拡大映像の表示を円 滑に行うことができる。また、全体の画像が記録されているので、後に、適宜、音がす る方向のエリアを表示できる。
発明の効果
[0014] 本発明のカメラ装置および画像記録再生方法によれば、広い範囲を撮影した画像 を記録できるとともに、所定の情報に基づいて、狭い範囲の画像を表示することがで きる。このため、観ようと思えば、いつでも撮影範囲の全体を観ることができるとともに 、必要となる部分を判別し易い画像として観ることができる。
図面の簡単な説明
[0015] [図 1]本発明の第 1の実施の形態に係るカメラ装置の全体構成を示す図である。
[図 2]図 1のカメラ装置のカメラ部の構成を示す斜視図である。
[図 3]図 1のカメラ装置の構成を示すブロック図である。
[図 4]図 1のカメラ装置における映像の表示態様を示す図である。
[図 5]図 1のカメラ装置における映像の他の表示態様を示す図である。
[図 6]図 1のカメラ装置における映像の他の表示態様を示す図である。
[図 7]本発明の第 2の実施の形態に係るカメラ装置の構成を示す図である。 園 8]図 7のカメラ装置の構成を示すブロック図である。 符号の説明
〇
〇
カメラ装置
201 ·· マイク
221 -- 撮影レンズ
230 ·■ 撮像素子 (撮像手段）
240 ·· 回路装置 (処理制御手段)
300 ·· モニタ（表示画面）
311, 312, 313 … マイク
320 ·· 拡大映像
340 ·· 縮小映像
341 ·· 領域表示
343A … 領域表示
343B ·· 領域表示
344A … 領域表示
344B -- 領域表示
344C ·■· 領域表示
344D … 領域表示
350 ·· 2分割映像 (拡大映像）
351 ·■· 2分割映像 (拡大映像）
360 ·■· 4分割映像 (拡大映像）
361 ·■· 4分割映像 (拡大映像）
362 ·■· 4分割映像 (拡大映像）
363 ·■· 4分割映像 (拡大映像）
381A ··· 2分割映像 (拡大映像）
381B ·· 2分割映像 (拡大映像）
391A ··· 4分割映像 (拡大映像）
391B ·· 4分割映像 (拡大映像） 391C … 4分割映像 (拡大映像）
391D … 4分割映像 (拡大映像）
400 … 操作装置 (操作手段）
420 ·■· スピーカ
発明を実施するための最良の形態
[0017] (第 1の実施の形態）
本発明の第 1の実施の形態に係るカメラ装置 100について、図 1から図 6を参照し ながら説明する。なお、画像記録再生方法については、カメラ装置 100の動作と併せ て説明することとする。
[0018] このカメラ装置 100は、会議用のカメラまた家庭用や事務所用の監視カメラとして使 用できる他、製品検査のための撮影を行うカメラ装置としても使用することができる。 また、インターネット等の通信手段を介して使用することもできる。
[0019] 図 1にカメラ装置 100の全体的な外観の構成を示す。このカメラ装置 100は、カメラ 咅 200、表示手段としてのモニタ 300、 旨向十生を有してレヽる 3つのマイク 311 , 312, 313および操作手段としての操作装置 400を有している。この実施の形態において は、操作装置 400にモニタ 300がー体に取り付けられている。モニタ 300には、カメラ 部 200で撮影した画像が表示される。操作装置 400は、カメラ装置 100の電源スイツ チゃモニタ 300に表示される表示内容を切り替える等、カメラ装置 100を操作するた めの操作スィッチ 410やスピーカ 420等が備えられている。
[0020] 次に、図 2を参照しながらカメラ部 200の構成を説明する。カメラ部 200は、図面中 、点線にて図示をする外装筐体 210、光学系 220、撮像手段としての撮像素子 230 および回路装置 240を備えている。外装筐体 210は、たとえば、 3cm四方の略直方 体を呈する小型の形態となっている。光学系 220は、撮影レンズ 221およびレンズ鏡 筒 222を有している。
[0021] 光学系 220は、レンズ鏡筒 222が外装筐体 210内に収容され、撮影レンズ 221は 外装筐体 210の外部に露出させられている。撮影レンズ 221は、 180度以上（約 200 度）の広レ、画角の光学特性を有するレ、わゆる広角レンズである。この撮影レンズ 221 は、被写体光の入射側となる前面が通常の凸レンズ程度の膨らみとなっており、平面 に近いものとなっている。し力し、レンズ内部のガラスの処理に工夫を施し、 180度以 上の画角を有し、かつ光軸周りの全周囲、すなわち 360度の全周囲に亘つて撮影可 能となっている。
[0022] 撮影レンズ 221の結像位置には、撮像素子 230が配設されている。撮像素子 230 としては、たとえば、 CMOS (Complementary Metal OxideSemiconductor) を使用する。 CMOSの代わりに CCD (Charge Coupled Device)やその他の光 電変換素子を使用してもよい。
[0023] レンズ鏡筒 222には、ピント調整ノブ 223が設けられている。レンズ鏡筒 222は、ピ ント調整ノブ 223を手指で摘んで光軸の周りに回転させると、撮像素子 230に対して 、光軸方向に進退するように構成されている。したがって、ピント調整ノブ 223により、 撮影レンズ 221の結像位置が撮像素子 230の撮像面になるように、撮影レンズ 221 の光軸方向の位置を調整することができる。
[0024] この実施の形態においては、撮影レンズ 221による結像画像は、撮像素子 230の 撮像面内に全て収まるように撮像素子 230の撮像面の大きさ、および撮影レンズ 22 1と撮像素子 230との配置が構成されている。したがって、撮像素子 230の撮像面に は、撮影レンズ 221の形状に対応して円形の画像が結像することになる。
[0025] また、カメラ部 200は、マイク 201、通信手段としての USB (Univereal Serial B us)ケーブル 202が接続する USB接続部 203、およびオーディオやビデオの信号を 出力する AV信号出力部 204とを有している。
[0026] マイク 201やマイク 311 , 312, 313は、撮影を行う範囲の場所の音を取り込むもの である。すなわち、マイク 201やマイク 31 1 , 312, 313は、被写体から発する音や被 写体周辺の音を収集するものである。カメラ部 200と操作装置 400とは、 USB接続部 203に接続される USBケーブル 202により相互に通信可能に接続されている。 AV 信号出力部 204は、カメラ部 200側の画像データやマイク 201やマイク 311 , 312, 3 13で集音した音声信号をモニタ 300やスピーカ 420に出力する場合に使用される。
[0027] 図 3は、処理制御手段となる回路装置 240の構成およびカメラ装置 100の全体的な 構成をブロック図として示している。この図 3を参照しながら、カメラ装置 100の動作等 について説明する。また、回路装置 240は、画像処理装置としても構成され得る。 [0028] 撮影レンズ 221を透過した被写体の光は、撮像素子 230の撮像面に結像し、この 結像画像に基づく画像信号が撮像素子 230から出力される。撮像素子 230から出力 された画像信号は、回路装置 240に入力する。この回路装置 240は、マイク 201の 他に、画像信号処理部 241、画像圧縮処理部 242、制御部 243、この制御部 243に ついて備えられるメモリ 244、座標変換部 245、およびこの座標変換部 245について 備えられるメモリ 246を備えている。
[0029] 撮像素子 230から出力された画像信号は、画像信号処理部 241に入力する。この 画像信号処理部 241において、撮像素子 230からの画像信号に対して、カラー処理 等の所定の画像処理を施す。
[0030] 画像圧縮処理部 242においては、画像信号処理部 241で画像処理を施された画 像信号の画像データを圧縮処理し、画像データのデータ量が減らされた圧縮画像デ ータを生成する。画像データの圧縮処理は、たとえば、 JPEG (Joint Photographi c Experts Group)を用レヽて打つ。
[0031] 制御部 243は、モニタ 300に表示される撮影レンズ 221の撮影映像の表示態様に 応じた映像の生成処理や音声信号の再生を含めてカメラ装置 100の動作の制御を 司る。この実施の形態のカメラ装置 100は、後述する図 4、図 5および図 6に示すよう に、撮影レンズ 221の撮影映像を、映像の内容が異なる複数の表示態様を選択して モニタ 300に表示することができる。制御部 243は、撮影画像の画像データから各表 示態様にぉレ、て表示される映像を生成する画像処理や音声処理を行う。制御部 24 3は、たとえば CPU (Central Processing Unit)により構成する。
[0032] メモリ 244は、カメラ装置 100の各部を動作させるためのプログラムの他、このプログ ラムを実行するためのワークメモリを備えている。たとえば、画像信号処理部 241や画 像圧縮処理部 242における処理において、このメモリ 244が活用されることになる。ま た、メモリ 244は、マイク 201やマイク 311 , 312, 313で集音した音信号を記録すると ともに画像圧縮処理部 242で圧縮処理された全体画像（円形の画像）を記録する。 なお、この実施の形態では、 3つのマイク 311， 312, 313で集音した音に基づいて、 後述する音の方向を判定しているが、マイク 201が拾う音を含めて、音の方向を検出 するようにしても良い。 [0033] 座標変換部 245は、制御部 243とともに、画像圧縮処理部 242からの画像データ に基づいて、各表示態様に応じた映像を生成する画像処理を行う。この座標変換部 245は、撮像素子 230の撮像面上の撮像画像を、各表示態様において表示される 映像になるように画像処理してモニタ 300に表示する際に、撮像面における撮像画 像の座標位置をモニタ 300における映像の座標位置に変換する機能を有する。メモ リ 246は、座標変換部 245を用いて画像処理を行う際のワークメモリとなっている。
[0034] モニタ 300は、回路装置 240から出力された画像信号に基づく映像を表示する。た とえば、液晶表示装置、 CRT表示装置、あるいはプラズマディスプレ装置等から構成 される。
[0035] 操作装置 400には、カメラ装置 100の電源スィッチやモニタ 300に表示される表示 内容を切り替える等のカメラ装置 100を操作するための操作スィッチ 410やスピーカ 420等（図 1参照）が備えられる。この操作スィッチ 410の操作内容に基づいて、制御 部 243を介してカメラ装置 100が動作する。この操作スィッチ 410の指示は、制御部 243に送信され、所定の動作が実行される。なお、この操作スィッチ 410は、後述す る領域表示の位置の指定等を行う際に使用する。
[0036] 操作スィッチ 410には、モニタ 300に表示される撮影レンズ 221による映像の表示 態様を切り替える主選択釦 411と副選択釦 412が備えられている。以下に、記録する 際や再生する際に、これらの主選択釦 411と副選択釦 412の押下により切り替えられ るモニタ 300の映像の表示態様と表示される映像の内容について説明する。
[0037] カメラ装置 100の電源をオフの状態力 オンにされた後、撮影レンズ 221の撮影映 像が表示されるときの最初の表示態様は、図 4 (A)に示す全体映像 310が表示され る全体表示態様となる。この実施の形態では、カメラ部 200は、たとえば、会議室の 中央の机の上に設置されているものとし、図面に示されている全体映像 310におい て、紙面の上下方向がそれぞれ会議室の前後方向に、また紙面の左右方向が、会 議室の左右方向に対応しているものとして、以下の説明を行なう。また、以下に説明 する映像の内容を示す図において、映像となっている被写体の前後左右方向をそれ ぞれ、（上）（下）（左）（右）として示す。 （中）は、前後左右の真ん中、すなわち光軸お よび光軸の周辺の位置を示す。 [0038] この全体映像 310は、撮像素子 230の撮像面に結像した撮影レンズ 221の結像が そのままの形で表示されたものとなっている。上述したように、撮影レンズ 221の結像 の大きさは、撮像素子 230の撮像面内に収まるようになっている。そのため、撮像素 子 230の撮像面における撮影レンズ 221の結像の輪郭は円形になり、結像部分以外 の撮像面の部分は、光のあたる量が少ない暗い部分となる。この実施の形態では、 撮像面の撮影レンズ 221の結像部分以外の部分については、画素データを輝度 0の データとして扱うこととしている。そのため、全体映像 310は、撮像レンズ 221の結像 の映像が円形に表示され、それ以外の部分については黒色に表示されたものとなつ ている。なお、この全体映像 310は、撮影レンズ 221により 200度の画角で撮影した 映像となっているため、中心から周囲に向かっていわゆる歪曲収差が強くなる映像に なっている。
[0039] この全体映像 310は、画像圧縮処理部 242で圧縮され、その後、メモリ 244に保存 される。マイク 311 , 312, 313は、カメラ咅 B200の周囲に 120度間隔で酉己置される。 3 つのマイク 311 , 312, 313で収集された音は、制御部 243で信号処理されデジタル 信号としてメモリ 244に保存される。これらの画像と音声は、会議が行われている間、 全てメモリ 244に保存される。なお、会議が終了した際、カメラ装置 100の電源をオフ とすることで記録動作、記録ステップが終了する。なお、記録開始と終了を電源のォ ンオフではなぐ記録釦を設け、その記録釦の押下げによって記録開始と終了を行う ようにしても良い。
[0040] 記録終了後、会議の風景を再生する際、カメラ装置 100の電源をオンまたは再生 釦（図示省略）の押下によって、図 4 (A)に示す全体映像 310がモニタ 300に表示さ れる。以下に、再生時の動作、すなわち、切り出しステップと、表示ステップとを説明 する。
[0041] モニタ 300の表示は、主選択釦 411を押下することにより、図 4 (A)に示す全体映 像 310を表示する全体表示態様から図 4 (B)に示す拡大映像 320を表示する拡大 表示態様および図 4 (C)に示す併せ映像 330を表示する併せ表示態様 Iに切り替え ること力 Sできる。表示態様の切り替えは、主選択釦 411を押下する度に順に、全体表 示態様 (図 4 (A) )→拡大表示態様 (図 4 (B) )→併せ表示態様 I (図 4 (C) )→全体表 示態様（図 4 (A) )…の順に切り替わる。すなわち、主選択釦 411を押下することによ り、全体表示態様（図 4 (A) )、拡大表示態様（図 4 (B) )および併せ表示態様 1 (図 4 ( C) )の 3つの表示態様を選択することができる。
[0042] 図 4 (B)に示す拡大表示態様における拡大映像 320は、図 4 (A)に示す全体映像
310の中央部に点線で示す略矩形の領域 320Aが切り出され (切り出しステップ）、 その切り出された領域の映像にっレ、て、撮影レンズ 221による歪曲収差が補正処理 されるとともに、モニタ 300の表示画面レ、つぱレ、に表示されるように拡大処理された 拡大映像となっている。領域 320Aは、撮影レンズ 221の光軸を中心にして、たとえ ば、上下方向の画角が 90度、左右方向の画角が 120度の範囲にある被写体の映像 を含むように設定されている。すなわち、拡大映像 320の映像は、撮影レンズ 221の 光軸を中心にして、上下方向に 90度の画角で、かつ、左右方向に 120度の画角の 左右方向に広がるパノラマ映像となっている。なお、以下の拡大処理を含めて、この 拡大処理は、零次ホールド法、線形補間法、等による補間処理、デジタル 'フィルタ を用いた非整数倍や整数倍への拡大処理など、種々の拡大処理法を適宜採用する こと力 Sできる。
[0043] この拡大映像 320は、領域 320Aの部分に対応する撮像画像の画像データに基づ いて生成される。すなわち、画像圧縮処理部 242から出力される撮像素子 230の画 像データのうち、領域 320Aに対応する部分の画像データに対して画素データの補 完処理等の画像処理を行い生成される。このような画像処理により、拡大映像 320は 、領域 320Aに対応する部分の撮像画像について、歪曲収差の補正処理と拡大処 理が行われた映像として生成される。なお、拡大映像 320は、撮像素子 230の画像 データの一部が切り出され、その切り出された画像データに基づいて生成されるので 、全体映像 310の映像データから拡大映像 320を生成するのに比べて、表示処理が 高速化されると共に、モニタ 300に表示される映像の劣化は少ないものとなっている
[0044] 図 4 (C)に示す併せ表示態様 Iにおける併せ映像 330は、図 4 (B)に示す拡大映像
320に加えてモニタ 300の表示画面の左上に、全体映像 310の縮小映像 340を併 せて表示した映像となっている。縮小映像 340は、画像圧縮処理部 242から出力さ れる撮像素子 230の画像データに対して、画素データの間引き処理等を行い生成 する。縮小映像 340は、画素データの間引き処理により生成されるので、画像データ の量は、全体映像 310のデータ量に比べて小さいものとなる。この結果、縮小映像 3 40の画像データの転送等、縮小映像 340について行う諸処理の処理速度が高速と なる。なお、縮小映像 340の画像データを減らす手段は、上述の画素データの間引 き処理の他、色情報等の画像データを減らすことにより行ってもよい。また、縮小映像 340について撮影を行う際、その撮影のフレームレートを下げることにより、画像デー タを減らすようにしてもよい。
[0045] 拡大映像 320と縮小映像 340とを 1つの画面上に併せて表示することにより、縮小 映像 340により、撮影レンズ 221により撮影されている範囲の全体の様子を観ながら 、撮影範囲の中央部については、拡大された映像により詳細な様子を観ることができ る。また、縮小映像 340には、領域 320Aに対応する範囲を示す表示として領域表示 341が重ねて表示される。この領域表示 341が表示されることにより、拡大映像 320 の縮小映像 340における位置関係を知ることができる。
[0046] 全体表示態様（図 4 (A) )、拡大表示態様（図 4 (B) )あるいは併せ表示態様 I (図 4 ( C) )の各表示態様において、副選択釦 412を押下すると、以下に説明するように、各 表示態様毎に、さらに複数の表示態様を選択することができる。
[0047] モニタ 300の表示態様が全体表示態様（図 4 (A) )のときに、副選択釦 412を一度 押下すると、モニタ 300の表示態様を図 5 (A)に示す拡大映像 320を表示する拡大 表示態様に切り替えることができる。この図 5 (A)に示す拡大映像 320は、図 4 (B)に 示す拡大映像 320と同一の映像である。すなわち、全体表示態様（図 4 (A) )のとき に、副選択釦 412を一度押下したときには、主操作釦 411を押下したときと同一の拡 大映像 320が表示される。
[0048] そして、もう一度、副選択釦 412を押下すると、モニタ 300の表示態様を、図 5 (B) に示すように、 2分割映像 350と 2分割映像 351の 2つの映像力 モニタ 300の表示 画面の上下に表示される 2分割表示態様に切り替えることができる。
[0049] 2分割映像 350， 351は、図 5 (D)に示す全体映像 310において、点線で示すァー チ状の略扇型を呈する領域 350A, 351 Aにそれぞれ対応する映像である。 2分割 映像 350は、領域 350Aが切り出され (切り出しステップ）、その切り出された領域の 映像に対応した映像であり、 2分割映像 351は、領域 351Aが切り出され (切り出しス テツプ）、その切り出された領域の映像に対応した映像となっている。
[0050] 領域 350A， 351Aは、全体映像 310の中心に対して上下対称に設定される領域 であって、各領域は、たとえば、撮影レンズ 221の周縁側から光軸に対して 60度の 画角の範囲で、かつ、光軸の周りに 110度の画角の範囲にある被写体の映像を含む ように設定されている。すなわち、 2分割映像 350, 351の映像は、撮影レンズ 221の 光軸に対して上下の位置において、撮影レンズ 221の周縁から光軸側に 60度の画 角で、かつ、左右方向に 110度の画角の左右方向に広がるパノラマ映像となってい る。
[0051] 2分割映像 350， 351は、領域 350A, 351Aの映像が切り出され（切り出しステップ )、その切り出された領域の映像について、撮影レンズ 221による歪曲収差が補正処 理されると共に、拡大処理され、モニタ 300の上下のそれぞれの表示画面いっぱい に表示される（表示ステップ)。 2分割映像 350, 351も、上述した拡大映像 320と同 様に、画像圧縮処理部 242から出力される撮像素子 230の画像データに対して、画 素データの補完処理等を行うことにより、領域 350A, 351Aに対応する部分の撮像 画像について、歪曲収差の補正処理と拡大処理が行われた映像として生成される。 そのため、全体映像 310の映像データから 2分割映像 350, 351を生成するのに比 ベて、モニタ 300に表示される映像の劣化は少ないものとなっている。
[0052] さらに、もう一度、副選択釦 412を押下すると、モニタ 300の表示態様を、図 5 (C) に示すように、 4分割映像 360、 4分割映像 361、 4分割映像 362および 4分割映像 3 63の 4つの映像が、モニタ 300の表示画面の上下左右に表示される 4分割表示態様 に切り替えること力 Sできる。 4分害 IJ映像 360， 361 , 362, 363は、図 5 (E)に示す全体 映像 310において、点線で示すアーチ状の略扇型を呈する領域 360A， 361A, 36 2A, 363Aのエリアがそれぞれ切り出され、拡大処理された映像である。
[0053] 4分割映像 360は領域 360Aに、 4分割映像 361は領域 361Aに、 4分割映像 362 は領域 362Aに、そして、 4分割映像 363は領域 363Aにそれぞれ対応している。領 域 360A, 361A, 362A, 363Afま、全体映像 310の中 、 ίこ対称 (こ左右の斜め 45 度上方と斜め 45度下方に設定される領域であって、各領域は、たとえば、撮影レン ズ 221の周縁側から光軸に対して 50度の画角の範囲で、かつ、光軸の周りに 90度 の画角の範囲にある被写体の映像を含むように設定されてレ、る。
[0054] すなわち、 4分割映像 360， 361， 362, 363の映像は、撮影レンズ 221の左右の 斜め 45度上方と斜め 45度下方の位置において、撮影レンズ 221の周縁から光軸側 に 50度の画角で、かつ、左右方向に 60度の画角のパノラマ映像となっている。
[0055] 4分害 ij映像 360， 361， 362, 363fま、領域 360A, 361A, 362A, 363Aの映像 (こ ついて、撮影レンズ 221の歪曲収差が補正処理されるとともに、モニタ 300の上下の それぞれの表示画面にいっぱいに表示されるように拡大処理された拡大映像となつ てレヽる。 4分害 ij映像 360， 361 , 362, 363も、上述した拡大映像 320あるレヽは 2分害 ij 映像 350, 351と同様に、画像圧縮処理部 242から出力される撮像素子 230の画像 データに対して、画素データの補完処理等を行うことにより、領域 360A, 361A, 36 2A, 363Aに対応する部分の撮像画像について、歪曲収差の補正処理と拡大処理 が行われた映像として生成される。そのため、全体映像 310の映像データから 4分割 映像 360, 361, 362, 363を生成するのに 匕ベて、モニタ 300に表示される映像の 劣化は少なレ、ものとなってレ、る。
[0056] この 4分割表示態様の表示態様に続いて、副選択釦 412をさらにもう一度押下する と、モニタ 300の表示は、再び、拡大全体表示態様（図 5 (A) )となる。以上のように、 モニタ 300の表示態様が全体表示態様（図 4 (A) )のときに、副選択釦 412を押下す ると、押下する度に、拡大表示態様（図 5 (A) )→2分割表示態様（図 5 (B) )→4分割 表示態様 I (図 5 (C) )→拡大表示態様（図 5 (A) ) · · ·の順にモニタ 300の表示態様が 切り替わる。
[0057] モニタ 300の表示態様が拡大表示態様（図 4 (B) )のときに、副選択釦 412を一度 押下すると、モニタ 300の表示態様を図 5 (B)に示す 2分割表示態様に切り替えるこ とができる。さらに、もう一度、副選択釦 412を押下すると、モニタ 300の表示態様を 図 5 (C)に示す 4分割表示態様に切り替えることができる。この表示態様に続いて、 副選択釦 412をさらにもう一度押下すると、モニタ 300の表示態様は、図 4 (B)に示 す拡大映像 320と同一の映像が表示される図 5 (A)に示す拡大表示態様となる。 [0058] すなわち、モニタ 300の表示態様が拡大表示態様（図 4 (B) )のときに、副選択釦 4 12を押下すると、押下する度に、 2分割表示態様（図 5 (B) )→4分割表示態様（図 5 ( C) )→拡大表示態様（図 5 (A) ) · · ·の順にモニタ 300の表示態様を切り替えることが できる。
[0059] モニタ 300の表示態様が、併せ映像 330が表示されてレ、る併せ表示態様 I (図 4 (C ) )のときに、副選択釦 412を一度押下すると、モニタ 300の表示態様を、図 6 (A)に 示す併せ映像 370が表示される併せ表示態様 IIに切り替えることができる。併せ映像 370は、縮小映像 340と拡大映像 371とが併せて表示される映像となっている。拡大 映像 371は、縮小映像 340に重ねて表示されるアーチ状の略扇型を呈する領域表 示 342により指定する領域に対応する映像である。
[0060] 領域表示 342は、縮小映像 340において、たとえば、撮影レンズ 221の周縁側から 光軸に対して 50度の画角の範囲で、かつ、光軸の周りに 90度の画角の範囲にある 被写体の映像に含むように設定されている。すなわち、拡大映像 371の映像は、撮 影レンズ 221の周縁から光軸側に 50度の画角で、かつ、左右方向に 90度の画角の パノラマ映像となっている。
[0061] この領域表示 342は、ボール型スィッチ 413を回転操作することにより、縮小映像 3 40の周方向の任意の位置に移動できるようになっている。拡大映像 371は、ボール 型スィッチ 413を操作して所望の位置に移動させられた領域表示 342により指定さ れた領域が切り出され (切り出しステップ）、その切り出された領域の映像について、 撮影レンズ 221の歪曲収差が補正処理されると共に、拡大処理され、モニタ 300の 表示画面にレ、つぱレ、に表示される（表示ステップ）。
[0062] また、この領域表示 342は、ボール型スィッチ 413を操作するのではなぐ音追随ス イッチ 414を押すことによつても生成される。すなわち、音追随スィッチ 414が押され ると、制御部 243は、保存されていた音声信号に基づいて最も大きな声の方向のエリ ァ、すなわち領域表示 342を縮小映像 340中に、自動表示すると共に、対応する拡 大映像 371を自動表示する。拡大映像 371の映像は、最も音が大きくなる方向を中 心として左右方向に 45度 (縮小映像 340で計 90度）の範囲とされている。しかし、こ の角度範囲を 90度ではなく 60度、 45度等にしても良レ、。なお、音の最も大きな方向 の抽出は、 3つのマイク 311 , 312, 313の配置位置とそれらが集音した音の大きさと から、制御部 243によって算出される。
[0063] 拡大映像 371は、拡大映像 320と同様に、画像圧縮処理部 242から出力される撮 像素子 230の画像データに対して、画素データの補完処理等を行うことにより、領域 表示 342に対応する部分の撮像画像について、歪曲収差の補正処理と拡大処理が 行われた映像として生成される。そのため、画素データが間引き処理されて生成され た縮小映像 340の映像データから拡大映像 371を生成するのに比べて、モニタ 300 に表示される映像の劣化は少なレ、ものとなってレ、る。
[0064] 縮小映像 340は、モニタ 300の表示画面の左上に表示されている。拡大映像 371 と縮小映像 340とを 1つの画面上に併せて表示することにより、縮小映像 340により、 撮影レンズ 221により撮影されている範囲の全体の様子を観ながら、領域表示 342 の撮影範囲については、拡大された映像により詳細な様子を観ることができる。また、 領域表示 342を表示することにより、拡大映像 371の縮小映像 340における位置関 係を知ることができる。この領域表示 342と拡大映像 371は、ボール型スィッチ 413を 操作することで、変化させることができる。
[0065] また、音追随スィッチ 414を押下したときには、この領域表示 342と拡大映像 371は 、音が最も大きくなる方向が変われば、その音の方向に合わせて共に変化する。この 構成では、発言者が変わってもその発言者の方向を拡大して表示し続けるとともに全 体風景を表示するので、会議の状況を適切に把握できる。
[0066] モニタ 300の表示態様力 上述の併せ表示態様 II (図 6 (A) )のときに、副選択釦 4 12を一度押下すると、モニタ 300の表示態様を図 6 (B)に示す併せ映像 380が表示 される併せ表示態様 IIIに切り替えることができる。この併せ映像 380は、縮小映像 34 0に併せて、 2分割映像 381Aと 2分割映像 381Bの 2つの映像が表示される映像とな つている。
[0067] 2分割映像 381A， 381Bは、縮小映像 340に重ねて表示されるアーチ状の略扇型 を呈する 2つの領域表示 343A, 343Bにより指定される領域に対応する映像である 。 2分割映像 381Aは領域表示 343Aに対応し、 2分割映像 381Bは領域表示 343B に対応している。 [0068] 領域表示 343A, 343Bは、縮小映像 340において、たとえば、撮影レンズ 221の 光軸の両側に対称に、撮影レンズ 221の周縁側から光軸に対して 60度の画角の範 囲で、かつ、光軸の周りに 110度の画角の範囲にある被写体の映像を含むように設 定されている。すなわち、 2分割映像 381A， 381Bの映像は、撮影レンズ 221の光 軸に対して対称の位置において、撮影レンズ 221の周縁から光軸側に 60度の画角 で、かつ、左右方向に 110度の画角の左右方向に広がるパノラマ映像となっている。 この領域表示 343A， 343Bは、光軸に対し、対称ではなぐ互いに隣接する位置の ものとしても良い。
[0069] この領域表示 343A， 343Bは、ボール型スィッチ 413を回転操作することにより、 縮小映像 340の周方向の任意の位置に移動できるようになつている。 2分割映像 38 1A, 381Bは、ボール型スィッチ 413を操作して所望の位置に移動させられた領域 表示 343A, 343Bにより指定された領域の映像を切り出し (切り出しステップ）、その 切り出した部分について、撮影レンズ 221の歪曲収差が補正処理されると共に、拡 大処理され、モニタ 300の上下のそれぞれの表示画面いっぱいに表示される（表示 ステップ)。
[0070] また、領域表示 343A, 343Bは、音追随スィッチ 414が押下され、音追随機能が 働いているときに、副選択釦 412が再度押下されると、音が最も大きい方向と、次に 音が大きい方向とが制御部 243によって自動的に抽出され、縮小映像 340中に表示 される。拡大映像となる 2分割映像 381Aは、最も音が大きい方向のエリアの画像で、 2分割映像 381Bは、次に音が大きい方向のエリアの映像となる。なお、 2分割映像 3 81A, 381Bは、それぞれ音の中心から左右 55度（縮小映像 340で計 110度）の範 囲とされているか、その角度を 110度ではなぐ 90度、 60度、 45度等としても良い。
[0071] 2分割映像 381A， 381Bは、上述した 2分割映像 350， 351と同様に、画像圧縮処 理部 242から出力される撮像素子 230の画像データに対して、画素データの補完処 理等を行うことにより、領域表示 343A， 343Bに対応する部分の撮像画像について 、歪曲収差の補正処理と拡大処理が行われた映像として生成される。そのため、画 素データが間引き処理されて生成された縮小映像 340の映像データから 2分割映像 381A, 381Bを生成するのに比べて、モニタ 300に表示される映像の劣化は少ない ものとなっている。
[0072] 縮小映像 340は、モニタ 300の表示画面の左上に表示されている。 2分割映像 38 1A, 381Bと縮小映像 340とを 1つの画面上に併せて表示することにより、縮小映像 340により、撮影レンズ 221により撮影されている範囲の全体の様子を観ながら、領 域表示 343A, 343Bの撮影範囲については、拡大された映像により詳細な様子を 観ること力 Sできる。また、領域表示 343A, 343Bを表示することにより、 2分割映像 38 1A, 381Bの縮小映像 340における位置関係を知ることができる。
[0073] モニタ 300の表示態様が、上述の併せ表示態様 III (図 6 (B) )のときに、副選択釦 4 12を一度押下すると、モニタ 300の表示態様を図 6 (C)に示す併せ映像 390が表示 される併せ表示態様 IVに切り替えることができる。なお、音追随スィッチ 414が押下さ れ、音追随機能が働いているときの上述の副選択釦の 412の押下は、音追随機能が 解除されることを意味し、ボール型スィッチ 413の操作のみが可能となる。
[0074] この併せ映像 390は、縮小映像 340に併せて、 4分割映像 391A、 4分害 ij映像 391 B、 4分割映像 391C、 4分割映像 391Dの 4つの映像が表示される映像となっている 。 4分害 ij映像 391A, 391B, 391C, 391Dは、縮小映像 340に重ねて表示されるァ ーチ状の略扇型を呈する 4つの領域表示 344A, 344B, 344C, 344Dにより指定さ れる領域に対応する映像である。
[0075] 4分割映像 391Aは領域表示 344Aに対応し、 4分割映像 391Bは領域表示 344B に対応し、 4分割映像 391 Cは領域表示 344Cに対応し、 4分割映像 391 Dは領域表 示 344Dに対応してレヽる。領域表示 344A, 344B, 344C, 344Dは、縮/ J、映像 340 において、撮影レンズ 221の光軸の回りに対称に 45度の間隔で、たとえば、撮影レ ンズ 221の周縁側から光軸に対して 50度の画角の範囲で、かつ、光軸の周りに 90 度の画角の範囲にある被写体の映像を含むように設定されてレ、る。
[0076] すなわち、 4分割映像 391A， 391B, 391C, 391Dの映像は、撮影レンズ 221の 光軸の周りに対称に、撮影レンズ 221の周縁から光軸側に 50度の画角で、かつ、左 右方向に 90度の画角のパノラマ映像となっている。この領域表示 344A， 344B, 34 4C, 344Dは、ボール型スィッチ 413を回転操作することにより、縮小映像 340の周 方向の任意の位置に移動できるようになつている。 4分害 ij映像 391A, 391B, 391C , 391Dは、ボール型スィッチ 413を操作して所望の位置に移動させられた領域表示 344Α, 344Β, 344C, 344D【こより 旨定された領域の映像 ίこつレヽて、撮景レンズ 22 1の歪曲収差が補正処理されるとともに、モニタ 300の上下左右のそれぞれの表示 画面にレ、つぱレヽに表示されるように拡大処理された拡大映像となってレ、る。
[0077] 4分割映像 391A, 391B, 391C, 391Dは、上述した 4分害 U映像 360， 361 , 362 , 363と同様に、画像圧縮処理部 242から出力される撮像素子 230の画像データに 対して、画素データの補完処理等を行うことにより、領域表示 344Α， 344Β, 344C, 344Dに対応する部分の撮像画像について、歪曲収差の補正処理と拡大処理が行 われた映像として生成される。そのため、画素データが間引き処理されて生成された 縮小映像 340の映像データ力 4分割映像 391A， 391B, 391C, 391Dを生成す るのに比べて、モニタ 300に表示される映像の劣化は少ないものとなっている。
[0078] 縮小映像 340は、モニタ 300の表示画面の左上に表示されている。 4分割映像 39 1A, 391B, 391C, 391Dと縮小映像 340とを 1つの画面上に併せて表示すること により、縮小映像 340により、撮影レンズ 221により撮影されている範囲の全体の様 子を観ながら、領域表示 344Α, 344Β, 344C, 344Dの撮影範囲については、拡 大された映像により詳細な様子を観ることができる。また、領域表示 344Α, 344Β, 3 44C, 344Dを表示することにより、 2分割映像 381A, 381Bの縮小映像 340におけ る位置関係を知ることができる。
[0079] このように、モニタ 300の表示態様が併せ表示態様 1 (図 4 (C) )が表示されていると きに、副選択釦 412を押下すると、押下する度に、併せ表示態様 II (図 6 (A) )→併せ 表示態様 III (図 6 (Β) )→併せ表示態様 IV (図 6 (C) )…の順にモニタ 300の表示態 様を切り替えることができる。
[0080] ところで、併せ映像 330 (図 4 (C) )、併せ映像 370 (図 6 (Α) )、併せ映像 380 (図 6 ( Β) )および併せ映像 390 (図 6 (C) )をモニタ 300に表示する際には、回路装置 240 力、らモニタ 300への画像データの転送は、縮小映像 340の画像データと他の映像（ 拡大映像 320、拡大映像 371、 2分割映像 381A, 381Β、 4分害 ij映像 391A, 391B , 391C, 391D。以下、これらの映像を総称して、他の映像と記載する。）の画像デ 一タとを異なるタイミングで転送する。このようにすることにより、縮小映像 340の画像 データと他の映像の画像データを同じタイミングで転送するのに比べて、画像データ の転送時間を短くすることができる。
[0081] たとえば、上述の他の映像は、撮影範囲の全体を表示している縮小映像 340の一 部分の映像について注目しているものであるため、他の映像として撮影されている撮 影範囲の変化をリアルタイムまたは短い時間間隔を空けて逐次的に観たい場合があ る。このような場合には、他の映像の画像データをリアルタイムで全フレームを転送し 、縮小映像の画像データについては、一定の間隔を空けて、たとえば、 10フレーム 毎に転送するようにする。
[0082] これに対し、撮影範囲の中の一部を映す他の映像に比べて、撮影範囲の全体の変 化について注目した場合には、縮小映像 340の画像データをリアルタイムで全フレ ームを転送し、他の映像の画像データについては、一定の間隔を空けて、たとえば、 10フレーム毎に転送するようにしてもよい。
[0083] また、縮小映像 340の画像データと他の映像の画像データを、所定の比率、たとえ ば、縮小映像 340の画像データの転送時間 1に対して他の映像の画像データの転 送時間 4の比率で、交互に転送してもよい。
[0084] 操作装置 400は、パソコンを用いてもよい。この場合には、モニタ 300は、パソコン のモニタに相当し、また操作スィッチ 410は、パソコンのキーボードあるいはマウスに 相当することになる。この場合、主操作ボタン 411と副操作ボタン 412は、それぞれキ 一ボードの所定のキーとなる。また、領域表示 342、領域表示 343A, 343B、領域 表示 344A, 344B, 344C, 344Dのボール型スィッチ 413による移動は、マウスを 利用して行うことになる。
[0085] (第 2の実施の形態）
次に、本発明の第 2の実施の形態について説明する。この実施の形態は、図 7に示 すようにカメラ部 200を、 USBケーブル 202を介してサーバー 500と接続し、このサ 一バー 500に対して、複数の操作装置 400 (パソコン）を接続するものである。すなわ ち、この実施の形態におけるカメラ装置 100は、カメラ部 200に対して複数の複数の 操作装置 400 (パソコン）が接続された構成となっている。このような構成とすることに より、メモリ 244Aに記録された画像データと音声情報とを複数の操作装置 400 (パソ コン）により再生することができる。
[0086] なお、カメラ部 200側に USB接続部 203 (図 2参照）を複数設け、サーバー 500を 介すことなぐ直接、複数の操作装置 400 (パソコン）をカメラ部 200に接続する構成 としてもよレ、。また、カメラ部 200とサーノ 一 500との接続、あるいは、カメラ部 200と 操作装置 400との接続は、 USB接続に限らず、無線手段等、他の接続手段により接 続するようにしてもよい。
[0087] このように複数の操作装置 400 (パソコン)を 1つのカメラ部 200に接続する場合に は、回路装置 240の構成を図 8に示すように、カメラ部 200側の回路装置 240Aと操 作装置 400 (パソコン)側の回路装置 240Bに分割してもよレ、。つまり、カメラ部 200側 の回路装置 240Aの構成を、画像信号処理部 241、画像圧縮処理部 242、制御部 2 43A、メモリ咅 B244A、マイク 201およびセンサ 247とする。そして、操作装置 400 (ノ、° ソコン)側の回路装置 240Bの構成を、制御部 243B、メモリ 244B、座標変換部 245 およびメモリ 246を備える構成とする。
[0088] 座標変換部 245およびメモリ 246については、上述の図 3において説明したものと 同様の機能を備える。センサ 247は、動くものを検知する人感センサであり、赤外線 センサとなっている。図 8では、 1つのセンサ 247のみが示されている力 \実際は、力 メラ部 200の 4つの側面に 1つずつ計 4個のセンサ 247が配置されている。また、制 御部 243A、メモリ 244A、制御部 243Bおよびメモリ 244Bは全体として、図 3におい て説明した制御部 243およびメモリ 244と同様の機能を備える。し力 ながら、各表 示態様に応じた映像の生成処理については、主として、操作装置 400 (パソコン）に 備えられる制御部 243B、メモリ 244B、座標変換部 245およびメモリ 246により行う。
[0089] このような構成とすることにより、操作装置 400 (パソコン）において、画像圧縮処理 部 242から出力される撮像素子 230の画像データから、拡大映像 320等（2分割映 像 350, 351、 4分害 U映像 360, 361 , 362, 363、 2分割映像 381A, 381B、 4分害 ,J 映像 391A, 391B, 391C, 391D。以下、これらの映像を総称して、拡大映像 320 等と記載する。）の生成を行うことができる。
[0090] つまり、複数の操作装置 400 (パソコン）からの指示に基づき、カメラ部 200が種々 の拡大映像 320等を生成することとした場合には、カメラ部 200が種々の拡大映像 3 20等を生成することになる。そのため、カメラ部 200において膨大な処理作業を実行 することになり、処理時間がかかり、操作装置 400 (パソコン）に映像が表示されるま でに要する時間が長くなる等の問題が生じる。これに対し、操作装置 400 (パソコン） 側に、制御部 243B、メモリ 244B、座標変換部 245およびメモリ 246を備える構成と する場合には、各操作装置 400 (パソコン）において独立して異なる拡大映像 320等 を迅速に表示することができる。
[0091] ここで、先の第 1の実施の形態では、音追随スィッチ 414によって、音の方向のエリ ァを切り出すようにした力 この第 2の実施の形態では、 4つのセンサ 247によって、 動くものが検知されたとき、その方向のエリアを切り出し拡大映像とする。この場合、 1 方向の場合は図 6 (A)の画像とし、 2方向の場合は図 6 (B)の画像とし、 3方向以上 のときは図 6 (C)の画像とするように制御される。
[0092] カメラ部 200から操作装置 400 (パソコン）に転送される画像データについては、撮 像素子 230の画像データのうち、操作スィッチ 410によって指示された領域表示に 対応する部分だけの画像データとすることが好ましい。このようにすることにより、カメ ラ部 200から撮像素子 230の撮像画像についての画像データを全て操作装置 400 に転送するのに比べて、画像データの転送時間を短くすることができる。そのため、 各操作装置 400 (パソコン）のモニタ 300において、拡大映像の表示を行う際に円滑 に表示を行うことができる。なお、縮小映像 340と指定された領域表示の画像データ の転送を第 1の実施の形態と同様に、異なるタイミングで転送するようにしてもよい。
[0093] 以上、本発明の各実施の形態について説明したが、本発明の要旨を逸脱しない限 り、種々変更実施できる。たとえば、上述の各実施の形態では、記録した後、再生す るときの例を示したが、記録と同時に撮影画像を再生または表示する場合や、記録を 行わず、撮影画像を単に表示する場合にも適用できる。
[0094] また、領域表示の画像データ（元画像）については、領域表示に正確に対応した部 分だけの画像データとしてもよいが、拡大映像 320等を生成する際に、領域表示に 対応した部分の周囲の画素の画像データを必要とすることがある。このような場合に は、適宜、領域表示の画像データと共に、その領域の周囲の画素の画像データにつ いても転送してもよい。 [0095] なお、第 1の実施の形態あるいは第 2の実施の形態に示したカメラ装置 100におい て、記録と同時に再生または表示をする場合、画像データの転送、すなわち、拡大 用のエリアの画像の転送または/および縮小画像の転送を、音が生じたときまたは 被写体が動レ、たときに行うようにしてもょレ、。
[0096] たとえば、会議の場合、通常は縮小画像 340のみ表示し、発言者が出たら発言者 のエリアの画像を切り取り、その部分を拡大処理し (第 1の実施の形態）またはその処 理をせず（第 2の実施の形態）に、モニタ 300側へ転送する。モニタ 300では、発言 者のエリアの拡大映像と縮小映像 340を表示するようにする。また、記録後に再生す る場合も再生用のデータのモニタ 300側への転送を同様に行うことができる。また、 センサ 247を設けた場合、人物が撮影範囲内に入ったときに、センサ 247の検出信 号を受けて、同様に画像データの転送を行うようにしてもよい。
[0097] これらの際のモニタ 300の表示内容は、縮小映像 340と、音が出ている方向または 動くもの（人物等）が含まれる他の映像 (拡大映像 320、拡大映像 371、 2分割映像 3 81A, 381B、 4分害 'J映像 391A, 391B, 391C, 391D。）を表示するようにするの力 好ましい。
[0098] また、図 5 (B)に示す 2分割表示態様や図 6 (B)に示す併せ映像の際、各上部画面 に、黒板等の固定エリアの画像を拡大表示し、各下部画面に音のする方向のエリア または動いている人の方向のエリアの画像を拡大表示するようにしても良い。また、 音追随機能や動く物感知機能などを利用して、特定エリアを切り出し、拡大表示する 際、画面レ、つぱいにその特定エリアの拡大画像のみを表示させるようにしてもょレ、。
[0099] また、全体映像 310から切り出すエリアを決定するものとして、音や動くもの以外に 動きのないもの、予め、指定した特定の人や物、等、種々の情報が採用され得る。ま た、情報を検知する手段として、 3つのマイク 311 , 312, 313や 4つのセンサ 247を 例示したが、用途や状態によっては、 1つのセンサや 1つのマイクまたは 2つ以上 (複 数）のセンサやマイクとしても良い。さらには、会議の場合、参加者各人にマイクを付 けたり、各人の前にマイクを置くことで、発言者、すなわち、切り出すエリアを特定する こと力 Sできる。
[0100] また、第 1の実施の形態あるいは第 2の実施の形態においてはカメラ装置 100を例 にとつて説明したが、カメラ等の撮像手段により撮像した画像データをハードディスク や DVD (Digital Versatile Disc)等の記録手段に記録し、この画像データを画 像処理装置としての回路装置 240により画像処理して、モニタ 300に表示するように してもよレ、。この場合、画像処理装置（回路装置 240)と画像データが記録されている 記録手段とをネットワークを介して接続するようにしてもょレ、。
また、ハードディスクや DVD等のカメラ装置 100とは別体または一体の記録手段に 記録された画像データについて、上述の回路装置 240によって、上述した画像処理 方法による画像処理を行い、モニタ 300への映像の表示を行うようにしてもよい。すな わち、上述の撮影レンズ 221と同様な広角レンズにより撮像し、上記記録手段に記録 された画像データに対して、回路装置 240または回路装置 240と同様な制御処理手 段が、縮小映像 340を生成する縮小映像生成処理と、撮像画像の 1または複数の部 分について撮影レンズ 221による歪みを補正するとともに縮小映像 340に比べて拡 大された他の映像（拡大映像 320、拡大映像 371、 2分割映像 381A, 381B、 4分割 映像 391A, 391B, 391C, 391D。）を生成する拡大映像生成処理とを行うとともに 、縮小映像 340および上記他の映像をモニタ 300に表示する処理を行なってもよい

Claims

請求の範囲
[1] 広角の撮影レンズおよび上記撮影レンズを透過した被写体の光が結像する撮像手 段を有するカメラ部と、
上記被写体が発する音または/および上記被写体周辺の音を集めるマイクと、 上記撮像手段に結像した撮像画像の画像データの画像処理を行うとともに、その 画像処理された画像データおよび上記マイクで集められた音を記録する処理制御手 段と、
上記処理制御手段により画像処理された画像データの映像を上記集音された音の 再生とともに表示する表示画面を備える表示手段と、上記表示画面を操作する操作 手段とを備えるカメラ装置にぉレ、て、
上記処理制御手段は、上記撮像画像の全体を記録する処理と、上記表示手段に 映像を表示する際に、上記集音された音またはその他の情報に基づいて音がする 方向のエリアまたは特定されたエリアを、上記撮影画像全体から切り出して表示する 処理を行うこと、
を特徴とするカメラ装置。
[2] 前記処理制御手段は、前記撮像画像の全体が前記表示画面の一部の領域に表 示され、かつ画像のデータ量が低減処理された縮小映像を生成する縮小映像生成 処理と、前記撮像画像の 1または複数の部分について前記撮影レンズによる歪みを 補正するとともに上記縮小映像に比べて拡大された拡大映像であって前記切り出さ れた映像を生成する拡大映像生成処理と、上記縮小映像および上記拡大映像を前 記表示画面に表示する制御と、を行なうことを特徴とする請求項 1記載のカメラ装置。
[3] 前記縮小映像には、前記拡大映像に対応する範囲を示す表示が行われることを特 徴とする請求項 2記載のカメラ装置。
[4] 前記切り出されるエリアは、音のする方向であって音の移動によってそのエリアが変 化する変化エリアと、特定方向に固定された方向固定エリアとの少なくとも 2つのエリ ァであって、そのエリアが前記表示画面に同時に表示されることを特徴とする請求項 1、 2または 3記載のカメラ装置。
[5] 広角の撮影レンズによって撮影された撮像画像の全体を記録するとともにマイクで 集音された音を記録する記録ステップと、上記撮影画像全体から上記集音された音 に基づいてその音がする方向のエリアを切り出す切り出しステップと、上記切り出され たエリアの限定画像を歪み補正し、上記音の再生とともに表示する表示ステップと、 を有することを特徴とする画像記録再生方法。
前記撮影画像全体は 360度全周を有する円形画像であり、前記限定画像は補間 処理等によって拡大された拡大画像とすることを特徴とする請求項 5記載の画像記 録再生方法。
PCT/JP2007/058610 2006-04-26 2007-04-20 カメラ装置および画像記録再生方法 Ceased WO2007125825A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP07742045A EP2018065A4 (en) 2006-04-26 2007-04-20 CAMERA DEVICE AND METHOD FOR IMAGE RECORDING / PLAYBACK
US12/298,559 US20090185028A1 (en) 2006-04-26 2007-04-20 Camera apparatus and image recording/reproducing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006-121594 2006-04-26
JP2006121594A JP2007295335A (ja) 2006-04-26 2006-04-26 カメラ装置および画像記録再生方法

Publications (1)

Publication Number Publication Date
WO2007125825A1 true WO2007125825A1 (ja) 2007-11-08

Family

ID=38655351

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/058610 Ceased WO2007125825A1 (ja) 2006-04-26 2007-04-20 カメラ装置および画像記録再生方法

Country Status (6)

Country Link
US (1) US20090185028A1 (ja)
EP (1) EP2018065A4 (ja)
JP (1) JP2007295335A (ja)
KR (1) KR100986228B1 (ja)
CN (1) CN101473652A (ja)
WO (1) WO2007125825A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103501423A (zh) * 2013-09-18 2014-01-08 苏州景昱医疗器械有限公司 远程程控的视频监测方法及装置

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005018855B4 (de) * 2005-04-22 2010-01-28 Theta System Elektronik Gmbh Vorrichtung zur Inspektion von Druckererzeugnissen
JP5212946B2 (ja) * 2009-03-25 2013-06-19 パナソニック株式会社 テレビドアホンシステム
WO2012081400A1 (ja) * 2010-12-14 2012-06-21 コニカミノルタオプト株式会社 画像処理方法、画像処理装置及び撮像装置
JP5866504B2 (ja) * 2012-12-27 2016-02-17 パナソニックＩｐマネジメント株式会社 音声処理システム及び音声処理方法
JP2014143678A (ja) 2012-12-27 2014-08-07 Panasonic Corp 音声処理システム及び音声処理方法
JP2014220722A (ja) * 2013-05-10 2014-11-20 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
TWI496109B (zh) 2013-07-12 2015-08-11 晶睿通訊股份有限公司 影像處理器及其影像合成方法
CN104754236B (zh) * 2013-12-27 2018-09-18 日本写真判定株式会社 行进比赛的顺序判定方法及其装置
KR20160026317A (ko) * 2014-08-29 2016-03-09 삼성전자주식회사 음성 녹음 방법 및 장치
US10909384B2 (en) 2015-07-14 2021-02-02 Panasonic Intellectual Property Management Co., Ltd. Monitoring system and monitoring method
CN106161946B (zh) * 2016-08-01 2019-10-29 联想(北京)有限公司 一种信息处理方法及电子设备
JP2018037944A (ja) * 2016-09-01 2018-03-08 ソニーセミコンダクタソリューションズ株式会社 撮像制御装置、撮像装置および撮像制御方法
JP2019062448A (ja) * 2017-09-27 2019-04-18 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
JP2020042095A (ja) * 2018-09-07 2020-03-19 コニカミノルタ株式会社 画像処理システム、その制御方法、その制御プログラム、画像処理装置および画像表示装置
CN112305638A (zh) * 2019-07-26 2021-02-02 西安光启未来技术研究院 一种有效感知范围识别方法及相关设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000050253A (ja) * 1998-07-30 2000-02-18 Matsushita Electric Ind Co Ltd フレームスイッチャー装置
JP2004267585A (ja) * 2003-03-11 2004-09-30 Pentax Corp 拡大表示可能な電子内視鏡装置
JP2005277698A (ja) * 2004-03-24 2005-10-06 Opt Kk 監視カメラおよび監視方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5384588A (en) * 1991-05-13 1995-01-24 Telerobotics International, Inc. System for omindirectional image viewing at a remote location without the transmission of control signals to select viewing parameters
JP3454396B2 (ja) * 1995-10-11 2003-10-06 株式会社日立製作所 動画像の変化点検出制御方法とそれに基づく再生停止制御方法およびそれらを用いた動画像の編集システム
JPH11331827A (ja) * 1998-05-12 1999-11-30 Fujitsu Ltd テレビカメラ装置
AU2001280723A1 (en) * 2000-07-24 2002-02-05 Cyclovision Technologies, Inc. System and method for interactive television
JP4439763B2 (ja) * 2001-07-04 2010-03-24 株式会社リコー 画像録画再生システムおよび画像録画再生方法
JP2003222791A (ja) * 2002-01-31 2003-08-08 Canon Inc 測光測距用固体撮像装置及びそれを用いた撮像装置
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
JP4307934B2 (ja) * 2003-08-13 2009-08-05 株式会社トプコン 画像補正機能付撮影装置及び方法、並びに撮影装置及び方法
US8427538B2 (en) * 2004-04-30 2013-04-23 Oncam Grandeye Multiple view and multiple object processing in wide-angle video camera
US20050270387A1 (en) * 2004-05-25 2005-12-08 Fuji Photo Film Co., Ltd. Photographing system and photographing method
US7768716B2 (en) * 2005-02-21 2010-08-03 Olympus Corporation Zoom optical system and electronic equipment using the same
JP4805596B2 (ja) * 2005-03-31 2011-11-02 株式会社東芝 カメラ装置
US7945938B2 (en) * 2005-05-11 2011-05-17 Canon Kabushiki Kaisha Network camera system and control method therefore

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000050253A (ja) * 1998-07-30 2000-02-18 Matsushita Electric Ind Co Ltd フレームスイッチャー装置
JP2004267585A (ja) * 2003-03-11 2004-09-30 Pentax Corp 拡大表示可能な電子内視鏡装置
JP2005277698A (ja) * 2004-03-24 2005-10-06 Opt Kk 監視カメラおよび監視方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2018065A4 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103501423A (zh) * 2013-09-18 2014-01-08 苏州景昱医疗器械有限公司 远程程控的视频监测方法及装置

Also Published As

Publication number Publication date
JP2007295335A (ja) 2007-11-08
CN101473652A (zh) 2009-07-01
KR100986228B1 (ko) 2010-10-07
EP2018065A4 (en) 2010-03-31
US20090185028A1 (en) 2009-07-23
EP2018065A1 (en) 2009-01-21
KR20080110684A (ko) 2008-12-18

Similar Documents

Publication Publication Date Title
WO2007125825A1 (ja) カメラ装置および画像記録再生方法
JP2011139231A (ja) 画像処理装置、画像処理方法、プログラム
WO2007119712A1 (ja) カメラ装置、画像処理装置および画像処理方法
JP4924228B2 (ja) 画像処理装置、画像処理方法、およびプログラム
WO2016103645A1 (ja) 指向性制御システム、指向性制御装置、それらのいずれかを備える異常音検出システム及び指向性制御方法
JP2011010276A (ja) 画像再生装置及び撮像装置
WO2007132800A1 (ja) 画像処理装置、カメラ装置および画像処理方法
JP6777141B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
JP4378636B2 (ja) 情報処理システム、情報処理装置および情報処理方法、プログラム、並びに記録媒体
CN101147391B (zh) 成像设备、信息处理设备、信息处理方法
JP2009290318A (ja) 撮像装置およびズーム調整方法
JP4686402B2 (ja) カメラ、再生装置、再生制御方法
US6876387B1 (en) Digital zoom-out processing apparatus
JP5651951B2 (ja) 撮像制御装置、撮像制御方法、プログラム
JP2005073161A (ja) 処理装置及び画像記録方法
KR102009988B1 (ko) 초광각 카메라를 이용한 렌즈 왜곡 영상 보정 카메라 시스템의 영상 보정 방법 및 그가 적용된 tvi 장치
JP2006121320A (ja) 全方位監視カメラ装置
JP2016119620A (ja) 指向性制御システム及び指向性制御方法
JP2742111B2 (ja) ビデオカメラ
TWI792207B (zh) 過濾鏡頭操作雜音的方法及錄影系統
JP2000244885A (ja) 画像撮影装置、画像撮影方法、記憶媒体、テレビ会議システム
JP2013179466A (ja) 撮像装置
JP5504887B2 (ja) 撮像制御装置、撮像制御方法、プログラム
JP2008153876A (ja) 画像表示システム、カメラ装置、表示処理装置、および、表示倍率変更方法
JP2006345039A (ja) 撮影装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200780022580.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07742045

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2007742045

Country of ref document: EP

Ref document number: 1020087028375

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 12298559

Country of ref document: US