WO2007116764A1 - 電子スチルカメラ及び画像処理装置 - Google Patents
電子スチルカメラ及び画像処理装置 Download PDFInfo
- Publication number
- WO2007116764A1 WO2007116764A1 PCT/JP2007/056472 JP2007056472W WO2007116764A1 WO 2007116764 A1 WO2007116764 A1 WO 2007116764A1 JP 2007056472 W JP2007056472 W JP 2007056472W WO 2007116764 A1 WO2007116764 A1 WO 2007116764A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- time
- still camera
- electronic still
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N1/32101—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N1/32128—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2101/00—Still video cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
- H04N2201/0077—Types of the still picture apparatus
- H04N2201/0084—Digital still camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
- H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
- H04N2201/3253—Position information, e.g. geographical position at time of capture, GPS data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
- H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
- H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
- H04N2201/3274—Storage or retrieval of prestored additional information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Definitions
- the present invention relates to an electronic still camera and an image processing apparatus that processes image information captured by the electronic still camera, and in particular, has means for acquiring a self-position as represented by GPS. BACKGROUND OF THE INVENTION 1.
- Field of the Invention The present invention relates to an electronic still camera and an image processing apparatus that perform processing such as storing, displaying, printing, and the like by associating shooting points or shooting point surrounding information with image information. Background art
- JP-200 1 36 842 discloses, equipped with Global Positioning S y S tem (GPS ) as a means for obtaining the self-position of the camera relative position information positioning at the time of shooting, select the corresponding information Proposals have been made as a means to do this.
- GPS Global Positioning S y S tem
- FIG. 11 is a block diagram illustrating a configuration example of a conventional electronic still camera.
- the control unit 11 is a control unit that controls the sequence of the electronic still camera of FIG.
- An operation unit 12 is connected to the control unit 11.
- the operation unit 12 includes a display unit 121 such as an LCD display device and a plurality of switch (SW) units 122 including a power switch.
- the control unit 11 detects that the power switch of the SW unit 122 is turned on, is turned on, and starts operating.
- SW switch
- the imaging unit 13 images input light from a subject (not shown) with an imaging element such as a CCD. Then, the imaging unit 13 stores the image information obtained by imaging in the storage unit 14 via the control unit 11. The storage unit 14 stores the image information obtained by the imaging unit 13 and the position information where the image information is captured in association with each other.
- the storage unit 14 includes, for example, a nonvolatile memory such as FlashROM or a disk drive such as a hard disk.
- the GPS receiver 15 receives positioning radio waves from GPS satellites via the antenna 151 and outputs positioning information to the positioning calculator 16.
- the positioning calculation unit 16 uses the positioning information output from the GPS receiving unit 15 and the provisional reception position information stored in the storage unit 14 to determine the positioning meter. The calculation is executed, and the calculated positioning information is stored in the storage unit 14 as shooting point information, and the provisional reception position information is updated.
- An object of the present invention is to provide an electronic still camera that can perform image processing and an image processing apparatus that processes image information captured by the electronic still camera.
- position acquisition means (16) for acquiring self-position information of the electronic still camera, and the self-position information as photographing point information. If the storage means (14) for storing the image information in association with the image information obtained by shooting and the self-position information at the time of shooting cannot be obtained, the storage means (14) And setting means (11) for setting the self-location information acquired by the position acquisition means (16) at the time different from that as the shooting point information.
- FIG. 1 is a block diagram showing a configuration example of an electronic still camera according to a first embodiment of the present invention.
- FIG. 2 is a flowchart showing the processing in the main task of the electronic still camera according to the first embodiment.
- FIG. 3 is a flowchart showing processing of timer task 1.
- FIG. 4 shows the processing in the main task in the first modification of the first embodiment.
- FIG. 1 A first figure.
- FIG. 5 is a flowchart showing processing of timer task 2.
- FIG. 6 is a configuration example of an electronic still camera according to a second modification of the first embodiment.
- FIG. 6 is a configuration example of an electronic still camera according to a second modification of the first embodiment.
- FIG. 7 is a flowchart showing processing in the main task in the second modification of the first embodiment.
- FIG. 8 is a flowchart showing processing of timer task 3.
- FIG. 9 is a block diagram showing a configuration example of an electronic still camera according to a second embodiment of the present invention.
- FIG. 10 is a block diagram showing a configuration example of an information processing apparatus in a first modification example of the second embodiment.
- FIG. 11 is a block diagram showing a configuration example of a conventional electronic still camera.
- a GPS using a satellite is used as a position acquisition means for acquiring self-position information.
- the position acquisition means is not limited to GPS as long as self-location information can be acquired.
- a system that uses mobile radio base station information to determine its own location, a device that uses RFID tags, a short-range wireless communication system that reports location information, etc. are used as location acquisition means. May be.
- FIG. 1 is a block diagram showing a configuration example of an electronic still camera according to the first embodiment of the present invention.
- the electronic still camera 1 shown in FIG. 1 includes a control unit 11, an operation unit 12, an imaging unit 13, a storage unit 14, a GPS reception unit 15, a positioning calculation unit 16, and a timer unit 21. .
- the control unit 11 as setting means controls the sequence of the electronic still camera shown in FIG.
- An operation unit 12 is connected to the control unit 11.
- the operation unit 12 includes a display unit 121 and a switch (SW) unit 122.
- the display unit 121 includes a display device such as an LCD, for example, and displays various images such as an image (photographed image) taken by the user.
- the SW unit 122 includes a plurality of switches such as a power switch for turning on the power of the electronic still camera and a release switch for performing a photographing operation by the electronic still camera.
- the control unit 11 receives the operation of each switch of the SW unit 122 and controls a sequence corresponding to the operation.
- the imaging unit 13 captures input light from a subject (not shown) with an imaging element such as a CCD to obtain image information.
- Image information acquired by the imaging unit 13 is stored in the storage unit 14 via the control unit 11.
- the storage unit 14 serving as a storage unit stores the image information input from the imaging unit 13 and a position where the image information is captured (capturing position) as a pair.
- the storage unit 14 is composed of, for example, a nonvolatile memory such as FlashROM or a disk drive such as a hard disk.
- the GPS receiver 15 receives and processes positioning radio waves (not shown) via GPS antennas via the antenna 151, and outputs positioning information obtained thereby to the positioning calculator 16.
- the positioning calculation unit 16 calculates the position based on the positioning information from the GPS receiving unit 15 and the temporary reception position information in the storage unit 14 (positioning information obtained when the positioning calculation was performed by the positioning calculation unit 16 last time). , And the calculated positioning information is stored in the storage unit 14 and the provisional reception position information is updated.
- the timer unit 21 measures a preset time interval and notifies the control unit 11 of this every time the time measurement ends.
- the timer unit 21 is used, for example, for measuring the time for performing the positioning calculation by the positioning calculation unit 16 at regular time intervals.
- FIG. 2 is a flowchart showing processing in the main task of the electronic still camera according to the first embodiment.
- FIG. 3 is a flowchart showing processing of timer task 1 activated by the control unit 11 in the flowchart of FIG.
- the task shown in Fig. 3 is a multitasking task rather than a subroutine. In such a case, the main task process in FIG. 2 only starts the subtask, and proceeds to the next step without waiting for the started subtask to end.
- the control unit 11 initializes (sets to 0) the shooting flag stored in the storage unit 14 (step S201).
- the shooting flag is set between the main task shown in Fig. 2 and the timer task 1 shown in Fig. 3. This is a flag for identifying the timing when is turned on, in other words, the timing when shooting was performed.
- the control unit 11 activates the timer task 1 at regular intervals in order to ensure the self-position information before the actual shooting is started (step S202). Details of this timer task 1 will be described later.
- control unit 11 determines whether or not the release switch of SW unit 122 is turned on (step S203). This determination is made until the release switch is turned on. If the release switch is turned on in the determination in step S203, the control unit 11 starts the photographing operation. Subsequently, the control unit 11 sets 1 to the shooting flag (step S204). Immediately after the completion of the shooting operation, the control unit 11 starts GPS positioning in order to acquire shooting point information (step S205). Next, the control unit 11 determines whether or not the GPS positioning has succeeded (step S206).
- step S206 If the GPS positioning is successful in the determination in step S206, the control unit 11 stores the positioning information in the storage unit 14 in association with the shooting point information of the image information as it is (step S207). On the other hand, when the GPS positioning has failed, the control unit 11 stores the positioning information acquired in the timer task 1 described later in association with the image information as shooting point information in the storage unit 14. (Step S208).
- control unit 11 clears the count of timer unit 21 (step S301). Subsequently, the control unit 11 starts the time measurement by the timer unit 21 and determines whether or not a predetermined timer time T1 has elapsed (step S302). This determination is made until the timer time T1 has elapsed.
- the timer time T1 indicates a period for performing GPS positioning at regular intervals.
- the control unit 11 starts GPS positioning (step S303).
- the GPS positioning in the timer task 1 is an operation when not photographing, that is, when not being used as an electronic still camera. In this case, the smaller the current consumed, the better. Therefore, the timer time T1 should be longer from the viewpoint of current consumption. However, if the timer time T1 is too long, the difference between the shooting time and positioning time will increase. In this case, the difference in distance between the position where GPS positioning was performed and the shooting position is also large. Become. Therefore, the timer time T1 is not preferable for a very long time, and a trade-off is made in terms of current consumption and measurement accuracy. In addition, the timer time T1 does not need to be a fixed value, and it is desirable that the timer time T1 be variable according to the interval and frequency of turning on the release switch and the power switch, the frequency of successful GPS positioning, and the like.
- step S304 the control unit 11 determines whether or not the GPS positioning is successful. If the GPS positioning is not successful in the determination in step S304, the process returns to step S301. In this case, wait for the timer time T1 again and perform positioning again.
- step S304 the control unit 11 overwrites and stores the positioning information in the temporary storage area of the storage unit 14 (step S305). After that, the control unit 11 checks the shooting flag and determines whether or not the shooting flag is 1 (step S306). If the result of determination in step S306 is that the shooting flag is not 1, in other words, if shooting has not been performed, processing returns to step S301. Then, after waiting for timer one hour T1 again, re-position. On the other hand, if the shooting flag power ⁇ , no further positioning is necessary, and timer task 1 is terminated.
- the first modification can be realized with the configuration shown in FIG. 1, but the processing contents are different.
- the operation of the first modification will be described with reference to the flowchart of the main task shown in FIG. 4 and the flowchart of the subtask (timer task 2) shown in FIG.
- step S401 determines whether or not the release switch of the SW unit 122 is turned on. This determination is made until the release switch is turned on. If it is determined in step S401 that the release switch is turned on, the control unit 11 starts the photographing operation (step S402). Immediately after the completion of the shooting operation, the control unit 11 starts GPS positioning in order to acquire shooting point information (step S403). [0028] After the GPS positioning, the control unit 11 determines whether or not the positioning has succeeded (step S404).
- step S404 If the GPS positioning is successful in the determination in step S404, the control unit 11 associates the positioning information as shooting point information of the image information and stores it in the storage unit 14 (step S405). On the other hand, if the GPS positioning has failed in the determination in step S404, the control unit 11 activates timer task 2 (step S406).
- timer task 2 will be described.
- the basic flow is the same as that of timer one task 1.
- controller 11 causes GPS positioning to be executed at regular time intervals T1 until GPS positioning is successful (step S501). ⁇ S50 4). If the GPS positioning is successful in the determination in step S504, the control unit 11 stores the positioning information at that time in the storage unit 14 in association with the image information as shooting point information (step S505).
- the completed self-location information can be acquired as shooting point information of image information.
- FIG. 6 is a block diagram showing a configuration example of the electronic still camera in the second modified example.
- blocks having the same functions as those in FIG. 1 are denoted by the same reference numerals as those in FIG. That is, the second modification is different from FIG. 1 in that a clock unit 31 is connected to the control unit 11.
- the processing executed by the control unit 11 is also different, but this will be described in detail later.
- a clock unit 31 shown in FIG. 6 is provided to notify the control unit 11 of the current time.
- the clock unit 31 can be configured using, for example, a module or component called a real time clock.
- the control unit 11 initializes (sets to 0) both the shooting flag and the timer GPS completion flag secured in the storage unit 14 (step S701).
- the role of the shooting flag is the same as that of the shooting flag described in FIG.
- the timer GPS completion flag is a flag for indicating whether or not the timer task 3 performs the GPS positioning operation at regular intervals.
- control unit 11 activates the timer task 3 that is activated at regular intervals in order to secure the self-position information before the actual shooting is started (step S702).
- This timer task 3 will be described in detail later.
- step S703 the control unit 11 determines whether or not the release switch is turned on. This determination is performed until the release switch is turned on. If the release switch is turned on in the determination in step S703, the control unit 11 starts the photographing operation. Subsequently, the shooting flag is set to 1 (step S704). Immediately after the completion of the shooting operation, the control unit 11 starts GPS positioning in order to acquire shooting point information (step S705). Next, the control unit 11 determines whether or not the GPS positioning is successful (Step S7
- control unit 11 associates the positioning information as the shooting point information of the image information and stores it in the storage unit 14 (step S7).
- step S706 determines whether or not the timer GPS completion flag is 1 (step S708).
- step S708 when the timer GPS completion flag is 1, that is, when timer task 3 ends, the control unit 11 determines whether the positioning information is stored in the temporary storage area of the storage unit 14. Is determined (step S709). In the determination in step S709, when the positioning information is stored in the temporary storage area of the storage unit 14, the control unit 11 stores the positioning information in the storage unit 14 in association with the image information as shooting point information. (Step S710).
- Steps S801 to S804 of timer task 3 shown in FIG. 8 are the same as steps S301 to S304 of FIG.
- step S804 when the GPS positioning is successful, the control unit 11 determines whether or not the shooting flag is 1 (step S805). As a result of the determination in step S805, If it is 0, that is, if shooting is not performed, the process returns to step S801. In this case, wait for the timer time T1 again and perform positioning again.
- step S805 if it is determined in step S805 that the shooting flag is 1, the control unit 11 compares the difference between the shooting time and the previous successful positioning time with the difference between the current positioning time and the shooting time. Compare. Then, it is determined whether or not the difference between the imaging time and the previous positioning success time is smaller than the difference between the current positioning time and the imaging time (step S806). If it is determined in step S806 that the current difference is smaller, the control unit 11 adopts the current positioning information (step S807). On the other hand, if it is determined in step S806 that the previous difference is smaller, the control unit 11 adopts the previous positioning information (step S808).
- control unit 11 determines whether or not the difference between the photographing time and the position information acquisition time employed in step S807 or step S808 is smaller than a preset set value (step S809). If it is determined in step S809 that the difference is smaller than the set value, the control unit 11 stores the positioning information acquired at that time in the temporary storage area of the storage unit 14 (step S810).
- step S809 the process proceeds to the next step without storing the positioning information in the temporary storage area. That is, in this case, since there is a difference between the shooting time and the time when the positioning information is acquired, the positioning information is not adopted. For example, when a user who owns an electronic still camera enters a subway station and takes a subway to go to an underground shopping area in another district, radio waves reach the station and the train even in a normal train. In the case of the same, etc., there is a risk that the positioning information may be mistakenly stored. Therefore, the determination in step S809 is performed, and if the positioning information acquisition power has exceeded a certain time, the positioning information is not used.
- the setting value in the determination in step S809 can be appropriately set according to the usage and concept of the user.
- step S810 or when the difference exceeds the set value in the determination in step S809, the control unit 11 sets the timer GPS completion flag to 1 (step S8111), and performs the operation of timer task 3. Complete.
- the positioning information is the positioning information acquired at a timing other than the time of shooting when the positioning information is stored in the storage unit 14 in association with the image information as shooting point information. Information indicating this may be stored in association with the image information. By storing such information, it becomes possible to determine the credibility of the positioning information when performing some information processing on the positioning information later.
- step S710 when the positioning information is associated with the image information as shooting point information and stored in the storage unit 14, the information on the time when the positioning information was acquired is further associated with the image information. You may make it memorize. In this way, the difference between the positioning information acquired at a timing other than the time of shooting and the actual shooting point can be known as a time difference, and the credibility of the positioning information can be determined more accurately. is there.
- FIG. 9 is a block diagram showing a configuration example of an electronic still camera according to the second embodiment of the present invention.
- a database unit 41 referred to by the control unit 11 is provided in 1.
- the database unit 41 searches the location information such as longitude and latitude for addresses and place names corresponding to the location information, names of facilities and buildings existing at the location, and map information corresponding to the location information. The information for searching etc. is stored.
- the control unit 11 collates the positioning information with the database of the database unit 41. As a result, it is possible to acquire the address, place name, facility or building name corresponding to the positioning information, or to obtain visual map information.
- the shooting point information is displayed to the user in the electronic still camera. Can be given in easy-to-understand shapes. [0051] If the difference between the shooting time and the position information acquisition time is larger than the preset time, the positioning information is not adopted and the previous information corresponding to the positioning information is not acquired, so only the image information is displayed. Or print.
- Fig. 9 Some of the functions shown in Fig. 9 are provided in an information processing device separate from the electronic still camera 1.
- FIG. 10 is an information processing apparatus that is connected to the electronic still camera 1 shown in FIG. 6, for example, and that can exchange at least image information and shooting point information associated with the image information with the electronic still camera 1.
- FIG. 3 is a block diagram showing a configuration example of 2.
- the information processing device 2 shown in FIG. 10 is, for example, a personal computer, a printer, a small data storage, or the like.
- a printing unit (not shown) is connected to the control unit 11.
- the control unit 11 is connected to a storage device such as a hard disk (not shown).
- an external input / output unit 51 is provided between the control unit 11 and the electronic still camera 1 as an interface for enabling exchange of information.
- the external input / output unit 51 for example, in the case of wired communication, serial communication such as RS-232, USB, wired LAN based on IEEE802.3, or the like can be considered.
- serial communication such as RS-232, USB, wired LAN based on IEEE802.3, or the like
- wireless communication for example, a wireless LAN or Bluetooth (registered trademark) conforming to IEEE802.11 can be considered.
- the operation of the first modification will be described below.
- the image information and the shooting point information acquired by the electronic still camera 1 are transmitted to the control unit 11 of the information processing apparatus 2 via the external input / output unit 51.
- the control unit 11 collates the transmitted shooting point information with the database unit 41.
- the shooting point information can be shown in a form that is easy for the user to understand.
- the information processing device 2 may determine whether or not the difference force between the shooting time and the position information acquisition time is a force that causes the positioning information to be stored in the storage unit 14 or the like! ,.
- the difference between the shooting time and the position information acquisition time is greater than the preset time! In this case, only the image information is displayed or printed because the positioning information is not adopted and the previous information corresponding to the positioning information is not acquired.
- the database unit 41 in the second modification example searches for the address and place name corresponding to the position information described above, the name of the facility or building existing at the position, and the map information corresponding to the position information. In addition to information for searching, the location information of the entrances and exits of facilities and buildings is also stored.
- the location information cannot be acquired at the time of shooting, and can be acquired immediately before and after the shooting. If the location information indicates the entrance of the building, it can be determined that the image was taken within the facility. Then, it can be displayed, printed, or saved.
- the GPS receiver 15 and the positioning calculator 16 in the third modified example are capable of calculating altitude information in addition to latitude and longitude. Further, the altitude information of the ground surface is stored in the database unit 41 in the third modification.
- the altitude information of the shooting point obtained by the GPS positioning in the GPS receiving unit 15 and the positioning calculation unit 16 is sent to the control unit 11.
- the control unit 11 compares the altitude information with the altitude information stored in the database unit 41 and determines whether or not the shooting point is in the air. If the result of this determination is that the shooting point is in the air, it is determined that the image was taken on the airplane. Then, additional information indicating that shooting was performed on the airplane is displayed on the display unit 121 together with shooting point information in a format such as “in the sky over XX”, for example. Alternatively, these pieces of information are stored in the storage unit 14. By such an operation, it is possible to obtain shooting point information that is easier for the user to share. [0062] Next, a fourth modification of the second embodiment will be described. The basic configuration and operation are the same as those of the third modification of the second embodiment. However, in the fourth modification example, the database section 41 stores airplane operation information (airplane route and timetable information).
- the operation of the fourth modification will be described below.
- the altitude information of the shooting point obtained by the GPS positioning in the GPS receiving unit 15 and the positioning calculation unit 16 is sent to the control unit 11.
- the control unit 11 compares the altitude information with the altitude information stored in the database unit 41 and determines whether or not the shooting point is in the air. As a result of this determination, if it is determined that the shooting point is in the plane, the shooting point is further checked against the route information and timetable information of the plane.
- the result of this collation is, for example, “ ⁇ Air, XXX flight.
- the above-described embodiments include various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some configuration requirements are deleted from all the configuration requirements shown in the embodiment, if the above-mentioned problems can be solved and the effects as described above can be obtained, this configuration requirement is deleted.
- the structure can also be extracted as an invention.
- an electronic still camera and an electronic still camera that can acquire shooting point information even when acquisition of self-location information by means for acquiring self-location information such as GPS has failed.
- An image processing apparatus for processing photographed image information can be provided.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
電子スチルカメラは、自己位置情報を獲得する測位計算部(16)を含む。記憶部(14)は、測位計算部(16)により計算された自己位置情報を撮影地点情報として、撮影により得られた画像情報と関連付けて記憶する。制御部(11)は、撮影時点における自己位置情報が獲得できなかった場合、記憶部(14)に対し、撮影時点とは異なる時点において測位計算部(16)により獲得された自己位置情報を撮影地点情報として設定する。
Description
電子スチルカメラ及び画像処理装置
技術分野
[0001] 本発明は、電子スチルカメラ及び電子スチルカメラで撮影された画像情報を処理す る画像処理装置に関し、特に、 GPSに代表されるような、自己位置を獲得する手段を 持ち、これを元に撮影地点若しくは撮影地点周辺情報を、画像情報と関連付けて記 憶、表示、印刷等の処理を行う、電子スチルカメラ及び画像処理装置に関する。 背景技術
[0002] 従来、撮影された画像情報に、その撮影がなされた位置情報を関連付けて記憶可 能な電子スチルカメラに関する提案は種々のものがなされている。例えば、特開 200 1 36842号公報では、カメラの自己位置を獲得する手段として Global Positioning S yStem (GPS)を搭載し、撮影時に測位された位置情報に対して、対応する情報を選 択する手段にっ 、て提案がなされて 、る。
[0003] 図 11は、従来例の電子スチルカメラの構成例を示すブロック図である。制御部 11 は、図 11の電子スチルカメラのシーケンスを制御する制御部である。制御部 11には 操作部 12が接続されている。操作部 12は、 LCD等の表示デバイスカゝらなる表示部 1 21と電源スィッチを含む複数のスィッチカゝらなるスィッチ(SW)部 122から構成されて いる。制御部 11は、 SW部 122の電源スィッチがオンされたことを検知して電源がォ ンされ、動作を開始する。
[0004] 撮像部 13は、図示しない被写体からの入力光を CCD等の撮像素子により撮像す る。そして撮像部 13は、撮像して得られた画像情報を、制御部 11を介して記憶部 14 に記憶させる。記憶部 14は、撮像部 13により得られた画像情報とその画像情報が撮 影された位置情報とを関連付けて記憶する。記憶部 14は、例えば FlashROM等の 不揮発性メモリ又はハードディスク等のディスクドライブを備えている。
[0005] GPS受信部 15は、 GPS衛星からの測位用電波を、アンテナ 151を介して受信して 測位用情報を測位計算部 16に出力する。測位計算部 16は、 GPS受信部 15から出 力された測位用情報と記憶部 14に記憶されている仮受信位置情報とにより測位計
算を実行し、計算された測位情報を撮影地点情報として記憶部 14に記憶させると共 に仮受信位置情報を更新する。
発明の開示
[0006] 上記したような従来の手法では、 GPSなどの自己位置情報を取得する手段による 自己位置情報の獲得が失敗した場合には、仮受信位置情報の更新が行われず、ま た本来獲得されるべき自己位置情報に替わる、適切な自己位置情報を得る手段が ない。
[0007] 本発明は、上記の事情に鑑みてなされたものであり、 GPSなどの自己位置情報を 取得する手段による自己位置情報の獲得が失敗した場合であっても撮影地点情報 を獲得することができる電子スチルカメラ及び電子スチルカメラで撮影された画像情 報を処理する画像処理装置を提供することを目的とする。
[0008] 上記の目的を達成するために、本発明の第 1の態様は、当該電子スチルカメラの自 己位置情報を獲得する位置獲得手段(16)と、前記自己位置情報を撮影地点情報と して、撮影により得られた画像情報と関連付けて記憶する記憶手段(14)と、撮影時 点における自己位置情報が獲得できな力つた場合、前記記憶手段(14)に対し、前 記撮影時点とは異なる時点において前記位置獲得手段(16)により獲得された自己 位置情報を前記撮影地点情報として設定する設定手段(11)とを具備することを特徴 とする。
図面の簡単な説明
[0009] [図 1]図 1は、本発明の第 1の実施形態に係る電子スチルカメラの構成例を示すプロ ック図である。
[図 2]図 2は、第 1の実施形態に係る電子スチルカメラのメインタスクにおける処理に つ!ヽて示すフローチャートである。
[図 3]図 3は、タイマータスク 1の処理について示すフローチャートである。
[図 4]図 4は、第 1の実施形態の第 1の変形例におけるメインタスクにおける処理につ
V、て示すフローチャートである。
[図 5]図 5は、タイマータスク 2の処理について示すフローチャートである。
[図 6]図 6は、第 1の実施形態の第 2の変形例における電子スチルカメラの構成例を
示すブロック図である。
[図 7]図 7は、第 1の実施形態の第 2の変形例におけるメインタスクにおける処理につ V、て示すフローチャートである。
[図 8]図 8は、タイマータスク 3の処理について示すフローチャートである。
[図 9]図 9は、本発明の第 2の実施形態に係る電子スチルカメラの構成例を示すプロ ック図である。
[図 10]図 10は、第 2の実施形態の第 1の変形例における情報処理装置の構成例を 示すブロック図である。
[図 11]図 11は、従来例の電子スチルカメラの構成例を示すブロック図である。
発明を実施するための最良の形態
[0010] 以下、図面を参照して本発明の実施形態について説明する。ここで、以下の各実 施形態における説明では、自己位置情報を獲得する位置獲得手段として、衛星を利 用した GPSを用いた例を示す。しかしながら、位置獲得手段は、自己位置情報が獲 得できれば GPSに限るものではない。 GPSの他にも、例えば移動体無線の基地局 情報を利用して自己位置を割り出すシステムや、 RFIDタグを利用した装置、位置情 報を報知する近距離無線通信システムなどを位置獲得手段として用いても良い。
[0011] [第 1の実施形態]
図 1は、本発明の第 1の実施形態に係る電子スチルカメラの構成例を示すブロック 図である。図 1に示す電子スチルカメラ 1は、制御部 11と、操作部 12と、撮像部 13と 、記憶部 14と、 GPS受信部 15と、測位計算部 16と、タイマー部 21とを備えている。
[0012] 設定手段としての制御部 11は、図 1に示す電子スチルカメラのシーケンスを制御す る。制御部 11には、操作部 12が接続されている。操作部 12は、表示部 121と、スイツ チ(SW)部 122とを備えている。表示部 121は、例えば LCD等の表示デバイスから 構成され、使用者によって撮影された画像 (撮影画像)等の各種画像を表示する。 S W部 122は、本電子スチルカメラの電源をオンするための電源スィッチや、本電子ス チルカメラによる撮影動作を実行するためのレリーズスィッチ等の複数のスィッチから 構成されている。制御部 11は、 SW部 122の各スィッチの操作を受けて、その操作に 応じたシーケンスを制御する。
[0013] 撮像部 13は、図示しない被写体からの入力光を CCD等の撮像素子により撮像し て画像情報を取得する。撮像部 13で取得された画像情報は、制御部 11を介して記 憶部 14に記憶される。記憶手段としての記憶部 14は、撮像部 13から入力された画 像情報と、画像情報が撮影された位置 (撮影位置)とを対にして記憶する。記憶部 14 は、例えば FlashROM等の不揮発性メモリ又はハードディスク等のディスクドライブ で構成されている。
[0014] GPS受信部 15は、図示しない GPS衛星力もの測位用電波を、アンテナ 151を介し て受信して処理し、これによつて得られた測位用情報を測位計算部 16に出力する。 測位計算部 16は、 GPS受信部 15からの測位用情報と記憶部 14の仮受信位置情報 (前回、測位計算部 16によって測位計算が実行された時に得られた測位情報)とに より測位計算を実行し、計算された測位情報を記憶部 14に記憶すると共に仮受信位 置情報を更新する。
[0015] タイマー部 21は、あら力 め設定された時間間隔を計時し、計時が終了する毎にそ の旨を制御部 11に報知する。タイマー部 21は、例えば測位計算部 16による測位計 算を一定時間間隔毎に行うための時間を計時するために使用される。
[0016] 以降フローチャートを参照して第 1の実施形態の動作について説明する。ここで、 以下に説明するフローチャートは、第 1の実施形態の要旨に係る部分を中心に記述 してあり、電子スチルカメラの全体の詳細なフローチャートについては省略している。
[0017] 図 2は、第 1の実施形態に係る電子スチルカメラのメインタスクにおける処理につい て示すフローチャートである。また、図 3は、図 2のフローチャート中で制御部 11によ つて起動されるタイマータスク 1の処理について示すフローチャートである。図 3に示 されるタスクはサブルーチン形式ではなぐマルチタスク方式のタスクである。このよう な場合、図 2のメインタスクの処理ではサブタスクの起動だけを行い、起動したサブタ スクの終了を待たずに、次のステップに進む。
[0018] 電子スチルカメラ 1に電池が装填されるか若しくは SW部 122に含まれる電源スイツ チがオンされる事により、図 2の処理が開始される。まず制御部 11は、記憶部 14に記 憶されて 、る撮影フラグを初期化 (0をセット)する (ステップ S 201)。撮影フラグは、 図 2に示されるメインタスクと図 3に示されるタイマータスク 1との間で、レリーズスィッチ
がオンされたタイミング、言 、換えれば撮影が行われたタイミングを識別するためのフ ラグである。続いて、制御部 11は、実際に撮影が開始される前の自己位置情報を確 保するために、一定間隔でタイマータスク 1を起動する (ステップ S202)。このタイマ 一タスク 1の詳細については後述する。
[0019] タイマータスク 1を起動した後、制御部 11は、 SW部 122のレリーズスィッチがオンさ れたか否かを判定する(ステップ S203)。この判定はレリーズスィッチがオンされるま で行う。ステップ S203の判定において、レリーズスィッチがオンされたら、制御部 11 は、撮影動作を開始する。続いて制御部 11は、撮影フラグに 1をセットする (ステップ S204)。撮影動作の完了直後、制御部 11は、撮影地点情報を獲得するために GPS 測位を開始させる (ステップ S205)。次に、制御部 11は、 GPS測位が成功した力否 かを判定する(ステップ S 206)。
[0020] ステップ S206の判定において、 GPS測位が成功していれば、制御部 11は、その まま測位情報を画像情報の撮影地点情報として関連付けて記憶部 14に記憶させる ( ステップ S207)。一方、 GPS測位が失敗していた場合に、制御部 11は、後述するタ イマ一タスク 1にお 、て獲得した測位情報を撮影地点情報として画像情報に関連付 けて記憶部 14に記憶させる (ステップ S 208)。
[0021] ここで、図 2のステップ S202で起動するタイマータスク 1について図 3を参照して説 明する。タイマータスク 1では、まず制御部 11は、タイマー部 21のカウントをクリアする (ステップ S301)。続いて制御部 11は、タイマー部 21の計時を開始させ、所定のタイ マー時間 T1が経過したか否かを判定する(ステップ S302)。この判定はタイマー時 間 T1が経過するまで行う。ここで、タイマー時間 T1は、 GPS測位を一定間隔で行う 周期を示す。
[0022] ステップ S302の判定において、 T1が経過した場合に、制御部 11は GPS測位を開 始させる (ステップ S303)。ここで、タイマータスク 1における GPS測位は、非撮影時、 つまり電子スチルカメラとして使用していない時の動作である。この場合、消費される 電流は少なければ少ないほど良いので、消費電流の観点ではタイマー時間 T1は長 い方が良い。ただし、タイマー時間 T1を余りに長くすると、撮影時刻と測位時刻の差 分が大きくなる。この場合、 GPS測位を行った位置と撮影位置との距離の差も大きく
なる。したがって、タイマー時間 T1は、余り長い時間は好ましく無ぐ消費電流と測定 精度の観点でトレードオフをとる事になる。また、タイマー時間 T1は、固定値である必 要は無ぐレリーズスィッチや電源スィッチ等のオンされる間隔や頻度、 GPS測位に 成功する頻度などに応じて可変する事が望まし 、。
[0023] GPS測位の実行後、制御部 11は、 GPS測位が成功したか否かを判定する (ステツ プ S304)。ステップ S304の判定において、 GPS測位が成功していない場合はステ ップ S301に戻る。この場合には、もう一度タイマー時間 T1待った後で再測位する。
[0024] 一方、ステップ S304の判定において、 GPS測位に成功した場合に、制御部 11は 、測位情報を記憶部 14の一時記憶領域に上書き記憶させる (ステップ S305)。その 後に、制御部 11は、撮影フラグをチェックし、撮影フラグが 1である力否かを判定する (ステップ S306)。ステップ S306の判定の結果、撮影フラグが 1でなければ、言い換 えれば撮影が行われていない場合は、ステップ S301に戻る。そして、もう一度タイマ 一時間 T1を待った後で再測位する。一方、撮影フラグ力^であれば、これ以上の測 位の必要はないので、タイマータスク 1を終了する。
[0025] 以上説明したような処理により、図 2のステップ S204の撮影動作時に自己位置情 報が獲得できていなくても、撮影動作よりも時間的に前で直近に獲得できた自己位 置情報を画像情報の撮影地点情報として獲得できる。
[0026] 次に、第 1の実施形態の第 1の変形例について説明する。第 1の変形例は図 1に示 される構成で実現可能であるが、その処理内容は異なる。第 1の変形例の動作を図 4 に示すメインタスクのフローチャートと図 5に示すサブタスク(タイマータスク 2)のフロ 一チャートとを参照して説明する。
[0027] 電子スチルカメラ 1に電池が装填されるか若しくは SW部 122に含まれる電源スイツ チがオンされる事により、図 4の処理が開始される。まず、制御部 11は、 SW部 122の レリーズスィッチがオンされたか否かを判定する(ステップ S401)。この判定はレリー ズスィッチがオンされるまで行う。ステップ S401の判定において、レリーズスィッチが オンされたら、制御部 11は撮影動作を開始させる (ステップ S402)。撮影動作完了 直後、制御部 11は、撮影地点情報を獲得するために GPS測位を開始する (ステップ S403)。
[0028] GPS測位の後、制御部 11は、測位が成功した力否かを判定する (ステップ S404) 。ステップ S404の判定において、 GPS測位が成功していれば、制御部 11は、測位 情報を画像情報の撮影地点情報として関連付けて記憶部 14に記憶させる (ステップ S405)。一方、ステップ S404の判定において、 GPS測位が失敗していた場合、制 御部 11は、タイマータスク 2を起動する(ステップ S406)。
[0029] このタイマータスク 2について説明する。タイマータスク 2は、基本的な流れはタイマ 一タスク 1と同様である力 タイマータスク 2において、制御部 11は GPS測位が成功 するまで、一定のタイマー時間 T1毎に GPS測位を実行させる(ステップ S501〜S50 4)。ステップ S504の判定において、 GPS測位が成功した場合、制御部 11は、その ときの測位情報を撮影地点情報として画像情報に関連付けて記憶部 14に記憶させ る(ステップ S 505)。
[0030] 以上のような第 1の変形例の処理により、図 4のステップ S402における撮影動作の 時に自己位置情報を獲得できていなくても、撮影動作よりも時間的に後で直近に獲 得できた自己位置情報を画像情報の撮影地点情報として獲得できる。
[0031] 次に、第 1の実施形態の第 2の変形例について説明する。図 6は、第 2の変形例に おける電子スチルカメラの構成例を示すブロック図である。ここで、図 1と同じ機能の ブロックは図 1と同じ参照符号を付すことで説明を省略する。即ち、第 2の変形例にお いては、制御部 11に、時計部 31が接続されている点が図 1と異なる。また、これに伴 つて制御部 11で実行される処理も異なるが、これについては後で詳しく説明する。
[0032] 図 6に示す時計部 31は現在の時刻を制御部 11に通知するために設けられて ヽる 。この時計部 31は、例えばリアルタイムクロックと呼ばれるモジュール若しくは部品を 利用して構成する事ができる。
[0033] 以下、第 2の変形例の動作を図 7に示すメインタスクのフローチャートと図 8に示す サブタスク (タイマータスク 3)のフローチャートを参照して説明する。
[0034] 電子スチルカメラ 1に電池が装填されるか若しくは SW部 122に含まれる電源スイツ チがオンされる事により、図 7の処理が開始される。制御部 11は、まず記憶部 14の中 に確保された撮影フラグとタイマー GPS完了フラグとを共に初期化 (0をセット)する( ステップ S701)。ここで、撮影フラグの役割は、図 2で説明した撮影フラグと同じであ
る。また、タイマー GPS完了フラグは、タイマータスク 3において一定間隔で GPS測 位するという動作が完了したか否かを示すためのフラグである。
[0035] 続いて、制御部 11は、実際に撮影が開始される前の自己位置情報を確保するため に、一定間隔で起動するタイマータスク 3を起動する (ステップ S702)。このタイマー タスク 3については後で詳しく説明する。
[0036] タイマータスク 3を起動した後、制御部 11は、レリーズスィッチがオンされた力否か を判定する(ステップ S703)。この判定はレリーズスィッチがオンされるまで行う。ステ ップ S703の判定において、レリーズスィッチがオンされたら、制御部 11は、撮影動 作を開始させる。続いて撮影フラグに 1をセットする (ステップ S704)。撮影動作の完 了直後、制御部 11は、撮影地点情報を獲得するために GPS測位を開始する (ステツ プ S705)。次に、制御部 11は、 GPS測位が成功した力否かを判定する (ステップ S7
06)。
[0037] ステップ S706の判定において、 GPS測位が成功していれば、制御部 11は測位情 報を画像情報の撮影地点情報として関連付けて記憶部 14に記憶させる (ステップ S7
07)。この場合、後述するタイマータスク 3で測位されて一時記憶領域に記憶された 測位情報は無視される。一方、ステップ S706の判定において GPS測位に失敗した 場合は、タイマータスク 3の終了を待つ。このために、制御部 11は、タイマー GPS完 了フラグが 1であるか否かを判定する (ステップ S 708)。
[0038] ステップ S708の判定において、タイマー GPS完了フラグが 1である、即ちタイマー タスク 3が終了した場合、制御部 11は、測位情報が記憶部 14の一時記憶領域に記 憶されているか否かを判定する(ステップ S709)。ステップ S709の判定において、測 位情報が記憶部 14の一時記憶領域に記憶されている場合に、制御部 11は、その測 位情報を撮影地点情報として画像情報に関連付けて記憶部 14に記憶させる (ステツ プ S710)。
[0039] ここでタイマータスク 3の説明を行う。図 8に示すタイマータスク 3のステップ S801〜 S804は、前出の図 3のステップ S301〜S304と同じなので、説明を省略する。
[0040] ステップ S804にお 、て、 GPS測位に成功した場合に、制御部 11は、撮影フラグが 1であるか否かを判定する (ステップ S805)。ステップ S805の判定の結果、撮影フラ
グが 0であれば、つまり、撮影が行われていない場合は、ステップ S801に戻る。この 場合には、もう一度タイマー時間 T1待った後で再測位する。
[0041] 一方、ステップ S805の判定において、撮影フラグが 1であれば、制御部 11は、撮 影時刻と前回の測位成功時刻との差分と今回の測位時刻と撮影時刻との差分とを比 較する。そして、撮影時刻と前回の測位成功時刻との差分が、今回の測位時刻と撮 影時刻との差分よりも小さいか否かを判定する (ステップ S806)。ステップ S806の判 定において、今回の差分のほうが小さければ、制御部 11は、今回の測位情報を採用 する(ステップ S807)。一方、ステップ S806の判定において、前回の差分のほうが小 さければ、制御部 11は、前回の測位情報を採用する (ステップ S808)。
[0042] 続、て制御部 11は、撮影時刻と、ステップ S807又はステップ S808で採用された 位置情報獲得時刻との差分があらかじめ設定しておいた設定値より小さいか否かを 判定する(ステップ S809)。ステップ S809の判定において、差分が設定値よりも小さ ければ、制御部 11は、そのときに獲得した測位情報を記憶部 14の一時記憶領域に 記憶させる(ステップ S810)。
[0043] 一方、ステップ S809の判定にぉ 、て、差分が設定値を超えて!/、れば、測位情報を 一時記憶領域に記憶させずに、次に進む。つまり、この場合は、撮影時刻と測位情 報を獲得した時刻とに差があるため、測位情報を採用しない。例えば、電子スチルカ メラを所有している使用者が地下鉄の駅に入り、地下鉄に乗って別の地区の地下街 に行き撮影を行った場合 (通常の電車でも、駅と電車の中で電波が届かなければ同 じ)等では、測位情報の誤記憶が発生するおそれがある。そこで、ステップ S809の判 定を行い、測位情報の獲得力 ある一定時間以上たつた場合は、その測位情報を採 用しないようにする。ここで、ステップ S809の判定における設定値は使用者の使い 方や考え方で適宜設定できるようにする事が望ま ヽ。
[0044] ステップ S810の後、若しくはステップ S809の判定において差分が設定値を超えた 場合には、制御部 11は、タイマー GPS完了フラグを 1にセットし (ステップ S8111)、 タイマータスク 3の動作を完了する。
[0045] 以上説明したような処理により、タイマータスク 3においてタイマー時間 T1の間隔で GPS測位を行い、撮影時刻に一番時間的に近い測位情報を獲得することができる。
[0046] ここで、図 7のステップ S710において、測位情報を撮影地点情報として画像情報に 関連付けて記憶部 14に記憶させる際に、測位情報が撮影時以外のタイミングで獲得 された測位情報であることを示す情報を画像情報に更に関連付けて記憶させておく ようにしても良い。このような情報を記憶させておくことにより、後に測位情報に対して 何らかの情報処理等を施す際等で、測位情報の信憑性を判定することが可能となる
[0047] また、ステップ S710にお 、て、測位情報を撮影地点情報として画像情報に関連付 けて記憶部 14に記憶させる際に、該測位情報を獲得した時刻の情報を画像情報に 更に関連付けて記憶させておくようにしても良い。このようにしておけば、撮影時以外 のタイミングで獲得された測位情報と実際の撮影地点との差分を時間差として知るこ とができ、測位情報の信憑性をより正確に判定することが可能である。
[0048] [第 2の実施形態]
次に、本発明の第 2の実施形態について説明する。図 9は、本発明の第 2の実施形 態に係る電子スチルカメラの構成例を示すブロック図である。図 9の電子スチルカメラ
1には、図 6で示した電子スチルカメラ 1に加えて、制御部 11により参照されるデータ ベース部 41が設けられている。データベース部 41には、経度及び緯度等の位置情 報に対し、該位置情報に対応する住所や地名、その位置に存在する施設や建物の 名称等を検索したり、位置情報に対応する地図情報等を検索したりするための情報 が格納されている。
[0049] 以下に第 2の実施形態の動作について説明する。上述した本発明の第 1の実施形 態の手法では、撮影時に GPS測位が行えないような屋内等であっても、撮影時点と 近い時点の測位情報を撮影地点情報として画像情報に関連付けて記憶させることが できる。第 2の実施形態においては、制御部 11は、測位情報をデータベース部 41の データベースにより照合する。その結果、測位情報に対応する位置の住所や地名、 施設や建物の名称を取得したり、視覚的な地図情報を取得したりする事ができる。
[0050] このような情報を例えば表示部 121に表示したり、図示しな 、プリンターによる印刷 の実行等をしたりして可視化することにより、電子スチルカメラにおいて、撮影地点情 報を使用者に判りやす ヽ形で与えることができる。
[0051] なお、撮影時刻と位置情報獲得時刻との差分があらかじめ設定した時間より大きい 場合には、測位情報が採用されず、測位情報に対応する先の情報が取得されない ので、画像情報のみ表示又は印刷を行う。
[0052] 次に、第 2の実施形態の第 1の変形例について説明する。この第 1の変形例は、図
9に示した機能の一部を電子スチルカメラ 1とは別の情報処理装置に持たせたもので ある。
[0053] 図 10は、例えば図 6に示される電子スチルカメラ 1に接続され、少なくとも画像情報 と画像情報に関連付けられた撮影地点情報とを電子スチルカメラ 1との間でやりとり 可能な情報処理装置 2の構成例を示すブロック図である。この図 10に示される情報 処理装置 2は、例えばパーソナルコンピュータ、プリンター、小型データストレージ等 である。情報処理装置 2が、プリンターの場合には制御部 11には図示しない印刷部 等が接続される。また、小型データストレージの場合には制御部 11には図示しない ハードディスク等のストレージデバイスが接続される。
[0054] 更に、制御部 11と電子スチルカメラ 1との間には、情報の授受を可能とするための インターフェースである外部入出力部 51が設けられている。この外部入出力部 51は 、例えば、有線通信であれば、 RS— 232等のシリアル通信、 USB、 IEEE802. 3に 準拠する有線 LAN等が考えられる。また、無線通信であれば、例えば IEEE802. 1 1等に準拠する無線 LANやブルートゥース (登録商標)等が考えられる。
[0055] 以下に第 1の変形例の動作について説明する。図 10に示す電子スチルカメラ 1で は、撮影時に GPS測位が行えないような屋内等であっても、撮影時点と近い時点の 測位情報を撮影地点情報として画像情報に関連付けて記憶させることができる。電 子スチルカメラ 1において獲得された画像情報及び撮影地点情報は、外部入出力部 51を経由して情報処理装置 2の制御部 11に伝達される。制御部 11は、伝達された 撮影地点情報をデータベース部 41により照合する。その結果、照合した位置に対応 する住所や地名、施設や建物の名称、視覚的な地図情報等を得る事ができる。これ らの情報を表示部 121に表示したり、或いは紙面に印刷したりする等して可視化する ことにより撮影地点情報を使用者に判りやすい形で示すことができる。
[0056] ここで、第 1の変形例においては、上述した第 1の実施形態における処理の一部、
例えば撮影時刻と位置情報獲得時刻との差分力も測位情報を記憶部 14に記憶させ る力否かの判定等を、情報処理装置 2にお 、て行うようにしても良!、。
[0057] なお、撮影時刻と位置情報獲得時刻との差分があらかじめ設定した時間より大き!/、 場合には、測位情報が採用されず、測位情報に対応する先の情報が取得されない ので、画像情報のみ表示又は印刷を行う。
[0058] 次に、第 2の実施形態の第 2の変形例について説明する。なお、基本的な構成及 び動作は第 2の実施形態及びその第 1の変形例と同じである。ただし、第 2の変形例 におけるデータベース部 41には上述した位置情報に対応する住所や地名、その位 置に存在する施設や建物の名称等を検索したり、位置情報に対応する地図情報等 を検索したりするための情報に加えて、施設や建物の出入口の位置情報も格納され ている。
[0059] この第 2の変形例のように、施設や建物の出入口の位置情報をデータベース部 41 に格納しておくことにより、撮影時には位置情報が獲得できず、撮影の前後直近で獲 得できた位置情報が建物の入り口を示していれば、その施設内で撮影が行われたと 判定できる。そして、その旨を表示したり、印刷したり、保存したりすることができる。
[0060] 次に、第 2の実施形態の第 3の変形例について説明する。なお、基本的な構成及 び動作は第 2の実施形態、第 1及び第 2の変形例と同じである。ただし、第 3の変形 例における GPS受信部 15及び測位計算部 16は緯度及び経度の他に高度情報も計 算可能になされている。更に、第 3の変形例におけるデータベース部 41には地表の 高度情報が格納されている。
[0061] 以下、第 3の変形例の動作について説明する。 GPS受信部 15及び測位計算部 16 における GPS測位によって得られた撮影地点の高度情報は、制御部 11に送られる。 制御部 11は、この高度情報とデータベース部 41に格納されて 、る地表の高度情報 とを照合して撮影地点が宙に浮いているか否かを判定する。この判定の結果、撮影 地点が宙に浮いていれば、飛行機内で撮影がなされたと判定する。そして飛行機内 で撮影がなされたことを示す付加情報を例えば、「XX上空にて」等の形式で撮影地 点情報と共に表示部 121に表示する。或いはこれらの情報を記憶部 14に記憶させる 。このような動作により、使用者にとってより分力りやすい撮影地点情報が得られる。
[0062] 次に、第 2の実施形態の第 4の変形例について説明する。なお、基本的な構成及 び動作は第 2の実施形態の第 3の変形例と同じである。ただし、第 4の変形例におけ るデータベース部 41には飛行機の運行情報 (飛行機の航路と時刻表情報)が格納さ れている。
[0063] 以下、第 4の変形例の動作について説明する。 GPS受信部 15及び測位計算部 16 における GPS測位によって得られた撮影地点の高度情報は、制御部 11に送られる。 制御部 11は、この高度情報とデータベース部 41に格納されて 、る地表の高度情報 とを照合して撮影地点が宙に浮いているか否かを判定する。この判定の結果、撮影 地点が飛行機内であると判定できた場合、更に、この撮影地点を飛行機の航路情報 及び時刻表情報と照合する。そして、この照合の結果を、例えば「△△航空、 XXX便
、□□上空にて」等の形式で撮影地点情報と共に表示部 121に表示する。或いはこ れらの情報を記憶部 14に記憶させる。このような動作により、第 3の変形例よりも更に 分かりやす 、撮影地点情報が得られる。
[0064] 以上実施形態に基づいて本発明を説明したが、本発明は上記した実施形態に限 定されるものではなぐ本発明の要旨の範囲内で種々の変形や応用が可能なことは 勿論である。
[0065] 更に、上記した実施形態には種々の段階の発明が含まれており、開示される複数 の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に 示される全構成要件からいくつかの構成要件が削除されても、上述したような課題が 解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成 も発明として抽出され得る。
産業上の利用可能性
[0066] 本発明によれば、 GPSなどの自己位置情報を取得する手段による自己位置情報 の獲得が失敗した場合であっても撮影地点情報を獲得することができる電子スチル カメラ及び電子スチルカメラで撮影された画像情報を処理する画像処理装置を提供 することができる。
Claims
[1] 当該電子スチルカメラの自己位置情報を獲得する位置獲得手段(16)と、
前記自己位置情報を撮影地点情報として、撮影により得られた画像情報と関連付 けて記憶する記憶手段(14)と、
撮影時点における自己位置情報が獲得できなかった場合、前記記憶手段(14)に 対し、前記撮影時点とは異なる時点において前記位置獲得手段(16)により獲得さ れた自己位置情報を前記撮影地点情報として設定する設定手段( 11)と、
を具備することを特徴とする電子スチルカメラ。
[2] 前記設定手段(11)は、前記撮影時点よりも時間的に後でかつ最初に獲得できた 自己位置情報を前記記憶手段(14)に対して設定することを特徴とする請求項 1に記 載の電子スチルカメラ。
[3] 前記設定手段(11)は、前記撮影時点よりも時間的に前でかつ最後に獲得できた 自己位置情報を前記記憶手段(14)に対して設定することを特徴とする請求項 1に記 載の電子スチルカメラ。
[4] 前記設定手段(11)は、前記撮影時点の前後で前記撮影時点に時間的に最も近 い時点において獲得できた自己位置情報を前記記憶手段(14)に対して設定するこ とを特徴とする請求項 1に記載の電子スチルカメラ。
[5] 前記設定手段(11)は、撮影時点で前記自己位置情報が獲得できなかった場合、 撮影時に前記自己位置情報が獲得できな力つたという情報を、前記画像情報と関連 付けて記憶するように前記記憶手段(14)に対して更に設定することを特徴とする請 求項 1に記載の電子スチルカメラ。
[6] 前記設定手段(11)は、前記自己位置情報を獲得した時刻を更に前記画像情報と 関連付けて記憶するように前記記憶手段(14)に対して設定することを特徴とする請 求項 1に記載の電子スチルカメラ。
[7] 前記設定手段(11)は、前記撮影がなされた時刻と前記撮影地点位置情報が獲得 された時刻との差分があらかじめ設定した時間より小さい場合に、前記画像情報に前 記撮影地点情報を関連付けて記憶するように、前記記憶手段(14)に対して設定す ることを特徴とする請求項 1に記載の電子スチルカメラ。
[8] 前記撮影地点情報に関連する付加情報を検索して入手する付加情報入手手段(1 1, 41)と、
前記撮影がなされた時刻と前記撮影地点情報が獲得された時刻との差分があらか じめ設定した時間より大きい場合に、前記画像情報のみの可視化を行い、前記付加 情報の可視化は行わな!/、可視化制御手段( 11)と、
を更に具備することを特徴とする請求項 1に記載の電子スチルカメラ。
[9] 前記撮影地点情報を地図情報、地名情報、及び建物名情報の少なくとも何れかを 含むデータベース (41)と照合する照合手段(11)と、
前記撮影がなされた時刻と前記撮影地点情報が獲得された時刻とがー致せず、且 つ、前記照合手段(11)による照合の結果、前記撮影地点情報が建物の入り口付近 を示す場合、前記画像情報に関連付けて前記建物の名称を可視化する処理と前記 建物の名称を前記記憶手段(14)に記憶する処理の少なくとも何れか一方の処理を 実行する処理制御手段( 11)と、
を更に具備することを特徴とする請求項 1に記載の電子スチルカメラ。
[10] 前記自己位置情報は、前記電子スチルカメラの高度情報を含み、
前記撮影地点情報を地図情報と照合する地図情報照合手段(11)と、
前記地図情報照合手段(11)による照合の結果、当該電子スチルカメラが、地上と 海上の少なくとも一方からから離れていることを示す場合には、飛行機内で撮影がな さたことを示す付加情報を前記画像情報に関連付けて可視化する処理と前記付カロ 情報を前記記憶手段(14)に記憶する処理の少なくとも何れか一方の処理を実行す る処理制御手段(11)と、
を更に具備することを特徴とする請求項 1に記載の電子スチルカメラ。
[11] 前記飛行機の運行情報に関するデータベース (41)を照合する運行情報照合手段
(11)を更に具備し、
前記処理制御手段(11)は、前記運行情報照合手段(11)による照合の結果、前記 撮影時点において前記撮影がなされた飛行機に関する情報を前記画像情報に関連 付けて可視化する処理と前記飛行機に関する情報を前記記憶手段(14)に記憶する 処理の少なくとも何れか一方の処理を実行することを特徴とする請求項 10に記載の
電子スチルカメラ。
[12] 請求項 1に記載の電子スチルカメラより供給される前記撮影地点情報に基づき、前 記撮影地点情報に関連する付加情報を検索して入手する付加情報入手手段 (51, 41)と、
前記撮影がなされた時刻と前記撮影地点情報が獲得された時刻との差分があらか じめ設定した時間より大きい場合に、前記画像情報のみの可視化を行い、前記付加 情報の可視化は行わな!/、可視化制御手段( 11)と、
を具備することを特徴とする画像処理装置。
[13] 請求項 1に記載の電子スチルカメラより供給される前記撮影地点情報に基づき、前 記撮影地点情報を地図、地名、建物名の少なくとも何れかを含むデータベース (41) と照合する照合手段(11)と、
前記撮影がなされた時刻と前記撮影地点情報が獲得された時刻とがー致せず、且 つ、前記照合手段(11)による照合の結果、前記撮影地点情報が建物の入り口付近 を示す場合、前記画像情報に関連付けて前記建物の名称を可視化する処理と前記 建物の名称を前記記憶手段(14)に記憶する処理の少なくとも何れか一方の処理を 実行する処理制御手段( 11)と、
を具備することを特徴とする画像処理装置。
[14] 請求項 1に記載の電子スチルカメラより供給される前記撮影地点情報は、前記電子 スチルカメラの高度情報を含み、
前記電子スチルカメラより供給される前記撮影地点情報に基づき、前記撮影地点 情報を地図情報と照合する地図情報照合手段(11)と、
前記地図情報照合手段(11)による照合の結果、当該画像処理装置が、地上と海 上の少なくとも一方カゝら離れていることを示す場合には、飛行機内で撮影がなさたこ とを示す付加情報を前記画像情報に関連付けて可視化する処理と前記付加情報を 前記記憶手段(14)に記憶する処理の少なくとも何れか一方の処理を実行する処理 制御手段(11)と、
を具備することを特徴とする画像処理装置。
[15] 前記飛行機の運行情報に関するデータベースを照合する運行情報照合手段(11)
を更に具備し、
前記処理制御手段(11)は、前記運行情報照合手段(11)による照合の結果、前記 撮影時点において前記撮影がなされた飛行機に関する情報を前記画像情報に関連 付けて可視化する処理と前記飛行機に関する情報を前記記憶手段(14)に記憶する 処理の少なくとも何れか一方の処理を実行することを特徴とする請求項 14に記載の 画像処理装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2007800115319A CN101411187B (zh) | 2006-04-05 | 2007-03-27 | 电子静像相机以及图像处理装置 |
| EP07739910A EP2003890A4 (en) | 2006-04-05 | 2007-03-27 | DIGITAL PHOTOGRAPHIC APPARATUS AND IMAGE PROCESSING METHOD |
| US12/245,095 US8023006B2 (en) | 2006-04-05 | 2008-10-03 | Electronic still camera which acquires photography-site data and image processing apparatus which processes image data photographed by electronic still camera |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006-104433 | 2006-04-05 | ||
| JP2006104433A JP4889349B2 (ja) | 2006-04-05 | 2006-04-05 | 電子スチルカメラ及び画像処理装置 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| US12/245,095 Continuation US8023006B2 (en) | 2006-04-05 | 2008-10-03 | Electronic still camera which acquires photography-site data and image processing apparatus which processes image data photographed by electronic still camera |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2007116764A1 true WO2007116764A1 (ja) | 2007-10-18 |
Family
ID=38581061
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2007/056472 Ceased WO2007116764A1 (ja) | 2006-04-05 | 2007-03-27 | 電子スチルカメラ及び画像処理装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US8023006B2 (ja) |
| EP (1) | EP2003890A4 (ja) |
| JP (1) | JP4889349B2 (ja) |
| CN (1) | CN101411187B (ja) |
| WO (1) | WO2007116764A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013026671A (ja) * | 2011-07-15 | 2013-02-04 | Canon Inc | 撮像装置、撮像装置の制御方法、および、プログラム |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4840403B2 (ja) * | 2008-04-30 | 2011-12-21 | ソニー株式会社 | 情報記録装置、撮像装置、情報記録方法およびプログラム |
| US8185134B2 (en) * | 2008-10-21 | 2012-05-22 | Qualcomm Incorporated | Multimode GPS-enabled camera |
| KR20110040248A (ko) * | 2009-10-13 | 2011-04-20 | 삼성전자주식회사 | 디지털 영상 처리기에서 소비 전력 저감 장치 및 방법 |
| JP2011141144A (ja) * | 2010-01-06 | 2011-07-21 | Sony Corp | 電子機器、測位デバイス、情報処理方法およびプログラム |
| JP5087105B2 (ja) * | 2010-06-03 | 2012-11-28 | 株式会社エヌ・ティ・ティ・ドコモ | 測位装置及び方法 |
| JP2013110569A (ja) | 2011-11-21 | 2013-06-06 | Sony Corp | 画像処理装置、位置情報付加方法およびプログラム |
| JP2013207357A (ja) * | 2012-03-27 | 2013-10-07 | Sony Corp | サーバ、クライアント端末、システムおよびプログラム |
| CA2880715C (en) | 2012-08-07 | 2019-04-02 | Bombardier Inc. | Checklist display system, method and graphical display therefor |
| JP6296780B2 (ja) * | 2013-12-19 | 2018-03-20 | キヤノン株式会社 | 撮像装置およびその制御方法、並びにプログラム |
| JP2015159511A (ja) * | 2014-02-25 | 2015-09-03 | オリンパス株式会社 | 撮影機器及び画像記録方法 |
| JP5971308B2 (ja) * | 2014-11-13 | 2016-08-17 | カシオ計算機株式会社 | 携帯機器及びプログラム |
| EP3113481A1 (en) * | 2015-06-29 | 2017-01-04 | Thomson Licensing | Apparatus and method for controlling geo-tagging in a camera |
| CN105704811B (zh) * | 2016-01-13 | 2018-05-25 | 广东欧珀移动通信有限公司 | 一种在拍摄照片中记录位置信息的方法、装置和移动终端 |
| CN105978995A (zh) * | 2016-06-22 | 2016-09-28 | 北京三快在线科技有限公司 | 一种数据添加位置信息的方法和装置 |
| JP6863224B2 (ja) * | 2017-10-23 | 2021-04-21 | 株式会社ダイフク | 車両 |
| US10560898B1 (en) | 2019-05-30 | 2020-02-11 | Snap Inc. | Wearable device location systems |
| US10582453B1 (en) | 2019-05-30 | 2020-03-03 | Snap Inc. | Wearable device location systems architecture |
| US10575131B1 (en) * | 2019-05-30 | 2020-02-25 | Snap Inc. | Wearable device location accuracy systems |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10319494A (ja) * | 1997-05-15 | 1998-12-04 | Nikon Corp | 撮影位置を表示する画像表示装置 |
| JP2003274320A (ja) * | 2002-03-15 | 2003-09-26 | Konica Corp | 画像撮像装置、画像情報処理装置及び画像情報処理方法 |
| JP2005005953A (ja) * | 2003-06-11 | 2005-01-06 | Matsushita Electric Ind Co Ltd | 撮像装置および画像ファイル作成方法 |
| JP2005277619A (ja) * | 2004-03-24 | 2005-10-06 | Hitachi Ltd | 画像データ管理・閲覧方法 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1056609A (ja) * | 1996-04-15 | 1998-02-24 | Canon Inc | 画像記録方法、通信方法、画像記録装置、通信装置及び媒体 |
| JPH10184297A (ja) * | 1996-12-27 | 1998-07-14 | Marukin Pipe Kk | ロックボルトの施工方法 |
| CN1173225C (zh) * | 1997-01-27 | 2004-10-27 | 富士写真胶片株式会社 | 记录全球定位系统装置的测位信息的摄像机 |
| JP2001036842A (ja) | 1999-07-16 | 2001-02-09 | Canon Inc | 画像処理装置、画像処理方法および記憶媒体 |
| US6657661B1 (en) * | 2000-06-20 | 2003-12-02 | Hewlett-Packard Development Company, L.P. | Digital camera with GPS enabled file management and a device to determine direction |
| GB2368219A (en) * | 2000-09-13 | 2002-04-24 | Roke Manor Research | Camera system with GPS |
| JP4341219B2 (ja) * | 2002-09-20 | 2009-10-07 | セイコーエプソン株式会社 | 画像ファイルの表示 |
| JP2004153582A (ja) * | 2002-10-30 | 2004-05-27 | Sanyo Electric Co Ltd | デジタル画像の認証方法、認証システムおよび撮影装置 |
| JP2004297478A (ja) * | 2003-03-27 | 2004-10-21 | Fuji Photo Film Co Ltd | デジタルカメラ |
| JP2005100248A (ja) * | 2003-09-26 | 2005-04-14 | Hitachi Information Technology Co Ltd | 保守支援システム、保守支援サーバおよび端末装置 |
| KR100703277B1 (ko) * | 2004-08-31 | 2007-04-03 | 삼성전자주식회사 | 사진 및 사진에 대한 위치 정보를 저장하는 이동통신단말기 및 그를 이용한 서비스 제공 방법 |
| JP2007202110A (ja) * | 2005-12-26 | 2007-08-09 | Ricoh Co Ltd | 撮像装置、位置情報記録方法およびプログラム |
-
2006
- 2006-04-05 JP JP2006104433A patent/JP4889349B2/ja not_active Expired - Fee Related
-
2007
- 2007-03-27 WO PCT/JP2007/056472 patent/WO2007116764A1/ja not_active Ceased
- 2007-03-27 CN CN2007800115319A patent/CN101411187B/zh not_active Expired - Fee Related
- 2007-03-27 EP EP07739910A patent/EP2003890A4/en not_active Withdrawn
-
2008
- 2008-10-03 US US12/245,095 patent/US8023006B2/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10319494A (ja) * | 1997-05-15 | 1998-12-04 | Nikon Corp | 撮影位置を表示する画像表示装置 |
| JP2003274320A (ja) * | 2002-03-15 | 2003-09-26 | Konica Corp | 画像撮像装置、画像情報処理装置及び画像情報処理方法 |
| JP2005005953A (ja) * | 2003-06-11 | 2005-01-06 | Matsushita Electric Ind Co Ltd | 撮像装置および画像ファイル作成方法 |
| JP2005277619A (ja) * | 2004-03-24 | 2005-10-06 | Hitachi Ltd | 画像データ管理・閲覧方法 |
Non-Patent Citations (1)
| Title |
|---|
| See also references of EP2003890A4 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013026671A (ja) * | 2011-07-15 | 2013-02-04 | Canon Inc | 撮像装置、撮像装置の制御方法、および、プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101411187A (zh) | 2009-04-15 |
| JP4889349B2 (ja) | 2012-03-07 |
| US8023006B2 (en) | 2011-09-20 |
| EP2003890A4 (en) | 2011-05-25 |
| CN101411187B (zh) | 2011-11-23 |
| US20090033768A1 (en) | 2009-02-05 |
| EP2003890A2 (en) | 2008-12-17 |
| EP2003890A9 (en) | 2009-04-22 |
| JP2007281799A (ja) | 2007-10-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2007116764A1 (ja) | 電子スチルカメラ及び画像処理装置 | |
| EP1879373B1 (en) | System with automatic file name generation and method therefor | |
| US8169505B2 (en) | Image management apparatus for displaying images based on geographical environment | |
| JP5656316B1 (ja) | マーカ装置を含むシステム及びこれを利用した方法 | |
| JP4916707B2 (ja) | 撮影位置施設検索システム及び方法 | |
| CN104897165A (zh) | 基于拍摄景物的导航方法及其系统 | |
| US20180205881A1 (en) | Image processing apparatus, location information adding method, and program | |
| JP2003345819A (ja) | 情報処理装置、情報処理システム、情報処理装置の制御方法、及び制御プログラム | |
| CN102455186A (zh) | 行动旅游导航及导览装置及其导航与导览方法 | |
| JP5910729B2 (ja) | 位置判定システム、位置判定方法、コンピュータプログラム及び位置判定装置 | |
| JP2002148071A (ja) | 乗 物 | |
| CN101616225B (zh) | 一种为数码相片提供地理信息标签的终端服务方法 | |
| JP2020144760A (ja) | データ収集装置、無人航空機、データ収集システム、データ収集方法及びプログラム | |
| JP2012019374A (ja) | 電子アルバム作成サーバー、情報処理装置、電子アルバム作成システム、及び、電子アルバム作成サーバーの制御方法 | |
| JPWO2018134943A1 (ja) | 判別装置、判別システム、判別方法及びプログラム | |
| JP3706907B2 (ja) | 携帯者の現在位置および方位推定方法 | |
| JP7237504B2 (ja) | 測定システム | |
| JP2004226170A (ja) | 位置情報提供システム | |
| JP6992592B2 (ja) | コンテンツ提供装置及びコンテンツ提供方法 | |
| JP5894812B2 (ja) | 無線通信装置 | |
| JP2013117649A (ja) | デジタルカメラ | |
| JP2004233169A (ja) | 位置情報補正方法 | |
| CN204374424U (zh) | 导航定位装置 | |
| JP2013195298A (ja) | 測位装置、測位方法及びプログラム | |
| JP2006003448A (ja) | 位置表示端末 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 07739910 Country of ref document: EP Kind code of ref document: A1 |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 200780011531.9 Country of ref document: CN |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 2007739910 Country of ref document: EP |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |