WO2015136796A1 - 情報処理装置、記憶媒体、および制御方法 - Google Patents

情報処理装置、記憶媒体、および制御方法 Download PDF

Info

Publication number
WO2015136796A1
WO2015136796A1 PCT/JP2014/082298 JP2014082298W WO2015136796A1 WO 2015136796 A1 WO2015136796 A1 WO 2015136796A1 JP 2014082298 W JP2014082298 W JP 2014082298W WO 2015136796 A1 WO2015136796 A1 WO 2015136796A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
control unit
image data
unit
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2014/082298
Other languages
English (en)
French (fr)
Inventor
和之 迫田
矢島 正一
竹原 充
有希 甲賀
智也 大沼
丹下 明
隆俊 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to EP14885400.3A priority Critical patent/EP3119075A4/en
Priority to US15/120,831 priority patent/US10282619B2/en
Priority to JP2016507272A priority patent/JP6531341B2/ja
Publication of WO2015136796A1 publication Critical patent/WO2015136796A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00095Systems or arrangements for the transmission of the picture signal
    • H04N1/00103Systems or arrangements for the transmission of the picture signal specially adapted for radio transmission, e.g. via satellites
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/21Intermediate information storage
    • H04N2201/218Deletion of stored data; Preventing such deletion

Definitions

  • This disclosure relates to an information processing device, a storage medium, and a control method.
  • a camera system that installs a plurality of fixed cameras in a specific place and images a surrounding situation, such as a surveillance camera system, has been used for various purposes.
  • a plurality of fixed cameras are installed in specific places such as buildings, shopping malls, theme parks, tourist spots, and airports, and are managed by a local server in each place.
  • a local server that manages a camera is connected to an external network and communicates with a cloud server, a large number of captured images can be transferred to the cloud server and viewed on an external monitor.
  • Patent Document 1 communication means such as a wireless tag is distributed only to visitors to be photographed, and photographing is performed based on detection of identification information transmitted from the communication means.
  • An image capturing system is disclosed.
  • Patent Document 1 has no problem for a user who is a service receiver, but there is a possibility that another user near the user who is a service receiver may be reflected. Invasion of privacy is a problem.
  • an object detection unit that detects an object that can identify an individual
  • a storage control unit that stores information capable of restoring the object in a storage unit
  • the image data An information processing apparatus is provided that includes a communication control unit that controls to transfer image data generated by deleting information on an object that can identify an individual from a server to a server.
  • a communication control unit that receives, from an external device, image data in which information related to an object that can identify an individual from image data captured by an imaging unit is received from an external device, and an area corresponding to the object that can identify the individual
  • a storage control unit that assigns an object ID to the storage unit and stores the object ID in the storage unit in association with the image data, and proposes an information processing apparatus that controls the communication control unit to return the object ID to the external device To do.
  • the computer detects an object that can identify an individual from the image data captured by the imaging unit, a storage control unit that stores information that can restore the object in the storage unit, A storage medium storing a program for functioning as a communication control unit that controls to transfer image data generated by deleting information about an object that can identify the individual from the image data to a server is proposed.
  • image data in which information related to an object that can identify an individual is missing from image data captured by an imaging unit is received from an external device, and an object is provided in an area corresponding to the object that can identify the individual.
  • a control method including assigning an ID, storing the ID in association with the image data in a storage unit, and controlling the object ID to be returned to the external device is proposed.
  • FIG. 1 is a diagram illustrating an overall configuration of a camera system according to an embodiment of the present disclosure. It is a figure explaining the conventional camera system. It is a figure explaining the outline at the time of the acquisition of the captured image in the camera system by this embodiment. It is a figure explaining the outline at the time of the browsing of the captured image in the camera system by this embodiment. It is a block diagram which shows the basic structural example of the fixed camera by this embodiment. It is a figure explaining the detection of the object by an object detection part. It is a figure explaining the data structural example of the memory
  • FIG. 1 is a diagram illustrating an overall configuration of a camera system according to an embodiment of the present disclosure.
  • the camera system includes a large number of fixed cameras 10A to 10C, a local server 30, and a cloud server 38.
  • the fixed cameras 10A to 10C are a surveillance camera, a fixed point camera, or the like that is attached to a ceiling, a wall, or the like in a specific place and continuously images the surroundings. Further, the fixed cameras 10A to 10C can communicate with an information processing terminal (for example, the smartphone 2) possessed by the subject (user 3) and acquire device information.
  • an information processing terminal for example, the smartphone 2 possessed by the subject (user 3) and acquire device information.
  • the local server 30 manages a large number of fixed cameras 10A to 10C. Further, the local server 30 is installed in a place close to these camera groups. In the example shown in FIG. 1, only one camera group (fixed cameras 10A to 10C) and a pair of local servers 30 that manage them are shown, but for example, local cameras that manage camera groups installed in a theme park are shown. There may be a plurality of local servers, such as a server and a local server that manages a camera group installed in a shopping mall. The plurality of local servers also function as gateways for communication with an external network and communicate with the cloud server 38.
  • the local server 30 transfers the captured images acquired from the fixed cameras 10A to 10C to the cloud server 38.
  • the cloud server 38 stores the information disclosure attribute (privacy level) of the smartphone 2.
  • the information disclosure attribute can be registered by the user 3 in advance, for example.
  • the cloud server 38 displays the captured image transferred from the local server 30 in response to an access from an external monitor such as the display device 40 of a general home 400, a PC (Personal Computer) 41, a tablet terminal 42, or the smartphone 2. provide.
  • an external monitor such as the display device 40 of a general home 400, a PC (Personal Computer) 41, a tablet terminal 42, or the smartphone 2. provide.
  • the local server 30 and the cloud server 38 are separate devices, but the local server 30 may include the function of the cloud server 38.
  • a display device 40 (a television device, a home projector, a wall display, etc.) of a general home 400 is connected to the network 5 by DSL (Digital Subscriber Line). Further, the PC 41, the tablet terminal 42, the smartphone 2, and the like are connected to the network 5 through a mobile phone network. Thereby, the user 3 accesses the cloud server 38 or the local server 30 from the external monitor such as the display device 40, the PC 41, the tablet terminal 42, or the smartphone 2 after returning home, with the image captured by the user 3 with the fixed cameras 10 ⁇ / b> A to 10 ⁇ / b> C when going out. You can browse.
  • DSL Digital Subscriber Line
  • the conventional camera system includes fixed cameras 50A to 50C, a local server 500, and a cloud server 520.
  • the fixed cameras 50A to 50C transmit the captured images as they are to the local server 500, and transfer the captured images collected by the local server 500 to the cloud server 520 as they are.
  • the captured image transferred to the cloud server 520 is provided in response to an access from an external monitor such as the display device 40, and the user can browse images captured by the fixed cameras 50A to 50C by the display device 40.
  • the images captured by the fixed cameras 50A to 50C are provided to the external monitor as they are without any processing, so that personal information such as when and where the person was is provided to a third party. It was known. In addition, there is no problem for the user of the service of providing a captured image by the camera system, but a captured image in which a person who is near the user is reflected is also provided. I was concerned about the problem.
  • the processing of deleting an object (part where privacy infringement is feared) that can identify an individual is performed on the captured image, and the image is distributed to prevent privacy infringement and the captured image.
  • the image is distributed to prevent privacy infringement and the captured image.
  • FIG. 3 is a diagram for explaining an outline when a captured image is acquired in the camera system according to the present embodiment.
  • the fixed camera 10 captures the user 3 and acquires a captured image 300.
  • the fixed camera 10 cuts out a dynamic object object such as a person from the captured image 300 and separates it into an object part (hereinafter referred to as an object image 302) and another part (hereinafter referred to as a background image 301). Is performed (step S1). Further, the fixed camera 10 assigns an object ID to the separated object image 302.
  • the background image 301 is an image in which an object that can identify an individual (a portion that is in danger of privacy infringement) is missing, and the missing portion is, for example, a silhouette (a portion in which an object is hollowed out) as shown in FIG.
  • a non-privacy image such as a predetermined avatar or a fictional person may be synthesized, or mosaic processing or blurring processing may be performed.
  • the fixed camera 10 transmits the object ID and the background image 301 to the local server 30 (step S2).
  • the fixed camera 10 communicates with an information processing terminal (for example, the smartphone 2) possessed by the user 3 by constantly trying to communicate with an information processing terminal existing in the vicinity. It is possible to acquire device information.
  • the device information includes a device ID (for example, a telephone number, a user name, or a password).
  • the fixed camera 10 also extracts distance information between the fixed camera 10 and the smartphone 2 from the signal strength, the signal transmission / reception delay time, and the like based on communication with the smartphone 2.
  • the fixed camera 10 transmits the device ID and distance information as device information to the local server 30 (step S3).
  • the local server 30 associates the object (object ID) corresponding to the missing portion of the background image 301 and the device ID based on the device information, the background image 301, and the object ID received from the fixed camera 10 (steps). S4). Specifically, the local server 30 uses the distance information (distance between the fixed camera 10 and the smartphone 2) included in the device information to determine which object object of the background image 301 is the owner of the smartphone 2 indicated by the device ID. It is judged whether it is. At this time, the object portion that can identify the user 3 is missing, but can be recognized as a missing portion (silhouette or mosaic processing portion).
  • the local server 30 transmits the association information (mapping information) between the object ID and the device ID to the fixed camera 10 (step S5).
  • the local server 30 acquires an information disclosure attribute (hereinafter referred to as a privacy level) of the device (smart phone 2) with which the fixed camera 10 has communicated, and sends this to the fixed camera 10. Transmit (step S6).
  • the privacy level is set, for example, as to whether or not to disclose (publish) a user's own image (an object that can identify the user) included in the captured image when the privacy level is registered in advance by the user and captured by the fixed camera 10. Information.
  • a disclosure level such as whether to disclose only to oneself or to disclose to a specific other person.
  • the fixed camera 10 deletes the object image 302 corresponding to the object ID associated with the device ID of the device according to the privacy level of the device transmitted from the local server 30. For example, when the privacy level of the smartphone 2 possessed by the user 3 is set to “high” (cannot be disclosed), the fixed camera 10 is connected to the object image 302 (separated from the captured image 300) that is associated with the smartphone 2. 3) is deleted. Thereby, by setting the privacy level to “high” in advance, even when the image is captured by the fixed camera 10, information for identifying itself (its own captured image) can be deleted.
  • the fixed camera 10 stores the object image 302 associated with the smartphone 2.
  • the user 3 can view the captured image captured by the fixed camera 10 from an external monitor later. Hereinafter, browsing of the captured image will be described with reference to FIG.
  • FIG. 4 is a diagram for explaining an outline when browsing a captured image in the camera system according to the present embodiment.
  • the user 3 requests the local server 30 to browse the captured image from the display device 40 (an example of an external monitor).
  • the device ID for example, a telephone number, a user name, or a password
  • the camera system according to the present embodiment includes the cloud server 38, and the display device 40 installed in the general home 400 is connected to the local server 30 via the cloud server 38 connected to the network 5.
  • the cloud server 38 is not shown in the schematic diagram shown in FIG.
  • the local server 30 makes an inquiry to the fixed camera 10A that stores the object image 302 indicated by the object ID associated with the object ID (step S12). .
  • the fixed camera 10A transmits the object image 302 indicated by the object ID associated with the device ID to the local server 30 (step S13).
  • the local server 30 combines the stored background image 301 and the received object image 302 to generate a restored image 303 and transmits it to the display device 40. Thereby, the user 3 can browse the restored image 303 in which the user 3 is reflected on the display device 40.
  • information for identifying an individual can be deleted from a captured image captured by the fixed camera 10 according to the privacy level.
  • a user who wants to view the captured image later can set the privacy level to a low level so that the separated captured image (object image 302) is stored in the fixed camera 10, and he / she can restore the captured image later by restoration processing.
  • the local server 30 does not perform restoration processing and provides a background image 301 (an image in which the object image 302 is missing) to a person who does not have access authority (a person who is not made public due to the privacy level). By doing so, the privacy of the user can be protected.
  • FIG. 5 is a block diagram illustrating a basic configuration example of the fixed camera 10 according to the present embodiment.
  • the fixed camera 10 includes a control unit 11, a network I / F (interface) 13, a wireless communication unit 15, an imaging unit 17, and a storage unit 19.
  • the control unit 11 includes, for example, a microcomputer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), a nonvolatile memory, and an interface unit, and controls each configuration of the fixed camera 10. To do.
  • a microcomputer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), a nonvolatile memory, and an interface unit, and controls each configuration of the fixed camera 10. To do.
  • the control unit 11 functions as an object detection unit 11a, a storage control unit 11b, and a communication control unit 11c.
  • the object detection unit 11 a detects an object that can identify an individual from the image data captured by the imaging unit 17. Specifically, the object detection unit 11a detects and extracts a human object from the dynamic object objects. The object detection unit 11a gives an object ID to the detected object.
  • the object detection unit 11 a detects human objects 310 a, 310 b, and 310 c that are dynamic objects in the captured image 300 captured by the fixed camera 10. Since the fixed camera 10 continuously captures the surroundings, the object detection unit 11a recognizes an object that does not move (background of buildings, trees, roads, etc.) and an object that moves (person, car, etc.). Is possible.
  • object images 302a to 302c including information that can identify an individual are extracted from the captured image 300, and a background image 301 lacking the object images 302a to 302c is generated.
  • the background image 301 as shown in FIG. 6, the areas corresponding to the object images 302a to 302c are silhouettes (shadow objects) 320a to 320c, and information that can identify an individual is missing.
  • the storage control unit 11b performs control so as to record in the storage unit 19 information that can restore the object that is missing from the captured image.
  • the storage control unit 11b stores the object image 302 detected (extracted) from the captured image 300 by the object detection unit 11a in the storage unit 19.
  • the storage control unit 11b restores them.
  • Information is stored in the storage unit 19.
  • the storage destination of the information that can restore the object lost from the captured image is not limited to the storage unit 19 built in the fixed camera 10, and may be an external storage unit.
  • the storage control unit 11b stores the association information between the device ID and the object ID transmitted from the local server 30 in the storage unit 19.
  • the communication control unit 11c has a function of controlling communication with an external device.
  • the communication control unit 11 c uses the background image 301 in which the object detection unit 11 a lacks information (object image 302) relating to an object that can identify an individual from the captured image 300 and the object ID assigned to the object image 302. Control is performed to transmit to the local server 30 via the network I / F 13.
  • the communication control unit 11 c transmits device information acquired from the information processing terminal (for example, the smartphone 2) via the wireless communication unit 15 to the local server 30 via the network I / F 13.
  • the communication control unit 11c includes distance information indicating the distance between the fixed camera 10 and the information processing terminal in addition to the device ID.
  • the communication control unit 11c receives the association information between the device ID and the object ID from the local server 30. Further, in response to a request from the local server 30, the communication control unit 11 c extracts from the storage unit 19 the object image 302 to which the object ID associated with the device ID included in the request is added, and the local server 30. Control to reply to.
  • the network I / F 13 has a function of connecting to the Internet and communicating with the local server 30.
  • the wireless communication unit 15 performs wireless communication with information processing terminals (portable devices) existing in the vicinity.
  • the communication means for example, Wi-Fi (registered trademark), Bluetooth (registered trademark), infrared communication or the like is used.
  • the wireless communication unit 15 since the wireless communication unit 15 always tries to communicate with the information processing terminal, when the information processing terminal enters the imaging range of the fixed camera 10, the wireless communication unit 15 detects this instantaneously, and the device information from the information processing terminal Can be obtained.
  • the information processing terminal is detected by, for example, periodically transmitting a beacon signal or confirming whether there is a response to the probe signal. Further, when detecting the information processing terminal, information according to the distance between the fixed camera 10 and the information processing terminal (hereinafter also referred to as distance information) is extracted from the signal strength, the signal transmission / reception delay time, and the like.
  • the imaging unit 17 photoelectrically converts imaging light obtained by a lens system including an imaging lens, a diaphragm, a zoom lens, and a focus lens, a drive system that causes the lens system to perform a focus operation and a zoom operation, and the lens system.
  • a solid-state imaging device array that generates an imaging signal.
  • the solid-state imaging device array may be realized by a CCD (Charge Coupled Device) sensor array or a CMOS (Complementary Metal Oxide Semiconductor) sensor array, for example.
  • the imaging unit 17 continuously images the surroundings and outputs the captured image to the control unit 11.
  • the storage unit 19 stores a program for executing various processes by the control unit 11.
  • the storage unit 19 stores the object image detected by the object detection unit 11a.
  • a data configuration example of the storage unit 19 will be described with reference to FIG.
  • FIG. 7 shows a data structure in which an object image is associated with an object ID and a device ID.
  • object image 1 is associated with object ID1 and device ID1.
  • the object ID is identification information given when an object image is detected from the captured image 300 by the object detection unit 11a.
  • the device ID is stored based on the association information between the object ID and the device ID transmitted from the local server 30.
  • the basic configuration of the fixed camera 10 according to the present embodiment has been described above. Next, the basic configuration of the local server 30 included in the camera system according to the present embodiment will be described.
  • FIG. 8 is a block diagram illustrating a configuration example of the local server 30.
  • the local server 30 includes a control unit 31, a network I / F 33, and a storage unit 35.
  • the local server 30 starts managing the object ID.
  • the control unit 31 is constituted by, for example, a microcomputer including a CPU, ROM, RAM, nonvolatile memory, and interface unit, and controls each configuration of the local server 30.
  • control unit 31 functions as an association unit 31a, a storage control unit 31b, a communication control unit 31c, and a restoration unit 31d.
  • the associating unit 31a associates the object ID transmitted from the fixed camera 10 with the device ID. Specifically, for example, the associating unit 31a performs associating based on the time-series change of the device distance information and the movement of the tracked object silhouette.
  • the associating unit 31a tracks the movement of the silhouette (shadow object) 320 of the object, which is the portion of the background image 301 that is continuously transmitted from the fixed camera 10 that lacks information that identifies the individual. At this time, the associating unit 31a can also estimate the distance between the fixed camera 10 and the silhouette as the first distance based on image processing or the like. Similarly, when the background image 301 is continuously transmitted from the plurality of fixed cameras 10, the associating unit 31 a tracks the movement of the silhouette 320 in each background image 301 and captures the same object. It is also possible to detect the background image 301.
  • the associating unit 31a includes the distance information (the change in the first distance) of the silhouette (shadow object) 320 and the distance information (the distance between the fixed camera 10 and the object included in the device information sent from the fixed camera 10). It is possible to determine which silhouette corresponds to the device information by comparing the time-series change of the second distance). Then, the associating unit 31a associates the corresponding silhouette object ID with the device ID included in the device information. Thereby, the association between the owner of the device and the object image obtained by capturing the owner with the camera is realized.
  • the association between the object ID and the device ID according to the present embodiment is not limited to the case based on the distance information.
  • the attribute according to the device ID face recognition (face feature pattern information), QR code (registered trademark) An image marker such as) may be used. That is, if the device ID includes “sex” and “age” as owner attributes, and the object ID also includes “sex” and “age” of the target object recognized by the fixed camera 10, these are compared.
  • the associating unit 31a can determine which object corresponds to which device.
  • the associating unit 31a determines which object is which device. Can be determined.
  • the storage control unit 31 b performs control so that the association information between the object ID and the device ID by the association unit 31 a is stored in the storage unit 35. At this time, the storage control unit 31b stores the object ID in association with the information of the camera that captured the object and the time information. Further, when the information disclosure attribute (privacy level) of the device is acquired from the cloud server 38, the storage control unit 31b controls to store the device ID and the information disclosure attribute in the storage unit 35 in association with each other.
  • the communication control unit 31c has a function of controlling communication with an external device via the network I / F 33. For example, the communication control unit 31 c receives the background image 301, the object ID, and the device information from the fixed camera 10. Further, the communication control unit 31 c transmits the association information between the object ID and the device ID to the fixed camera 10.
  • the communication control unit 31c controls to inquire the cloud server 38 about the information disclosure attribute corresponding to the device ID received from the fixed camera 10. In addition, the communication control unit 31 c controls to transmit the information disclosure attribute corresponding to the device ID to the fixed camera 10. Further, the communication control unit 31c controls to transmit the original captured image restored by the restoration unit 31d described later to the local server 30.
  • the restoration unit 31d restores original image data including information that can identify an individual based on information received from the fixed camera 10 that can restore an object. For example, the restoration unit 31d combines the object image 302 acquired from the fixed camera 10 with the background image 301 already stored in the storage unit 35, and generates an original captured image (hereinafter also referred to as a restored image).
  • the network I / F 33 has a function of connecting to the Internet and communicating with the fixed camera 10 or the cloud server 38.
  • the network I / F 33 can also communicate with the display device 40, the smartphone 2, and the like via the network 5.
  • the storage unit 35 stores a program for executing various processes by the control unit 31.
  • the storage unit 35 stores information related to the object ID received via the network I / F 33 and information related to the device ID.
  • a data configuration example of the storage unit 35 will be described with reference to FIG.
  • FIG. 9 shows a data configuration example of the object ID related information 351a.
  • the object ID is associated with the device ID, the storage location of the target object, and the imaging date / time.
  • the object ID1 is associated with the device ID1
  • the object image indicated by the object ID1 is stored in the fixed camera 10A (storage location information)
  • the object image is 10:30 on February 17, 2014. The fact that the image was captured at 45 minutes (image date and time information) is associated.
  • the device ID is associated with the privacy level (device disclosure attribute).
  • the first record of the device ID related information 351b indicates that the privacy level of the device ID 1 is “low”.
  • the configuration of the local server 30 according to the present embodiment has been specifically described above. Next, the operation process of this embodiment will be specifically described.
  • Action processing In the camera system according to this embodiment, as outlined with reference to FIGS. 3 and 4, the process at the time of acquiring a captured image (see FIG. 3) and the process at the time of browsing the captured image (see FIG. 4). And execute.
  • the processing at the time of acquiring a captured image will be specifically described with reference to FIGS. 10 to 12, and the processing at the time of browsing the captured image will be specifically described with reference to FIG.
  • FIG. 10 is a sequence diagram showing processing (separation processing) at the time of captured image acquisition.
  • the imaging unit 17 of the fixed camera 10 acquires a captured image (camera imaging).
  • step S106 the object detection unit 11a detects a new object from the captured images continuously captured by the imaging unit 17.
  • step S109 the object detection unit 11a assigns an object ID to the detected new object, and adds the object to the subsequent separation processing target (registration). ) In this way, by adding a new object to the separation processing target each time a new object is detected, the object can be continuously separated from captured images that are continuously captured.
  • step S112 the object detection unit 11a separates (extracts) the object to be separated from the captured image, and deletes information for identifying an individual from the captured image.
  • the object detection unit 11a separates the plurality of objects 310a to 310c from the captured image 300 as illustrated in FIG.
  • step S115 the storage control unit 11b controls to store the separated object in the storage unit 19.
  • the separated object is stored in association with the device ID.
  • the separated object image is temporarily stored even when the device ID is not associated with the device ID. The association with the device ID can be performed later.
  • step S118 the communication control unit 11c sends the background image 301 from which the object has been separated (the information specifying the individual is missing) and the object ID assigned to the separated object from the network I / F 13 to the local server 30. Send.
  • step S121 the storage control unit 31b of the local server 30 stores the object ID received from the fixed camera 10 via the network I / F 33 in the storage unit 35.
  • step S124 the associating unit 31a tracks a shadow object (area corresponding to the separated object) corresponding to the object ID in the background image 301 received from the fixed camera 10. Since the background image 301 is continuously transmitted from the fixed camera 10 or the background image 301 is periodically / irregularly transmitted as a moving image for a fixed time, the associating unit 31a includes the shadow object in the background image 301. Follow the movement.
  • FIG. 11 is a sequence diagram showing a process (linking process) at the time of acquiring a captured image according to the present embodiment.
  • the fixed camera 10 receives device information of an information processing terminal (for example, the smartphone 2) existing in the vicinity by the wireless communication unit 15, and detects a new device.
  • the fixed camera 10 always tries to communicate with surrounding information processing terminals. Therefore, when the information processing terminal enters the imaging range of the fixed camera 10, this is detected instantaneously, and information processing is performed. Device information can be acquired from the terminal.
  • step S130 the communication control unit 11c controls the network I / F 13 to transmit new device information to the local server 30.
  • the communication control unit 11c controls the network I / F 13 to transmit new device information to the local server 30.
  • FIG. 11 a case where new device information is transmitted only once is illustrated, but it may be transmitted a plurality of times due to a change in distance information or the like. That is, the fixed camera 10 continues to extract distance information with new device information for a certain period of time, and continuously transmits this information to the local server 30.
  • step S133 the associating unit 31a of the local server 30 associates the device ID included in the received device information with the object ID. Specifically, the associating unit 31a compares the time series change of the distance information with respect to the fixed camera 10 included in the device information and the movement of the silhouette 320 included in the background image 301 (the movement tracked in S124). Thus, the silhouette 320 (shadow object) of the owner of the device is determined. Then, the associating unit 31a associates the device ID with the object ID of the corresponding silhouette 320.
  • step S139 the communication control unit 31c controls to transmit the association information between the object ID and the device ID to the fixed camera 10.
  • step S142 the storage control unit 31b of the fixed camera 10 refers to the association information received from the local server 30, and controls to store the object ID and the device ID in association with the object image separated in S112. To do.
  • the process shown in S142 may be performed in combination with S115. Also, as will be described later, since the processes shown in FIGS. 10 to 12 are repeatedly performed, the device ID is subsequently associated with the same object (S127 / No, S142).
  • FIG. 12 is a sequence diagram illustrating a process (deletion process) when a captured image is acquired.
  • the process shown in FIG. 12 can be processed in parallel with the processes shown in FIGS.
  • step S145 when the communication control unit 11c of the fixed camera 10 receives new device information (S127 / Yes), the device information is disclosed via the network I / F 13. Queries the local server 30 for attributes.
  • step S148 the control unit 31 of the local server 30 determines whether or not the information disclosure attribute of the device inquired from the fixed camera 10 is known.
  • step S151 when the information disclosure attribute of the inquired device is not stored in the storage unit 19 (S148 / No), in step S151, the communication control unit 31c sends the device information disclosure attribute of the device to the cloud server 38. Make an inquiry.
  • step S154 the cloud server 38 returns the information disclosure attribute of the device in response to the inquiry from the local server 30.
  • step S157 when the information disclosure attribute is received (S154), or when the information disclosure attribute is known (S148 / Yes), in step S157, the storage control unit 31b of the local server 30 determines the device ID and the information disclosure attribute ( Association information with “privacy level” is stored in the storage unit 19.
  • step S160 the communication control unit 31c transmits the privacy level of the device corresponding to the inquiry to the fixed camera 10.
  • the storage control unit 11b of the fixed camera 10 performs deletion control of the object image (see S142 above) associated with the device ID of the device according to the received privacy level of the device. Specifically, the storage control unit 11b determines whether the privacy level of the device is high or low.
  • the privacy level “high” indicates that disclosure is impossible
  • the privacy level “low” indicates that disclosure is possible.
  • a user to be disclosed may be further specified. Specifically, for example, a device ID of a user who can be disclosed is specified.
  • step S166 the storage control unit 11b performs control to delete the object image associated with the device ID of the device from the storage unit 19. To do. Further, the storage control unit 11b performs control so as not to store information related to the object. Thereby, when the user 3 sets the privacy level to “high” in advance, it is possible to delete the information (the captured image) identifying the user himself / herself when the image is captured by the fixed camera 10.
  • the storage control unit 11b marks the object as a target that may be stored in the storage unit 19, and controls to store information related to the object thereafter.
  • the processing at the time of obtaining a captured image according to the present embodiment has been specifically described above with reference to FIGS. Note that the processes shown in FIGS. 10 to 11 can be repeatedly performed continuously. Further, instead of S160 to S163, the local server 30 may determine whether the privacy level is high or low, and if it is “high”, a request for deleting the corresponding object image may be sent to the fixed camera 10. Next, processing at the time of browsing a captured image according to the present embodiment will be described with reference to FIG.
  • FIG. 13 is a sequence diagram illustrating processing at the time of browsing a captured image.
  • the local server 30 and the display apparatus 40 communicate via the network 5 and the cloud server 38
  • the cloud server 38 is abbreviate
  • the display device 40 makes a browsing request to the local server 30.
  • the browsing request includes information necessary for specifying an image to be browsed, and includes, for example, time, place, and device ID. For example, when the user 3 wants to see a photograph at a predetermined tourist spot visited yesterday from 3:00 to 5:00, in addition to the date and time and location information, the user ID of the device that the user 3 has is displayed on the display device 40. Enter and send a browsing request.
  • step S206 the local server 30 receives a browsing request from the display device 40.
  • step S209 the storage control unit 31b of the local server 30 extracts the background image 301 at the time and place specified by the browsing request from the storage unit 35.
  • step S212 the storage control unit 31b determines whether or not the device ID included in the browsing request is managed, and checks whether the object ID associated with the device ID exists. .
  • step S215 the communication control unit 31c controls to transmit the extracted background image 301 to the display device 40. Since the background image 301 is in a state in which information that can identify an individual is missing, even if it is transferred to an unspecified number of display devices 40, a privacy problem does not occur.
  • step S218 the communication control unit 31c displays an image to be reproduced with respect to the fixed camera 10 storing the object image corresponding to the object ID.
  • Information time, place, device ID, object ID, etc.
  • the inquiry can be made as an inquiry for requesting transmission of an object image when the privacy level of the device ID corresponding to the object ID is “low”.
  • step S ⁇ b> 221 the communication control unit 11 c of the fixed camera 10 extracts the target object image 302 from the storage unit 19 based on the information included in the inquiry from the local server 30 and transfers it to the local server 30. .
  • step S224 the restoration unit 31d of the local server 30 synthesizes the object image 302 received from the fixed camera 10 with the background image 301 stored in the storage unit 35 to obtain the original captured image (restored image). ) Is generated.
  • the restoration unit 31d combines the object image 302a with the background image 301 to generate a restored image. Accordingly, it is possible to generate an image in which only information that can specify the corresponding user (object image 302a) is restored while information that can specify the other users (object images 302b and 302c) is missing. Thereby, the problem of privacy of other users does not occur.
  • step S227 the communication control unit 31c transmits the restored image to the display device 40.
  • step S230 the display device 40 displays the received restored image.
  • the camera system distributes an image after performing a process of deleting an object (part where privacy infringement is feared) that can identify an individual from a captured image, Both prevention of privacy infringement and distribution of captured images can be achieved.
  • the information (restored image) that is restored and transferred to the external monitor includes only information on the object object that is permitted to be disclosed by the information disclosure attribute (privacy level) registered in association with the device ID. Therefore, the privacy of others reflected in the image can be secured.
  • a computer program for causing the functions of the fixed camera 10 and the local server 30 to be performed on hardware such as the CPU, ROM, and RAM incorporated in the fixed camera 10 and the local server 30 described above.
  • a computer-readable storage medium storing the computer program is also provided.
  • the assignment of the object ID to the separated object may be performed on the local server 30 side.
  • this technique can also take the following structures.
  • An object detection unit for detecting an object that can identify an individual from the image data captured by the imaging unit;
  • a storage control unit for storing information capable of restoring the object in a storage unit;
  • a communication control unit that controls to transfer image data generated by deleting information on the object that can identify the individual from the image data to a server;
  • An information processing apparatus comprising: (2) The communication control unit further transfers an object ID corresponding to the object to the server, The information processing apparatus according to (1), wherein the storage control unit associates the object ID and stores information related to the object.
  • the information processing apparatus further includes a wireless communication unit capable of communicating with a wireless terminal, The information processing apparatus according to (2), wherein the communication control unit transfers a device ID of the wireless terminal detected by the wireless communication unit and information regarding a distance to the wireless terminal to a server.
  • the privacy level is managed in units of device IDs, the object ID transferred to the server and the device ID are linked according to the distance to the wireless terminal,
  • the communication control unit receives, as an information processing apparatus storing information capable of restoring an object corresponding to an object ID having a high privacy level, a request for deleting information capable of restoring the object from the server,
  • the information processing apparatus according to (3) wherein the storage control unit deletes information capable of restoring the object from the storage unit in response to the deletion request.
  • the communication control unit transfers information that can restore the object corresponding to the object ID read from the storage unit in response to the browsing request including the object ID received from the server to the server.
  • the information processing apparatus according to 3).
  • a communication control unit that receives, from an external device, image data in which information about an object that can identify an individual from image data captured by the imaging unit is deleted;
  • a storage control unit that assigns an object ID to an area corresponding to an object that can identify the individual and stores the object ID in association with the image data; With The information processing apparatus, wherein the communication control unit controls to return the object ID to the external apparatus.
  • the communication control unit receives the device ID of the wireless terminal detected by the external device from surrounding wireless terminals
  • the information processing apparatus includes: The information processing apparatus according to (6), further including an association unit that associates an object ID and the device ID with an area corresponding to an object that can identify the individual.
  • the communication control unit receives the device ID of the wireless terminal received by the external device from surrounding wireless terminals, and information on the distance between the external device and the wireless terminal,
  • the associating unit is estimated from information relating to a first distance indicating a distance between the external device and a region corresponding to an object that can identify the individual in the image data, and a distance between the external device and the wireless terminal.
  • the information processing apparatus according to (7), wherein the object ID and the device ID are associated with each other.
  • a privacy level is set for the device ID, The information processing apparatus according to (8), wherein the association unit sets a privacy level of the object ID based on a device ID. (10) The information processing apparatus according to (9), wherein the communication control unit transmits a deletion request to an external apparatus corresponding to the object ID when the privacy level is high. (11) The communication control unit receives a browsing target time, information that can identify the external device, and a device ID as a browsing request from the outside, The storage control unit receives image data corresponding to the time to be browsed from among image data received from an external device identified by information that can identify the external device and lacking information on an object that can identify an individual.
  • the communication control unit transmits request information for requesting information capable of restoring the object corresponding to the object ID when the privacy level set in the object ID associated with the device ID is low.
  • Receiving information capable of restoring the object returned in response to the request information The information processing apparatus includes: Based on the image data extracted from the storage unit and information that can restore the received object, further comprises a restoration unit that restores original image data including information that can identify an individual, The information processing apparatus according to (9), wherein the communication control unit transmits the original image data restored by the restoration unit to the browsing request source.
  • An object detection unit for detecting an object that can identify an individual from the image data captured by the imaging unit; A storage control unit for storing information capable of restoring the object in a storage unit; A communication control unit that controls to transfer image data generated by deleting information on the object that can identify the individual from the image data to a server; A storage medium that stores a program for functioning as a computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Astronomy & Astrophysics (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Studio Devices (AREA)
  • Telephonic Communication Services (AREA)

Abstract

【課題】撮像画像に対して個人を特定できるオブジェクトを欠落させる処理を行った上で画像を流通させることで、プライバシー侵害の防止と撮像画像の流通との両立を図ることが可能な情報処理装置、記憶媒体、および制御方法を提供する。 【解決手段】撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、を備える、情報処理装置。

Description

情報処理装置、記憶媒体、および制御方法
 本開示は、情報処理装置、記憶媒体、および制御方法に関する。
 近年、監視カメラシステムのように、特定の場所に複数の固定カメラを設置して周囲の様子を撮像するカメラシステムが様々な用途に利用されている。例えばビルやショッピングモール、テーマパーク、観光スポット、空港等の特定の場所に複数の固定カメラが設置され、それぞれの場所においてローカルサーバにより管理されている。
 また、カメラの管理を行うローカルサーバが外部ネットワークと接続し、クラウドサーバとも通信を行う場合は、大量の撮像画像がクラウドサーバに転送され、外部のモニタで閲覧することが可能である。
 このようなカメラシステムに関し、例えば下記特許文献1では、撮影対象となる来場者のみに無線タグのような通信手段を配布し、その通信手段から発信される識別情報の検出に基づいて撮影を行う画像撮影システムが開示されている。
特開2001-177750号公報
 しかしながら、上記カメラシステムでは、撮像画像がクラウドサーバに転送されて外部モニタから閲覧できるので、誰がどこにいたか、誰と会っていたかといった個人情報が第三者に知られてしまっていた。
 また、特許文献1に記載の画像撮影システムは、サービスの享受者であるユーザにとっては問題ないが、サービス享受者であるユーザの近くにいた他ユーザが写り込む可能性もあり、この場合他ユーザに対するプライバシー侵害が問題となる。
 そこで、本開示では、撮像画像に対して個人を特定できるオブジェクトを欠落させる処理を行った上で画像を流通させることで、プライバシー侵害の防止と撮像画像の流通との両立を図ることが可能な情報処理装置、記憶媒体、および制御方法を提案する。
 本開示によれば、撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、を備える情報処理装置を提案する。
 本開示によれば、撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信する通信制御部と、前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶する記憶制御部と、を備え、前記通信制御部は、前記オブジェクトIDを前記外部装置に返信するよう制御する情報処理装置を提案する。
 本開示によれば、コンピュータを、撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、として機能させるためのプログラムを記憶した記憶媒体を提案する。
 本開示によれば、撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信することと、前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶することと、前記オブジェクトIDを前記外部装置に返信するよう制御すること、を含む制御方法を提案する。
 以上説明したように本開示によれば、撮像画像に対して個人を特定できるオブジェクトを欠落させる処理を行った上で画像を流通させることで、プライバシー侵害の防止と撮像画像の流通との両立を図ることが可能となる。
 なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態によるカメラシステムの全体構成を示す図である。 従来のカメラシステムについて説明する図である。 本実施形態によるカメラシステムにおける撮像画像の取得時の概略を説明する図である。 本実施形態によるカメラシステムにおける撮像画像の閲覧時の概略を説明する図である。 本実施形態による固定カメラの基本構成例を示すブロック図である。 オブジェクト検出部によるオブジェクトの検出について説明する図である。 本実施形態による固定カメラの記憶部のデータ構成例について説明する図である。 本実施形態によるローカルサーバの基本構成例を示すブロック図である。 本実施形態によるローカルサーバの記憶部のデータ構成例について説明する図である。 本実施形態による撮像画像取得時の処理(分離処理)を示すシーケンス図である。 本実施形態による撮像画像取得時の処理(紐付処理)を示すシーケンス図である。 本実施形態による撮像画像取得時の処理(削除処理)を示すシーケンス図である。 本実施形態による撮像画像閲覧時の処理を示すシーケンス図である。
 以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 また、説明は以下の順序で行うものとする。
 1.本開示の一実施形態によるカメラシステムの概要
 2.基本構成
  2-1.固定カメラの構成例
  2-2.ローカルサーバの構成例
 3.動作処理
  3-1.撮像画像取得時の処理
  3-2.撮像画像閲覧時の処理
 4.まとめ
  <<1.本開示の一実施形態によるカメラシステムの概要>>
 まず、本開示の一実施形態によるカメラシステムの概要について図1を参照して説明する。図1は、本開示の一実施形態によるカメラシステムの全体構成を示す図である。
 図1に示すように、本実施形態によるカメラシステムは、多数の固定カメラ10A~10Cと、ローカルサーバ30と、クラウドサーバ38と、を含む。
 固定カメラ10A~10Cは、特定の場所の天井や壁等に取り付けられ、周囲を継続的に撮像する監視カメラ、定点カメラ等である。また、固定カメラ10A~10Cは、被写体(ユーザ3)が所持する情報処理端末(例えばスマートフォン2)と通信を行い、デバイス情報を取得し得る。
 ローカルサーバ30は、多数の固定カメラ10A~10Cの管理を行う。また、ローカルサーバ30は、これらのカメラ群に近い場所に設置される。図1に示す例では、1つのカメラ群(固定カメラ10A~10C)と、これを管理するローカルサーバ30の一対のみが示されているが、例えばテーマパークに設置されたカメラ群を管理するローカルサーバ、ショッピングモールに設置されたカメラ群を管理するローカルサーバといったように、複数のローカルサーバが存在し得る。そして、これら複数のローカルサーバは、外部ネットワークとのやりとりをするゲートウエイとしても機能し、クラウドサーバ38と通信を行う。
 また、ローカルサーバ30は、固定カメラ10A~10Cから取得した撮像画像をクラウドサーバ38に転送する。
 クラウドサーバ38は、スマートフォン2の情報開示属性(プライバシーレベル)を記憶する。当該情報開示属性は、例えば予めユーザ3により登録され得る。また、クラウドサーバ38は、一般家庭400の表示装置40や、PC(Personal Computer)41、タブレット端末42、スマートフォン2等の外部モニタからのアクセスに応じて、ローカルサーバ30から転送された撮像画像を提供する。なお図1に示す例では、ローカルサーバ30とクラウドサーバ38が別途の装置としているが、ローカルサーバ30は、クラウドサーバ38の機能を含んでもよい。
 一般家庭400の表示装置40(テレビジョン装置や、家庭用プロジェクタ、壁面ディスプレイ等)は、DSL(Digital Subscriber Line)でネットワーク5に接続されている。また、PC41、タブレット端末42、スマートフォン2等は、携帯電話網を介してネットワーク5に接続されている。これにより、外出時にユーザ3が固定カメラ10A~10Cで撮像された画像を、帰宅後に表示装置40、PC41、タブレット端末42、またはスマートフォン2等の外部モニタからクラウドサーバ38またはローカルサーバ30にアクセスすることで、閲覧することができる。
 (背景)
 ここで、従来のカメラシステムについて図2を参照して説明する。図2に示すように、従来のカメラシステムは、固定カメラ50A~50Cと、ローカルサーバ500と、クラウドサーバ520と、を含む。
 固定カメラ50A~50Cは、撮像画像をそのままローカルサーバ500に送信し、ローカルサーバ500も収集した撮像画像をそのままクラウドサーバ520に転送する。
 クラウドサーバ520に転送された撮像画像は、表示装置40等の外部モニタからのアクセスに応じて提供され、ユーザは表示装置40により固定カメラ50A~50Cで撮像された画像を閲覧することができる。
 このように従来のカメラシステムでは、固定カメラ50A~50Cで撮像された画像が、何ら加工等が行われずにそのまま外部モニタに提供されるので、誰がいつどこにいたかといった個人情報が第三者に知られてしまっていた。また、上記カメラシステムにより撮像画像を提供するといったサービスの享受者にとっては問題がないが、当該享受者の近くに居た人物の姿も写り込んだ撮像画像も提供されてしまうため、プライバシー侵害の問題が懸念された。
 そこで、本実施形態では、撮像画像に対して個人を特定できるオブジェクト(プライバシー侵害が懸念される部分)を欠落させる処理を行った上で画像を流通させることで、プライバシー侵害の防止と撮像画像の流通との両立を図るカメラシステムを提供する。以下、図3~図4を参照して本実施形態によるカメラシステムの概略について説明する。
 図3は本実施形態によるカメラシステムにおける撮像画像の取得時の概略を説明する図である。図3に示すように、固定カメラ10がユーザ3を撮像して撮像画像300を取得する。固定カメラ10は、撮像画像300に対して、人物などの動的物体オブジェクトを切り出して、オブジェクト部分(以下、オブジェクト画像302と称す)とそれ以外の部分(以下、背景画像301と称す)に分離する処理を行う(ステップS1)。また、固定カメラ10は、分離したオブジェクト画像302にオブジェクトIDを付与する。背景画像301は、個人を特定できるオブジェクト(プライバシー侵害が懸念される部分)が欠落された画像であって、欠落部分は、例えば図3に示すようにシルエット(オブジェクトがくり抜かれた部分が塗り潰されている状態)の他、所定のアバターや架空の人物などプライバシー懸念のない画像が合成されてもよいし、モザイク処理やぼかし処理が施されてもよい。
 そして、固定カメラ10は、オブジェクトIDおよび背景画像301をローカルサーバ30に送信する(ステップS2)。
 上記撮影、分離処理と並行して、固定カメラ10は、近傍に存在する情報処理端末との通信を常時試みていることにより、ユーザ3が所持する情報処理端末(例えばスマートフォン2)と通信を行い、デバイス情報を取得することが可能である。デバイス情報には、デバイスID(例えば電話番号、ユーザ名、またはパスワード等)が含まれる。また、固定カメラ10は、スマートフォン2との通信に基づいて、信号強度や信号送受の遅延時間などから固定カメラ10とスマートフォン2との距離情報も抽出する。
 そして、固定カメラ10は、デバイスIDおよび距離情報をデバイス情報としてローカルサーバ30に送信する(ステップS3)。
 次いで、ローカルサーバ30は、固定カメラ10から受信したデバイス情報、背景画像301、オブジェクトIDに基づいて、背景画像301の欠落部分に相当するオブジェクト(オブジェクトID)とデバイスIDとの紐付を行う(ステップS4)。具体的には、ローカルサーバ30は、デバイス情報に含まれる距離情報(固定カメラ10とスマートフォン2との距離)を用いて、背景画像301のどの物体オブジェクトが、デバイスIDで示されるスマートフォン2の持ち主であるかを判断する。この際、ユーザ3を特定できるオブジェクト部分は欠落しているが、欠落部分(シルエットやモザイク処理部分)として認識され得る。
 そして、ローカルサーバ30は、オブジェクトIDとデバイスIDとの紐付情報(マッピング情報)を固定カメラ10に送信する(ステップS5)。
 また、ローカルサーバ30は、上記紐付処理と並行して、固定カメラ10が通信を行ったデバイス(スマートフォン2)の情報開示属性(以下、プライバシーレベルと称す)を取得し、これを固定カメラ10に送信する(ステップS6)。プライバシーレベルは、例えば予めユーザにより登録され、固定カメラ10で撮像された際に当該撮像画像に含まれたユーザ自身の画像(ユーザを特定できるオブジェクト)を開示(公開)するか否かを設定する情報である。また、開示するよう設定する際は、自分自身に対してのみ開示するのか、特定の他者まで開示するのかといった開示レベルを設定することが可能である。
 固定カメラ10は、ローカルサーバ30から送信されたデバイスのプライバシーレベルに応じて、当該デバイスのデバイスIDに紐付けられるオブジェクトIDに対応するオブジェクト画像302を削除する。例えば固定カメラ10は、ユーザ3が所持するスマートフォン2のプライバシーレベルが「高」(開示不可)に設定されていた場合、スマートフォン2に紐付けられたオブジェクト画像302(撮像画像300から分離した、ユーザ3を特定できる撮像画像)を削除する。これにより、予めプライバシーレベルを「高」に設定しておくことで、固定カメラ10に撮像された場合も自身を特定する情報(自身の撮像画像)を削除させることができる。
 また、固定カメラ10は、スマートフォン2のプライバシーレベルが「低」(開示可能)の場合、スマートフォン2に紐付けられたオブジェクト画像302を保管する。プライバシーレベルが「低」に設定され、オブジェクト画像302が保管された場合、ユーザ3は、後から固定カメラ10で撮像された撮像画像を外部モニタから閲覧することが可能である。以下、撮像画像の閲覧について図4を参照して説明する。
 図4は、本実施形態によるカメラシステムにおける撮像画像の閲覧時の概略を説明する図である。図4に示すように、ユーザ3は、表示装置40(外部モニタの一例)からローカルサーバ30に対して撮像画像の閲覧要求を行う。この際、ユーザ3が所持するスマートフォンのデバイスID(例えば電話番号、ユーザ名、またはパスワード等)を送信する(ステップS11)。なお図1に示すように、本実施形態によるカメラシステムにはクラウドサーバ38が含まれ、一般家庭400に設置される表示装置40は、ネットワーク5に接続するクラウドサーバ38を介してローカルサーバ30にアクセスするが、図4に示す概略図ではクラウドサーバ38の図示を省略する。
 次いで、ローカルサーバ30は、要求に含まれるデバイスIDに応じて、当該オブジェクトIDに紐付けられているオブジェクトIDで示されるオブジェクト画像302を保管している固定カメラ10Aに問い合わせを行う(ステップS12)。
 次に、固定カメラ10Aは、ローカルサーバ30からの問い合わせに応じて、デバイスIDに紐付けられているオブジェクトIDで示されるオブジェクト画像302をローカルサーバ30に送信する(ステップS13)。
 次いで、ローカルサーバ30は、保管していた背景画像301と、受信したオブジェクト画像302を合成して復元画像303を生成し、これを表示装置40に送信する。これにより、ユーザ3は、自身が写り込んだ復元画像303を表示装置40で閲覧することができる。
 以上説明したように、本実施形態によるカメラシステムでは、プライバシーレベルに応じて、個人を特定する情報を、固定カメラ10で撮像した撮像画像から欠落させることが可能である。また、撮像画像を後で閲覧したいユーザは、プライバシーレベルを低く設定しておくことで、分離された自身の撮像画像(オブジェクト画像302)を固定カメラ10に保管させ、後日、復元処理により自身が写り込んだ画像を閲覧することができる。また、アクセス権限を有さない人物(プライバシーレベルにより公開対象にされていない者)に対しては、ローカルサーバ30は復元処理を行わず、背景画像301(オブジェクト画像302が欠落した画像)を提供することで、ユーザのプライバシーを保護することができる。
  <<2.基本構成>>
  <2-1.固定カメラの構成例>
 次に、本実施形態によるカメラシステムに含まれる固定カメラ10の構成について図5を参照して説明する。図5は、本実施形態による固定カメラ10の基本構成例を示すブロック図である。
 図5に示すように、固定カメラ10は、制御部11、ネットワークI/F(インターフェース)13、無線通信部15、撮像部17、および記憶部19を有する。
 制御部11は、例えばCPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、不揮発性メモリ、インターフェース部を備えたマイクロコンピュータにより構成され、固定カメラ10の各構成を制御する。
 また、本実施形態による制御部11は、図5に示すように、オブジェクト検出部11a、記憶制御部11b、および通信制御部11cとして機能する。オブジェクト検出部11aは、撮像部17により撮像された画像データから、個人を特定できるオブジェクトを検出する。具体的には、オブジェクト検出部11aは、動的物体オブジェクトのうち人物のオブジェクトを検出し、これを抽出する。また、オブジェクト検出部11aは、検出したオブジェクトにオブジェクトIDを付与する。
 (オブジェクトの検出)
 ここで、図6を参照してオブジェクト検出部11aによるオブジェクトの検出について説明する。図6に示すように、固定カメラ10により撮像された撮像画像300に対して、オブジェクト検出部11aは、動的物体である人物のオブジェクト310a、310b、310cを検出する。固定カメラ10は周囲を継続的に撮像しているため、オブジェクト検出部11aは、動きのない物体(建物、木、道等の背景)と、動きのある物体(人物、車等)とを認識することが可能である。
 そして、図6下に示すように、撮像画像300から、個人を特定できる情報を含むオブジェクト画像302a~302cが抽出されると共に、オブジェクト画像302a~302cが欠落した背景画像301が生成される。背景画像301は、図6に示すように、オブジェクト画像302a~302cに相当する領域がシルエット(影オブジェクト)320a~320cとなり、個人を特定できる情報が欠落している。
 記憶制御部11bは、撮像画像から欠落させたオブジェクトを復元可能な情報を記憶部19に記録するよう制御する。例えば、記憶制御部11bは、オブジェクト検出部11aにより撮像画像300から検出(抽出)されたオブジェクト画像302を記憶部19に記憶する。若しくは、個人を特定する情報が欠落した背景画像として、人物オブジェクトに対してアバターが合成されたり、モザイク処理、ぼかし処理等が行われたりした場合、記憶制御部11bは、これらを復元するための情報を記憶部19に記憶する。なお、撮像画像から欠落させたオブジェクトを復元可能な情報の記憶先は、固定カメラ10に内蔵される記憶部19に限定されず、外部記憶部であってもよい。
 また、記憶制御部11bは、ローカルサーバ30から送信されたデバイスIDとオブジェクトIDとの紐付情報を記憶部19に記憶する。
 通信制御部11cは、外部装置との通信を制御する機能を有する。例えば、通信制御部11cは、オブジェクト検出部11aが、撮像画像300から個人を特定できるオブジェクトに関する情報(オブジェクト画像302)を欠落させた背景画像301と、オブジェクト画像302に付与されたオブジェクトIDを、ネットワークI/F13を介してローカルサーバ30に送信するよう制御する。
 また、通信制御部11cは、無線通信部15を介して情報処理端末(例えばスマートフォン2)から取得したデバイス情報を、ネットワークI/F13を介してローカルサーバ30に送信する。通信制御部11cは、デバイス情報をローカルサーバ30に送信する際、デバイスIDに加えて、固定カメラ10と情報処理端末の距離を示す距離情報を含める。
 また、通信制御部11cは、ローカルサーバ30から、デバイスIDとオブジェクトIDとの紐付情報を受信する。さらに、通信制御部11cは、ローカルサーバ30からの要求に応じて、当該要求に含まれるデバイスIDに紐付けられたオブジェクトIDが付与されたオブジェクト画像302を記憶部19から抽出し、ローカルサーバ30に返信するよう制御する。
 ネットワークI/F13は、インターネットに接続し、ローカルサーバ30と通信を行う機能を有する。
 無線通信部15は、周囲に存在する情報処理端末(携帯デバイス)と無線通信を行う。通信手段は、例えばWi-Fi(登録商標)、Bluetooth(登録商標)、赤外線通信等が用いられる。また、無線通信部15は、情報処理端末との通信を常時試みているため、情報処理端末が固定カメラ10の撮像範囲に入ってきた場合に瞬時にこれを検知し、情報処理端末からデバイス情報を取得することができる。情報処理端末の検知は、例えばビーコン信号の定期的な送信や、プローブ信号に応答があるかを確認することで行われる。また、情報処理端末を検知する際、信号強度や信号送受の遅延時間などから、固定カメラ10と情報処理端末との距離に準じる情報(以下、距離情報とも称す)も抽出される。
 撮像部17は、撮像レンズ、絞り、ズームレンズ、及びフォーカスレンズ等により構成されるレンズ系、レンズ系に対してフォーカス動作やズーム動作を行わせる駆動系、レンズ系で得られる撮像光を光電変換して撮像信号を生成する固体撮像素子アレイ等を有する。固体撮像素子アレイは、例えばCCD(Charge Coupled Device)センサアレイや、CMOS(Complementary Metal Oxide Semiconductor)センサアレイにより実現されてもよい。
 本実施形態による撮像部17は、継続的に周囲を撮像し、撮像画像を制御部11に出力する。
 記憶部19は、制御部11による各種処理を実行するためのプログラムが格納される。また、記憶部19は、オブジェクト検出部11aにより検出されたオブジェクト画像を格納する。ここで、図7を参照して記憶部19のデータ構成例について説明する。
 図7では、オブジェクト画像が、オブジェクトIDおよびデバイスIDと対応付けられたデータ構成が示されている。例えば、オブジェクト画像1は、オブジェクトID1およびデバイスID1と対応付けられている。オブジェクトIDは、上述したように、オブジェクト検出部11aにより撮像画像300からオブジェクト画像が検出された際に付与される識別情報である。また、デバイスIDは、ローカルサーバ30から送信されるオブジェクトIDとデバイスIDとの紐付情報に基づいて格納される。
 以上、本実施形態による固定カメラ10の基本構成について説明した。次に、本実施形態によるカメラシステムに含まれるローカルサーバ30の基本構成について説明する。
  <2-2.ローカルサーバの構成例>
 図8は、ローカルサーバ30の構成例を示すブロック図である。図8に示すように、ローカルサーバ30は、制御部31、ネットワークI/F33、および記憶部35を有する。ローカルサーバ30は、固定カメラ10からオブジェクトIDを受信すると、当該オブジェクトIDの管理を開始する。
 制御部31は、例えばCPU、ROM、RAM、不揮発性メモリ、インターフェース部を備えたマイクロコンピュータにより構成され、ローカルサーバ30の各構成を制御する。
 また、本実施形態による制御部31は、図5に示すように、紐付部31a、記憶制御部31b、通信制御部31c、および復元部31dとして機能する。
 紐付部31aは、固定カメラ10から送信されたオブジェクトIDとデバイスIDとの紐付けを行う。具体的には、例えば紐付部31aは、デバイスの距離情報の時系列変化と、トラックしたオブジェクトシルエットの動きに基づいて、紐付けを行う。
 まず、紐付部31aは、固定カメラ10から継続的に送信される背景画像301における、個人を特定する情報が欠落した部分であるオブジェクトのシルエット(影オブジェクト)320の動きをトラックする。この際、紐付部31aは、画像処理等に基づいて、固定カメラ10とシルエットとの距離を第1の距離として推定することも可能である。また、複数の固定カメラ10から同様に背景画像301が継続的に送信される場合、紐付部31aは、各背景画像301におけるシルエット320の動きをトラックして、同一のオブジェクを捉えている複数の背景画像301を検出することも可能である。次いで、紐付部31aは、シルエット(影オブジェクト)320の動き(第1の距離の変化)と、固定カメラ10から送られるデバイス情報に含まれる、固定カメラ10とオブジェクトとの距離を示す距離情報(第2の距離)の時系列変化とを比較することで、どのシルエットが当該デバイス情報に対応するかを判断することができる。そして、紐付部31aは、対応するシルエットのオブジェクトIDと、デバイス情報に含まれるデバイスIDとの紐付けを行う。これにより、デバイスの持ち主と、当該持ち主をカメラで捉えたオブジェクト画像との紐付けが実現される。
 なお、本実施形態によるオブジェクトIDとデバイスIDとの紐付けは、距離情報に基づく場合に限定されず、例えばデバイスIDに応じた属性、顔認識(顔の特徴パターン情報)、QRコード(登録商標)等の画像マーカーなどを用いてもよい。すなわち、デバイスIDに持ち主属性として「性別」「年齢」が含まれ、オブジェクトIDにも、固定カメラ10で認識された対象オブジェクトの「性別」「年齢」が含まれている場合、これらを比較することで、紐付部31aは、どのオブジェクトがどのデバイスに対応するかを判断することができる。また、オブジェクトIDに、固定カメラ10で認識された対象オブジェクトから読み取ったQRコードの情報が含まれ、かつ当該QRコードの情報がデバイスIDに対応する場合、紐付部31aは、どのオブジェクトがどのデバイスに対応するかを判断することができる。
 記憶制御部31bは、紐付部31aによるオブジェクトIDとデバイスIDとの紐付情報を記憶部35に記憶するよう制御する。この際、記憶制御部31bは、オブジェクトIDに、オブジェクトを捉えたカメラの情報と、その時刻の情報とも対応付けて記憶する。
また、記憶制御部31bは、クラウドサーバ38からデバイスの情報開示属性(プライバシーレベル)を取得した場合、デバイスIDと当該情報開示属性とを対応付けて記憶部35に記憶するよう制御する。
 通信制御部31cは、ネットワークI/F33を介して、外部装置との通信を制御する機能を有する。例えば、通信制御部31cは、固定カメラ10から背景画像301やオブジェクトID、およびデバイス情報を受信する。また、通信制御部31cは、オブジェクトIDとデバイスIDとの紐付情報を固定カメラ10に送信する。
 また、通信制御部31cは、固定カメラ10から受信したデバイスIDに対応する情報開示属性をクラウドサーバ38に問い合わせるよう制御する。また、通信制御部31cは、デバイスIDに対応する情報開示属性を固定カメラ10に送信するよう制御する。さらに、通信制御部31cは、後述する復元部31dにより復元された元の撮像画像をローカルサーバ30に送信するよう制御する。
 復元部31dは、固定カメラ10から受信した、オブジェクトを復元可能な情報に基づいて、個人を特定できる情報を含む元画像データを復元する。例えば、復元部31dは、固定カメラ10から取得したオブジェクト画像302を、記憶部35に既に記憶されていた背景画像301に合成し、元の撮像画像(以下、復元画像とも称する)を生成する。
 ネットワークI/F33は、インターネットに接続し、固定カメラ10またはクラウドサーバ38と通信を行う機能を有する。また、ネットワークI/F33は、ネットワーク5を介して表示装置40やスマートフォン2等と接続して通信を行うことも可能である。
 記憶部35は、制御部31による各種処理を実行するためのプログラムが格納される。また、記憶部35は、ネットワークI/F33を介して受信したオブジェクトIDに関する情報、およびデバイスIDに関する情報を記憶する。ここで、図9を参照して記憶部35のデータ構成例について説明する。
 図9上では、オブジェクトID関連情報351aのデータ構成例が示される。具体的には、オブジェクトIDが、デバイスID、対象オブジェクトの格納場所、および撮像日時と対応付けられている。例えばオブジェクトID1は、デバイスID1と紐付けられ、また、オブジェクトID1が示すオブジェクト画像は固定カメラ10Aに格納されていること(格納場所情報)、およびオブジェクト画像は2014年2月17日の10時30分45秒に撮像されたこと(撮像日時情報)が対応付けられている。
 図9下では、デバイスID関連情報351bのデータ構成例が示される。具体的には、デバイスIDと、プライバシーレベル(デバイス開示属性)が対応付けられている。例えば、デバイスID関連情報351bの1レコード目では、デバイスID1のプライバシーレベルが「低」であることが示されている。
 以上、本実施形態によるローカルサーバ30の構成について具体的に説明した。続いて、本実施形態の動作処理について具体的に説明する。
  <<3.動作処理>>
 本実施形態によるカメラシステムでは、図3および図4を参照して概要を説明したように、撮像画像の取得時における処理(図3参照)と、撮像画像の閲覧時における処理(図4参照)とを実行する。以下、撮像画像取得時の処理について図10~図12を参照して具体的に説明し、次いで撮像画像閲覧時の処理について図13を参照して具体的に説明する。
  <3-1.撮像画像取得時の処理>
 図10は、撮像画像取得時の処理(分離処理)を示すシーケンス図である。図10に示すように、まず、ステップS103において、固定カメラ10の撮像部17は、撮像画像の取得(カメラ撮影)を行う。
 次に、ステップS106において、オブジェクト検出部11aは、撮像部17により継続的に撮像される撮像画像の中から新規オブジェクトの検知を行う。
 次いで、新規オブジェクトが検知された場合(S106/Yes)、ステップS109において、オブジェクト検出部11aは、検知した新規オブジェクトにオブジェクトIDを付与し、また、当該オブジェクトを以降の分離処理対象に追加(登録)する。このように、新規オブジェクトを検知する毎に分離処理対象に追加していくことで、以降、継続的に撮像される撮像画像に対して、同オブジェクトを分離し続けることができる。
 次に、ステップS112において、オブジェクト検出部11aは、撮像画像から分離処理対象のオブジェクトを分離(抽出)し、撮像画像から個人を特定する情報が欠落させる。なお複数のオブジェクトが分離処理対象として登録されている場合、オブジェクト検出部11aは、図6に示すように、撮像画像300から複数のオブジェクト310a~310cを分離する。
 次いで、ステップS115において、記憶制御部11bは、分離したオブジェクトを記憶部19に記憶するよう制御する。なお後述するS142に示すように、分離したオブジェクトはデバイスIDと対応付けて記憶されるが、デバイスIDと紐付けがされていない段階であっても、分離したオブジェクト画像を一時的に記憶し、後にデバイスIDとの紐付けを行うことが可能である。
 続いて、ステップS118において、通信制御部11cは、オブジェクトを分離した(個人を特定する情報が欠落した)背景画像301と、分離したオブジェクトに付与したオブジェクトIDをネットワークI/F13からローカルサーバ30に送信する。
 次に、ステップS121において、ローカルサーバ30の記憶制御部31bは、ネットワークI/F33を介して固定カメラ10から受信したオブジェクトIDを記憶部35に記憶する。
 次いで、ステップS124において、紐付部31aは、固定カメラ10から受信した背景画像301における、オブジェクトIDに対応する影オブジェクト(分離されたオブジェクトに相当する領域)をトラックする。固定カメラ10からは背景画像301が継続的に送信、若しくは一定時間の動画像として背景画像301が定期的/不定期的に送信されるので、紐付部31aは、背景画像301の中で影オブジェクトの動きを追う。
 以上説明したオブジェクトの分離処理と並行して、デバイス情報の取得と紐付処理が行われる。以下、図11を参照して説明する。
 図11は、本実施形態による撮像画像取得時の処理(紐付処理)を示すシーケンス図である。まず、ステップS127に示すように、固定カメラ10は、無線通信部15により周囲に存在する情報処理端末(例えばスマートフォン2)のデバイス情報を受信し、新規デバイスの検知を行う。固定カメラ10は、上述したように、周囲の情報処理端末との通信を常時試みているため、情報処理端末が固定カメラ10の撮像範囲に入ってきた場合に瞬時にこれを検知し、情報処理端末からデバイス情報を取得することができる。
 次に、新規のデバイス情報を受信した場合(ステップS127/Yes)、ステップS130において、通信制御部11cは、ネットワークI/F13から新規のデバイス情報をローカルサーバ30に送信するよう制御する。なお、図11に示すシーケンス図では、新規のデバイス情報が一度しか送信されない場合が例示されているが、距離情報の変更等に伴い複数回送信される場合もある。すなわち、固定カメラ10は、新規のデバイス情報との距離情報を一定時間抽出し続け、これを継続的にローカルサーバ30に送信する。
 次いで、ステップS133において、ローカルサーバ30の紐付部31aは、受信したデバイス情報に含まれるデバイスIDと、オブジェクトIDとの紐付を行う。具体的には、紐付部31aは、デバイス情報に含まれる固定カメラ10との距離情報の時系列変化等と、背景画像301に含まれるシルエット320の動き(上記S124でトラックした動き)とを比較することで、デバイスの持ち主のシルエット320(影オブジェクト)を判断する。そして、紐付部31aは、対応するシルエット320のオブジェクトIDに、当該デバイスIDを紐付ける。
 次に、ステップS139において、通信制御部31cは、オブジェクトIDとデバイスIDとの紐付情報を固定カメラ10に送信するよう制御する。
 そして、ステップS142において、固定カメラ10の記憶制御部31bは、ローカルサーバ30から受信した紐付情報を参照し、上記S112で分離したオブジェクト画像に、オブジェクトIDおよびデバイスIDを対応付けて記憶するよう制御する。なお当該S142に示す処理は、上記S115と併せて行われてもよい。また、後述するように、図10~図12に示す各処理は繰り返し行われるため、以降、同様のオブジェクトに対しては、当該デバイスIDが紐付けられる(S127/No、S142)。
 続いて、上記S115またはS142で一時的に格納したオブジェクトIDの削除処理について図12を参照して説明する。図12は、撮像画像取得時の処理(削除処理)を示すシーケンス図である。図12に示す処理は、図10、図11に示す処理と並列して処理され得る。
 図12に示すように、まず、ステップS145において、固定カメラ10の通信制御部11cは、新規のデバイス情報を受信した場合に(S127/Yes)、ネットワークI/F13を介して、デバイスの情報開示属性をローカルサーバ30に問い合わせる。
 次に、ステップS148において、ローカルサーバ30の制御部31は、固定カメラ10から問い合わせがあったデバイスの情報開示属性が既知であるか否かを判断する。
 次いで、問い合わせがあったデバイスの情報開示属性が記憶部19に記憶されていなかった場合(S148/No)、ステップS151において、通信制御部31cは、クラウドサーバ38に対してデバイスの情報開示属性の問い合わせを行う。
 次に、ステップS154において、クラウドサーバ38は、ローカルサーバ30からの問い合わせに応じて、当該デバイスの情報開示属性を返送する。
 次いで、情報開示属性を受信した場合(S154)、または情報開示属性が既知であった場合(S148/Yes)、ステップS157において、ローカルサーバ30の記憶制御部31bは、デバイスIDと情報開示属性(プライバシーレベル)との紐付情報を記憶部19に記憶する。
 次に、ステップS160において、通信制御部31cは、問い合わせに対応するデバイスのプライバシーレベルを固定カメラ10に送信する。
 続いて、ステップS163において、固定カメラ10の記憶制御部11bは、受信したデバイスのプライバシーレベルに応じて、当該デバイスのデバイスIDに対応付けられたオブジェクト画像(上記S142参照)の削除制御を行う。具体的には、記憶制御部11bは、デバイスのプライバシーレベルの高低を判断する。ここで、プライバシーレベル「高」は開示不可を示し、プライバシーレベル「低」は開示可能を示す。また、プライバシーレベル「低」の場合、さらに開示対象のユーザが特定されていてもよい。具体的には、例えば開示可能なユーザのデバイスIDが特定される。
 次に、デバイスのプライバシーレベルが「高」の場合(S163/Yes)、ステップS166において、記憶制御部11bは、当該デバイスのデバイスIDに対応付けられたオブジェクト画像を記憶部19から削除するよう制御する。また、記憶制御部11bは、以降、当該オブジェクトに関わる情報は格納しないよう制御する。これにより、ユーザ3が予めプライバシーレベルを「高」に設定しておくことで、固定カメラ10に撮像された場合にユーザ自身を特定する情報(自身の撮像画像)を削除させることができる。
 一方、デバイスのプライバシーレベルが「低」の場合(S163/No)、そのデバイスに対応するオブジェクトは開示可能であるので、記憶部19に記憶したままとする。また、記憶制御部11bは、当該オブジェクトを、記憶部19に記憶してよい対象としてマークし、以降、当該オブジェクトに関わる情報を格納するよう制御する。
 以上、本実施形態による撮像画像取得時の処理について図10~図11を参照して具体的に説明した。なお、図10~図11に示す処理は、繰り返し継続的に行われ得る。また、上記S160~S163に代わって、ローカルサーバ30がプライバシーレベルの高低を判断し、「高」の場合は、固定カメラ10に対して該当オブジェクト画像の削除要求を行ってもよい。続いて、本実施形態による撮像画像閲覧時の処理について、図13を参照して説明する。
  <3-2.撮像画像閲覧時の処理>
 図13は、撮像画像閲覧時の処理を示すシーケンス図である。なおローカルサーバ30と表示装置40は、ネットワーク5およびクラウドサーバ38を介して通信を行うが、図13に示すシーケンス図ではクラウドサーバ38を省略する。
 まず、ステップS203において、表示装置40は、ローカルサーバ30に対して閲覧要求を行う。閲覧要求には、閲覧対象の画像を特定するために必要な情報が含まれており、例えば時間、場所、デバイスIDが含まれる。例えば、ユーザ3は、昨日の3時~5時に訪れた所定の観光スポットでの写真を見たい場合、これらの日時と場所情報に加えて、自身が有するデバイスのデバイスIDを、表示装置40に入力して閲覧要求を発信させる。
 次に、ステップS206において、ローカルサーバ30は、表示装置40から閲覧要求を受信する。
 次いで、ステップS209において、ローカルサーバ30の記憶制御部31bは、閲覧要求で特定されている時間・場所における背景画像301を記憶部35から抽出する。
 次に、ステップS212において、記憶制御部31bは、閲覧要求に含まれているデバイスIDを管理しているか否かを判断し、当該デバイスIDに紐付けられているオブジェクトIDが存在するかを調べる。
 次いで、該当するオブジェクトIDが存在しない場合(S212/No)、ステップS215において、通信制御部31cは、抽出した背景画像301を表示装置40に送信するよう制御する。背景画像301は、個人を識別できる情報が欠落した状態であるので、不特定多数の表示装置40に転送されても、プライバシーの問題は発生しない。
 一方、該当するオブジェクトIDが存在する場合(S212/Yes)、ステップS218において、通信制御部31cは、当該オブジェクトIDに対応するオブジェクト画像を格納している固定カメラ10に対して、再生すべき画像を特定するための情報(時間、場所、デバイスID、オブジェクトID等)を送信し、問い合わせを行う。なお、当該問い合わせは、オブジェクトIDに対応するデバイスIDのプライバシーレベルが「低」の場合に、オブジェクト画像の送信を要求する問い合わせとして行われ得る。
 次に、ステップS221において、固定カメラ10の通信制御部11cは、ローカルサーバ30からの問い合わせに含まれる情報に基づいて、記憶部19から対象のオブジェクト画像302を抽出し、ローカルサーバ30に転送する。
 続いて、ステップS224において、ローカルサーバ30の復元部31dは、固定カメラ10から受信したオブジェクト画像302を、記憶部35に記憶していた背景画像301に合成して、元の撮像画像(復元画像)を生成する。
 なお、図6に示すように、分離されたオブジェクト画像が複数ある場合、そのうち1つのオブジェクト画像が問い合わせに含まれるデバイスID等に合致したものとして送信される場合も想定される。この場合、例えばオブジェクト画像302aのみが送信され、復元部31dは、当該オブジェクト画像302aを背景画像301に合成して復元画像を生成する。したがって、他ユーザ(オブジェクト画像302b、302c)を特定できる情報は欠落したまま、該当するユーザ(オブジェクト画像302a)を特定できる情報のみが復元された画像が生成され得る。これにより、他ユーザのプライバシーの問題は発生しない。
 次いで、ステップS227において、通信制御部31cは、復元画像を表示装置40に送信する。
 そして、ステップS230において、表示装置40は、受信した復元画像を表示する。
  <<4.まとめ>>
 上述したように、本開示の実施形態によるカメラシステムでは、撮像画像に対して個人を特定できるオブジェクト(プライバシー侵害が懸念される部分)を欠落させる処理を行った上で画像を流通させることで、プライバシー侵害の防止と撮像画像の流通との両立を図ることができる。
 また、復元されて外部モニタに転送される情報(復元画像)には、デバイスIDに対応付けて登録した情報開示属性(プライバシーレベル)により公開が許された物体オブジェクトの情報のみが含まれているので、画像に写り込んだ他者のプライバシーを担保することができる。
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 例えば、上述した固定カメラ10、ローカルサーバ30に内蔵されるCPU、ROM、およびRAM等のハードウェアに、固定カメラ10、ローカルサーバ30の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
 また、分離したオブジェクトに対するオブジェクトIDの付与は、ローカルサーバ30側で行ってもよい。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
 なお、本技術は以下のような構成も取ることができる。
(1)
 撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、
 前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、
 前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、
を備える、情報処理装置。
(2)
 前記通信制御部は、さらに前記オブジェクトに対応するオブジェクトIDをサーバに転送し、
 前記記憶制御部は、前記オブジェクトIDを紐づけて、前記オブジェクトに関する情報を記憶する、前記(1)に記載の情報処理装置。
(3)
 前記情報処理装置は、無線端末と通信可能な無線通信部をさらに備え、
 前記通信制御部は、前記無線通信部により検出された無線端末のデバイスIDと、当該無線端末までの距離に関する情報とをサーバに転送する、前記(2)に記載の情報処理装置。
(4)
 前記サーバでは、デバイスID単位でプライバシーレベルを管理し、前記サーバに転送されたオブジェクトIDと前記デバイスIDが前記無線端末までの距離に応じて紐づけられ、
 前記通信制御部は、前記プライバシーレベルが高いオブジェクトIDに対応するオブジェクトを復元可能な情報を記憶している情報処理装置として、前記サーバから当該オブジェクトを復元可能な情報の削除要求を受信し、
 前記記憶制御部は、前記削除要求に応じて、当該オブジェクトを復元可能な情報を前記記憶部から削除する、前記(3)に記載の情報処理装置。
(5)
 前記通信制御部は、前記サーバから受信したオブジェクトIDを含む閲覧要求に応じて前記記憶部から読み出された当該オブジェクトIDに対応するオブジェクトを復元可能な情報を、前記サーバに転送する、前記(3)に記載の情報処理装置。
(6)
 撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信する通信制御部と、
 前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶する記憶制御部と、
を備え、
 前記通信制御部は、前記オブジェクトIDを前記外部装置に返信するよう制御する、情報処理装置。
(7)
 前記通信制御部は、前記外部装置が周辺の無線端末から検出した当該無線端末のデバイスIDを受信し、
 前記情報処理装置は、
 前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDと前記デバイスIDとを紐づける紐付部をさらに備える、前記(6)に記載の情報処理装置。
(8)
 前記通信制御部は、前記外部装置が周辺の無線端末から受信した当該無線端末のデバイスIDと、前記外部装置と前記無線端末間の距離に関する情報を受信し、
 前記紐付部は、前記画像データ内の前記個人を特定できるオブジェクトに対応する領域と前記外部装置間の距離を示す第1の距離と、前記外部装置と前記無線端末間の距離に関する情報から推定される第2の距離とを比較して、前記オブジェクトIDと前記デバイスIDとを紐づける、前記(7)に記載の情報処理装置。
(9)
 前記デバイスIDには、プライバシーレベルが設定され、
 前記紐付部は、デバイスIDに基づいて、前記オブジェクトIDのプライバシーレベルを設定する、前記(8)に記載の情報処理装置。
(10)
 前記通信制御部は、前記プライバシーレベルが高い場合、前記オブジェクトIDに対応する外部装置に対して削除要求を送信する、前記(9)に記載の情報処理装置。
(11)
 前記通信制御部は、外部から閲覧要求として、閲覧対象の時刻、前記外部装置を特定可能な情報、およびデバイスIDを受信し、
 前記記憶制御部は、当該外部装置を特定可能な情報によって特定された外部装置から受信した、個人を特定できるオブジェクトに関する情報を欠落させた画像データのうち、前記閲覧対象の時刻に対応する画像データを前記記憶部から抽出し、
 前記通信制御部は、前記デバイスIDに紐付けられている前記オブジェクトIDに設定された前記プライバシーレベルが低いとき、前記オブジェクトIDに対応するオブジェクトを復元可能な情報を要求する要求情報を送信するとともに、前記要求情報に対応して返信されたオブジェクトを復元可能な情報を受信し、
 前記情報処理装置は、
 前記記憶部から抽出した画像データと、前記受信したオブジェクトを復元可能な情報とに基づいて、個人を特定できる情報を含む元画像データを復元する復元部をさらに備え、
 前記通信制御部は、前記閲覧要求元に、前記復元部により復元された元画像データを送信する、前記(9)に記載の情報処理装置。
(12)
 コンピュータを、
 撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、
 前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、
 前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、
として機能させるためのプログラムを記憶した、記憶媒体。
(13)
 撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信することと、
 前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶することと、
 前記オブジェクトIDを前記外部装置に返信するよう制御すること、
を含む、制御方法。
 2  スマートフォン
 3  ユーザ
 5  ネットワーク
 10、10A~10C  固定カメラ
 11  制御部
 11a  オブジェクト検出部
 11b  記憶制御部
 11c  通信制御部
 13  ネットワークI/F
 15  無線通信部
 17  撮像部
 19  記憶部
 30  ローカルサーバ
 31  制御部
 31a  紐付部
 31b  記憶制御部
 31c  通信制御部
 31d  復元部
 33  ネットワークI/F
 35  記憶部
 38  クラウドサーバ
 40  表示装置
 41  PC
 42  タブレット端末
 300  撮像画像
 302  オブジェクト画像
 310  オブジェクト
 320  シルエット(影オブジェクト)

Claims (13)

  1.  撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、
     前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、
     前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、
    を備える、情報処理装置。
  2.  前記通信制御部は、さらに前記オブジェクトに対応するオブジェクトIDをサーバに転送し、
     前記記憶制御部は、前記オブジェクトIDを紐づけて、前記オブジェクトに関する情報を記憶する、請求項1に記載の情報処理装置。
  3.  前記情報処理装置は、無線端末と通信可能な無線通信部をさらに備え、
     前記通信制御部は、前記無線通信部により検出された無線端末のデバイスIDと、当該無線端末までの距離に関する情報とをサーバに転送する、請求項2に記載の情報処理装置。
  4.  前記サーバでは、デバイスID単位でプライバシーレベルを管理し、前記サーバに転送されたオブジェクトIDと前記デバイスIDが前記無線端末までの距離に応じて紐づけられ、
     前記通信制御部は、前記プライバシーレベルが高いオブジェクトIDに対応するオブジェクトを復元可能な情報を記憶している情報処理装置として、前記サーバから当該オブジェクトを復元可能な情報の削除要求を受信し、
     前記記憶制御部は、前記削除要求に応じて、当該オブジェクトを復元可能な情報を前記記憶部から削除する、請求項3に記載の情報処理装置。
  5.  前記通信制御部は、前記サーバから受信したオブジェクトIDを含む閲覧要求に応じて前記記憶部から読み出された当該オブジェクトIDに対応するオブジェクトを復元可能な情報を、前記サーバに転送する、請求項3に記載の情報処理装置。
  6.  撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信する通信制御部と、
     前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶する記憶制御部と、
    を備え、
     前記通信制御部は、前記オブジェクトIDを前記外部装置に返信するよう制御する、情報処理装置。
  7.  前記通信制御部は、前記外部装置が周辺の無線端末から検出した当該無線端末のデバイスIDを受信し、
     前記情報処理装置は、
     前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDと前記デバイスIDとを紐づける紐付部をさらに備える、請求項6に記載の情報処理装置。
  8.  前記通信制御部は、前記外部装置が周辺の無線端末から受信した当該無線端末のデバイスIDと、前記外部装置と前記無線端末間の距離に関する情報を受信し、
     前記紐付部は、前記画像データ内の前記個人を特定できるオブジェクトに対応する領域と前記外部装置間の距離を示す第1の距離と、前記外部装置と前記無線端末間の距離に関する情報から推定される第2の距離とを比較して、前記オブジェクトIDと前記デバイスIDとを紐づける、請求項7に記載の情報処理装置。
  9.  前記デバイスIDには、プライバシーレベルが設定され、
     前記紐付部は、デバイスIDに基づいて、前記オブジェクトIDのプライバシーレベルを設定する、請求項8に記載の情報処理装置。
  10.  前記通信制御部は、前記プライバシーレベルが高い場合、前記オブジェクトIDに対応する外部装置に対して削除要求を送信する、請求項9に記載の情報処理装置。
  11.  前記通信制御部は、外部から閲覧要求として、閲覧対象の時刻、前記外部装置を特定可能な情報、およびデバイスIDを受信し、
     前記記憶制御部は、当該外部装置を特定可能な情報によって特定された外部装置から受信した、個人を特定できるオブジェクトに関する情報を欠落させた画像データのうち、前記閲覧対象の時刻に対応する画像データを前記記憶部から抽出し、
     前記通信制御部は、前記デバイスIDに紐付けられている前記オブジェクトIDに設定された前記プライバシーレベルが低いとき、前記オブジェクトIDに対応するオブジェクトを復元可能な情報を要求する要求情報を送信するとともに、前記要求情報に対応して返信されたオブジェクトを復元可能な情報を受信し、
     前記情報処理装置は、
     前記記憶部から抽出した画像データと、前記受信したオブジェクトを復元可能な情報とに基づいて、個人を特定できる情報を含む元画像データを復元する復元部をさらに備え、
     前記通信制御部は、前記閲覧要求元に、前記復元部により復元された元画像データを送信する、請求項9に記載の情報処理装置。
  12.  コンピュータを、
     撮像部により撮像された画像データから、個人を特定できるオブジェクトを検出するオブジェクト検出部と、
     前記オブジェクトを復元可能な情報を記憶部に記憶する記憶制御部と、
     前記画像データから前記個人を特定できるオブジェクトに関する情報を欠落させて生成された画像データを、サーバに転送するよう制御する通信制御部と、
    として機能させるためのプログラムを記憶した、記憶媒体。
  13.  撮像部により撮像された画像データから個人を特定できるオブジェクトに関する情報を欠落させた画像データを、外部装置から受信することと、
     前記個人を特定できるオブジェクトに対応する領域にオブジェクトIDを割り当て、前記画像データと対応付けて記憶部に記憶することと、
     前記オブジェクトIDを前記外部装置に返信するよう制御すること、
    を含む、制御方法。
PCT/JP2014/082298 2014-03-10 2014-12-05 情報処理装置、記憶媒体、および制御方法 Ceased WO2015136796A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP14885400.3A EP3119075A4 (en) 2014-03-10 2014-12-05 Information processing apparatus, storage medium and control method
US15/120,831 US10282619B2 (en) 2014-03-10 2014-12-05 Processing apparatus, storage medium, and control method
JP2016507272A JP6531341B2 (ja) 2014-03-10 2014-12-05 情報処理装置、サーバ、記憶媒体、および制御方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014046371 2014-03-10
JP2014-046371 2014-03-10

Publications (1)

Publication Number Publication Date
WO2015136796A1 true WO2015136796A1 (ja) 2015-09-17

Family

ID=54071261

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/082298 Ceased WO2015136796A1 (ja) 2014-03-10 2014-12-05 情報処理装置、記憶媒体、および制御方法

Country Status (4)

Country Link
US (1) US10282619B2 (ja)
EP (1) EP3119075A4 (ja)
JP (1) JP6531341B2 (ja)
WO (1) WO2015136796A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018088035A1 (ja) * 2016-11-14 2018-05-17 オムロン株式会社 画像認識処理方法、画像認識処理プログラム、データ提供方法、データ提供システム、データ提供プログラム、記録媒体、プロセッサ、及び電子機器
JPWO2017155126A1 (ja) * 2016-03-08 2018-06-14 一般社団法人 日本画像認識協会 情報伝送システム、情報受信装置、およびコンピュータプログラム
JP2020141212A (ja) * 2019-02-27 2020-09-03 沖電気工業株式会社 画像処理システム、画像処理装置、画像処理プログラム、画像処理方法、及び表示装置
WO2020179052A1 (ja) * 2019-03-07 2020-09-10 日本電気株式会社 画像処理装置、制御方法、及びプログラム
JP2021072606A (ja) * 2019-11-01 2021-05-06 昌樹 加藤 自動匿名化カメラによる個人追尾式監視ネットワークシステム
JPWO2023112269A1 (ja) * 2021-12-16 2023-06-22
JP2024016623A (ja) * 2022-07-26 2024-02-07 トヨタ自動車株式会社 画像伝達システム、画像伝達方法
JP7531677B1 (ja) 2023-10-13 2024-08-09 セーフィー株式会社 システム、方法、及びプログラム
WO2024202445A1 (en) * 2023-03-27 2024-10-03 Yokogawa Electric Corporation Video management system, video management method, and management device

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102308763B1 (ko) * 2015-01-20 2021-10-05 삼성전자주식회사 개인 정보 데이터 보안을 강화하는 장치 및 방법
JP2021121877A (ja) * 2018-04-27 2021-08-26 ソニーグループ株式会社 情報処理装置および情報処理方法
US20190349517A1 (en) * 2018-05-10 2019-11-14 Hanwha Techwin Co., Ltd. Video capturing system and network system to support privacy mode
JP6644337B1 (ja) * 2018-09-20 2020-02-12 株式会社グラフシステム 鍵写真電子アルバム、鍵写真電子アルバム化プログラムおよび鍵写真電子アルバム化方法
JP7234718B2 (ja) * 2019-03-18 2023-03-08 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システム及びプログラム
US11430088B2 (en) * 2019-12-23 2022-08-30 Samsung Electronics Co., Ltd. Method and apparatus for data anonymization
EP3869391A1 (en) * 2020-02-20 2021-08-25 Aletheaid Limited Secure facial recognition
EP3916620A1 (en) * 2020-05-26 2021-12-01 Aletheaid Limited Mobile device-assisted facial recognition

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002281486A (ja) * 2001-03-16 2002-09-27 Dd Marketing:Kk 画像取得システム
JP2005080156A (ja) * 2003-09-03 2005-03-24 Hitachi Kokusai Electric Inc 映像監視システム
JP2006217161A (ja) * 2005-02-02 2006-08-17 Advanced Telecommunication Research Institute International 画像撮影システム
JP2009033738A (ja) * 2007-07-04 2009-02-12 Sanyo Electric Co Ltd 撮像装置、画像ファイルのデータ構造
JP2009194687A (ja) * 2008-02-15 2009-08-27 Sony Corp 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7859551B2 (en) * 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
JP3919437B2 (ja) 1999-10-08 2007-05-23 富士フイルム株式会社 画像撮影システム、画像処理システムおよびこれらを接続した画像提供システム
EP1276320B1 (de) * 2001-06-15 2015-05-27 L-1 Identity Solutions AG Verfahren zur Unkenntlichmachung und Wiederherstellung von Bildinhalten
JP4036051B2 (ja) * 2002-07-30 2008-01-23 オムロン株式会社 顔照合装置および顔照合方法
US7623675B2 (en) * 2005-09-19 2009-11-24 International Business Machines Corporation Video data management using encapsulation assets
JP5150067B2 (ja) * 2006-07-05 2013-02-20 パナソニック株式会社 監視システム、監視装置及び監視方法
JP2008160354A (ja) * 2006-12-22 2008-07-10 Matsushita Electric Ind Co Ltd 映像出力装置
US8233677B2 (en) * 2007-07-04 2012-07-31 Sanyo Electric Co., Ltd. Image sensing apparatus and image file data structure
US9582681B2 (en) * 2012-04-27 2017-02-28 Nokia Technologies Oy Method and apparatus for privacy protection in images
US8973149B2 (en) * 2013-01-14 2015-03-03 Lookout, Inc. Detection of and privacy preserving response to observation of display screen
US9110163B2 (en) * 2013-06-14 2015-08-18 Microsoft Technology Licensing, Llc Lidar-based classification of object movement
US9420168B2 (en) * 2013-09-20 2016-08-16 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
EP3183655B1 (en) * 2014-08-21 2019-02-20 Veeam Software Ag User authorization for file level restoration from image level backups

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002281486A (ja) * 2001-03-16 2002-09-27 Dd Marketing:Kk 画像取得システム
JP2005080156A (ja) * 2003-09-03 2005-03-24 Hitachi Kokusai Electric Inc 映像監視システム
JP2006217161A (ja) * 2005-02-02 2006-08-17 Advanced Telecommunication Research Institute International 画像撮影システム
JP2009033738A (ja) * 2007-07-04 2009-02-12 Sanyo Electric Co Ltd 撮像装置、画像ファイルのデータ構造
JP2009194687A (ja) * 2008-02-15 2009-08-27 Sony Corp 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3119075A4 *

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2017155126A1 (ja) * 2016-03-08 2018-06-14 一般社団法人 日本画像認識協会 情報伝送システム、情報受信装置、およびコンピュータプログラム
JP2018082234A (ja) * 2016-11-14 2018-05-24 オムロン株式会社 画像認識処理方法、画像認識処理プログラム、データ提供方法、データ提供システム、データ提供プログラム、記録媒体、プロセッサ、及び電子機器
WO2018088035A1 (ja) * 2016-11-14 2018-05-17 オムロン株式会社 画像認識処理方法、画像認識処理プログラム、データ提供方法、データ提供システム、データ提供プログラム、記録媒体、プロセッサ、及び電子機器
JP2020141212A (ja) * 2019-02-27 2020-09-03 沖電気工業株式会社 画像処理システム、画像処理装置、画像処理プログラム、画像処理方法、及び表示装置
US12094250B2 (en) 2019-03-07 2024-09-17 Nec Corporation Image processing apparatus, control method, and non-transitory storage medium
WO2020179052A1 (ja) * 2019-03-07 2020-09-10 日本電気株式会社 画像処理装置、制御方法、及びプログラム
JPWO2020179052A1 (ja) * 2019-03-07 2020-09-10
JP7211484B2 (ja) 2019-03-07 2023-01-24 日本電気株式会社 画像処理装置、制御方法、及びプログラム
JP2021072606A (ja) * 2019-11-01 2021-05-06 昌樹 加藤 自動匿名化カメラによる個人追尾式監視ネットワークシステム
JPWO2023112269A1 (ja) * 2021-12-16 2023-06-22
WO2023112269A1 (ja) * 2021-12-16 2023-06-22 日本電気株式会社 システム、サーバ装置、サーバ装置の制御方法及び記憶媒体
JP2025100673A (ja) * 2021-12-16 2025-07-03 日本電気株式会社 システム、サーバ装置、サーバ装置の制御方法及びプログラム
JP2024016623A (ja) * 2022-07-26 2024-02-07 トヨタ自動車株式会社 画像伝達システム、画像伝達方法
US12229853B2 (en) 2022-07-26 2025-02-18 Toyota Jidosha Kabushiki Kaisha Image transmission system and image transmission method
JP7775793B2 (ja) 2022-07-26 2025-11-26 トヨタ自動車株式会社 画像伝達システム、画像伝達方法
WO2024202445A1 (en) * 2023-03-27 2024-10-03 Yokogawa Electric Corporation Video management system, video management method, and management device
JP2024139624A (ja) * 2023-03-27 2024-10-09 横河電機株式会社 動画管理システム、動画管理方法、及び、管理装置
JP7697487B2 (ja) 2023-03-27 2025-06-24 横河電機株式会社 動画管理システム、動画管理方法、及び、管理装置
JP2025067642A (ja) * 2023-10-13 2025-04-24 セーフィー株式会社 システム、方法、及びプログラム
JP7531677B1 (ja) 2023-10-13 2024-08-09 セーフィー株式会社 システム、方法、及びプログラム

Also Published As

Publication number Publication date
US20160364615A1 (en) 2016-12-15
US10282619B2 (en) 2019-05-07
JPWO2015136796A1 (ja) 2017-04-06
EP3119075A1 (en) 2017-01-18
EP3119075A4 (en) 2017-11-15
JP6531341B2 (ja) 2019-06-19

Similar Documents

Publication Publication Date Title
JP6531341B2 (ja) 情報処理装置、サーバ、記憶媒体、および制御方法
WO2013182101A1 (zh) 目标人的确定方法、装置及移动终端
JP5150067B2 (ja) 監視システム、監視装置及び監視方法
KR20170023747A (ko) 사진을 공유하는 방법, 장치, 프로그램 및 기록매체
JP6192306B2 (ja) 撮像装置、管理サーバ、画像送信方法およびプログラム
JP6650936B2 (ja) カメラ制御および画像ストリーミング
WO2014180294A1 (zh) 一种设备间建立连接的方法、装置与系统
US20120041982A1 (en) Method and system for associating co-presence information with a media item
CN108064388A (zh) 人物搜寻方法、装置、终端及云端服务器
KR20190117477A (ko) 제어 장치 및 방법
CN104685861A (zh) 内容获取装置、便携装置、服务器、信息处理装置及存储介质
CN110291516A (zh) 信息处理设备、信息处理方法和程序
CN103634547A (zh) 客户端设备,服务器和存储介质
JP5782918B2 (ja) 通信端末装置、サーバ装置及びプログラム
JP2013219666A (ja) 情報共有システム、照合装置、端末装置、情報共有方法及び情報共有プログラム
JP2013077110A (ja) サーバ装置、プログラム及び通信システム
JP2015233204A (ja) 画像記録装置及び画像記録方法
JP6435640B2 (ja) 混雑度推定システム
JP2003329762A (ja) 対象物定位システム
KR101527813B1 (ko) 유아를 위한 보육 및 교육 시설에서 유아 보호를 위한 cctv 관리 단말, 그리고 cctv 정보 획득 방법
JP2020009087A (ja) 情報収集サーバ、情報収集システム、及び情報収集方法
JP5885480B2 (ja) 情報処理装置、情報処理装置の制御方法、プログラム
JP5548057B2 (ja) データ共有システム、制御方法及び制御プログラム
CN108259831B (zh) 一种摄像头及摄像头基站
JP7740497B2 (ja) 情報提供装置、情報提供方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14885400

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016507272

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15120831

Country of ref document: US

REEP Request for entry into the european phase

Ref document number: 2014885400

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014885400

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE