WO2005112438A1 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
WO2005112438A1
WO2005112438A1 PCT/JP2005/008866 JP2005008866W WO2005112438A1 WO 2005112438 A1 WO2005112438 A1 WO 2005112438A1 JP 2005008866 W JP2005008866 W JP 2005008866W WO 2005112438 A1 WO2005112438 A1 WO 2005112438A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
processing
collation
image processing
information
Prior art date
Application number
PCT/JP2005/008866
Other languages
English (en)
French (fr)
Inventor
Natsume Matsuzaki
Kaoru Yokota
Masao Nonaka
Mitsuhiro Inoue
Tohru Nakahara
Akio Higashi
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to JP2006513578A priority Critical patent/JP4795941B2/ja
Priority to EP05739130A priority patent/EP1748642A1/en
Priority to US11/579,869 priority patent/US8077980B2/en
Publication of WO2005112438A1 publication Critical patent/WO2005112438A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/00856Preventive measures
    • H04N1/00864Modifying the reproduction, e.g. outputting a modified copy of a scanned original
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00838Preventing unauthorised reproduction
    • H04N1/00856Preventive measures
    • H04N1/00864Modifying the reproduction, e.g. outputting a modified copy of a scanned original
    • H04N1/00867Modifying the reproduction, e.g. outputting a modified copy of a scanned original with additional data, e.g. by adding a warning message
    • H04N1/0087Modifying the reproduction, e.g. outputting a modified copy of a scanned original with additional data, e.g. by adding a warning message with hidden additional data, e.g. data invisible to the human eye
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00962Input arrangements for operating instructions or parameters, e.g. updating internal software
    • H04N1/00973Input arrangements for operating instructions or parameters, e.g. updating internal software from a remote device, e.g. receiving via the internet instructions input to a computer terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32144Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title embedded in the image data, i.e. enclosed or integrated in the image, e.g. watermark, super-imposed logo or stamp
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3876Recombination of partial images to recreate the original image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/44Secrecy systems
    • H04N1/4406Restricting access, e.g. according to user identity
    • H04N1/444Restricting access, e.g. according to user identity to a particular document or image or part thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/44Secrecy systems
    • H04N1/448Rendering the image unintelligible, e.g. scrambling
    • H04N1/4486Rendering the image unintelligible, e.g. scrambling using digital data encryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3242Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document of processing required or performed, e.g. for reproduction or before recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/325Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail

Definitions

  • Patent Document 3 it is possible to easily and effectively apply predetermined information for copyright protection or the like of the target information to the target information without deteriorating the target information such as electronic permeability processing.
  • An information processing device that can be embedded is disclosed.
  • the recording means when recording predetermined information for protecting the copyright of the target information with respect to the target information (captured image) generated based on the shooting operation of the user, uses a user (photographer) at the time of shooting. If the biometric information of the user is registered in advance and the relevant user information associated with the biometric information at the time of the registration is acquired, the corresponding user information is recorded as the predetermined information in the target information.
  • Patent Document 2 Japanese Patent Application Laid-Open No. 2002-182275
  • Patent Document 3 JP 2003-204427 A
  • the present invention provides an image processing apparatus, a server apparatus, an image capturing apparatus, and an image processing system capable of facilitating the handling of captured image data. It is an object to provide an image processing method and an image processing program.
  • the image processing apparatus further includes a photographing unit that photographs the subject to generate the photographed image, and writes the generated photographed image to the first image storage unit.
  • the image processing device is connected to a photographing device via a network, and the photographing device generates a photographed image by photographing a subject, and transmits the generated photographed image to a network.
  • a receiving unit that receives the captured image from the imaging device via a network via the network.
  • Writing means for writing the received photographed image into the first image storage means For writing the received photographed image into the first image storage means.
  • the image processing device receives the captured image from the imaging device via the network and writes the received image in the first image storage unit, so that the image processing device is far away from the image processing device.
  • Image processing can also be performed on a photographed image generated by the photographing device provided at the point where the collation image is included in the photographed image.
  • the image processing device is connected to a server device via a network, and the server device stores the processing command and the collation image in advance, and responds to a request from the image processing device.
  • the image processing apparatus further transmitting the processing instruction and the request for the collation image to the server device, Receiving means for receiving the processing instruction and the collation image from the server device, writing the received processing instruction in the instruction storage means, and writing the received collation image in the second image storage means Loading means.
  • the transmitting unit transmits the processing command satisfying a predetermined condition and a request for the collation image.
  • the predetermined condition is that the processing command and the collation image relate to the image processing apparatus, and the transmitting unit transmits the processing command and the request for the collation image relating to the image processing apparatus.
  • the server device stores the processing command and the collation image according to the image processing device, and transmits the processing command and the collation image.
  • the predetermined condition is that the processing command and the collation image correspond to a user identifier for identifying the image processing apparatus
  • the transmitting unit includes, as the request, the image processing apparatus.
  • the server device stores the processing command and the collation image in association with the device identifier, and the processing command and the collation command corresponding to the received device identifier. And transmits the extracted processing instruction and the collation instruction.
  • the processing command and the collation image corresponding to the device identifier for identifying the image processing device are received, the processing command and the collation image appropriate for the image processing device can be obtained reliably.
  • the predetermined condition is that the processing command and the collation image relate to a subject to be photographed, and the transmitting unit transmits the processing command and the request for the collation image relating to the subject.
  • the server device stores the processing instruction and the collation image related to the subject, and transmits the processing instruction and the collation image.
  • the predetermined condition is that the processing instruction and the collation image correspond to a tag identifier for identifying an IC tag attached to a subject.
  • the apparatus further includes an acquiring unit that acquires a tag identifier for identifying the IC tag from the IC tag attached to the subject, the transmitting unit transmits the acquired tag identifier as the request, and the server device Storing the processing instruction and the collation image in association with the tag identifier, extracting the processing instruction and the collation instruction corresponding to the received tag identifier, extracting the extracted processing instruction and the collation Send instructions.
  • the transmission unit transmits the processing command and the request for the collation image to the server device as needed.
  • the processing instruction and the collation image are received at any time, the received processing instruction and the collation image can be used at any time to determine whether the captured image contains the collation image. Image processing can be performed.
  • the transmitting unit periodically and repeatedly transmits the processing command and the request for the collation image to the server device.
  • the collation image appears in the captured image without increasing the communication amount between the server device and the image processing device.
  • Image processing can be performed in accordance with the presence or absence of the force.
  • the image processing is image overwriting processing by computer graphic processing
  • the execution unit performs computer graphic processing on a portion corresponding to the collation image.
  • a computer graphic process is performed as an image overwriting process on a portion where the collation image is captured, so that the portion can be reliably replaced with another image.
  • the execution means performs the encryption processing based on two keys which are distributed and held by the two parties.
  • the executing means performs the image processing when the determining means determines that there is no portion corresponding to the collation image in the captured image.
  • the image processing apparatus when the image processing apparatus is determined to be outside the predetermined range, it is determined whether or not a portion corresponding to the collation image exists in the captured image. In this case, the image processing can always be performed according to the comparison result. In this way, it is possible to limit the captured images output to the outside.
  • the collation image and the processing command can be reliably transmitted to the image processing apparatus via the network.
  • FIG. 4 shows an example of a data structure of control information 141 stored in information storage section 103.
  • FIG. 8 shows an example of a data structure of control information 145 stored in information storage section 103.
  • FIG. 10 shows an example of a data structure of additional information 152 stored in information storage section 103.
  • FIG. 12 shows an example of data stored in an information storage unit 204.
  • FIG. 13 is a block diagram showing a structure of a memory card 300.
  • FIG. 15 is a block diagram showing a configuration of an IC chip section 410 provided in the IC tag 400.
  • FIG. 16 shows an example of a power supply circuit included in a power supply section 404 provided in the IC chip section 410.
  • FIG. 17 is a flowchart showing the operation of the image processing system 10 when shooting an object.
  • FIG. 19 shows an example of a data structure of additional information 151a.
  • FIG. 20 shows an example of a data structure of additional information 152a.
  • FIG. 21 shows an example of a data structure of additional information 153.
  • FIG. 22 shows an example of a data structure of additional information 154.
  • FIG. 23 shows an example of a data structure of additional information 155.
  • FIG. 24 shows an example of a data structure of additional information 156.
  • FIG. 25 shows an example of a data structure of additional information 157.
  • Short-range communication control unit Short-range communication unit I / O unit
  • the image processing system 10 includes a server device 100 and a plurality of digital cameras 200a, 200b,.
  • the server device 100 and the digital cameras 200a, 200b,... are connected via the Internet 20 and the mobile phone network 30.
  • the user uses the digital camera 200a to photograph one or more various objects (also referred to as subjects).
  • An IC tag 400 communicable wirelessly using radio waves that is, a non-contact communicable IC tag 400 is attached to some of the above objects in advance.
  • the IC tag 400 holds a tag identifier for identifying the IC tag.
  • the digital camera 200a captures these objects and generates image data by a user's operation.
  • the digital camera 200a wirelessly transmits the tag identifier from the IC tag 400. get.
  • the digital camera 200a When the digital camera 200a captures an image of these objects, the digital camera 200a stores a user identifier internally stored for identifying the user and, if acquired, the tag identifier, the wireless base station. 31.
  • the server device 100 that transmits to the server device 100 via the mobile phone network 30 and the Internet 20 associates a pattern image with a user identifier for identifying the user and a tag identifier for identifying the IC tag in advance.
  • Control information and additional information are stored internally.
  • the no-turn image is image data, and the control information and the additional information each include an operation command indicating that mosaic processing, image replacement, and the like described below are to be performed on image data generated by imaging.
  • the server device 100 extracts the pattern image from the internal image, and outputs the extracted pattern image to the Internet 20. , Via the mobile phone network 30 and the wireless base station 31 to the digital camera 200a.
  • the digital camera 200a searches the image data generated by shooting for a portion that matches the received pattern image, and if there is a matching portion, requests the server device 100 for control information and additional information. In addition, the server device 100 transmits the corresponding control information or the control information and the additional information to the digital camera 200a.
  • Digital camera 200a performs processing on the generated image data according to the received control information or an operation command included in the control information and the additional information. For example, mosaic processing is performed on a part that matches the received pattern image, or the part is replaced with other image data, and the image data on which these processings have been performed is written to the memory card 300.
  • the server device 100 includes a control unit 101, a transmission / reception unit 102, and an information storage It comprises a unit 103 and is connected to the display unit 111 and the input unit 112.
  • the server device 100 is, specifically, a computer system including a microprocessor, a ROM, a RAM, a hard disk unit, a communication unit, a display unit, a keyboard, a mouse, and the like.
  • a computer program is stored in the RAM or the hard disk unit.
  • the server device 100 achieves its functions by operating according to the microprocessor power and the computer program.
  • the information storage unit 103 stores a user information table 121, pattern images 131, 132,..., Control information 141, 142,..., And additional information 151, 152,. It is stored in advance.
  • the user information table 121 includes a plurality of pieces of user information as shown in an example of the data structure in FIG.
  • One or more pieces of user information included in the user information table 121 correspond to one user.
  • Each user information includes a user identifier, one or more pattern image identifiers, and one control information identifier. Some of the user information further includes a tag identifier, and some further includes an additional information identifier.
  • the user identifier is identification information that uniquely identifies a user of each digital camera.
  • the nottern image identifier is identification information for uniquely identifying any one of the pattern images stored in the information storage unit 103.
  • the tag identifier is identification information for uniquely identifying an IC tag.
  • the IC tag will be described later.
  • the control information identifier is identification information that uniquely identifies any one of the pieces of control information stored in the information storage unit 103.
  • the additional information identifier is identification information that is stored in the information storage unit 103 and uniquely identifies any additional information.
  • Pattern images 131, 132, ... are generated by compressing image data obtained by shooting with each digital camera or a part of the image data with high efficiency according to the JPEG (Joint Photographic Experts Group) standard. Image information.
  • JPEG Joint Photographic Experts Group
  • the pattern images 131, 132, ... are image data obtained by photographing the persons ⁇ , ⁇ , ⁇ ⁇ ⁇ also from the front.
  • the pattern images 131, 132,... May be image data obtained by photographing the whole body, upper body, head, and the like of person A from the front.
  • the pattern images 131, 132, and, respectively, show the head of person A in front, 45 degrees to the left, 45 degrees to the right, side, 45 degrees in front of top, 45 degrees in front of bottom, and 45 degrees in front of bottom.
  • It may be image data obtained by shooting from.
  • the pattern images 131, 132,... May be image data obtained by imaging the structures ⁇ , ⁇ ,.
  • the structure is, for example, a building, a temple, a tower, a bridge, an aircraft, a train, a passenger car, or the like.
  • the pattern images 131, 132,... May include all of the above examples.
  • Each piece of control information is composed of a plurality of pieces of operation information, and each piece of operation information includes an execution number, an operation command, and detailed information.
  • Each control information is, specifically, a computer program, and each operation information is a computer instruction in a machine language format.
  • These machine language forms are forms that are decoded and executed by each digital camera, and each control information is used by each digital camera.
  • the contents of each control information will be described, but in order to facilitate understanding of the contents of each control information, the operation is not described using machine language instructions as shown in FIGS. Instructions and detailed information are expressed in the language normally used by humans.
  • the execution number is a number indicating the order in which the corresponding operation command is executed by each digital camera.
  • the operation instruction corresponding to the execution number "1" is executed first, and then the operation instruction corresponding to the execution number "2" is executed.
  • the operation instructions are executed in the order indicated by the execution numbers.
  • the operation instruction is an instruction for instructing an operation for each digital camera. This is information specified in association with each operation command.
  • the operation command includes, for example, a mosaic processing command, a recording command, an image replacement command, an information addition command, a frame deletion command, and the like.
  • the mosaic processing instruction is to apply the mosaic processing to all or a part of the image data obtained by shooting with the digital camera (or the image data immediately before performing the mosaic processing, that is, the image data subjected to other processing). Instruction.
  • all or a part of the captured and generated image data is divided into a plurality of rectangular (square) block areas, and one block included in the block area is divided for each block area. Is determined, and the pixel value of the determined pixel is written back to the block area as the pixel values of all other pixels included in the block area.
  • the one pixel as an example, the upper left pixel in the block area is selected.
  • the detailed information includes a condition and a size.
  • the condition indicates a condition under which the mosaic processing instruction is executed.
  • An example of the condition is “pattern image matching”.
  • the mosaic processing instruction is executed on the part in the image data. If no part corresponding to the pattern image exists in the image data, the mosaic processing instruction is not executed.
  • the pattern image is an image specified separately.
  • the condition is “match pattern image A”.
  • the mosaic processing instruction is executed on a part of the image data. If a portion that matches pattern image A does not exist in the image data, The mosaic processing instruction is not executed.
  • the pattern image A is an image specified under the above conditions.
  • the size indicates the size of the block area.
  • the sizes “5”, “4”, “3”, and “2” indicate block areas of 64 pixels ⁇ 64 pixels, 32 pixels ⁇ 32 pixels, 16 pixels ⁇ 16 pixels, and 8 pixels ⁇ 8 pixels, respectively.
  • a block area of a pixel X a pixel is formed by arranging a X a pixels in a matrix in a total of a pixels vertically and a pixels horizontally. It is.
  • the recording instruction is based on JPEG or MPEG4 (Moving Pictures Experts Group 4) for the image data obtained by shooting with the digital camera (or the immediately preceding image data, that is, the image data subjected to other processing).
  • the instruction indicates that compressed image data is generated by performing image compression, and the generated compressed image data is written into a specified storage area.
  • JPEG Joint Photographic Experts Group 4
  • MPEG4 is used when instructing to capture a moving image
  • the detailed information includes a condition and an identifier of image data.
  • Another example of the condition is "match with pattern image A".
  • the image replacement command is executed on a part of the image data. If a portion corresponding to the Notarn image A does not exist in the image data, the image replacement command is not executed.
  • the pattern image A is an image specified within the above conditions.
  • the information addition command is a command indicating that additional information is added to the compressed image data generated by the digital camera.
  • the detailed information includes an additional information identifier for identifying additional information to be added.
  • additional information will be described later.
  • the frame erasing command is a command indicating that when a plurality of frame images are obtained by photographing with a digital camera, if any one of the frame images satisfies a specified condition, the frame image is deleted.
  • the detailed information includes a condition. If the condition is satisfied, the frame is deleted
  • control information 141, 142, ⁇ ⁇ ⁇ (Specific examples of control information 141, 142, ⁇ ⁇ ⁇ )
  • the control information 141 includes a mosaic processing command and a recording command, as shown as an example in FIG.
  • the detailed information corresponding to the mosaic processing instruction includes the condition “pattern image match”, and the size of the mosaic block is “5”.
  • a memory card is specified as a recording destination.
  • control information 141 When the control information 141 is executed, if it is determined that a part in the image data obtained by photographing with the digital camera matches the pattern image, the block in the part of the image data is compared with the part in the image data. A mosaic processing instruction having a size of “5” is executed, and then the mosaiced image data S is written to the memory card.
  • the control information 142 includes an image replacement command and a recording command, as shown as an example in FIG.
  • the detailed information corresponding to the image replacement command includes the condition “pattern image match” and the CG data identifier “CG004”.
  • the recording instruction specifies the inside of the digital camera as the recording destination.
  • control information 142 When the control information 142 is executed, if it is determined that a part in the image data obtained by photographing with the digital camera matches the pattern image, the part in the image data is represented by “CG004”. The image data is replaced with the identified CG data, and a part of the image data is written into the digital camera.
  • the additional information identified by the additional information identifier “X001” is added to the image data obtained by photographing with the digital camera, and the additional information is added to the image data. Force Written inside the digital camera.
  • the control information 144 is composed of a frame erasing command and a recording command, as shown as an example in FIG.
  • the detailed information corresponding to the frame erasing command is described in the condition " Match ".
  • the recording instruction specifies the inside of the digital camera as a recording destination.
  • control information 144 When the control information 144 is executed, if a part of the plurality of frame images photographed by the digital camera matches the pattern image, the frame image is deleted. Except for erased frame images, multiple frame images are written inside the digital camera.
  • the control information 145 includes a mosaic processing command, an image replacement command, a frame deletion command, and a recording command, as shown as an example in FIG.
  • the detailed information corresponding to the mosaic processing instruction includes the condition “matches pattern image A”, and the size of the mosaic block is “4”.
  • the detailed information corresponding to the image replacement instruction includes the condition “matches pattern image B” and the replacement image identifier “G001”.
  • the detailed information corresponding to the frame erasure command includes the condition “matches pattern image C”.
  • a memory card is specified as a recording destination.
  • the control information 145 When the control information 145 is executed, if it is determined that among the plurality of frame images captured by the digital camera, the partial force pattern image A in the frame image matches the pattern image A, a part of the frame image is displayed. On the other hand, a mosaic processing instruction with a block size of “4” is executed. Next, when it is determined that a part in the frame image matches the pattern image B, the part in the frame image is replaced with a replacement image identified by “G001”. Next, if any of these frame images has a pattern image C that coincides with the pattern image C, the frame image is deleted, and then the above-described mosaic processing is performed except for the deleted frame image. Alternatively, one or a plurality of frame images subjected to image replacement processing are written to the memory card.
  • Each piece of additional information is composed of a plurality of pieces of operation information, like the control information, and each piece of operation information includes an execution number, an operation command, and detailed information.
  • Each additional information is, specifically, a computer program, and each operation information is a computer instruction in a machine language format.
  • These machine language forms are those that are decoded and executed by each digital camera, and each additional information is used by each digital camera.
  • Each operation information is the same as the operation information included in the control information, and therefore, the description is omitted.
  • the operation instructions include, for example, a mosaic instruction, an image replacement instruction, an encryption instruction, and the like.
  • the mosaic instruction is as described above.
  • the detailed information corresponding to the mosaic instruction includes the range information and the size.
  • the size is as described above.
  • the range information indicates a region in the image on which the mosaic processing is performed by the mosaic instruction. This area has a rectangular shape.
  • the upper left point of the image is the origin, the upper side of the image is the X coordinate axis, and the left side of the image is the Y coordinate axis.
  • the range information includes an X coordinate value X1 and a Y coordinate value Y1 of the upper left point of the rectangle, and an X coordinate value X2 and a Y coordinate value Y2 of the lower right point.
  • Range information ((X1, Y1) — (X2, Y2))
  • the range information is, for example,
  • each coordinate value in the range information shown in FIG. 9 is “9999”. This indicates that the area on the image to which the mosaic processing is to be performed is undetermined.
  • the region on the image is determined when the digital camera performs matching using the pattern image and detects a partial image that matches the pattern image.
  • the image replacement command is as described above.
  • the detailed information corresponding to the image replacement instruction includes, for example, range information and CG data identifier.
  • the CG data identifier is identification information for identifying CG data.
  • the range information is as described above, and indicates an area in which the CG data indicated by the CG data identifier is overwritten. Specifically, as shown in FIG. 10, the range information is, for example,
  • each coordinate value in the range information shown in FIG. 10 is “9999”, which is as described above, which indicates that the area on the image where the CG data is to be overwritten is undetermined. I have.
  • the region on the image is determined when the digital camera performs matching using the pattern image and detects a partial image that matches the pattern image.
  • the encryption command is a command indicating that the compressed image data to which the additional information has been added is subjected to an encryption process determined by an algorithm specification included in the detailed information.
  • the algorithm designation indicates an encryption algorithm used in encryption.
  • the encryption algorithm is, for example, DES (Data Encryption Standard).
  • the additional information 151 includes a mosaic processing instruction as shown as an example in FIG.
  • the detailed information corresponding to the mosaic processing instruction includes range information ((9999, 9999) -one (9999, 9999)) and size “2”.
  • the additional information 151 is stored in the server device 100. When the additional information 151 is attached to the compressed image data by the digital camera 200, the additional information 151 is overwritten with the range information as the additional information 151a shown in FIG.
  • the detailed information included in the additional information 151a includes range information ((010, 010)-(020, 020)).
  • the additional information 151a is executed by the digital camera 200
  • the compressed image data to which the additional information is added is copied
  • the compressed image data is temporarily expanded to generate image data.
  • a mosaic processing instruction with a block size of “2” is applied to the rectangular area indicated by the range information ((010, 010)-(020, 020)) included in the additional information 151a on the divided image data. Be executed.
  • the additional information 152 includes an image replacement instruction and an encryption instruction as shown as an example in FIG.
  • the detailed information corresponding to the image replacement instruction includes range information ((9999, 9999)-(9999, 9999)) and a CG data identifier “CG005”.
  • Detailed information corresponding to the encryption instruction The report contains the algorithm "DES”.
  • the additional information 152 is stored in the server device 100.
  • the caro information 152 is overwritten with the range information as the additional information 152a shown in FIG.
  • the detailed information included in the attached caro information 152a includes range information ((020, 020)-(035, 035)).
  • the compressed image data to which the additional information is added is copied, the compressed image data is temporarily expanded to generate image data.
  • CG data identified by the CG data identifier “CG005” for the rectangular area indicated by the range information ((020, 020) 1-1 (035, 035)) included in the additional information 152a CG processing is performed, and the image data subjected to the CG processing is compression-encoded to generate compressed image data, and the generated compressed image data is subjected to DES encryption. Encrypted compressed image data is generated.
  • the control unit 101 receives one user identifier from the digital camera 200a via the wireless base station 31, the mobile phone network 30, the Internet 20 and the transmitting / receiving unit 102, or receives one user identifier. And one or more tag identifiers and a request for control information.
  • the control unit 101 When only one user identifier is received, the control unit 101 attempts to read out the user information including the received user identifier from the user information table 121 stored in the information storage unit 103. If the corresponding user information does not exist in the user information table 121, the non-existence information indicating that the pattern image does not exist is transmitted to the digital camera 200a via the transmission / reception unit 102, the Internet 20, and the mobile phone network 30. Send.
  • the control unit 101 When there is one or more corresponding user information, the control unit 101 reads all the corresponding user information from the user information table 121 and temporarily stores the read user information.
  • the pattern image identifier included in the user information is extracted for all the user information stored and read out. Thus, one or more pattern image identifiers Is extracted.
  • a pattern image identified by the pattern image identifier is read from the information storage unit 103, and the read pattern image is transmitted to the transmitting / receiving unit 102, the Internet 20, and the mobile phone network 30. Via the digital camera 200a. Thus, one or more pattern images are sent
  • the control unit 101 determines from the user information table 121 stored in the information storage unit 103 the user including the received user identifier. Attempt to read information. If the corresponding user information does not exist in the user information table 121, the absence information indicating that the pattern image does not exist is transmitted via the transmission / reception unit 102, the Internet 20, and the mobile phone network 30. To the digital camera 200a.
  • the control unit 101 When there is one or more corresponding user information, the control unit 101 reads all the corresponding user information from the user information table 121, and then reads all the read user information. Received from the person information! Attempt to extract user information that includes the tag identifier of /.
  • the non-existence information indicating that the pattern image does not exist is transmitted to the digital camera 200a via the transmitting / receiving unit 102, the Internet 20, and the mobile phone network 30. Send.
  • the control unit 101 temporarily stores the user information, and then, for all extracted user information, The pattern image identifier included in the user information is extracted. Thus, one or more pattern image identifiers are extracted. Next, for all the extracted pattern image identifiers, a pattern image identified by the pattern image identifier is read from the information storage unit 103, and the read pattern image is transmitted and received by the transmission / reception unit 102, the Internet 20, and the mobile phone network 30. To the digital camera 200a via the. Thus, one or more pattern images are transmitted.
  • the control unit 101 When a request for control information is received, the control unit 101 One control information identifier included in the user information is extracted from each user information, and if the user information includes an additional information identifier, one additional information identifier is also included. Extract.
  • control unit 101 reads control information identified by the extracted control information identifier from the information storage unit 103, and reads the read control information via the transmission / reception unit 102, the Internet 20, and the mobile phone network 30, Send to digital camera 200a. Thus, one piece of control information is transmitted.
  • the control unit 101 reads the additional information identified by the extracted additional information identifier from the information storage unit 103, and transmits the read additional information to the transmitting / receiving unit 102, The data is transmitted to the digital camera 200a via the Internet 20 and the mobile phone network 30. Thus, when additional information exists, one piece of additional information is transmitted.
  • the transmission / reception unit 102 is connected to the digital camera 200 via the Internet 20 and the mobile phone network 30, and transmits and receives information between the digital camera 200a and the control unit 102.
  • Each of the digital cameras 200a, 200b,... Has the same configuration, and therefore is described here as the digital camera 200.
  • the digital camera 200 includes an LSI (Large Scale Integration) unit 218, an image display unit 205, a display unit 209, an input unit 210, an input / output unit 214, and an antenna.
  • the LSI unit 218 includes an image storage unit 201, a photographing unit 202, an image processing unit 203, an information storage unit 204, a wireless control unit 206, a wireless communication unit 207, a control unit 208, and a short circuit. It comprises a distance communication control unit 211, a short distance communication unit 212, an authentication unit 213, and an encryption unit 217.
  • the LSI unit 218 is a super-multifunctional LSI manufactured by integrating the above-described components on a single chip. Specifically, the LSI unit 218 includes a microprocessor, a ROM, a RAM, and the like. Computer system. The RAM stores a computer program. ing. By operating according to the microprocessor power and the computer program, the LSI unit 218 achieves its function.
  • the information storage unit 204 has an area for storing information, and stores a user identifier, replacement image data, and CG data in advance, as shown in FIG. Further, the compressed image data and other information are written in the information storage unit 204.
  • the user identifier is identification information for identifying a user having the digital camera 200.
  • the replacement image data is compressed image data generated according to the JPEG standard.
  • a replacement image identifier for identifying the replacement image data is added to the replacement image data.
  • the CG data includes the shape of a graphic image to be drawn on the image data, coordinate data indicating the position of the graphic in the image data, the size of the graphic, the line segments constituting the graphic, and the shape of the curve.
  • figure drawing data which is detailed information required for drawing figures, such as color and thickness, hatching instructions in closed areas, their patterns and colors, filling instructions in closed areas, their patterns and colors, etc. .
  • a CG data identifier for identifying the CG data is added to the CG data.
  • Radio control section 206 radio communication section 207 and antenna 215
  • the radio communication unit 207 amplifies a radio frequency signal received by the antenna 215, converts an output signal into an IF signal, amplifies the IF signal, demodulates the amplified IF signal into a baseband signal, and The signal modulates a high frequency signal, converts its output to a radio frequency, amplifies the radio frequency, and outputs it to the antenna 215.
  • Radio control section 206 generates a baseband signal and outputs it to radio communication section 207, and receives a baseband signal from radio communication section 207.
  • the wireless control unit 206, the wireless communication unit 207, and the antenna 215 transmit and receive information to and from the server device 100 connected via the wireless base station 31, the mobile phone network 30, and the Internet 20. Do.
  • Short-range communication control unit 211 Short-range communication control unit 211, short-range communication unit 212, antenna 216
  • Short-range communication section 212 includes a transmission / reception section that transmits and receives signals via antenna 216, and a modulation / demodulation section that modulates and demodulates signals. Processes various signals input and output between Further, the short-range communication control unit 211 establishes a communication channel for short-range wireless communication with the short-range communication control unit 211 of the IC tag 400, and thereafter performs communication via the established communication channel.
  • short-range communication control unit 211 in response to the read instruction from control unit 208, short-range communication control unit 211, short-range communication unit 212, and antenna 216 acquire the tag identifier from IC tag 400, and replace the acquired tag identifier with the tag identifier. Output to control unit 208.
  • the input / output unit 214 writes information to the memory card 300 or reads information from the memory card 300 under the control of the control unit 208.
  • the authentication unit 213 performs mutual device authentication with the memory card 300 before outputting information to the memory card 300 or reading information from the memory card 300, and performs mutual device authentication. Only when this succeeds, the input / output unit 214 is permitted to input and output the subsequent information. If the mutual device authentication fails, the input / output of information to / from the memory card 300 to the input / output unit 214 is prohibited.
  • the image storage unit 201 has an area for storing information. Mainly, it stores image data generated by the photographing unit 202 and image data to be subjected to various processes by the image processing unit 203.
  • the photographing unit 202 measures a distance to an object, a plurality of combined lens groups, a lens control unit that brakes a distance between the lenses, and a distance to the lens control unit according to the measured distance.
  • AF unit that indicates the distance of the camera, a CCD that has a plurality of optical elements and outputs an electric signal generated according to the light received by each optical element through the lens group, etc.
  • the image display unit 205 displays the reduced image generated by the image processing unit 203 based on an instruction from the control unit 208.
  • the display unit 209 displays conditions for shooting the target object, the remaining number of shootable images, and other information based on instructions from the control unit 208.
  • the input unit 210 includes a shutter button for instructing shooting, a copy button for instructing copying of the compressed image data stored in the information storage unit 204, and other buttons.
  • the corresponding instruction information is output to control section 208.
  • the input unit 210 respectively issues an instruction to shoot a target object and a compression command stored in the information storage unit 204.
  • a data identifier for identifying the image data, an instruction to copy the compressed image data, and other instructions are output to the control unit 208.
  • the control unit 208 receives, from the input unit 210, an instruction to shoot a target object, a data identifier for identifying the compressed image data stored in the information storage unit 204, an instruction to copy the compressed image data, and other instructions.
  • the control unit 208 Upon receiving the instruction to shoot the object, the control unit 208 outputs an instruction to shoot the object to the imaging unit 202, and sends the tag identifier to the short-range communication control unit 211.
  • a read instruction to read is output.
  • a user identifier is read from the information storage unit 204.
  • the read tag identifier is received.
  • control unit 208 transmits the read user identifier to the server device 100 via the wireless control unit 206, the wireless communication unit 207, the antenna 215, the wireless base station 31, the mobile phone network 30, and the Internet 20. Send to
  • control unit 208 transmits the server device 10 via the wireless control unit 206, the wireless communication unit 207, the antenna 215, the wireless base station 31, the mobile phone network 30, and the Internet 20. 0, or when receiving information from the server device 100 via the Internet 20, the mobile phone network 30, the wireless base station 31, the antenna 215, the wireless communication unit 207, and the wireless control unit 206. Simply states that the control unit 208 transmits information to the server device 100 via a network, or the control unit 208 receives information from the server device 100 via a network. .
  • control unit 208 transmits the received tag identifier to the server device 100 via the network.
  • control unit 208 receives the absence information or one or more pattern images from the server device 100 via the network, and temporarily stores the received absence information or the received pattern image therein. I do.
  • control unit 208 issues a compression encoding instruction to the image processing unit 203 to indicate that the image data obtained by the imaging by the imaging unit 202 is to be compression encoded. And instructs the input / output unit 214 to write the generated compressed image data to the memory card 300.
  • control unit 208 sends to the image processing unit 203 an image data obtained by capturing a portion corresponding to the received pattern image. It outputs a matching instruction indicating that matching is performed on whether or not there is a matching part in the image, and receives a matching result indicating whether or not a matching part exists from the image processing unit 203.
  • control unit 208 sends the image data obtained by the photographing by the photographing unit 202 to the image processing unit 203 using a compression code. And instructs the input / output unit 214 to write the generated compressed image data to the memory card 300.
  • the control unit 208 transmits a request for control information to the server device 100 via the network, and transmits the request from the server device 100 to the network.
  • One piece of control information, or one piece of control information and one piece of additional information is received, and the received control information, or the received control information and the received additional information are temporarily stored therein. I do.
  • the control unit 208 sorts the operation information included in the received control information in the order of the execution numbers included in the operation information. Therefore, the read operation information is analyzed to extract the operation instruction and the detailed information, and it is determined whether the extracted operation instruction is mosaic processing, image replacement, information addition, frame deletion, or recording.
  • the control unit 208 sets the mosaic processing instruction and the image that indicate the mosaic processing, the image replacement, or the frame deletion, respectively.
  • a replacement instruction or a frame deletion instruction is output to the image processing unit 203.
  • the detailed information included in the extracted operation command is also output to the image processing unit 203.
  • the control unit 208 extracts the detailed information power condition and the additional information identifier extracted corresponding to the information addition instruction, and the current situation matches the extracted condition. It is determined whether or not the force is applied.
  • the current situation is, for example, the result of the above-mentioned matching processing by the image processing unit 203, and the extracted conditions are, for example, "pattern" as shown in FIG. If the matching result received from the image processing unit 203 indicates that there is no matching part, the following additional information is added to the compressed image data. Don't do it.
  • the additional information identified by the extracted additional information identifier among the received additional information Is selected is read from the information storage unit 204.
  • This range information is written into the information storage unit 204 by the image processing unit 203, as described later, and indicates the position of the partial image that matches the pattern image on the image generated by shooting. This is coordinate information.
  • the read range information is overwritten with the range information included in the detailed information in the selected additional information.
  • FIGS. The additional information 151a shown in FIG. Contains range information ((010, 010)-(020, 020)).
  • This range information is coordinate information indicating the position of the partial image that matches the pattern image on the image generated by shooting, where (010, 010) is the upper left point, and (020, 020) is the right. Show the rectangular area to be the lower point!
  • This range information is coordinate information indicating the position of a partial image that matches the pattern image on the image generated by shooting, where (020, 020) is the upper left point, and (035, 035) is the right Show the rectangular area to be the lower point!
  • the image processing unit 203 compresses and encodes the image data stored in the image storage unit 201. Is output. As a result, the compressed image data is written into the information storage unit 204.
  • the control unit 208 writes the compressed image data written in the information storage unit 204 with the additional information in which the range information is overwritten. Further, the control unit 208 instructs the input / output unit 214 to write the compressed image data (to which the additional information is added) stored in the information storage unit 204 to the memory card 300.
  • the image data stored in the image storage unit 201 is compression-encoded to the image processing unit 203, and the generated compressed image data is stored in the information storage unit. Instruct section 204 to write. As a result, the compressed image data is written into the information storage unit 204.
  • the control unit 208 adds the selected additional information to the compressed image data written in the information storage unit 204 and writes the compressed image data.
  • the control unit 208 When it is determined that the extracted operation command is a record, that is, when it is determined that no information addition command exists in the control information before the operation command, the control unit 208 If the extracted detailed information is a “memory card”, a compression coding instruction indicating that the image data stored in the image storage unit 201 is to be compression-coded is output to the image processing unit 203 and input. The output unit 214 is instructed to write the compressed image data stored in the information storage unit 204 to the memory card 300. The extracted detailed information is When it is inside the digital camera, the image processing unit 203 is instructed to compress and encode the image data stored in the image storage unit 201 and write the generated compressed image data to the information storage unit 204.
  • the control unit 208 repeatedly reads, analyzes, and executes all the operation information included in the control information in the order of the execution numbers included in the operation information.
  • the control unit 208 Upon receiving the data identifier for identifying the compressed image data and the copy instruction, the control unit 208 reads the user identifier from the information storage unit 204. Next, the compressed image data identified by the received data identifier is selected from the information storage unit 204, and additional information added to the compressed image data is extracted from the selected compressed image data.
  • control unit 208 analyzes the extracted additional information, extracts each piece of operation information, further extracts an operation command and detailed information from each piece of the extracted pieces of operation information, and reads out the extracted detailed information. Determine whether or not the force includes a determination as to whether or not the pattern image coincides with the deviation.If the determination is included as a condition in the extracted detailed information, the control unit 208 controls the network via the network. The user identifier is transmitted to the server device 100. Next, one of the absence information and one or more pattern images is received from the server device 100 via the network.
  • the control unit 208 instructs the image processing unit 203 to match a part matching the received pattern image. Outputs a matching instruction indicating that matching is performed in the image data obtained by shooting, and receives a matching result indicating whether there is a matching part from the image processing unit 203.
  • control unit 208 analyzes the additional information to extract each operation information, analyzes the extracted operation information according to the order of the execution numbers included in each operation information, and executes the operation instruction and details.
  • the information is extracted, and the extracted operation command power is determined to be one of mosaic processing, image replacement, and encryption.
  • control unit 208 sends the received data identifier to the image processing unit 203, A decompression instruction indicating that the compressed image data identified by the data identifier is decompressed is output. As a result, the image data obtained by expanding the compressed image data is written into the image storage unit 201 by the image processing unit 203.
  • the control unit 208 transmits the mosaic processing instruction and the image replacement instruction indicating the mosaic processing and the image replacement, respectively, to the image processing unit. Output to 203. At this time, the detailed information included in the extracted operation command is also output to the image processing unit 203. As a result, the image data subjected to the mosaic processing or the Z and image replacement is stored in the image storage unit 201.
  • the control unit 208 sends the image data stored in the image storage unit 201 to the image processing unit 203 using compression coding. It outputs a compression encoding instruction indicating that the compressed image data is to be written, and instructs the input / output unit 214 to write the compressed image data stored in the information storage unit 204 to the memory card 300.
  • the image processing unit 203 is instructed to perform a compression encoding instruction to compress and encode the image data stored in the image storage unit 201. Output.
  • the information storage unit 204 stores the compressed image data.
  • the control unit 208 outputs the data identifier and an encryption instruction indicating encryption to the encryption unit 217.
  • the information storage unit 204 stores the encrypted compressed image data.
  • the input / output unit 214 is instructed to write the encrypted image data stored in the information storage unit 204 to the memory card 300.
  • control unit 208 Upon receiving another instruction, control unit 208 performs other processing corresponding to the received other instruction.
  • the image processing unit 203 receives a compression encoding instruction, a decompression instruction, a matching instruction, a mosaic processing instruction, an image replacement instruction, and a frame deletion instruction from the control unit 208. Further, detailed information may be received from the control unit 208 together with each instruction. Further, a data identifier for identifying compressed image data and a system identifier indicating a compression encoding system may be received from the control unit 208 in some cases. [0123] (Compression encoding)
  • the image processing unit 203 Upon receiving the compression encoding instruction, the image processing unit 203 performs compression encoding on the image data stored in the image storage unit 201 in accordance with the specified compression encoding method, and generates compressed image data. Then, the generated compressed image data is written to the information storage unit 204.
  • the specified compression coding method is specified by JPEG or specified by MPEG4.
  • the designation of the compression encoding method is instructed by the user before shooting of the target object.
  • JPEG is specified
  • the shooting of moving image is specified.
  • MPEG4 is specified.
  • the image processing unit 203 Upon receiving the decompression instruction, the image processing unit 203 further receives a data identifier for identifying the compressed image data from the control unit 208. Next, the compressed image data identified by the received data identifier is read from the information storage unit 204, and the header part included in the read compressed image data is analyzed to be used when the compressed image data is generated. Acquire a scheme identifier indicating the compression encoding scheme.
  • the image processing unit 203 performs decompression decoding on the read compressed image data to generate image data, and generates the generated image data. Is written to the image storage unit 201.
  • control unit 208 Upon receiving the matching instruction, the control unit 208 further receives a pattern image from the control unit 208, and determines whether or not a portion corresponding to the received pattern image exists in the image data stored in the image storage unit 201. The matching is performed as described below, and then the matching result indicating whether or not the matching portion exists is temporarily stored internally, and the matching result is output to the control unit 208.
  • the image processing unit 203 performs the matching as described below.
  • Step a The image data stored in the image storage unit 201 is represented by S, and a partial image having the same size as the pattern image is selected in the image data S. First, the selection is performed such that the upper left point of the partial image matches the upper left point of the image.
  • the pattern image is represented by P
  • the value of the pixel in the pattern image P is represented by P [i]. i is information indicating the position of a pixel in the pattern image P, and l ⁇ i ⁇ n. n is the number of pixels in the pattern image P.
  • the partial image is represented by B (j), and the value of the pixel in the partial image B (j) is represented by B (j) [i].
  • j is information indicating the position of a partial image in the image data S stored in the image storage unit 201, and l ⁇ j ⁇ m.
  • i is information indicating the position of a pixel in the partial image B (j).
  • Step b The absolute value of the difference between the values of all the pixels included in the pattern image P and the values of all the pixels present at the positions corresponding to the respective pixels in the partial image B (j) Calculate the sum Sum (j).
  • step e If the condition is satisfied, proceed to step e.
  • step d If the condition is not satisfied, proceed to step d.
  • Step d In the image data S, the partial image is shifted from left to right or from top to bottom by one pixel, and a new partial image is selected.
  • the image processing unit 203 Since the partial image existing at the position indicated by X obtained in this way can be assumed to be an image that matches the pattern image, the image processing unit 203 firstly stores the position information X indicating the position of the partial image that matches the pattern image. To memorize.
  • the image processing unit 203 sets the X coordinate value XI and the Y coordinate value Yl of the upper left point of the partial image on the image data. , And the X coordinate value ⁇ 2 and ⁇ coordinate value ⁇ 2 of the lower right point.
  • the X coordinate value XI and ⁇ coordinate value Y1 of the upper left point and the X coordinate value ⁇ 2 and ⁇ coordinate value ⁇ 2 of the lower right point constitute range information.
  • Range information (( ⁇ 1, ⁇ 1) — ( ⁇ 2, ⁇ 2))
  • the image processing unit 203 writes the range information into the information storage unit 204.
  • the image processing unit 203 Upon receiving the mosaic processing instruction, the image processing unit 203 further receives the detailed information, and extracts the condition and size of the received detailed information power.
  • the conditions and size are as described above.
  • the image processing unit 203 determines whether or not the current situation is a force that matches the extracted condition, and if it matches, the mosaic processing described below is performed based on the extracted size. I do. If they do not match, the mosaic processing is not performed.
  • condition is a pattern image match.
  • the image processing unit 203 indicates that there is a part that matches the matching result power temporarily stored, the above condition is satisfied. Matches.
  • the matching result indicates that there is no matching part, the condition is not met.
  • the image processing unit 203 performs mosaic processing as described below.
  • Position information that is temporarily stored and indicates the position of the partial image that matches the pattern image
  • the partial image indicated by x is divided into a plurality of rectangular (square) block areas, one pixel included in the block area is determined for each block area, and the pixel value of the determined pixel is calculated as the corresponding pixel value. Write back to the block area as pixel values of all other pixels included in the block area.
  • the image processing unit 203 Upon receiving the image replacement instruction, the image processing unit 203 further receives detailed information and extracts a condition and a replacement image identifier or a condition and a CG data identifier from the received detailed information.
  • the condition, replacement image identifier and CG data identifier are as described above.
  • the image processing unit 203 determines whether or not the current situation is a force that matches the extracted condition, and if so, performs the following image replacement based on the extracted size. . If they do not match, image replacement is not performed.
  • the image processing unit 203 performs image replacement as follows.
  • the replacement image data or the CG data identified by the replacement image identifier or the CG data identifier extracted from the information storage unit 204 is read.
  • the partial image that is temporarily stored and indicated by the position information X indicating the position of the partial image that matches the pattern image is replaced with the read replacement image data, or Draw a graphic image based on the read CG data on the indicated partial image.
  • the image processing unit 203 Upon receiving the frame erasure instruction, the image processing unit 203 further receives the detailed information, and extracts the condition for the received detailed information power.
  • the conditions are as described above.
  • the image processing unit 203 determines whether the current situation is a force that matches the extracted condition, and if so, deletes the frame image that matches the condition. If they do not match, do not delete the frame image.
  • the encryption unit 217 receives, from the control unit 208, a data identifier for identifying an encryption target and an encryption instruction indicating encryption. Upon receiving the encryption instruction, the compressed image data identified by the data identifier is read from the information storage unit 204, and the read compressed image data is subjected to an encryption algorithm to generate encrypted compressed image data. Then, the generated encrypted compressed image data is written to the information storage unit 204.
  • the encryption algorithm is based on DES, for example.
  • the memory card 300 includes an input / output unit 301, an authentication unit 302, an information storage unit 303, and a control unit 304.
  • Control unit 304 (1) Control unit 304
  • the control unit 304 is specifically composed of a microprocessor, a ROM, a RAM, and the like, and a computer program is stored in the ROM. By operating in accordance with the computer program described above, the control unit 304 achieves its function.
  • the information storage unit 303 is specifically configured by a large-capacity flash memory. As shown in FIG. 13, for example, the information storage unit 303 stores compressed image data 311.
  • the compressed image data 311 is identified by the data identifier “F001”.
  • the authentication section 302 When the memory card 300 is attached to the digital camera 200, the authentication section 302 performs challenge-response mutual device authentication with the authentication section 213 of the digital camera 200.
  • authentication section 302 receives authentication by authentication section 213. Next, the authentication unit 302 performs authentication of the authentication unit 213.
  • the authentication unit 302 permits the input / output unit 301 to output information to the digital camera 200 and receive information from the digital camera 200 when the authentication of both is successful. If both authentications fail, data input / output to the input / output unit 301 is prohibited.
  • the IC tag 400 has an IC chip portion 410 and an antenna portion 401 enclosed in a resin formed in a plate shape having a length of 30 mm, a width of 5 mm, and a thickness of 0.5 mm. It is formed.
  • the communication range of the IC tag 400 is within about lm, and the communication speed is 1Mbps.
  • the IC chip unit 410 includes a demodulation unit 402, a modulation unit 403, a power supply unit 404, a control unit 405, an identification code storage unit 406, an input / output unit 407, and a memory unit 408.
  • the dimensions of the IC chip section 410 are lmm in length, lmm in width, and 0.25 microns in thickness.
  • the identification code storage unit 406 stores an identification code for individually identifying the IC tag 400.
  • the identification code consists of 32 bits.
  • the manufacturer identification code (10-bit length) that identifies the manufacturer that manufactures the wireless IC tag, and if the wireless IC tag has multiple specifications and types, the specifications and types And a serial number (12-bit length), which is set to a different value for each manufacturer and type.
  • the memory unit 408 is generally composed of an EEprom (Electronically Erasable and Programmable Read unly Memory) having a storage capacity of 1 Kbyte.
  • EEprom Electrically Erasable and Programmable Read unly Memory
  • a hi-ROM may be used instead of the EEprom.
  • a hi-ROM is a type of memory that cannot be erased once data is written. By using the fuse ROM, data falsification can be prevented. Also, you may use both EEprom and Hi ROM.
  • the memory unit 408 stores information on a product or the like to which the IC tag 400 is attached. For example, the manufacturer name, product number, and date of manufacture.
  • Power supply unit 404
  • the power supply unit 404 is connected to the antenna unit 401, receives a power signal from the antenna unit 401, and stores the received power signal as a charge. In addition, power is supplied to each component of the IC tag 400.
  • FIG. 16 shows an example of a power supply circuit included in the power supply section 404.
  • the power supply circuit shown in FIG. 16 includes four diodes D1 to D4 and a battery E.
  • Diodes D1 and D2 are connected in series in the same direction
  • diodes D3 and D4 are connected in series in the same direction
  • diodes D1 and D2 and diodes D3 and D4 are connected in parallel in the same direction.
  • One end of the antenna unit 401 is connected to an intermediate point between the diodes D1 and D2
  • the other end of the antenna unit 401 is connected to an intermediate point between the diodes D3 and D4.
  • One end of the battery E is connected to the midpoint between the diodes D1 and D3, and the other end of the battery E is connected to the midpoint between the diodes D2 and D4.
  • the demodulation unit 402 receives the power signal from the antenna unit 401, selects a signal having a frequency of 2.45 GHz from the received power signal, extracts a pulse signal wave from the selected signal, and outputs the extracted pulse signal wave to the control unit. Output to 405.
  • the control unit 405 receives the pulse signal wave from the demodulation unit 402. It decodes the received pulse signal wave and extracts instructions and operands. These instructions include an identification code request instruction that requests an identification code.
  • control unit 405 Upon receiving the identification code request command, control unit 405 reads the identification code from identification code storage unit 406, and outputs the read identification code to modulation unit 403.
  • Modulating section 403 receives the identification code from control section 405, and switches the impedance of antenna section 401 in accordance with the bit (0 or 1) included in the bit string constituting the received identification code. Specifically, when each bit is “1”, the impedance is set to a first value, and when each bit is “0”, the impedance is set to a second value. As a result, the amplitude and phase of the radio wave re-emitted from the antenna unit 401 can be changed, and the change in the amplitude and phase allows information to be changed. Can be transmitted.
  • the input / output unit 407 writes information to or reads information from the memory unit 408 under the control of the control unit 405.
  • the antenna unit 401 is a receiving antenna, receives a radio wave, converts the received radio wave into a power signal, and outputs the power signal to the demodulation unit 402 and the power supply unit 404. It also reflects (re-emits) the received radio waves.
  • the antenna unit 401 holds two types of impedance that can be switched, and is switched by the modulation unit 403 as described above.
  • the control unit 208 receives an instruction to shoot an object from the input unit 210 (step S100), and reads out a user identifier from the information storage unit 204 (step S101). ).
  • the photographing unit 202 photographs the object (step S102), and the antenna 216, the short-range communication unit 212, and the short-range communication control unit 211 acquire a tag identifier from the IC tag (step S102).
  • S 103 ).
  • control unit 208 transmits the read user identifier and, if acquired, the tag identifier to the server device 100 via the network (step S104).
  • the control unit 101 reads the pattern image corresponding to the received user identifier and tag identifier from the information storage unit 103, and generates the absence information if the pattern image does not exist (step S105).
  • the read pattern image or the absence information is transmitted to the digital camera 200 via the network (step S106).
  • the control unit 208 compresses and encodes the image data obtained by the photographing by the photographing unit 202 to the image processing unit 203.
  • the image processing unit 203 outputs the compression encoding instruction indicating
  • the control unit 208 instructs the input / output unit 214 to write the generated compressed image data to the memory card 300, and the input / output unit 214 transmits the information to the information storage unit (step SI14).
  • the compressed image data is read from 204, and the read compressed image data is written to the memory card 300 (step S115).
  • the process ends.
  • the control unit 208 instructs the image processing unit 203 to find a part that matches the received pattern image.
  • the image processing unit 203 outputs a matching instruction indicating that matching exists in the image data obtained by shooting, and the image processing unit 203 performs a matching process.
  • a matching result indicating whether there is a matching part is received (step S108).
  • step S109 If the received matching result indicates that there is no matching part (step S109), the image processing unit 203 generates compressed image data (step S114), and the input / output unit 214 The compressed image data is written to the memory card 300 (Step S115). This ends the process.
  • step S109 If the received matching result indicates that a matching part exists (step S109), the control unit 208 transmits a request for control information to the server 100 via the network (step S109). (S110), the control unit 101 also reads out the corresponding control information from the information storage unit 103, and reads out the additional information if the corresponding additional information exists (step S11 1). Or one piece of control information and one piece of additional information are transmitted to the digital camera 200 (step S112).
  • Control unit 208 reads, analyzes, and executes the operation information included in the received control information in the order of the execution number included in the operation information. Thus, mosaic processing, image replacement, information addition, frame deletion, recording, and the like included in the read operation information are performed (step S113). Thus, the process ends.
  • control unit 208 receives a data identifier for identifying the compressed image data from input unit 210 (step (Step S201), reads out the compressed image data identified by the specified data identifier from the information storage unit 204 (Step S202), and operates according to the additional information included in the read out compressed image data (Step S203).
  • the output unit 214 writes the compressed image data into the memory card 300 (step S204).
  • the image processing system includes a server device and a digital camera connected via a network! RU
  • the server stores a pattern image, control information, and additional information corresponding to the user identifier and the tag identifier.
  • the user identifier is information for identifying the user of the digital camera
  • the tag identifier is an identification number unique to the IC tag held by the IC tag attached to the subject.
  • the no-turn image is an image to be compared, and the control information and the additional information include operation commands for various types of image processing.
  • the digital camera takes an image of a subject according to a user operation. At this time, if an IC tag is affixed to the subject, the digital camera acquires the tag identifier as well as the IC tag strength. Next, the digital camera acquires a pattern image, control information, and additional information from the server device. These pattern images, control information and additional information correspond to the user identifier and the tag identifier.
  • the digital camera determines whether or not there is a portion that matches the acquired pattern image from the image data generated by shooting, and if there is a matching portion, the operation command included in the control information.
  • the operation instruction is mosaic processing, apply mosaic processing to the corresponding part.
  • the operation command is image replacement, the matching part is replaced with a predetermined image, or the matching part is subjected to CG processing.
  • the operation command is a frame deletion, the image data is deleted.
  • the digital camera writes the processed image data in the camera or on the memory card.
  • the operation command is information addition, additional information is added to image data and written. If the image data to which the additional information has been added is copied to the outside of the camera, image processing is performed at this time according to the additional information.
  • the object registered in advance is determined from the captured video and image, A predetermined process is performed on the object.
  • the predetermined processing is, for example, mosaic processing, image replacement, and frame deletion.
  • the shot subject may go out of frame.
  • a predetermined process is performed on the entire image stream by determining whether or not a pattern image is included in the captured video or image. For example, if the partial force corresponding to the pattern image goes out of frame or is unclear, it does not match the pattern image and is deleted. In addition, for example, only a few frame images before and after the target object are left, and the remaining frame images are deleted. This makes subsequent organization easier.
  • the digital camera transmits the user identifier or the user identifier and the tag identifier to the server device, and the server device receives and receives the user identifier or the user identifier and the tag identifier.
  • the server device receives and receives the user identifier or the user identifier and the tag identifier.
  • the corresponding pattern image, control information and additional information are extracted, and the extracted pattern image, control information and additional information are transmitted to the digital camera.
  • the digital camera transmits the user identifier or the user identifier and the tag identifier to the server device, and the server device receives and receives the user identifier or the user identifier and the tag identifier.
  • the digital camera transmits a request to transmit a pattern image, control information, and additional information to a server device, and the server device transmits all stored pattern images, control information, and additional information to a digital device. It may be transmitted to the camera.
  • the server device stores the pattern image, the control information, and the additional information in association with the device identifier for identifying the digital camera.
  • the digital camera transmits the device identifier to the server device, and Extracts the pattern image, control information, and additional information corresponding to the received device identifier, and extracts the extracted pattern image, control information, and additional information. May be sent to a digital camera.
  • the digital camera internally stores image data generated by shooting without performing image matching and mosaic processing at the time of shooting, or compressed image data generated by compression-encoding the image data.
  • the digital camera communicates with the server device to acquire a pattern image and control information, and performs image matching, mosaic processing, and the like. May be performed.
  • the digital camera internally stores image data generated by shooting without performing image matching and mosaic processing at the time of shooting, or compressed image data generated by compression-coding image data.
  • the digital camera has a position detection unit based on GPS (Global Positioning System), and obtains its own current position by the position detection unit, and the digital camera uses the obtained current position to execute a predetermined operation. If the digital camera determines that the digital camera is within the domain, and determines that the digital camera has been taken out of the domain, the digital camera communicates with the server device and exchanges the Noturn image and the control information. It is also possible to acquire and perform image matching and mosaic processing.
  • GPS Global Positioning System
  • the server device stores in advance timing information indicating a point in time at which image comparison and mosaic processing are to be performed, and transmits the stored timing information to the digital camera when a user identifier is transmitted from the digital camera.
  • the digital camera may receive the timing information and perform image matching, mosaic processing, and the like in accordance with the received timing information.
  • an example of the timing information is the time of shooting. Another example is generated by shooting It is time to output the obtained image data to the outside of the digital camera. Another example is when the digital camera is also brought out of a predetermined range force.
  • the target of the image comparison and the mosaic processing may be not only the image data currently being photographed by the digital camera but also the image data photographed and stored before.
  • the digital camera transmits the image data generated by shooting to the storage server device
  • the storage server device receives and stores the image data
  • the storage server device is connected to the digital camera according to the embodiment.
  • image collation and mosaic processing are performed on the stored image data.
  • the storage server device communicates with the server device 100 to obtain the pattern image and the control information before performing the image comparison and the mosaic processing.
  • the storage server device may further have the same configuration as the server device 100, and may acquire the pattern image and the control information from inside the storage server device.
  • the image data already stored before the registration of the pattern image is Image matching and mosaic processing may be performed. In this way, the portrait right of a person or the like registered as a pattern image is protected.
  • the generated encrypted image data may be held only inside the digital camera. Further, the encrypted image data may be written together with the image data subjected to the image processing to the memory card in response to a request from the user. [0174] Further, it is also possible to generate one file that combines the image data subjected to the image processing and the generated encrypted image data, and write the generated file to the memory card! / ⁇ It is not necessary to encrypt the entirety of the image data generated by shooting, but to encrypt only the portion corresponding to the pattern image out of the image data to generate encrypted partial image data. The generated encrypted data may be stored.
  • a single file may be generated by integrating the image data subjected to the image processing and the generated encrypted partial image data, and the generated file may be written to the memory card. At this time, information indicating the position of a portion corresponding to the pattern image in the image data may be stored in the file.
  • the encryption key is divided into a high-order bit partial key and a low-order bit partial key, and two devices or two recording media of two different parties or two different organizations, respectively. It is recorded in! / ⁇ The encryption key is reproduced only when both the upper bit partial key and the lower bit partial key recorded on each device or recording medium are prepared, and only then, using this encryption key. Then, the image data is obtained by decrypting the encrypted image data.
  • the digital camera accepts input of a registration password, and stores the accepted registration password internally.
  • the digital camera requests the user to enter a password for authentication, accepts the password for authentication, and the password for registration stored internally matches the received password for authentication.
  • the digital camera can shoot the person himself.
  • the above-mentioned authentication of the individual is not limited to the password.
  • a digital camera pre-stores the fingerprint and iris characteristic information of the person in advance, requests input of the fingerprint and iris at the time of photographing, and stores the input fingerprint and iris characteristic information in advance. Authentication may be performed by comparing the feature information with the user.
  • camera identification information for identifying a digital camera is registered in the server device in advance, and the digital camera inquires at the time of shooting whether or not the digital camera is registered in the server device. Image collation and mosaic processing may not be performed. Conversely, a registered digital camera may perform image matching and mosaic processing.
  • the digital camera inquires of the server device to acquire the pattern image and the control information every time an image is captured.
  • the present invention is not limited to this.
  • all or part of all stored pattern images, control information, additional information, user information tables, and the like are periodically transmitted from the server device to the digital camera. , Receive and store them.
  • a digital camera acquires a pattern image and control information from inside without requesting information from a server device at the time of photographing, and performs image matching and mosaic processing using the acquired pattern image and control information. Do.
  • the traffic volume between the digital camera and the server device can be reduced, and the load on the server device can be reduced.
  • the digital camera may temporarily record therein image data generated by shooting, and periodically transmit the recorded image data to the server device.
  • Server device The data is received, and the received image data is recorded therein.
  • the server device acquires the pattern image and the control information from the inside, and performs image matching, mosaic processing, and the like using the acquired pattern image and the control information.
  • the digital camera may perform image matching, mosaic processing, and the like only when used in a specific location, when capturing a specific subject, or when a specific user operates.
  • the digital camera does not perform image matching, mosaic processing, and the like, generates only image data by performing photographing, and transmits the image data to the server device.
  • the server device is the same as the digital camera of the above embodiment.
  • the image data may be subjected to image matching and mosaic processing.
  • this digital camera is a live camera that shoots a subject at all times or at regular intervals, and transmits image data obtained by shooting to a server device. I do.
  • the server device may receive the image data, and perform image collation and mosaic processing on the received image data. Thereafter, the server device distributes the image data on which the mosaic processing and the like have been performed to another device such as a personal computer via a network, for example, the Internet.
  • the digital camera generates an image data by photographing a subject, transmits the image data to the server device, and the server device receives the image data and accumulates the received image data.
  • the server device is thus used for storing image data.
  • the digital camera receives the image data specified by the user by the user's operation, and performs the image matching and the mosaic processing on the received image data in the same manner as in the above embodiment. You can do it ⁇ .
  • the additional information is added to the image data.
  • the additional information may be embedded in the image data by using a digital watermark technique.
  • the pattern image is enlarged by 1.5 times the area ratio to generate an enlarged pattern image, and the image generated by shooting The data may be compared with the generated enlarged pattern image. Also, It is also possible to reduce the turn image to 0.75 times the area ratio to generate a reduced image and compare the reduced image with the screen data.
  • the comparison between the screen data and the pattern image, the comparison between the screen data and the enlarged pattern image, and the comparison between the screen data and the reduced pattern image may be performed simultaneously.
  • the enlargement ratio and the reduction ratio may be changed to different ones.
  • the comparison with the above-described enlarged pattern image and reduced pattern image may be combined. That is, even if the comparison of the screen data with the pattern image, the comparison of the screen data with the enlarged pattern image, the comparison of the screen data with the reduced pattern image, and the comparison of the screen data with the partial pattern image are performed simultaneously. Good.
  • the partial pattern image may be enlarged or reduced to generate an enlarged partial pattern image and a reduced partial pattern image, and the generated enlarged partial pattern image and reduced partial pattern image may be used for comparison.
  • the pattern image may include information indicating the position of the partial pattern image to be extracted in advance.
  • the pattern image strength is also obtained by extracting the information, a partial pattern image is specified by the extracted information, and the specified partial pattern image is used in comparison.
  • pixels may be extracted from the image data every two pixels to generate extracted image data, and pixels may be extracted from the pattern image every two pixels to generate an extracted pattern image. Further, intervals for taking out pixels may be provided.
  • the degree of matching thus obtained may be linked to the size at the time of performing the above-described mosaic processing. For example, when the degree of matching is high, the size of the mosaic processing may be increased, and when the degree of matching is low, the size of the mosaic processing may be reduced.
  • This method can also be applied when performing CG processing.
  • the first CG data including many drawing commands and the second CG data including fewer drawing commands are prepared.
  • the degree of matching is high, the first CG data is used. If the degree of coincidence is low, the CG processing may be performed using the second CG data.
  • the CG data includes drawing commands for drawing a line segment, a straight line, a circle, a point, and the like. These drawing commands overwrite the original image, and It does not include the drawing command that fills the entire area to be drawn. Thereby, the same effect as the mosaic processing can be obtained.
  • the additional information may include an instruction indicating processing such as mosaic processing, image replacement, frame erasure, etc., in association with usage control information such as the number of duplications and duplication period, or may correspond to usage control information.
  • usage control information such as the number of duplications and duplication period, or may correspond to usage control information.
  • detailed information of each process may be included.
  • the number of duplications refers to the number of times that the compressed image data stored in the information storage unit 204 is copied to the memory card 300
  • the duplication period is the compression period stored in the information storage unit 204. This is the time limit during which copying of image data to the memory card 300 is permitted.
  • the compressed image data stored in the information storage unit 204 is copied to the memory card 300.
  • the digital camera 200 performs corresponding processing on the compressed image data in accordance with the usage control information included in the additional information added to the compressed image data and the operation command indicating each processing.
  • the additional information 153 shown in FIG. 21 is an example in which the same processing is associated with different numbers of copies, and the additional information 154 shown in FIG. This is an example.
  • the additional information 155 shown in FIG. 23 is an example in which the same processing is associated with different duplication periods, and the additional information 156 shown in FIG. This is an example of being associated.
  • the additional information 157 shown in Fig. 25 is an example of the above-mentioned mixed type, in which different processing is associated with different duplication periods and duplication periods.
  • the additional information 153 to 157 is used as range information indicating a region after matching with a pattern image is performed, a partial image that matches the pattern image is detected, and a region to be processed is determined. Is overwritten.
  • range information ((9999,9999)-(9999,9999)) as shown in FIG. 9 is written in the additional information 153 to 157.
  • the additional information in which the range information ((9999,9999)-(9999,9999)) is written is stored in the server device 100.
  • the digital camera 200 acquires, from the server device 100, additional information in which range information ((9999,9999)-(9999,9999)) is written, as described in the above embodiment.
  • the range information indicating the area is overwritten on the additional information.
  • additional information 153 to 157 is obtained.
  • the additional information 153 shown in FIG. 21 includes the same processing instruction in association with three different types of duplication times.
  • the additional information 153 includes an operation command indicating a mosaic process.
  • the additional information 153 includes range information ((010,010)-(020,020) and size (1) as detailed information in association with the range of the number of times of copying (1 to 4 times). 5 to 10 times), including range information ((010,010)-(020,020) and size (3) as detailed information.
  • the range information ((000,000)-(999,999) and the size (5) are included as detailed information in association with the range (11 times or more).
  • the range information ((000,000)-(999,999)) It shows the entire range.
  • the digital camera 200 stores, in the information storage unit 204, the cumulative number of times that the compressed image data stored in the information storage unit 204 before the current time and indicating the number of times the compressed image data has been copied to the memory card 300. I remember.
  • the control unit 208 of the digital camera 200 uses the additional information 153 added to the compressed image data from the operation command and detailed information. Is read, and then the number of comparisons obtained by adding “1” to the cumulative number of times stored in the information storage unit 204 is included in the detailed information in the range of the number of times of duplication of deviation. to decide.
  • control unit 208 sends the range information ((010,010)-(020,020) >> and size (1) are output to the image processing unit 203, and the image processing unit 203 operates according to the received operation instruction, range information, and size.
  • control unit 208 transmits the range information together with the operation instruction indicating the mosaic processing.
  • control unit 208 transmits the range information together with the operation instruction indicating the mosaic processing.
  • the image processing unit 203 ((000,000)-(999,999) and the size (5) are output to the image processing unit 203, and the image processing unit 203 operates according to the received operation command, range information, and size. Since the surrounding information ((000,000)-(999,999)) indicates the entire range of the image, the image processing unit 203 performs a mosaic process with a size (5) on the entire range of the image.
  • Control unit 208 overwrites the number of comparisons with the cumulative number of times stored in information storage unit 204.
  • the additional information 154 shown in FIG. It contains three different types of processing instructions.
  • the additional information 154 includes an operation instruction indicating the mosaic processing in association with the range of the number of times of duplication (1 to 4 times), and includes range information ((010,010)-(020,020) and size) as detailed information.
  • it includes an operation instruction indicating image replacement in association with the range of the number of times of duplication (5 to 10 times), and includes range information ((010,010)-(020,020 >> and CG data) as detailed information.
  • the digital camera 200 stores the cumulative number in the information storage unit 204.
  • the control unit 208 of the digital camera 200 uses the additional information 154 added to the compressed image data to execute the operation command and detailed information. Is read, and then the number of comparisons obtained by adding “1” to the cumulative number of times stored in the information storage unit 204 is included in the detailed information in the range of the number of times of duplication of deviation. to decide.
  • the control unit 208 sends the range information ((010,010)-(020,020) together with the operation instruction indicating the mosaic processing.
  • >> and the size (3) are output to the image processing unit 203, and the image processing unit 203 operates according to the received operation instruction, range information, and size.
  • control unit 208 determines that the comparison count is included in the range of the copy count (5 to 10 times), the control unit 208 transmits the range information ((010,010)-(020,020)) together with an operation instruction indicating image replacement.
  • the CG data identifier (CG009) is output to the image processing unit 203, and the image processing unit 203 operates according to the received operation command, range information, and CG data identifier.
  • control unit 208 when determining that the number of comparisons is included in the range of the number of times of copying (11 or more times), the control unit 208 outputs an operation instruction indicating frame deletion to the image processing unit 203.
  • the image processing unit 203 operates according to the received operation command.
  • the control unit 208 overwrites the number of comparisons with the accumulated number of times stored in the information storage unit 204.
  • the additional information 155 includes an operation command indicating a mosaic process.
  • the additional information 153 includes range information ((010,010)-(020,020) and size (1) as detailed information in association with the duplication period (2005.10.01 to 2005.10.31), and the duplication period (2005.11. .01 to 2005.11.30), including range information ((010,010)-(020,020)) and size (3) as detailed information, and detailed information in association with the duplication period (2005.12.01-)
  • range information ((010,010)-(020,020)) and size (1) as detailed information in association with the duplication period (2005.12.01-)
  • range information ((010,010)-(020,020) and size (1) as detailed information in association with the duplication period (2005.10.01 to 2005.10.31), and the duplication period (2005.11. .01 to 2005.11.30), including range information ((010,010)-(020,020)) and size (3) as detailed information, and
  • the control unit 208 of the digital camera 200 acquires the current date and time and adds the current date and time to the compressed image data.
  • the operation command and the detailed information are read from the information 155, and it is determined which of the duplication periods in the detailed information includes the current date and time obtained next.
  • control unit 208 transmits the range information together with the operation instruction indicating the mosaic processing.
  • control unit 208 determines that it is included in the current date and time duplication period (2005.11.01 to 2005.11.30), the control unit 208 transmits the range information together with the operation instruction indicating the mosaic processing.
  • the control unit 208 transmits the range information ((000,000)-(999,999)) and the size together with the operation instruction indicating the mosaic processing.
  • (5) is output to the image processing unit 203, and the image processing unit 203 operates according to the received operation command, range information, and size.
  • the image processing unit 203 Since ((000,000)-(999,999) indicates the entire range of the image, the image processing unit 203 performs a mosaic process with the size (5) on the entire range of the image.
  • the additional information 156 shown in FIG. 24 includes three different types of processing instructions in association with three different types of duplication periods. Specifically, the additional information 156 includes an operation instruction indicating the mosaic processing in association with the duplication period (2005.10.01 to 2005.10.31), and includes range information as detailed information.
  • the control unit 208 of the digital camera 200 acquires the current date and time and adds the current date and time to the compressed image data.
  • the operation command and the detailed information are read from the information 156, and then it is determined which of the duplication periods in the detailed information includes the obtained current date and time.
  • control unit 208 transmits the range information together with an operation instruction indicating image replacement.
  • CG009 CG data identifier (CG009) are output to the image processing unit 203, and the image processing unit 203 operates according to the received operation command, range information, and CG data identifier. I do.
  • control unit 208 outputs an operation instruction indicating frame deletion to the image processing unit 203, and The unit 203 operates according to the received operation command.
  • the additional information 157 shown in FIG. 25 includes three different types of processing instructions in association with three different types of duplication times and duplication periods.
  • the additional information 157 includes an operation instruction indicating the mosaic processing in association with the range of the number of times of duplication (1 to 4 times), and includes range information ((010,010)-(020,020) and size information as detailed information). (3). Also includes an operation instruction indicating image replacement in association with the range of the number of times of copying (5 to 10 times), and includes range information ((010,010)-(020,020 >>) and CG data identifier (CG009) as detailed information. In addition, it includes an operation command indicating frame erasure in association with the duplication period (2005.12.01-).
  • the digital camera 200 stores the cumulative number in the information storage unit 204.
  • the control unit 208 of the digital camera 200 acquires the current date and time, and adds additional information 157 added to the compressed image data. Then, the operation instruction and the detailed information are read out, and then the number of comparisons obtained by adding “1” to the cumulative number stored in the information storage unit 204 is within the range of any of the number of duplications in the detailed information. It is determined whether it is included, and whether the obtained current date and time is included in the duplication period in the detailed information.
  • the control unit 208 sends the range information ((010,010)-(020,020) together with the operation instruction indicating the mosaic processing.
  • >> and the size (3) are output to the image processing unit 203, and the image processing unit 203 operates according to the received operation instruction, range information, and size.
  • control unit 208 determines that the comparison count is included in the range of the copy count (5 to 10 times), the control unit 208 transmits the range information ((010,010)-(020,020)) together with an operation instruction indicating image replacement.
  • the CG data identifier (CG009) is output to the image processing unit 203, and the image processing unit 203 operates according to the received operation command, range information, and CG data identifier.
  • control unit 208 when it is determined that the current date and time is included in the duplication period (2005.12.01 or later), the control unit 208 outputs an operation instruction indicating frame deletion to the image processing unit 203, The image processing unit 203 operates according to the received operation command.
  • the range information replaced with the range information respectively corresponds to the server device. 100
  • the digital camera 200 performs matching with the pattern image, detects a partial image that matches the pattern image, and determines the area to be subjected to each processing. Will be overwritten. As a result, as shown in Figs. 21 to 25, If additional information can be obtained.
  • the information overwritten in the additional information is not limited to the above range information.
  • the range of the number of duplications and the duplication period included in the additional information shown in FIGS. 21 to 25 may be overwritten by the digital camera 200 even if they are overwritten! /.
  • the duplication period (X1 to X2) , (X3 to X4) and (X5 to;).
  • X1 to X5 are character strings indicating that the respective dates are not fixed.
  • the control unit 208 of the digital camera 200 When copying the compressed image data stored in the information storage unit 204 to the memory card 300, the control unit 208 of the digital camera 200 obtains the current date and time, and then obtains , X1 to X5 are calculated.
  • control unit 208 writes the calculated date in a position corresponding to each duplication period.
  • the image replacement command is displayed on a part of the image data (or the immediately preceding image data, that is, the image data on which other processing has been performed) obtained by photographing with the digital camera. It may be an instruction to change the size or orientation of an object (ie, a person or a building). Further, the instruction may be a command for adjusting the color tone of the portion, for example, a command for changing brightness or contrast or performing two gradations.
  • control information and the additional information are computer programs, and each operation information is a computer instruction in a machine language format. Is not limited.
  • control information and the additional information may be configured as a sequence information including control information corresponding to the above-described mosaic processing, recording, image replacement, frame deletion, and the like.
  • Digital camera power The camera is installed so that the area around the entrance of an apartment building (apartment) is photographed.
  • This digital camera is provided for crime prevention, and the image data generated by this digital camera is analyzed, for example, when a crime such as theft occurs in an apartment building, and the criminal is arrested.
  • the images obtained by the digital camera also show residents of the apartment house, and such image data may violate the privacy rights of the residents of the apartment house! / There's a problem.
  • Security service providers provide camera-based security services to multiple apartment buildings.
  • the digital camera 200a is installed on the upper inside of the entrance of a certain apartment house so as to photograph the door direction of the entrance.
  • the digital camera 200a repeatedly photographs the direction of the door repeatedly, specifically, once every five seconds, and records the image data obtained by the photographing inside.
  • digital camera 200b is installed in another apartment house in the same manner as digital camera 200a, and operates in the same manner as digital camera 200a. Further, other digital cameras are similarly installed in yet another apartment house, and the server device 100 that operates similarly is installed in the office of a security service provider.
  • the information storage unit 103 of the server device 100 stores face images of all residents of all the apartment houses to which the security service provider provides the security service as pattern images 131, 132, ... I have.
  • the user identifier identifies an apartment house. In other words, users are responding to apartments.
  • the control information 141 stored in the information storage unit 103 of the server device 100 is an example. As shown in FIG. 4, it is composed of a mosaic processing instruction and a recording instruction.
  • the detailed information corresponding to the mosaic processing instruction includes the condition “pattern image match”, and the size of the mosaic block is “5”.
  • the recording instruction a memory card is specified as a recording destination.
  • control information 141 When the control information 141 is executed, if it is determined that a part of the image data obtained by photographing with the digital camera 200a matches the pattern image (that is, the face photograph of the inhabitants), the part of the image data is determined. A mosaic processing instruction with a block size of “5” is executed for the face of the inhabitant (that is, the face of the inhabitants), and then the mosaiced image data is written to the memory card.
  • the image data is recorded as it is without performing mosaic processing. In this way, it is possible to achieve both protection of the privacy rights of residents and security functions.
  • the present invention is not limited to the mosaic processing.
  • the face of the resident may be replaced by another image, or the image of the resident may be deleted and the image data may be deleted.
  • the force that the security service provider provides the above security service to a plurality of apartment houses is not limited to this.
  • the digital cameras 200a and 200b and the server device 100 are installed in one apartment house, and the image processing system 10 provides the above-described security service only for the one apartment house. It may be provided ⁇ .
  • a system LSI is a super-multifunctional LSI manufactured by integrating multiple components on a single chip.
  • a system LSI is a computer system that includes a microprocessor, ROM, RAM, etc. .
  • the RAM stores a computer program.
  • the microprocessor operates according to the computer program, the system LSI achieves its function.
  • each part of the constituent elements constituting each of the above devices may be individually integrated into one chip, or may be integrated into one chip so as to include part or all.
  • LSI is used, but depending on the degree of integration, it can also be called IC, system LSI, super LSI, or ultra LSI.
  • the method of circuit integration is not limited to LSI, but may be realized by a dedicated circuit or a general-purpose processor.
  • Programmable FPGA Field
  • a reconfigurable processor that can reconfigure the connections and settings of circuit cells inside a programmable gate array (LSI) or LSI.
  • a part or all of the constituent elements of each of the above devices may be configured as an IC card detachable to each device or a single module.
  • the IC card or the module is a computer system including a microprocessor, a ROM, a RAM, and the like.
  • the IC card or the module may include the above super multifunctional LSI.
  • the microprocessor operates according to the computer program, the IC card or the module achieves its function. This IC card or this module may have tamper resistance!
  • the present invention may be the method described above.
  • these methods are
  • the program may be a computer program realized by a computer, or may be a digital signal having the above-mentioned computer program power.
  • the present invention provides a computer-readable recording medium capable of reading the computer program or the digital signal, for example, a flexible disk, hard disk, CD-ROM, MO, DVD, DVD-ROM, DVD-RAM, BD (Blu-ray Disc), semiconductor memory, etc. Further, the present invention may be the computer program or the digital signal recorded on the recording medium.
  • the computer program or the digital signal may be transmitted via an electric communication line, a wireless or wired communication line, a network represented by the Internet, data broadcasting, or the like.
  • the present invention may be a computer system including a microprocessor and a memory, wherein the memory stores the computer program, and the microprocessor operates according to the computer program.
  • Each device constituting the image processing system of the present invention is used business-wise, repetitively, and continuously in an industry that uses image data obtained by photographing.
  • each device is used in the electrical equipment manufacturing industry for management, repetitive and continuous use by being produced and sold.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Studio Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

 撮影された後の画像データの取り扱いを容易にすることができる画像処理装置を提供する。  サーバ装置は、利用者識別子に対応して、パターン画像及び制御情報を記憶している。デジタルカメラは、被写体を撮影し、サーバ装置からパターン画像及び制御情報を取得し、撮影により生成した画像データの中から、取得したパターン画像に一致する部分があるか否かを判断し、一致する部分があれば、制御情報に含まれている操作命令に従って動作する。操作命令がモザイク処理であれば、一致する部分にモザイク処理を施す。操作命令が画像置換であれば、一致する部分を所定の画像に置き換え、又は一致する部分にCG処理を施す。操作命令がフレーム消去であれば、当該画像データを消去する。

Description

画像処理装置
技術分野
[0001] 本発明は、撮影により得られた画像に画像処理を施す画像処理技術に関する。
背景技術
[0002] CCD (Charge Coupled Device )等の固体撮像素子を用いた撮影により生成した画 像データをメモリカードに記録するデジタルカメラが広く用いられるようになってきて ヽ る。
特許文献 1によると、生成した映像の整理を容易に実現できるようなカメラを実現す ること、映像にその説明となる情報を多重化して記録するカメラを実現すること、また、 周囲の人間に知られることなく被写体の意思を伝達する機能を持つカメラを実現する こと、さらに、所望の被写体が確実に撮影範囲に入っていることを容易に確認できる カメラを実現することを目的として、映像を入力し、点滅光源による点滅パターンに対 応する識別情報を記憶し、この識別情報をもとに、入力された映像内で点滅する光 源の点滅パターンに対応する識別情報に変換し、変換された識別情報を、入力され た前記映像とともに出力する映像情報処理装置が開示されている。
[0003] また、特許文献 2によると、写真撮影の禁止又は許可の設定を簡便かつ確実に行う ことができ、更に、被写体の価値に応じた料金を課金することができる写真撮影許可 機能付きカメラを開示している。この技術によると、カメラから、個別に料金が設定さ れた被写体近傍に設けた送受信機に、暗号により特定される撮影許可信号を送信 する。送受信機から返信された撮影許可信号を受信すると、シャッター制御手段によ りシャッターが動作可能となり写真撮影が行われる。契約の際、又は撮影後に記憶手 段に記憶されたデータを基に撮影に対する料金が徴収される。こうして、事前に撮影 が許可された被写体以外の写真撮影を有効に防止する。
[0004] さらに、特許文献 3によると、電子透力 処理等の対象情報の劣化を招くことなぐ 当該対象情報の著作権保護等のための所定情報を当該対象情報に対して容易に 且つ有効に埋め込むことが可能な情報処理装置を開示して 、る。この技術によると、 記録手段は、ユーザ力もの撮影操作に基づいて生成された対象情報 (撮影画像)に 対して、対象情報の著作権保護のための所定情報を記録するにあたり、撮影時にュ 一ザ (撮影者)の生体情報を取得し、当該ユーザの生体情報が予め登録されて 、る 場合に、当該登録時に生体情報に関連付けられた該当するユーザ情報を所定情報 として対象情報に記録する。
特許文献 1:特開 2001— 320702号公報
特許文献 2 :特開 2002— 182275号公報
特許文献 3:特開 2003 - 204427号公報
発明の開示
発明が解決しょうとする課題
[0005] し力しながら、従来技術によると、生成した映像の整理が容易にできたり、写真撮影 の禁止又は許可の設定が簡便にできたり、著作権保護のための所定情報を容易に 画像に埋め込むことができるものの、撮影された人物や建物などの肖像権、セキユリ ティ、プライバシーを保護したり、撮影により生成された画像データを簡単に整理する ために、さらに多様な技術が要望されている。
[0006] 本発明は、上記のような要望に対処するために、撮影された後の画像データの取り 扱いを容易にすることができる画像処理装置、サーバ装置、画像撮影装置、画像処 理システム、画像処理方法、画像処理プログラムを提供することを目的とする。
課題を解決するための手段
[0007] 上記目的を達成するために、本発明は、照合画像との対比結果に応じて撮影画像 に画像処理を施す画像処理装置であって、撮影により生成された撮影画像を記憶し て ヽる第 1画像記憶手段と、画像処理を示す処理命令を記憶して!/、る命令記憶手段 と、予め生成された照合画像を記憶している第 2画像記憶手段と、前記撮影画像内 に前記照合画像に相当する部分が存在する力否かを判断する判断手段と、前記判 断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像処理を 施す実行手段とを備えることを特徴とする。
発明の効果 [0008] この構成〖こよると、撮影画像に照合画像が写っているカゝ否かに応じて画像処理を 施すので、利用者が撮影画像を視認することなぐ適切な画像処理を施すことができ 、撮影後の画像データの取り扱いが容易になる。
ここで、前記画像処理装置は、さらに、被写体を撮影して前記撮影画像を生成し、 生成した前記撮影画像を前記第 1画像記憶手段に書き込む撮影手段を含む。
[0009] この構成〖こよると、撮影手段を備えているので、撮影とほぼ同時に、撮影画像に照 合画像が写っている力否かに応じて画像処理を施すことができる。
ここで、前記画像処理装置は、ネットワークを介して、サーバ装置と接続されており 、前記画像処理装置は、さらに、被写体を撮影して前記撮影画像を生成する撮影手 段と、生成した前記撮影画像をネットワークを介して前記サーバ装置へ送信する送信 手段と、前記サーバ装置からネットワークを介して前記撮影画像を受信する受信手 段と、受信した前記撮影画像を前記第 1画像記憶手段に書き込む書込手段とを含み 、前記サーバ装置は、前記撮影画像を受信し、蓄積し、送信する。
[0010] この構成によると、被写体を撮影して前記撮影画像を生成し、生成した前記撮影画 像をネットワークを介してサーバ装置へ送信し、サーバ装置から前記撮影画像を受 信し、受信した前記撮影画像を前記第 1画像記憶手段に書き込むので、撮影画像を 一時的にサーバ装置に蓄積しておくことができる。これにより、画像処理装置が大容 量の記憶手段を備えていなくても、多くの撮影画像を生成することができる。
[0011] ここで、前記画像処理装置は、ネットワークを介して、撮影装置と接続されており、 前記撮影装置は、被写体を撮影して前記撮影画像を生成し、生成した前記撮影画 像をネットワークを介して、前記画像処理装置へ送信し、前記画像処理装置は、さら に、前記撮影装置から、ネットワークを介して、前記撮影画像を受信する受信手段と
、受信した前記撮影画像を前記第 1画像記憶手段に書き込む書込手段とを含む。
[0012] この構成〖こよると、前記画像処理装置は、前記撮影装置から、ネットワークを介して 、前記撮影画像を受信して前記第 1画像記憶手段に書き込むので、当該画像処理 装置から遠く離れた地点に設けられた前記撮影装置により生成された撮影画像に対 しても、撮影画像に照合画像が写っているカゝ否かに応じて画像処理を施すことがで きる。 ここで、前記画像処理装置は、ネットワークを介して、サーバ装置と接続されており 、前記サーバ装置は、あらかじめ前記処理命令及び前記照合画像を記憶しており、 前記画像処理装置からの要求に応じて、前記処理命令及び前記照合画像を、前記 画像処理装置へ送信し、前記画像処理装置は、さらに、前記サーバ装置へ、前記処 理命令及び前記照合画像の要求を送信する送信手段と、前記サーバ装置から、前 記処理命令及び前記照合画像を受信する受信手段と、受信した前記処理命令を前 記命令記憶手段に書き込み、受信した前記照合画像を前記第 2画像記憶手段に書 き込む書込手段とを含む。
[0013] この構成によると、サーバ装置から処理命令及び照合画像を受信して内部に記憶 するので、画像処理装置が大容量の記憶手段を備えていなくても、多くの処理命令 及び照合画像を利用することができる。また、サーバ装置により一元的に管理された 処理命令及び照合画像を利用することができる。
ここで、前記送信手段は、所定条件を満たす前記処理命令及び前記照合画像の 要求を送信する。
[0014] この構成によると、所定条件を満たす前記処理命令及び前記照合画像の要求をサ ーバ装置へ送信するので、所定条件を満たす処理命令及び照合画像が得られる。 ここで、前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置 の利用者に係るものであることであり、前記送信手段は、当該画像処理装置の利用 者に係る前記処理命令及び前記照合画像の要求を送信し、前記サーバ装置は、前 記利用者に係る前記処理命令及び前記照合画像を記憶しており、前記処理命令及 び前記照合画像を送信する。
[0015] この構成によると、当該画像処理装置の利用者に係る処理命令及び照合画像を受 信するので、利用者にとって適切な処理命令及び照合画像が得られる。
ここで、前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置 の利用者を識別する利用者識別子に対応するものであることであり、前記送信手段 は、前記要求として、前記利用者を識別する利用者識別子を送信し、前記サーバ装 置は、前記利用者識別子に対応付けて、前記処理命令及び前記照合画像を記憶し ており、受信した前記利用者識別子に対応する前記処理命令及び前記照合命令を 抽出し、抽出した前記処理命令及び前記照合命令を送信する。
[0016] この構成によると、当該画像処理装置の利用者を識別する利用者識別子に対応す る処理命令及び照合画像を受信するので、利用者にとって適切な処理命令及び照 合画像が確実に得られる。
ここで、前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置 に係るものであることであり、前記送信手段は、当該画像処理装置に係る前記処理 命令及び前記照合画像の要求を送信し、前記サーバ装置は、当該画像処理装置に 係る前記処理命令及び前記照合画像を記憶しており、前記処理命令及び前記照合 画像を送信する。
[0017] この構成によると、当該画像処理装置に係る処理命令及び照合画像を受信するの で、当該画像処理装置にとって適切な処理命令及び照合画像が得られる。
ここで、前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置 を識別する利用者識別子に対応するものであることであり、前記送信手段は、前記要 求として、当該画像処理装置を識別する装置識別子を送信し、前記サーバ装置は、 前記装置識別子に対応付けて、前記処理命令及び前記照合画像を記憶しており、 受信した前記装置識別子に対応する前記処理命令及び前記照合命令を抽出し、抽 出した前記処理命令及び前記照合命令を送信する。
[0018] この構成によると、当該画像処理装置を識別する装置識別子に対応する処理命令 及び照合画像を受信するので、当該画像処理装置にとって適切な処理命令及び照 合画像が確実に得られる。
ここで、前記所定条件は、前記処理命令及び前記照合画像が撮影対象の被写体 に係るものであることであり、前記送信手段は、被写体に係る前記処理命令及び前 記照合画像の要求を送信し、前記サーバ装置は、当該被写体に係る前記処理命令 及び前記照合画像を記憶しており、前記処理命令及び前記照合画像を送信する。
[0019] この構成によると、被写体に係る処理命令及び照合画像を受信するので、被写体 にとつて適切な処理命令及び照合画像が得られる。
ここで、前記所定条件は、前記処理命令及び前記照合画像が被写体に貼付された ICタグ識別するタグ識別子に対応するものであることであり、前記画像処理装置は、 さらに、被写体に貼付された ICタグから、当該 ICタグを識別するタグ識別子を取得す る取得手段を備え、前記送信手段は、前記要求として、取得した前記タグ識別子を 送信し、前記サーバ装置は、前記タグ識別子に対応付けて、前記処理命令及び前 記照合画像を記憶しており、受信した前記タグ識別子に対応する前記処理命令及び 前記照合命令を抽出し、抽出した前記処理命令及び前記照合命令を送信する。
[0020] この構成によると、被写体に貼付された ICタグを識別するタグ識別子に対応する処 理命令及び照合画像を受信するので、被写体にとって適切な処理命令及び照合画 像が確実に得られる。
ここで、前記送信手段は、前記処理命令及び前記照合画像の要求を、随時、サー バ装置へ送信する。
[0021] この構成によると、処理命令及び照合画像を随時受信するので、受信した処理命 令及び照合画像を用いて、いつでも、撮影画像に照合画像が写っているカゝ否かに応 じた画像処理を施すことができる。
ここで、前記送信手段は、前記処理命令及び前記照合画像の要求を、定期的に繰 り返し、サーバ装置へ送信する。
[0022] この構成〖こよると、処理命令及び照合画像を定期的に繰り返し受信するので、サー バ装置と当該画像処理装置との間の通信量を増やすことなぐ撮影画像に照合画像 が写っている力否かに応じた画像処理を施すことができる。
ここで、前記実行手段は、前記判断手段により、前記撮影画像内に前記照合画像 に相当する部分が存在すると判断される場合に、前記照合画像に相当する部分に 対して、前記画像処理を施す。
[0023] この構成〖こよると、撮影画像に照合画像が写っている場合に、照合画像が写ってい る部分に対して、画像処理を施すので、撮影画像を視認することなぐ当該部分に対 して適切な画像処理を施すことができる。
ここで、前記処理命令により示される画像処理は、モザイク処理であり、前記実行手 段は、前記照合画像に相当する部分に対して、モザイク処理を施す。
[0024] この構成によると、照合画像が写っている部分に対して、モザイク処理を施すので、 その部分を明確に他人に見せることがなぐその肖像権、プライバシー、セキュリティ などを保護することができる。
ここで、前記処理命令により示される画像処理は、画像上書処理であり、前記実行 手段は、前記照合画像に相当する部分に対して、画像上書処理を施す。
[0025] この構成によると、照合画像が写っている部分に対して、画像上書処理を施すので 、その部分に画像を上書きすることにより、その肖像権、プライバシー、セキュリティな どを保護することができる。
ここで、前記画像処理は、コンピュータグラフィック処理による画像上書処理であり、 前記実行手段は、前記照合画像に相当する部分に対して、コンピュータグラフィック 処理を施す。
[0026] この構成によると、照合画像が写って 、る部分に対して、画像上書処理として、コン ピュータグラフィック処理を施すので、その部分を確実に他の画像に置換することが できる。
ここで、前記画像処理は、他の画像への置き換えによる画像上書処理であり、前記 実行手段は、前記照合画像に相当する部分を、他の画像に置き換える。
[0027] この構成によると、照合画像が写って 、る部分に対して、画像上書処理として、他 の画像への置換を施すので、その部分を確実に他の画像に置換することができる。 ここで、前記処理命令により示される画像処理は、さらに、暗号化処理を含み、前記 実行手段は、さらに、前記処理命令に含まれる暗号化処理に従って、前記撮影画像 に前記暗号ィ匕処理を施して、暗号化画像を生成する。
[0028] この構成〖こよると、前記撮影画像に前記暗号ィ匕処理を施して、暗号化画像を生成 するので、元の撮影画像を安全に保存しておくことができる。
ここで、前記実行手段は、二者が分散して有する 2個の鍵に基づいて、前記暗号化 処理を施す。
この構成によると、二者が分散して有する 2個の鍵に基づいて、暗号化処理が施さ れるので、暗号ィ匕画像を正当に復号できる条件を、前記二者が分散して有する 2個 の鍵が揃う場合に、限定することができる。
[0029] ここで、前記処理命令により示される画像処理は、情報付加であり、前記実行手段 は、撮影画像に対して、画像処理を示す処理命令を含む制御情報を付加する。 この構成によると、撮影画像に対して、画像処理を示す処理命令を含む制御情報 を付加するので、撮影画面の再生、複製などの場合に、前記画像処理を施すよう〖こ することができる。こうして、撮影画像に写されたものの肖像権、プライバシー、セキュ リティなどを保護することができる。
[0030] ここで、前記実行手段は、撮影画像に対して、制御情報を電子透かしとして埋め込 むことにより、付加する。
この構成によると、制御情報は、撮影画像に電子透力しとして埋め込まれるので、 撮影画像の劣化の程度を低くしつつ、制御情報を撮影画像に埋め込むことができ、 また、撮影画像力 制御情報のみを取り除くことを困難とすることができる。
[0031] ここで、前記実行手段は、前記判断手段により、前記撮影画像内に前記照合画像 に相当する部分が存在しないと判断される場合に、前記画像処理を施す。
この構成〖こよると、撮影画像に照合画像が写っていない場合に、撮影画像に対し て、画像処理を施すので、利用者が撮影画像を視認することなぐ当該撮影画像に 対して適切な画像処理を施すことができる。
[0032] ここで、前記処理命令により示される画像処理は、画像消去であり、前記実行手段 は、前記第 1画像記憶手段に記憶されて 、る前記撮影画像を消去する。
この構成〖こよると、撮影画像に照合画像が写っていない場合に、当該撮影画像を 消去するので、不要な撮影画像を取り除くことができる。
ここで、前記画像処理装置は、さらに、被写体を撮影して前記撮影画像を生成し、 生成した前記撮影画像を前記第 1画像記憶手段に書き込む撮影手段を含み、前記 判断手段は、前記撮影手段により前記撮影画像が生成された場合に、前記判断を 行う。
[0033] この構成〖こよると、前記撮影手段により前記撮影画像が生成された場合に、撮影画 像内に照合画像に相当する部分が存在するカゝ否かを判断するので、撮影直後にお Vヽて、必ず比較結果に応じて画像処理を施すことができる。
ここで、前記画像処理装置は、さらに、前記第 1画像記憶手段に記憶されている前 記撮影画像を外部へ出力する出力手段を含み、前記判断手段は、前記出力手段に より前記撮影画像が出力される場合に、前記判断を行い、前記出力手段は、前記画 像処理が施された撮影画像を外部へ出力する。
[0034] この構成によると、撮影画像が外部へ出力される際に、撮影画像内に照合画像に 相当する部分が存在するか否かを判断するので、外部へ出力する撮影画像に対し て、必ず比較結果に応じて画像処理を施すことができる。こうして外部へ出力される 撮影画像に制限を加えることができる。
ここで、前記画像処理装置は、さらに、当該画像処理装置が存在する現在位置を 取得する位置取得手段と、取得した現在位置が、所定の範囲外にある力否かを判断 する範囲判断手段とを含み、前記判断手段は、前記範囲判断手段により前記範囲 外にあると判断される場合に、前記判断を行う。
[0035] この構成によると、当該画像処理装置が、所定の範囲外に存在すると判断される場 合に、撮影画像内に照合画像に相当する部分が存在するか否かを判断するので、こ の場合に、必ず比較結果に応じて画像処理を施すことができる。こうして外部へ出力 される撮影画像に制限を加えることができる。
また、本発明は、サーバ装置であって、予め生成された照合画像と、画像処理を示 す処理命令とを記憶して!/、る記憶手段と、ネットワークを介して接続されて 、る画像 処理装置から、前記照合画像及び処理命令の送信要求を受信する受信手段と、前 記送信要求を受信すると、前記記憶手段から前記照合画像及び処理命令を読み出 す読出手段と、読み出した前記照合画像及び処理命令を、ネットワークを介して、前 記画像処理装置へ送信する送信手段とを備える。
[0036] この構成〖こよると、ネットワークを介して、画像処理装置へ、照合画像及び処理命令 を確実に送信することができる。
ここで、前記受信手段は、所定条件を満たす前記処理命令及び前記照合画像の 要求を受信し、前記読出手段は、前記記憶手段から、前記所定条件を満たす前記 処理命令及び前記照合画像を読み出す。
[0037] この構成によると、所定条件を満たす照合画像及び処理命令を送信することができ る。
図面の簡単な説明
[0038] [図 1]本発明の 1の実施の形態としての画像処理システム 10の構成を示す。 [図 2]サーバ装置 100の構成を示すブロック図である。
[図 3]情報記憶部 103に記憶されている利用者情報テーブル 121のデータ構造の一 例を示す。
[図 4]情報記憶部 103に記憶されている制御情報 141のデータ構造の一例を示す。
[図 5]情報記憶部 103に記憶されている制御情報 142のデータ構造の一例を示す。
[図 6]情報記憶部 103に記憶されている制御情報 143のデータ構造の一例を示す。
[図 7]情報記憶部 103に記憶されている制御情報 144のデータ構造の一例を示す。
[図 8]情報記憶部 103に記憶されている制御情報 145のデータ構造の一例を示す。
[図 9]情報記憶部 103に記憶されている付加情報 151のデータ構造の一例を示す。
[図 10]情報記憶部 103に記憶されている付加情報 152のデータ構造の一例を示す。
[図 11]デジタルカメラ 200の構造を示すブロック図である。
[図 12]情報記憶部 204に記憶されているデータの一例を示す。
[図 13]メモリカード 300の構造を示すブロック図である。
[図 14]ICタグ 400の外観を示す外観図である。
[図 15]ICタグ 400が備える ICチップ部 410の構成を示すブロック図である。
[図 16]ICチップ部 410が備える電源部 404に含まれる電源回路の一例を示す。
[図 17]対象物を撮影する場合における画像処理システム 10の動作を示すフローチヤ ートである。
[図 18]生成された圧縮画像データを複製する場合における画像処理システム 10の 動作を示すフローチャートである。
[図 19]付加情報 151aのデータ構造の一例を示す。
[図 20]付加情報 152aのデータ構造の一例を示す。
[図 21]付加情報 153のデータ構造の一例を示す。
[図 22]付加情報 154のデータ構造の一例を示す。
[図 23]付加情報 155のデータ構造の一例を示す。
[図 24]付加情報 156のデータ構造の一例を示す。
[図 25]付加情報 157のデータ構造の一例を示す。
符号の説明 画像処理システム インターネット
携帯電話網
無線基地局
サーバ装置
制御部
送受信部
情報記憶部
表示部
入力部
デジタルカメラ
200b、 · · · デジタルカメラ 画像記憶部
撮影部
画像処理部
情報記憶部
画像表示部
無線制御部
無線通信部
制御部
表示部
入力部
短距離通信制御部 短距離通信部 入出力部
アンテナ
アンテナ 217 暗号化部
218 LSI部
300 メモリカード
301 入出力部
302 認証部
303 情報記憶部
304 制御部
400 ICタグ
401 アンテナ部
402 復調部
403 変調部
404 電源部
405 制御部
406 識別コード記憶部
407 入出力部
408 メモリ部
410 ICチップ部
発明を実施するための最良の形態
[0040] 1.画像処理システム 10
本発明の 1の実施の形態としての画像処理システム 10について説明する。 1. 1 画像処理システム 10の構成
画像処理システム 10は、図 1に示すように、サーバ装置 100及び複数台のデジタ ルカメラ 200a、 200b, · · ·から構成されている。サーバ装置 100とデジタルカメラ 20 0a、 200b,…とは、インターネット 20及び携帯電話網 30を介して接続されている。
[0041] 利用者は、デジタルカメラ 200aを用いて、 1個以上の様々な対象物 (被写体とも言 う)を撮影する。前記対象物のうち、一部のものには、電波を用いて無線により通信可 能な、つまり非接触で通信可能な ICタグ 400が予め貼付されている。 ICタグ 400は、 当該 ICタグを識別するタグ識別子を保持して 、る。 デジタルカメラ 200aは、利用者の操作により、これらの対象物を撮影し画像データ を生成する。撮影の際に、デジタルカメラ 200aを中心とする所定の通信可能範囲内 に、 ICタグ 400が貼付された対象物が存在すれば、デジタルカメラ 200aは、無線に より、 ICタグ 400からタグ識別子を取得する。
[0042] デジタルカメラ 200aは、これらの対象物を撮影すると、内部に保持している当該利 用者を識別する利用者識別子と、取得できた場合には前記タグ識別子とを、無線基 地局 31、携帯電話網 30及びインターネット 20を介して、サーバ装置 100へ送信する サーバ装置 100は、予め、利用者を識別する利用者識別子及び ICタグを識別する タグ識別子に対応付けて、パターン画像、制御情報及び付加情報を内部に記憶して いる。ノターン画像は、画像データであり、制御情報及び付加情報は、それぞれ、撮 影により生成された画像データに対して後述するモザイク処理、画像置換などを施す ことを示す操作命令を含む。
[0043] サーバ装置 100は、受信した利用者識別子又は利用者識別子及びタグ識別子に 対応するパターン画像が存在すれば、そのパターン画像を内部カゝら抽出し、抽出し たパターン画像を、インターネット 20、携帯電話網 30及び無線基地局 31を介して、 デジタルカメラ 200aへ送信する。
デジタルカメラ 200aは、撮影して生成した画像データ内から、受信したパターン画 像と一致する部分を探し、一致する部分が存在するなら、サーバ装置 100に対して、 制御情報及び付加情報を要求し、サーバ装置 100は、対応する制御情報又は制御 情報及び付加情報をデジタルカメラ 200aへ送信する。
[0044] デジタルカメラ 200aは、受信した制御情報又は制御情報及び付加情報に含まれる 操作命令に従って、生成した画像データに対して処理を施す。例えば、受信したパ ターン画像と一致する部分に対してモザイク処理を施し、又は前記部分を他の画像 データに置き換え、これらの処理が施された画像データをメモリカード 300へ書き込 む。
1. 2 サーバ装置 100の構成
サーバ装置 100は、図 2に示すように、制御部 101、送受信部 102及び情報記憶 部 103から構成されており、表示部 111及び入力部 112に接続されている。
[0045] サーバ装置 100は、具体的には、マイクロプロセッサ、 ROM、 RAM,ハードデイス クユニット、通信ユニット、ディスプレイユニット、キーボード、マウスなどから構成される コンピュータシステムである。前記 RAM又は前記ハードディスクユニットには、コンビ ユータプログラムが記憶されている。前記マイクロプロセッサ力 前記コンピュータプロ グラムに従って動作することにより、サーバ装置 100は、その機能を達成する。
[0046] (1)情報記憶部 103
情報記憶部 103は、図 2に示すように、利用者情報テーブル 121、パターン画像 1 31、 132、 · · ·、制御情報 141、 142、 · · ·、付加情報 151、 152、 · · ·を予め記憶して いる。
(利用者情報テーブル 121)
利用者情報テーブル 121は、図 3にそのデータ構造の一例を示すように、複数の 利用者情報を含んで構成されて 、る。
[0047] 利用者情報テーブル 121に含まれている 1個以上の利用者情報が、一人の利用者 に対応している。
各利用者情報は、利用者識別子、 1個以上のパターン画像識別子及び 1個の制御 情報識別子を含む。前記利用者情報のうちには、さらにタグ識別子を含むものがあり 、また、さらに付加情報識別子を含むものがある。
[0048] 利用者識別子は、各デジタルカメラの利用者を一意に識別する識別情報である。
ノターン画像識別子は、情報記憶部 103に記憶されているいずれかのパターン画 像を一意に識別する識別情報である。
タグ識別子は、 ICタグを一意に識別する識別情報である。 ICタグについては、後述 する。
[0049] 制御情報識別子は、情報記憶部 103に記憶されて ヽる ヽずれかの制御情報を一 意に識別する識別情報である。
付加情報識別子は、情報記憶部 103に記憶されて ヽる 、ずれかの付加情報を一 意に識別する識別情報である。
(パターン画像 131、 132、 · · ·) パターン画像 131、 132、 · · ·は、各デジタルカメラによる撮影により得られた画像 データ又はその一部の画像データが、 JPEG (Joint Photographic Experts Group )の 規格により高効率に圧縮されて生成された画像情報である。
[0050] 例えば、パターン画像 131、 132、 · · ·は、それぞれ、人物 Α、 Β、 · · ·を正面力も撮 影して得られた画像データである。
また、パターン画像 131、 132、 · · ·は、それぞれ、人物 Aの全身、上半身、頭部、 · • ·を正面カゝら撮影して得られた画像データであるとしてもょ 、。
また、パターン画像 131、 132、 · · ·は、それぞれ、人物 Aの頭部を、正面、左斜め 4 5度、右斜め 45度、側面、上斜め 45度正面、下斜め 45度正面、 · · ·から撮影して得 られた画像データであるとしてもよ 、。
[0051] また、パターン画像 131、 132、 · · ·は、それぞれ、構造物 Α、 Β、 · · ·を正面力も撮 影して得られた画像データであるとしてもよい。ここで、構造物は、例えば、ビルデイン グ、寺院、タワー、橋、航空機、列車、乗用車などである。
また、パターン画像 131、 132、 · · ·は、上記の例を全て含むとしてもよい。
(制御情報 141、 142、 · · ·)
各制御情報は、複数の操作情報から構成されており、各操作情報は、実行番号、 操作命令及び詳細情報を含んで ヽる。
[0052] 各制御情報は、具体的には、コンピュータプログラムであり、各操作情報は、機械語 形式のコンピュータ命令である。これらの機械語形式は、各デジタルカメラにより解読 され実行される形式であり、各制御情報は、各デジタルカメラにより用いられる。 以下において、各制御情報の内容を説明するが、各制御情報の内容の理解を容 易にするために、機械語形式の命令を用いた表現ではなぐ図 4〜図 8に示すように 、操作命令及び詳細情報を人が通常用いる言語により表現して 、る。
[0053] 実行番号は、対応する操作命令が、各デジタルカメラにぉ ヽて実行される際の順 序を示す番号である。実行番号「1」に対応する操作命令が最初に実行され、次に、 実行番号「2」に対応する操作命令が実行される。以下、実行番号により示される順 序に従って操作命令が実行される。
操作命令は、各デジタルカメラに対する操作を指示する命令であり、詳細情報は、 各操作命令に付随して指定される情報である。具体的には、操作命令には、一例と して、モザイク処理命令、記録命令、画像置換命令、情報付加命令及びフレーム消 去命令などが含まれる。
[0054] 以下に、上記の各操作命令について、対応する詳細情報とともに、説明する。
(a)モザイク処理命令
モザイク処理命令は、デジタルカメラによる撮影により得られた画像データ (又は、 モザイク処理を施す直前の画像データ、つまり、他の処理が施された画像データ)の 全部又は一部分にモザイク処理を施すことを示す命令である。
[0055] ここで、モザイク処理では、撮影され生成された画像データの全部又は一部分を複 数の矩形 (正方形)のブロック領域に分割し、ブロック領域毎に、当該ブロック領域内 に含まれる 1個の画素を決定し、決定された画素の画素値を当該ブロック領域内に 含まれる他の全ての画素の画素値として当該ブロック領域に書き戻す。ここで、前記 1個の画素を決定する際に、一例として、前記ブロック領域内の左上の画素を選択す る。
[0056] なお、決定された前記画素の画素値の代わりに、当該ブロック領域内の特定の範 囲の画素の平均画素値を用いるとしてもよ!/、。
詳細情報には、条件及びサイズが含まれる。
条件は、当該モザイク処理命令が実行される条件を示す。
条件の一例は、「パターン画像一致」であり、この場合に、後述するように、デジタル カメラにより撮影され生成された画像データ内の一部分が、パターン画像と一致する と判断された場合に、前記画像データ内の前記一部分に対して当該モザイク処理命 令が実行される。パターン画像と一致する部分が前記画像データ内に存在しない場 合には、当該モザイク処理命令は実行されない。ここで、パターン画像は、別途指定 された画像である。
[0057] 条件の別の一例は、「パターン画像 Aに一致」であり、この場合に、デジタルカメラに よる撮影により得られた画像データ内の一部分が、パターン画像 Aと一致すると判断 された場合に、前記画像データ内の一部分に対して当該モザイク処理命令が実行さ れる。パターン画像 Aと一致する部分が前記画像データ内に存在しない場合には、 当該モザイク処理命令は実行されない。ここで、パターン画像 Aは、前記条件内にお いて、指定された画像である。
[0058] サイズは、前記ブロック領域の大きさを示して 、る。例えば、サイズ「5」、「4」、「3」、 「2」は、それぞれ、 64画素 X 64画素、 32画素 X 32画素、 16画素 X 16画素及び 8 画素 X 8画素のブロック領域を示している。ここで、 a画素 X a画素のブロック領域とは 、縦に a個の画素、横に a個の画素、合計で、 a X a個の画素を、行列状に配置して形 成されたものである。
[0059] 上記に説明したようにしてモザイク処理が施された場合に、サイズが小さいほど、元 の画像データの視認による判別が容易になり、サイズが大きいほど、元の画像データ の視認による判別が困難となる。
(b)記録命令
記録命令は、デジタルカメラによる撮影により得られた画像データ (又は、直前の画 像データ、つまり、他の処理が施された画像データ)に対して、 JPEG又は MPEG4 ( Moving Pictures Experts Group 4)による画像圧縮を施して圧縮画像データを生成し 、生成した圧縮画像データを指定された記憶領域に書き込むことを示す命令である 。ここで、 JPEGを用いるか MPEG4を用いるかは、利用者のデジタルカメラへの操作 指示に依存し、利用者がデジタルカメラに対して、静止画像の撮影を指示する場合 には、 JPEGが用いられ、動画像の撮影を指示する場合には、 MPEG4が用いられる
[0060] 詳細情報には、生成した圧縮画像データの記録先が指定される。具体的には、デ ジタルカメラ内部の情報記憶部 204、又はメモリカード 300である。
(c)画像置換命令
画像置換命令は、デジタルカメラによる撮影により得られた画像データ (又は、直前 の画像データ、つまり、他の処理が施された画像データ)の一部分を、指定された画 像データ (置換画像データ)に置き換える、又は指定された画像データを上書きする ことを示す命令である。
[0061] 詳細情報には、条件及び画像データの識別子が含まれる。
画像データの識別子は、指定された前記画像データ (置換画像データ)を識別する 識別情報である。指定された前記画像データには、 JPEGの規格により生成された圧 縮画像データ、 CG (Computer Graphics )により生成される CG画像データなどが含 まれる。
条件は、当該画像置換命令が実行される条件を示す。
[0062] 条件の一例は、「パターン画像一致」であり、この場合に、後述するように、デジタル カメラによる撮影により得られた画像データ内の一部分が、パターン画像と一致する と判断された場合に、前記画像データ内の一部分に対して当該画像置換命令が実 行される。パターン画像と一致する部分が前記画像データ内に存在しない場合には 、当該画像置換命令は実行されない。ここで、ノターン画像は、別途指定された画像 である。
[0063] 条件の別の一例は、「パターン画像 Aに一致」であり、この場合に、デジタルカメラに よる撮影により得られた画像データ内の一部分が、パターン画像 Aと一致すると判断 された場合に、前記画像データ内の一部分に対して当該画像置換命令が実行され る。ノターン画像 Aと一致する部分が前記画像データ内に存在しない場合には、当 該画像置換命令は実行されない。ここで、パターン画像 Aは、前記条件内において、 指定された画像である。
[0064] (d)情報付加命令
情報付加命令は、デジタルカメラにより生成された圧縮画像データに付加情報を付 加することを示す命令である。
詳細情報には、付加すべき付加情報を識別する付加情報識別子が含まれる。 ここで、付加情報については、後述する。
[0065] (e)フレーム消去命令
フレーム消去命令は、デジタルカメラによる撮影により複数のフレーム画像が得られ た場合に、いずれかのフレーム画像が指定された条件を満たす場合に、当該フレー ム画像を消去することを示す命令である。
詳細情報には、条件が含まれる。条件を満たす場合に、当該フレームが消去される
[0066] 条件の一例は、「パターン画像不一致」であり、この場合に、後述するように、デジタ ルカメラにより撮影されたフレーム画像内の一部分が、パターン画像と一致しないと 判断された場合に、当該フレーム画像が消去される。
(制御情報 141、 142、 · · ·の具体例)
制御情報 141は、図 4に一例として示すように、モザイク処理命令と記録命令とから 構成される。モザイク処理命令に対応する詳細情報は、条件「パターン画像一致」を 含み、モザイクのブロックのサイズは、「5」である。また、記録命令では、記録先として メモリカードが指定されて 、る。
[0067] 制御情報 141が実行されると、デジタルカメラによる撮影により得られた画像データ 内の一部分が、パターン画像と一致すると判断された場合に、前記画像データ内の 一部分に対して、ブロックのサイズが「5」であるモザイク処理命令が実行され、次に、 モザイク処理が施された画像データ力 S、メモリカードに書き込まれる。
また、制御情報 142は、図 5に一例として示すように、画像置換命令と記録命令とか ら構成される。画像置換命令に対応する詳細情報は、条件「パターン画像一致」と C Gデータ識別子「CG004」を含む。また、記録命令は、記録先としてデジタルカメラ内 部を指定している。
[0068] 制御情報 142が実行されると、デジタルカメラによる撮影により得られた画像データ 内の一部分が、パターン画像と一致すると判断された場合に、前記画像データ内の 一部分が、「CG004」により識別される CGデータに置き換えられ、画像データの一 部分が置き換えられた画像データ力 デジタルカメラ内部に書き込まれる。
また、制御情報 143は、図 6に一例として示すように、情報付加命令と記録命令とか ら構成される。情報付加命令に対応する詳細情報は、条件「パターン画像一致」と付 加情報識別子「X001」を含む。また、記録命令は、記録先としてデジタルカメラ内部 を指定している。
[0069] 制御情報 143が実行されると、デジタルカメラによる撮影により得られた画像データ に、付加情報識別子「X001」により識別される付加情報が付加され、付加情報が付 カロされた前記画像データ力 デジタルカメラ内部に書き込まれる。
また、制御情報 144は、図 7に一例として示すように、フレーム消去命令と記録命令 とから構成される。フレーム消去命令に対応する詳細情報は、条件「パターン画像不 一致」を含む。また、記録命令は、記録先としてデジタルカメラ内部を指定している。
[0070] 制御情報 144が実行されると、デジタルカメラにより撮影された複数のフレーム画像 のうち、その一部分にパターン画像と一致するものが存在すれば、当該フレーム画像 を消去し、次に、前記消去されたフレーム画像を除く他の複数のフレーム画像力 デ ジタルカメラ内部に書き込まれる。
制御情報 145は、図 8に一例として示すように、モザイク処理命令と画像置換命令と フレーム消去命令と記録命令とから構成される。モザイク処理命令に対応する詳細 情報は、条件「パターン画像 Aに一致」を含み、モザイクのブロックのサイズは、「4」で ある。画像置換命令に対応する詳細情報は、条件「パターン画像 Bに一致」と置換画 像識別子「G001」を含む。フレーム消去命令に対応する詳細情報は、条件「パター ン画像 Cに一致」を含む。また、記録命令では、記録先としてメモリカードが指定され ている。
[0071] 制御情報 145が実行されると、デジタルカメラにより撮影された複数のフレーム画像 のうち、フレーム画像内の一部分力 パターン画像 Aと一致すると判断された場合に 、前記フレーム画像内の一部分に対して、ブロックのサイズが「4」であるモザイク処理 命令が実行される。次に、当該フレーム画像内の一部分が、パターン画像 Bと一致す ると判断された場合に、前記フレーム画像内の一部分が、「G001」により識別される 置換画像に置き換えられる。次に、これらのフレーム画像のうち、その一部分にパタ ーン画像 Cと一致するものが存在すれば、当該フレーム画像を消去し、次に、消去さ れたフレーム画像を除き、上記のモザイク処理又は画像置換処理が施された 1又は 複数のフレーム画像力 メモリカードに書き込まれる。
[0072] (付加情報 151、 152、 · · -)
各付加情報は、前記制御情報と同様に、複数の操作情報から構成されており、各 操作情報は、実行番号、操作命令及び詳細情報を含んでいる。
各付加情報は、具体的には、コンピュータプログラムであり、各操作情報は、機械語 形式のコンピュータ命令である。これらの機械語形式は、各デジタルカメラにより解読 され実行される形式であり、各付加情報は、各デジタルカメラにより用いられる。
[0073] 各付加情報は、デジタルカメラ内部に記憶されている画像が外部に複製される際 に実行される
各操作情報は、制御情報に含まれる操作情報と同様であるので、説明を省略する 操作命令には、一例として、モザイク命令、画像置換命令及び暗号化命令などが 含まれる。
[0074] (a)モザイク命令
モザイク命令については、上述した通りである。
モザイク命令に対応する詳細情報には、範囲情報及びサイズが含まれる。 サイズについては、上述した通りである。
範囲情報は、当該モザイク命令によりモザイク処理が施される画像内の領域を示す 。この領域は、矩形の形状を有する。ここで、前記画像において、次のような X— Y座 標系を想定する。前記画像の左上点を原点とし、前記画像の上辺を X座標軸とし、前 記画像の左辺を Y座標軸とする。前記範囲情報は、前記矩形の左上点の X座標値 X 1及び Y座標値 Y1、並びに右下点の X座標値 X2及び Y座標値 Y2を含む。
[0075] 範囲情報 = ( (X1、 Y1)—(X2、 Y2) )
具体的には、図 9に示すように、範囲情報は、一例として、
( (9999, 9999) - ( (9999, 9999) )である Q
ここで、図 9に示す範囲情報における各座標値は、「9999」である力 これは、モザ イク処理が施される画像上の領域が未確定であることを示して 、る。画像上の領域は 、デジタルカメラにおいて、パターン画像によるマッチングが行われ、パターン画像と 一致する部分画像が検出された場合において、確定する。
[0076] (b)画像置換命令
画像置換命令については、上述した通りである。
画像置換命令に対応する詳細情報には、一例として、範囲情報及び CGデータ識 別子が含まれる。
CGデータ識別子は、 CGデータを識別する識別情報である。
[0077] 範囲情報は、上述した通りであり、 CGデータ識別子により示される CGデータが上 書きされる領域を示す。 具体的には、図 10に示すように、範囲情報は、一例として、
( (9999, 9999) - ( (9999, 9999) )である Q
ここで、図 10に示す範囲情報における各座標値は、「9999」である力 上述した通 りであり、これは、 CGデータが上書きされる画像上の領域が未確定であることを示し ている。上記と同様に、画像上の領域は、デジタルカメラにおいて、パターン画像に よるマッチングが行われ、パターン画像と一致する部分画像が検出された場合にお いて、確定する。
[0078] (c)暗号化命令
暗号化命令は、当該付加情報が付加された圧縮画像データに対して、詳細情報に 含まれるアルゴリズム指定により定まる暗号化処理を施すことを示す命令である。 ここで、アルゴリズム指定は、暗号ィ匕において採用される暗号ィ匕アルゴリズムを示す 。暗号化アルゴリズムは、例えば、 DES (Data Encryption Standard )である。
[0079] (付加情報の具体例)
付加情報 151は、図 9に一例として示すように、モザイク処理命令を含む。モザイク 処理命令に対応する詳細情報は、範囲情報((9999、 9999)一(9999、 9999) )と サイズ「2」とを含む。付加情報 151は、サーバ装置 100に記憶されている状態におけ るものである。デジタルカメラ 200により、付加情報 151の圧縮画像データへの付カロ が行われると、付加情報 151は、図 19に示す付加情報 151aのように、範囲情報が 上書きされる。付加情報 151aに含まれる詳細情報には、範囲情報((010、 010) - ( 020、 020) )力含まれて!/ヽる。
[0080] デジタルカメラ 200により付加情報 151aが実行されると、当該付加情報が付加され た圧縮画像データが、複製される場合に、圧縮画像データが一旦、伸張されて画像 データが生成され、生成された画像データ上において、付加情報 151aに含まれる 範囲情報((010、 010) - (020、 020) )により示される矩形領域に対して、ブロック のサイズが「2」であるモザイク処理命令が実行される。
[0081] また、付加情報 152は、図 10に一例として示すように、画像置換命令と暗号化命令 とを含む。画像置換命令に対応する詳細情報は、範囲情報((9999、 9999) - (99 99、 9999) )と CGデータ識別子「CG005」とを含む。暗号化命令に対応する詳細情 報は、アルゴリズム「DES」を含む。
付加情報 152は、サーバ装置 100に記憶されている状態におけるものである。デジ タルカメラ 200により、付加情報 152の圧縮画像データへの付加が行われると、付カロ 情報 152は、図 20に示す付加情報 152aのように、範囲情報が上書きされる。付カロ 情報 152aに含まれる詳細情報には、範囲情報((020、 020) - (035、 035) )が含 まれている。
[0082] デジタルカメラ 200により付加情報 152aが実行されると、当該付加情報が付加され た圧縮画像データが、複製される場合に、圧縮画像データが一旦、伸張されて画像 データが生成され、生成された画像データ上において、付加情報 152aに含まれる 範囲情報((020、 020)一(035、 035) )により示される矩形領域に対して、 CGデー タ識別子「CG005」により識別される CGデータによる CG処理が施され、前記 CG処 理が施された前記画像データが圧縮符号化されて圧縮画像データが生成され、生 成された圧縮画像データに対して、 DESによる暗号化が施されて暗号化圧縮画像 データが生成される。
[0083] (2)制御部 101
制御部 101は、デジタルカメラ 200aから、無線基地局 31、携帯電話網 30、インタ 一ネット 20及び送受信部 102を介して、 1個の利用者識別子を受信し、又は 1個の利 用者識別子及び 1個以上のタグ識別子を受信し、また制御情報の要求を受信する。
(利用者識別子を受信した場合)
1個の利用者識別子のみを受信した場合、制御部 101は、情報記憶部 103に記憶 されている利用者情報テーブル 121から、受信した利用者識別子を含む利用者情 報の読み出しを試みる。該当する利用者情報が利用者情報テーブル 121内に存在 しない場合には、パターン画像が存在しないことを示す不存在情報を送受信部 102 、インターネット 20及び携帯電話網 30を介して、デジタルカメラ 200aへ送信する。
[0084] 該当する利用者情報が 1個以上存在する場合には、制御部 101は、利用者情報テ 一ブル 121から、該当する利用者情報を全て読み出し、読み出した前記利用者情報 を一時的に記憶し、読み出した全ての利用者情報について、当該利用者情報に含 まれるパターン画像識別子を抽出する。こうして、 1個以上のパターン画像識別子が 抽出される。次に、抽出した全てのパターン画像識別子について、当該パターン画 像識別子により識別されるパターン画像を情報記憶部 103から読み出し、読み出し た前記パターン画像を、送受信部 102、インターネット 20及び携帯電話網 30を介し て、デジタルカメラ 200aへ送信する。こうして、 1個以上のパターン画像が送信される
[0085] (利用者識別子及びタグ識別子を受信した場合)
1個の利用者識別子及び 1個以上のタグ識別子を受信した場合、制御部 101は、 情報記憶部 103に記憶されている利用者情報テーブル 121から、受信した利用者識 別子を含む利用者情報の読み出しを試みる。該当する利用者情報が利用者情報テ 一ブル 121内に存在しな 、場合には、パターン画像が存在しな 、ことを示す不存在 情報を送受信部 102、インターネット 20及び携帯電話網 30を介して、デジタルカメラ 200aへ送信する。
[0086] 該当する利用者情報が 1個以上存在する場合には、制御部 101は、利用者情報テ 一ブル 121から、該当する利用者情報を全て読み出し、次に、読み出した全ての利 用者情報から、受信した!/、ずれかの前記タグ識別子を含む利用者情報の抽出を試 みる。ここで、前記タグ識別子を含む利用者情報が存在しない場合には、パターン画 像が存在しないことを示す不存在情報を送受信部 102、インターネット 20及び携帯 電話網 30を介して、デジタルカメラ 200aへ送信する。
[0087] 前記タグ識別子を含む該当する利用者情報が存在する場合には、制御部 101は、 前記利用者情報を一時的に記憶し、次に、抽出した全ての利用者情報について、当 該利用者情報に含まれるパターン画像識別子を抽出する。こうして、 1個以上のバタ ーン画像識別子が抽出される。次に、抽出した全てのパターン画像識別子について 、当該パターン画像識別子により識別されるパターン画像を情報記憶部 103から読 み出し、読み出した前記パターン画像を、送受信部 102、インターネット 20及び携帯 電話網 30を介して、デジタルカメラ 200aへ送信する。こうして、 1個以上のパターン 画像が送信される。
[0088] (制御情報の要求を受信した場合)
制御情報の要求を受信した場合、制御部 101は、上記において一時的に記憶して いる各利用者情報から、当該利用者情報に含まれる 1個の制御情報識別子を抽出し 、また、当該利用者情報に付加情報識別子が含まれる場合には、 1個の付加情報識 別子も抽出する。
次に、制御部 101は、抽出した前記制御情報識別子により識別される制御情報を 情報記憶部 103から読み出し、読み出した制御情報を、送受信部 102、インターネッ ト 20及び携帯電話網 30を介して、デジタルカメラ 200aへ送信する。こうして、 1個の 制御情報が送信される。
[0089] また、付加情報識別子を抽出した場合に、制御部 101は、抽出した前記付加情報 識別子により識別される付加情報を情報記憶部 103から読み出し、読み出した付カロ 情報を、送受信部 102、インターネット 20及び携帯電話網 30を介して、デジタルカメ ラ 200aへ送信する。こうして、付加情報が存在する場合には、 1個の付加情報が送 信される。
[0090] (3)送受信部 102
送受信部 102は、インターネット 20及び携帯電話網 30を介して、デジタルカメラ 20 Oaに接続されており、デジタルカメラ 200aと制御部 102との間で情報の送受信を行
1. 3 デジタルカメラ 200a、 200b,…の構成
デジタルカメラ 200a、 200b, · · ·は、それぞれ、同様の構成を有しているので、ここ では、デジタルカメラ 200として説明する。
[0091] デジタルカメラ 200は、図 11に示すように、 LSI (Large Scale Integration:大規模集 積回路)部 218、画像表示部 205、表示部 209、入力部 210、入出力部 214、アンテ ナ 215及びアンテナ 216から構成されており、 LSI部 218は、画像記憶部 201、撮影 部 202、画像処理部 203、情報記憶部 204、無線制御部 206、無線通信部 207、制 御部 208、短距離通信制御部 211、短距離通信部 212、認証部 213及び暗号化部 217から構成されている。
[0092] LSI部 218は、上記の複数の構成部を 1個のチップ上に集積して製造された超多 機能 LSIであり、具体的には、マイクロプロセッサ、 ROM、 RAMなどを含んで構成さ れるコンピュータシステムである。前記 RAMには、コンピュータプログラムが記憶され ている。前記マイクロプロセッサ力 前記コンピュータプログラムに従って動作すること により、 LSI部 218は、その機能を達成する。
[0093] (1)情報記憶部 204
情報記憶部 204は、情報を記憶するための領域を有し、図 12に示すように、利用 者識別子、置換画像データ及び CGデータを予め記憶している。また、情報記憶部 2 04には、圧縮画像データその他の情報が書き込まれる。
利用者識別子は、デジタルカメラ 200を有する利用者を識別する識別情報である。
[0094] 置換画像データは、 JPEGの規格により生成された圧縮画像データである。置換画 像データには、当該置換画像データを識別する置換画像識別子が付加されている。
CGデータは、画像データ上に描くグラフィック画像の図形の形、画像データ内にお いて、当該図形を描く位置を示す座標データ、当該図形の大きさ、当該図形を構成 する線分や、曲線の色及び太さ、閉領域内のハッチングの指示、そのパターン及び 色、閉領域内の塗りつぶしの指示、そのパターン及び色など、図形を描く上で必要と なる詳細の情報である図形描画データを含む。 CGデータには、当該 CGデータを識 別する CGデータ識別子が付加されて 、る。
[0095] (2)無線制御部 206、無線通信部 207及びアンテナ 215
無線通信部 207は、アンテナ 215により受信した無線周波数信号を増幅し、出力 信号を IF信号に変換し、 IF信号を増幅し、増幅された IF信号をベースバンド信号に 復調し、また、ベースバンド信号により高周波数信号を変調し、その出力を無線周波 数に変換し、無線周波数を増幅しアンテナ 215へ出力する。無線制御部 206は、ベ ースバンド信号を生成して無線通信部 207へ出力し、また、無線通信部 207からべ ースバンド信号を受け取る。
[0096] こうして、無線制御部 206、無線通信部 207及びアンテナ 215は、無線基地局 31、 携帯電話網 30、インターネット 20を介して接続されているサーバ装置 100との間で、 情報の送受信を行う。
(3)短距離通信制御部 211、短距離通信部 212、アンテナ 216
アンテナ 216、短距離通信部 212及び短距離通信制御部 211は、 ICタグ 400との 間で、 2. 4GHzの周波数帯域を用いて無線により情報の送受信を行う。 [0097] 短距離通信部 212は、信号をアンテナ 216を介して送信し受信する送受信部と、 信号を変調し復調する変復調部とを含み、短距離通信制御部 211は、短距離通信 部 212との間で入出力する各種の信号の処理をする。また、短距離通信制御部 211 は、 ICタグ 400の短距離通信制御部 211との間で、短距離無線通信における通信 チャネルを確立し、その後確立した通信チャネルを介して、通信を行う。
[0098] このようにして、制御部 208の読出指示により、短距離通信制御部 211、短距離通 信部 212、アンテナ 216は、 ICタグ 400からタグ識別子を取得し、取得したタグ識別 子を制御部 208へ出力する。
(4)入出力部 214
入出力部 214は、制御部 208の制御の基に、メモリカード 300へ情報を書き込み、 又はメモリカード 300から情報を読み出す。
[0099] (5)認証部 213
認証部 213は、メモリカード 300に情報を出力するに先立って、又はメモリカード 30 0から情報を読み出すに先立って、メモリカード 300との間で、相互に機器認証を行 い、相互の機器認証に成功した場合に限り、入出力部 214に対して、以降の情報の 入出力を許可する。相互の機器認証に失敗した場合には、入出力部 214に対して、 メモリカード 300との間の情報の入出力を禁止する。
[0100] (6)画像記憶部 201
画像記憶部 201は、情報を記憶するための領域を有している。主に、撮影部 202 により生成された画像データ、画像処理部 203による各種処理の対象となる画像デ ータを記憶する。
(7)撮影部 202
撮影部 202は、複数枚の組み合わされたレンズ群、各レンズ間の距離を制動する レンズ制御部、対象物との距離を測定し、測定した距離に応じてレンズ制御部に対し て各レンズ間の距離を指示する AF処理部、複数個の光素子を備えレンズ群を通過 し各光素子で受けた光に応じて生成した電気信号を出力する CCDなどを備え、制 御部 208の指示により、撮影して生成した画像データを画像記憶部 201へ書き込む [0101] (8)画像表示部 205、表示部 209及び入力部 210
画像表示部 205は、制御部 208の指示の基に、画像処理部 203により生成された 縮小画像を表示する。
表示部 209は、制御部 208の指示の基に、対象物の撮影の際の条件、残りの撮影 可能枚数、その他の情報を表示する。
[0102] 入力部 210は、撮影を指示するシャッターボタン、情報記憶部 204に記憶している 圧縮画像データの複製を指示する複製ボタン及びその他のボタンを備え、利用者に より操作されたボタンに対応する指示情報を制御部 208へ出力する。具体的には、 利用者により、シャッターボタン、複製ボタン及びその他のボタンが操作されると、そ れぞれ、入力部 210は、対象物の撮影指示、情報記憶部 204に記憶している圧縮画 像データを識別するデータ識別子及び圧縮画像データの複製指示、並びにその他 の指示を制御部 208へ出力する。
[0103] (9)制御部 208
制御部 208は、入力部 210から対象物の撮影指示、情報記憶部 204に記憶してい る圧縮画像データを識別するデータ識別子及び当該圧縮画像データの複製指示、 並びにその他の指示を受け取る。
(対象物の撮影)
対象物の撮影指示を受け取ると、制御部 208は、撮影部 202に対して、対象物を 撮影する撮影指示を出力し、短距離通信制御部 211に対して、 ICタグカゝらタグ識別 子を読み出すことを示す読出指示を出力する。次に、情報記憶部 204から利用者識 別子を読み出す。また、アンテナ 216、短距離通信部 212及び短距離通信制御部 2 11により 1個以上のタグ識別子が読み出された場合には、読み出された前記タグ識 別子を受け取る。
[0104] 次に、制御部 208は、読み出した利用者識別子を、無線制御部 206、無線通信部 207、アンテナ 215、無線基地局 31、携帯電話網 30及びインターネット 20を介して、 サーバ装置 100へ送信する。
なお、以降において、制御部 208が、無線制御部 206、無線通信部 207、アンテナ 215、無線基地局 31、携帯電話網 30及びインターネット 20を介して、サーバ装置 10 0へ情報を送信する場合、又は、サーバ装置 100から、インターネット 20、携帯電話 網 30、無線基地局 31、アンテナ 215、無線通信部 207及び無線制御部 206を介し て、情報を受信する場合には、簡単に、制御部 208は、ネットワークを介して、サーバ 装置 100へ情報を送信する、又は制御部 208は、ネットワークを介して、サーバ装置 100から情報を受信する、と記載することとする。
[0105] 前記タグ識別子を受け取った場合には、制御部 208は、前記受け取ったタグ識別 子を、ネットワークを介して、サーバ装置 100へ送信する。
次に、制御部 208は、ネットワークを介して、サーバ装置 100から、不存在情報又は 1個以上のパターン画像を受信し、受信した不存在情報又は受信した前記パターン 画像を一時的に内部に記憶する。
[0106] 不存在情報を受信した場合には、制御部 208は、画像処理部 203に対して、撮影 部 202による撮影により得られた画像データを圧縮符号ィ匕することを示す圧縮符号 化指示を出力し、入出力部 214に対して、生成された圧縮画像データをメモリカード 300へ書き込むように指示する。
不存在情報を受信しておらず、前記パターン画像を受信した場合には、制御部 20 8は、画像処理部 203に対して、受信したパターン画像に一致する部分が撮影により 得られた画像データ内に存在するカゝ否かのマッチングを行うことを示すマッチング指 示を出力し、画像処理部 203から一致する部分が存在するか否かを示すマッチング 結果を受け取る。
[0107] 受け取ったマッチング結果が、一致する部分が存在しないことを示す場合には、制 御部 208は、画像処理部 203に対して、撮影部 202による撮影により得られた画像 データを圧縮符号化するように指示し、入出力部 214に対して、生成された圧縮画 像データをメモリカード 300へ書き込むように指示する。
受け取ったマッチング結果が、一致する部分が存在することを示す場合には、制御 部 208は、制御情報の要求を、ネットワークを介して、サーバ装置 100へ送信し、サ ーバ装置 100からネットワークを介して、 1個の制御情報、又は 1個の制御情報及び 1 個の付加情報を受信し、受信した前記制御情報、又は受信した前記制御情報及び 受信した前記付加情報を一時的に内部に記憶する。 [0108] 制御情報、又は制御情報及び付加情報を受信した場合に、制御部 208は、受信し た制御情報に含まれて!/、る操作情報を、当該操作情報に含まれる実行番号の順に 従って、読み出し、読み出した操作情報を解析して操作命令及び詳細情報を抽出し 、抽出した操作命令が、モザイク処理、画像置換、情報付加、フレーム消去、記録の いずれであるかを判断する。
[0109] 抽出した操作命令力 モザイク処理、画像置換、フレーム消去のいずれかであると 判断する場合に、制御部 208は、モザイク処理、画像置換又はフレーム消去をそれ ぞれ示すモザイク処理指示、画像置換指示又はフレーム消去指示を画像処理部 20 3へ出力する。このとき、抽出した操作命令に含まれる詳細情報も画像処理部 203へ 出力する。
抽出した操作命令のうち、情報付加の命令と記録の命令とが連続して存在すると判 断する場合に、又は当該制御情報内に情報付加の命令と記録の命令とが存在し、 抽出した当該操作命令が記録の命令である場合に、制御部 208は、情報付加の命 令に対応して抽出した詳細情報力 条件及び付加情報識別子を抽出し、現時点の 状況が、抽出した条件に合致している力否かを判断する。
[0110] 具体的には、現時点の状況とは、一例として、画像処理部 203による上記マツチン グ処理の結果であり、また、抽出した条件は、一例として、図 6に示すように、「パター ン画像一致」であり、このときに、画像処理部 203から受け取った前記マッチング結果 力 一致する部分が存在しないことを示す場合には、以下に示すような付加情報の 圧縮画像データへの付加を行わな 、。
[0111] 一方、画像処理部 203から受け取った前記マッチング結果力 一致する部分が存 在することを示す場合には、受信した付加情報のうち、抽出した付加情報識別子によ り識別される付加情報を選択し、情報記憶部 204から範囲情報を読み出す。この範 囲情報は、後述するように、画像処理部 203により、情報記憶部 204に書き込まれた ものであり、撮影により生成された画像上において、パターン画像に一致する部分画 像の位置を示す座標情報である。次に、読み出した範囲情報を、選択した付加情報 内の詳細情報に含まれる範囲情報に上書きする。このようにして生成された付加情 報の一例を図 19及び図 20に示す。図 19に示す付加情報 151aは、 範囲情報((010、 010) - (020、 020) )を含んでいる。
[0112] この範囲情報は、撮影により生成された画像上において、パターン画像に一致する 部分画像の位置を示す座標情報であり、(010、 010)を左上点とし、(020、 020)を 右下点とする矩形領域を示して!/ヽる。
図 20に示す付加情報 152aも、同様に、
範囲情報((020、 020) - (035、 035) )を含んでいる。
[0113] この範囲情報は、撮影により生成された画像上において、パターン画像に一致する 部分画像の位置を示す座標情報であり、(020、 020)を左上点とし、(035、 035)を 右下点とする矩形領域を示して!/ヽる。
次に、記録の命令に対応して抽出した詳細情報力 「メモリカード」であるときには、 画像処理部 203に対して、画像記憶部 201に記憶されて 、る画像データを圧縮符 号化することを示す圧縮符号化指示を出力する。この結果、情報記憶部 204には、 圧縮画像データが書き込まれる。制御部 208は、情報記憶部 204に書き込まれた圧 縮画像データに、範囲情報が上書きされた前記付加情報を付加して書き込む。さら に、制御部 208は、入出力部 214に対して、情報記憶部 204に記憶されている圧縮 画像データ (付加情報が付加されたもの)をメモリカード 300へ書き込むように指示す る。
[0114] 抽出した詳細情報力 「デジタルカメラ内部」であるときには、画像処理部 203に対 して、画像記憶部 201に記憶されている画像データを圧縮符号化し、生成した圧縮 画像データを情報記憶部 204へ書き込むように指示する。この結果、情報記憶部 20 4には、圧縮画像データが書き込まれる。制御部 208は、情報記憶部 204に書き込ま れた圧縮画像データに、前記選択した付加情報を付加して書き込む。
[0115] 抽出した操作命令が、記録であると判断する場合に、つまり、当該操作命令の前に 、当該制御情報内に情報付加の命令が存在しないと判断する場合に、制御部 208 は、抽出した詳細情報力 「メモリカード」であるときには、画像処理部 203に対して、 画像記憶部 201に記憶されて ヽる画像データを圧縮符号化することを示す圧縮符号 化指示を出力し、入出力部 214に対して、情報記憶部 204に記憶されている圧縮画 像データをメモリカード 300へ書き込むように指示する。抽出した詳細情報が、「デジ タルカメラ内部」であるときには、画像処理部 203に対して、画像記憶部 201に記憶 されて ヽる画像データを圧縮符号化し、生成した圧縮画像データを情報記憶部 204 へ書き込むように指示する。
[0116] 制御部 208は、制御情報に含まれている全ての操作情報に対して、当該操作情報 に含まれる実行番号の順に従って、読出し、解析及び実行を繰り返す。
(画像の複製)
圧縮画像データを識別するデータ識別子及びその複製指示を受け取ると、制御部 208は、情報記憶部 204から利用者識別子を読み出す。次に、受け取ったデータ識 別子により識別される圧縮画像データを情報記憶部 204から選択し、選択した圧縮 画像データから当該圧縮画像データに付加されている付加情報を抽出する。
[0117] 次に、制御部 208は、抽出した付加情報を解析して、各操作情報を抽出し、さらに 抽出した各操作情報から、操作命令及び詳細情報を抽出し、抽出した詳細情報のい ずれかにパターン画像が一致する力否かの判断を条件として含む力否かを判定する 抽出した詳細情報に前記判断が条件として含まれる場合に、制御部 208は、ネット ワークを介して、前記利用者識別子をサーバ装置 100へ送信する。次に、サーバ装 置 100からネットワークを介して、不存在情報又は 1個以上のパターン画像のいずれ か一方を受信する。
[0118] 不存在情報を受信しなカゝつた場合には、つまり、前記パターン画像を受信した場合 には、制御部 208は、画像処理部 203に対して、受信したパターン画像に一致する 部分が撮影により得られた画像データ内に存在するカゝ否かのマッチングを行うことを 示すマッチング指示を出力し、画像処理部 203から一致する部分が存在するか否か を示すマッチング結果を受け取る。
[0119] 次に、制御部 208は、前記付加情報を解析して各操作情報を抽出し、各操作情報 に含まれる実行番号の順に従って、抽出した操作情報を解析して操作命令及び詳 細情報を抽出し、抽出した操作命令力 モザイク処理、画像置換及び暗号ィ匕のいず れであるかを判断する。
次に、制御部 208は、画像処理部 203に対して、受け取った前記データ識別子と、 当該データ識別子により識別される圧縮画像データを伸張することを示す伸張指示 とを出力する。この結果、画像処理部 203により、画像記憶部 201内に、圧縮画像デ ータを伸張して得られた画像データが書き込まれる。
[0120] 抽出した操作命令が、モザイク処理及び画像置換のいずれかであると判断する場 合に、制御部 208は、モザイク処理及び画像置換をそれぞれ示すモザイク処理指示 及び画像置換指示を画像処理部 203へ出力する。このとき、抽出した操作命令に含 まれる詳細情報も画像処理部 203へ出力する。この結果、モザイク処理又は Z及び 画像置換が施された画像データが画像記憶部 201に記憶される。
[0121] 次に、抽出した操作命令に、暗号化が含まれない場合には、制御部 208は、画像 処理部 203に対して、画像記憶部 201に記憶されて ヽる画像データを圧縮符号ィ匕 することを示す圧縮符号化指示を出力し、入出力部 214に対して、情報記憶部 204 に記憶された圧縮画像データをメモリカード 300へ書き込むように指示する。
一方、抽出した操作命令に、暗号化が含まれる場合には、画像処理部 203に対し て、画像記憶部 201に記憶されて ヽる画像データを圧縮符号化することを示す圧縮 符号化指示を出力する。この結果、情報記憶部 204には、圧縮画像データが記憶さ れる。次に、制御部 208は、前記データ識別子及び暗号化を示す暗号化指示を暗 号ィ匕部 217へ出力する。この結果、この結果、情報記憶部 204には、暗号化圧縮画 像データが記憶される。次に、入出力部 214に対して、情報記憶部 204に記憶され た暗号ィ匕圧縮画像データをメモリカード 300へ書き込むように指示する。
[0122] (その他の処理)
その他の指示を受け取ると、制御部 208は、受け取ったその他の指示に対応する その他の処理を行う。
(10)画像処理部 203
画像処理部 203は、制御部 208から圧縮符号化指示、伸張指示、マッチング指示 、モザイク処理指示、画像置換指示及びフレーム消去指示を受け取る。また、各指示 とともに、制御部 208から詳細情報を受け取る場合もある。さらに、制御部 208から圧 縮画像データを識別するデータ識別子及び圧縮符号化方式を示す方式識別子を受 け取る場合もある。 [0123] (圧縮符号化)
圧縮符号化指示を受け取ると、画像処理部 203は、画像記憶部 201に記憶されて いる画像データに対して、指定された圧縮符号ィ匕方式に従って、圧縮符号化を施し 、圧縮画像データを生成し、生成した圧縮画像データを情報記憶部 204へ書き込む 。ここで、指定された圧縮符号ィ匕方式の一例は、 JPEGにより規定されたもの、又は M PEG4により規定されたものである。
[0124] また、圧縮符号化方式の指定は、対象物の撮影の前に、利用者により指示されたも のであり、静止画像による撮影の場合には、 JPEGが指定され、動画像による撮影の 場合には、 MPEG4が指定される。
(圧縮画像データの伸張)
伸張指示を受け取ると、画像処理部 203は、さらに、制御部 208から圧縮画像デー タを識別するデータ識別子を受け取る。次に、受け取ったデータ識別子により識別さ れる圧縮画像データを、情報記憶部 204から読み出し、読み出した圧縮画像データ に含まれるヘッダ部分を解析して当該圧縮画像データが生成されたときに用いられ た圧縮符号化方式を示す方式識別子を取得する。
[0125] 次に、画像処理部 203は、取得した方式識別子により識別される伸張方式に基づ いて、読み出した圧縮画像データに、伸張復号を施して、画像データを生成し、生成 した画像データを画像記憶部 201へ書き込む。
(マッチング)
マッチング指示を受け取ると、さらに、制御部 208からパターン画像を受け取り、受 け取ったパターン画像に一致する部分が、画像記憶部 201に記憶されて ヽる画像デ ータ内に存在する力否かのマッチングを以下に示すようにして行い、次に、一致する 部分が存在する力否かを示すマッチング結果を内部に一時的に記憶し、また前記マ ツチング結果を制御部 208へ出力する。
[0126] 画像処理部 203は、マッチングを次に示すようにして行う。
(ステップ a)画像記憶部 201に記憶されて 、る画像データを Sで表し、画像データ S内において、パターン画像と同じ大きさの部分画像を選択する。最初に、前記部分 画像の左上点と、前記画像の左上点とがー致するように、前記選択を行う。 ここで、パターン画像を Pで表し、パターン画像 P内の画素の値を P[i]で表す。 iは、 パターン画像 P内の画素の位置を示す情報であり、 l≤i≤nである。 nは、パターン画 像 P内の画素数である。
[0127] また、部分画像を B (j)で表し、部分画像 B (j)内の画素の値を B (j) [i]で表す。 jは、 画像記憶部 201に記憶されて 、る画像データ S内にお 、て、部分画像の位置を示す 情報であり、 l≤j≤mである。 iは、部分画像 B (j)内の画素の位置を示す情報である 上記のように、前記部分画像の左上点と、前記画像データの左上点とがー致するよ うに、前記選択を行った場合に、 j = lであり、こうして選択された部分画像は、 B (l) である。
[0128] (ステップ b)パターン画像 Pに含まれる全ての画素の値と、部分画像 B (j)において 、前記各画素に対応する位置に存在する全ての画素の値との差の絶対値の合計 Su m (j)を算出する。
n
Sum(j) =∑ I P[i] -B (j) [i] I ここで、∑は、 iの取り得る値(l≤i≤n)についての総和を示す。
[0129] (ステップ c)選択した部分画像が、次の条件を満たす力否かを判定する。
(条件)選択した部分画像の右下点が、画像データ S内の右下点と一致する。
条件を満たす場合には、ステップ eへ進む。
条件を満たさない場合には、ステップ dへ進む。
(ステップ d)画像データ S内において、部分画像を左から右へ、又は上から下へ 1 画素分だけずらして、新たに部分画像を選択する。
[0130] このとき、 jに 1を加算する。
j =j + l
次に、ステップ bへ進む。
(ステップ e)
算出された合計 Sum (1)、 Sum (2)、 · · ·、 Sum (m)のうち、所定のしきい値以下 の合計 Sum (x)を選択する。ここで、しきい値は、「0」に近い小さい値である。
[0131] Sum(x)≤しきい値
こうして得られた Xにより示される位置に存在する部分画像がパターン画像に一致 する画像であると想定できるので、画像処理部 203は、パターン画像に一致した部分 画像の位置を示す位置情報 Xを一次的に記憶する。
算出された合計 Sum (1)、 Sum (2)、 · · ·、 Sum (m)のうち、所定のしきい値以下 の合計が存在しな ヽ場合には、パターン画像に一致する部分画像は存在しな ヽこと となる。
[0132] 最後に、画像処理部 203は、画像データにおいて、パターン画像と一致する部分 画像が得られた場合に、前記画像データ上における部分画像の左上点の X座標値 XI及び Y座標値 Yl、並びに右下点の X座標値 Χ2及び Υ座標値 Υ2を生成する。こ れらの左上点の X座標値 XI及び Υ座標値 Y1、並びに右下点の X座標値 Χ2及び Υ 座標値 Υ2は、範囲情報を構成する。
[0133] 範囲情報 = ( (Χ1、 Υ1)— (Χ2、 Υ2) )
次に、画像処理部 203は、範囲情報を情報記憶部 204に書き込む。
(モザイク処理)
モザイク処理指示を受け取ると、画像処理部 203は、さらに、詳細情報を受け取り、 受け取った詳細情報力も条件及びサイズを抽出する。なお、条件及びサイズについ ては、上述した通りである。
[0134] 次に、画像処理部 203は、現時点の状況が、抽出した条件に合致している力否か を判断し、合致している場合には、抽出したサイズにより、以下に示すモザイク処理を 行う。合致していない場合には、モザイク処理を行わない。
条件の一例は、パターン画像の一致であり、この一例に示す条件の場合に、画像 処理部 203が一時的に記憶しているマッチング結果力 一致する部分が存在するこ とを示すときには、前記条件に合致する。マッチング結果が、一致する部分が存在し な 、ことを示すときには、前記条件に合致しな 、。
[0135] 画像処理部 203は、次に示すようにして、モザイク処理を行う。
一時的に記憶しており、パターン画像に一致した部分画像の位置を示す位置情報 xにより示される部分画像を複数の矩形 (正方形)のブロック領域に分割し、ブロック 領域毎に、当該ブロック領域内に含まれる 1個の画素を決定し、決定された画素の画 素値を当該ブロック領域内に含まれる他の全ての画素の画素値として当該ブロック領 域に書き戻す。
[0136] (画像置換)
画像置換指示を受け取ると、画像処理部 203は、さらに、詳細情報を受け取り、受 け取った詳細情報から条件及び置換画像識別子、又は条件及び CGデータ識別子 を抽出する。なお、条件、置換画像識別子及び CGデータ識別子については、上述 した通りである。
次に、画像処理部 203は、現時点の状況が、抽出した条件に合致している力否か を判断し、合致している場合には、抽出したサイズにより、以下に示す画像置換を行 う。合致していない場合には、画像置換を行わない。
[0137] 画像処理部 203は、次に示すようにして、画像置換を行う。
情報記憶部 204から抽出した置換画像識別子又は CGデータ識別子により識別さ れる置換画像データ又は CGデータを読み出す。次に、一時的に記憶しており、バタ ーン画像に一致した部分画像の位置を示す位置情報 Xにより示される部分画像を読 み出した置換画像データに置き換える、又は、前記位置情報 Xにより示される部分画 像の上に、読み出した CGデータによるグラフィック画像を描く。
[0138] (フレーム消去)
フレーム消去指示を受け取ると、画像処理部 203は、さらに、詳細情報を受け取り、 受け取った詳細情報力も条件を抽出する。なお、条件については、上述した通りであ る。
次に、画像処理部 203は、現時点の状況が、抽出した条件に合致している力否か を判断し、合致している場合には、条件の合致するフレーム画像を消去する。合致し て ヽな ヽ場合には、フレーム画像の消去を行わな 、。
[0139] (11)暗号化部 217
暗号化部 217は、制御部 208から、暗号化の対象を識別するデータ識別子及び暗 号ィ匕を示す暗号ィ匕指示を受け取る。 前記暗号化指示を受け取ると、情報記憶部 204から、前記データ識別子により識 別される圧縮画像データを読み出し、読み出した圧縮画像データに、暗号化ァルゴ リズムを施して、暗号化圧縮画像データを生成し、生成した暗号化圧縮画像データ を情報記憶部 204へ書き込む。
[0140] ここで、前記暗号化アルゴリズムは、一例として、 DESによるものである。
1. 4 メモリカード 300の構成
メモリカード 300は、図 13に示すように、入出力部 301、認証部 302、情報記憶部 3 03及び制御部 304から構成されて 、る。
(1)制御部 304
制御部 304は、具体的には、マイクロプロセッサ、 ROM、 RAMなど力 構成され、 ROMには、コンピュータプログラムが記憶されている。前記マイクロプロセッサ力 前 記コンピュータプログラムに従って動作することにより、制御部 304は、その機能を達 成する。
[0141] (2)情報記憶部 303
情報記憶部 303は、具体的には、大容量のフラッシュメモリにより構成されている。 図 13に示すように、一例として、情報記憶部 303は、圧縮画像データ 311を記憶して いる。圧縮画像データ 311は、データ識別子「F001」により識別される。
(3)認証部 302
メモリカード 300がデジタルカメラ 200に装着されると、認証部 302は、デジタルカメ ラ 200が有する認証部 213との間で、チャレンジ—レスポンス型の相互の機器認証を 行う。
[0142] 具体的には、認証部 302は、認証部 213により認証を受ける。次に、認証部 302は 、認証部 213の認証を行う。
認証部 302は、両者の認証が成功した場合に、入出力部 301に対して、デジタル カメラ 200への情報の出力及びデジタルカメラ 200からの情報の受け取りを許可する 。両者の認証が失敗した場合に、入出力部 301に対して、データの入出力を禁止す る。
[0143] (4)入出力部 301 メモリカード 300がデジタルカメラ 200に装着されると、入出力部 301は、デジタル カメラ 200との間で情報の入出力を行う。
1. 5 ICタグ 400の構成
ICタグ 400は、図 14に示すように、長さ 30mm、幅 5mm、厚さ 0. 5mmの板状に成 形された榭脂内に、 ICチップ部 410とアンテナ部 401とが、封入されて形成されてい る。
[0144] なお、無線 ICタグの形成方法については、特開平 8— 276458号公報に記載され ているので、詳細の説明を省略する。
ICタグ 400の通信可能な距離は、 lm程度以内であり、通信速度は、 1Mbpsである
ICチップ部 410は、図 15に示すように、復調部 402、変調部 403、電源部 404、制 御部 405、識別コード記憶部 406、入出力部 407及びメモリ部 408から構成される。
[0145] ICチップ部 410の寸法は、縦 lmm、横 lmm、厚さ 0. 25ミクロンである。
(1)識別コード記憶部 406
識別コード記憶部 406は、 ICタグ 400を個別に識別する識別コードを記憶して 、る 。識別コードは、 32ビットからなり、無線 ICタグを製造する製造業者を識別する製造 業者識別コード(10ビット長)と、無線 ICタグが複数の仕様や種類を有する場合に、 その仕様や種類などを識別する種類コード(10ビット長)と、製造業者及び種類毎に 個別に異なる値が設定される製造番号(12ビット長)とから構成される。
[0146] (2)メモリ咅408
メモリ部 408は、 1Kバイトの記憶容量を有する EEprom (Electronically Erasable and Programmable Read unly Memory)力ら概成される。
なお、 EEpromに代えて、ヒユー ROMを用いるとしてもよい。ヒユー ROMは、 一度データを書き込むと消去することができな 、タイプのメモリである。ヒューズ ROM を用いることにより、データの改竄を防ぐことができる。また、 EEprom及びヒユー R OMの両方を用いるとしてもよ!/、。
[0147] メモリ部 408には、 ICタグ 400が貼り付けられている商品などの関する情報が記憶 されている。例えば、製造業者名、製品番号、製造年月日である。 (3)電源部 404
電源部 404は、アンテナ部 401と接続され、アンテナ部 401から電力信号を受け取 り、受け取った電力信号を電荷として蓄積する。また、 ICタグ 400の各構成部に電力 を供給する。
[0148] 電源部 404に含まれる電源回路の一例を図 16に示す。図 16に示す電源回路は、 4個のダイオード D1〜D4と、電池 Eとから構成される。ダイオード D1〜D2は、同じ 方向に直列に接続され、ダイオード D3〜D4は、同じ方向に直列に接続され、また、 ダイオード D1〜D2とダイオード D3〜D4とは、同じ方向に並列に接続されている。 アンテナ部 401の一端は、ダイオード D1と D2との中間点に接続され、アンテナ部 40 1の他の一端は、ダイオード D3と D4との中間点に接続されている。電池 Eの一端は 、ダイオード D1と D3との中間点に接続され、電池 Eの他の一端はダイオード D2と D 4との中間点に接続されて!ヽる。
[0149] (4)復調部 402
復調部 402は、アンテナ部 401から電力信号を受け取り、受け取った電力信号から 2. 45GHzの周波数を有する信号を選択し、選択した信号からパルス信号波を抽出 し、抽出したパルス信号波を制御部 405へ出力する。
(5)制御部 405
制御部 405は、復調部 402からパルス信号波を受け取る。受け取ったパルス信号 波を解読して、命令とオペランドとを抽出する。これらの命令には、識別コードを要求 する識別コード要求命令が含まれる。
[0150] 制御部 405は、識別コード要求命令を受け取ると、識別コード記憶部 406から識別 コードを読み出し、読み出した識別コードを変調部 403へ出力する。
(6)変調部 403
変調部 403は、制御部 405から識別コードを受け取り、受け取った識別コードを構 成するビット列に含まれるビット (0又は 1)に応じて、アンナテ部 401が有するインピー ダンスを切り換える。具体的には、各ビットが「1」のとき、前記インピーダンスを第 1の 値とし、各ビットが「0」のとき、第 2の値とする。これにより、アンテナ部 401から再放射 される電波の振幅及び位相を変えることができ、この振幅及び位相の変化により情報 を伝達することができる。
[0151] (7)入出力部 407
入出力部 407は、制御部 405の制御により、メモリ部 408に情報を書き込み、又は メモリ部 408から情報を読み出す。
(8)アンテナ部 401
アンテナ部 401は、受信アンテナであり、電波を受信し、受信した電波を電力信号 に変換して、電力信号を復調部 402及び電源部 404へ出力する。また、受信した電 波を反射 (再放射)する。アンテナ部 401は、切り換え可能な 2種類のインピーダンス を保持し、上述したように、変調部 403により、切り換えられる。
[0152] 1. 6 画像処理システム 10の動作
画像処理システム 10の動作に関し、特に、対象物を撮影する場合と、生成された 圧縮画像データを複製する場合とにおける動作について、以下に説明する。
(1)対象物を撮影する場合における画像処理システム 10の動作について、図 17に 示すフローチャートを用いて説明する。
[0153] 利用者によりシャッターボタンが操作されると、制御部 208は、入力部 210から対象 物の撮影指示を受け取り (ステップ S100)、情報記憶部 204から利用者識別子を読 み出す (ステップ S101)。次に、撮影部 202は、対象物を撮影し (ステップ S 102)、ま た、アンテナ 216、短距離通信部 212及び短距離通信制御部 211は、 ICタグからタ グ識別子を取得する (ステップ S 103)。
[0154] 次に、制御部 208は、読み出した利用者識別子、及び取得した場合にはタグ識別 子を、ネットワークを介して、サーバ装置 100へ送信する(ステップ S104)。制御部 10 1は、受信した利用者識別子及びタグ識別子に対応するパターン画像を情報記憶部 103から読み出し、パターン画像が存在しない場合には、不存在情報を生成し (ステ ップ S105)、次に、読み出したパターン画像又は不存在情報を、ネットワークを介し て、デジタルカメラ 200へ送信する(ステップ S106)。
[0155] 不存在情報を受信した場合には (ステップ S 107)、制御部 208は、画像処理部 20 3に対して、撮影部 202による撮影により得られた画像データを圧縮符号ィ匕すること を示す圧縮符号化指示を出力し、画像処理部 203は、圧縮画像データを情報記憶 部 204へ書き込み (ステップ SI 14)、制御部 208は、入出力部 214に対して、生成さ れた圧縮画像データをメモリカード 300へ書き込むように指示し、入出力部 214は、 情報記憶部 204から圧縮画像データを読み出し、読み出した圧縮画像データをメモ リカード 300へ書き込む (ステップ S 115)。これにより処理を終了する。
[0156] 不存在情報を受信しておらず、前記パターン画像を受信した場合には (ステップ S1 07)、制御部 208は、画像処理部 203に対して、受信したパターン画像に一致する 部分が撮影により得られた画像データ内に存在するカゝ否かのマッチングを行うことを 示すマッチング指示を出力し、画像処理部 203は、マッチング処理を行い、制御部 2 08は、画像処理部 203から一致する部分が存在するか否かを示すマッチング結果を 受け取る(ステップ S 108)。
[0157] 受け取ったマッチング結果力 一致する部分が存在しないことを示す場合には (ス テツプ S109)、画像処理部 203は、圧縮画像データを生成し (ステップ S 114)、入出 力部 214は、圧縮画像データをメモリカード 300へ書き込む (ステップ S 115)。これに より処理を終了する。
受け取ったマッチング結果が、一致する部分が存在することを示す場合には (ステ ップ S109)、制御部 208は、制御情報の要求を、ネットワークを介して、サーバ装置 1 00へ送信し (ステップ S110)、制御部 101は、該当する制御情報を情報記憶部 103 力も読み出し、該当する付加情報が存在するなら付加情報を読み出し (ステップ S11 1)、ネットワークを介して、読み出した 1個の制御情報、又は 1個の制御情報及び 1個 の付加情報をデジタルカメラ 200へ送信する(ステップ S 112)。
[0158] 制御部 208は、受信した制御情報に含まれて!/、る操作情報を、当該操作情報に含 まれる実行番号の順に従って、読み出し、解析し、実行する。こうして、読み出した操 作情報に含まれるモザイク処理、画像置換、情報付加、フレーム消去、記録などが実 行される (ステップ S113)。これにより処理を終了する。
(2)生成された圧縮画像データを複製する場合における画像処理システム 10の動 作について、図 18に示すフローチャートを用いて説明する。
[0159] 利用者により圧縮画像データの複製を指示する複製ボタンが操作されると、制御部 208は、入力部 210から圧縮画像データを識別するデータ識別子を受け取り(ステツ プ S201)、情報記憶部 204から指定されたデータ識別子により識別される圧縮画像 データを読み出し (ステップ S 202)、読み出した圧縮画像データに含まれている付加 情報に従って動作し (ステップ S203)、入出力部 214は、圧縮画像データをメモリ力 ード 300へ書き込む(ステップ S204)。これにより処理を終了する。
[0160] 1. 7 まとめ
以上説明したように、画像処理システムは、ネットワークを介して接続されたサーバ 装置とデジタルカメラとから構成されて!、る。
サーバ装置は、利用者識別子及びタグ識別子に対応して、パターン画像、制御情 報及び付加情報を記憶している。利用者識別子は、デジタルカメラの利用者を識別 する情報であり、タグ識別子は、被写体に貼付された ICタグが保持している当該 ICタ グに固有の識別番号である。ノターン画像は、比較の対象となる画像であり、制御情 報及び付加情報は、各種の画像処理のための操作命令を含んで 、る。
[0161] 利用者の操作により、デジタルカメラは、被写体を撮影する。この際、被写体に ICタ グが貼付されていると、デジタルカメラは、 ICタグ力もタグ識別子を取得する。次に、 デジタルカメラは、サーバ装置からパターン画像、制御情報及び付加情報を取得す る。これらのパターン画像、制御情報及び付加情報は、利用者識別子及びタグ識別 子に対応するものである。
[0162] デジタルカメラは、撮影により生成した画像データの中から、取得したパターン画像 に一致する部分があるか否かを判断し、一致する部分があれば、制御情報に含まれ ている操作命令に従って動作する。操作命令がモザイク処理であれば、一致する部 分にモザイク処理を施す。また、操作命令が画像置換であれば、一致する部分を所 定の画像に置き換え、または、一致する部分に CG処理を施す。また、操作命令がフ レーム消去であれば、当該画像データを消去する。こうして、デジタルカメラは、画像 処理が施されてた画像データをカメラ内に、又はメモリカードに書き込む。また、操作 命令が、情報付加であれば、付加情報を画像データに付加して書き込む。付加情報 が付加された画像データがカメラの外部にコピーされる場合には、このときに、付カロ 情報に従って画像処理を施す。
[0163] このように、撮影された映像、画像の中から、予め登録された対象物を判別し、対象 物に対して予め決められた処理を施す。予め決められた処理は、例えば、モザイク処 理、画像置換、フレーム消去である。これにより、特定の建築物や人物など、写された くない被写体が無断で撮影されることを防ぐことができ、セキュリティ、プライバシー、 肖像権などを保護することができる。
[0164] また、連写したり、連続して撮影したり、動画像として撮影する場合に、写した ヽ被 写体が、フレームアウトすることがある。このような場合に、撮影された映像、画像の中 から、パターン画像が含まれているカゝ否かを判断することにより、画像ストリーム全体 に決められた処理を施す。例えば、パターン画像に相当する部分力 フレームアウト したり、不鮮明である場合には、パターン画像と一致しないので、消去する。また、例 えば、対象物が写っている前後の数フレーム画像のみを残して、残りのフレーム画像 を削除する。これにより、後の整理が楽になる。
[0165] 1. 8 その他の変形例
なお、本発明を上記の実施の形態に基づいて説明してきたが、本発明は、上記の 実施の形態に限定されないのはもちろんである。以下のような場合も本発明に含まれ る。
(1)上記の実施の形態では、デジタルカメラは、利用者識別子又は利用者識別子 及びタグ識別子をサーバ装置へ送信し、サーバ装置は、利用者識別子又は利用者 識別子及びタグ識別子を受信し、受信した利用者識別子又は利用者識別子及びタ グ識別子を用いて、該当するパターン画像、制御情報及び付加情報を抽出し、抽出 したパターン画像、制御情報及び付加情報をデジタルカメラへ送信するとして ヽるが 、これには限定されない。
[0166] 例えば、デジタルカメラは、パターン画像、制御情報及び付加情報の送信要求をサ ーバ装置へ送信し、サーバ装置は、記憶している全てのパターン画像、制御情報及 び付加情報をデジタルカメラへ送信するとしてもよい。
また、サーバ装置は、デジタルカメラを識別する装置識別子と対応付けて、パター ン画像、制御情報及び付加情報を記憶しており、デジタルカメラは、装置識別子をサ ーバ装置へ送信し、サーバ装置は、受信した装置識別子に対応するパターン画像、 制御情報及び付加情報を抽出し、抽出したパターン画像、制御情報及び付加情報 をデジタルカメラへ送信するとしてもよ 、。
[0167] (2)上記の実施の形態では、撮影時に、パターン画像によるマッチング (以下、画 像照合と呼ぶ。)と、制御情報に従ったモザイク処理、画像置換、フレーム消去、暗号 化などの動作 (以下、モザイク処理等と呼ぶ。)とを行うとしている力 画像照合とモザ イク処理等とを行うタイミングは、撮影時だけに限定されるものではな 、。
デジタルカメラは、撮影時に画像照合とモザイク処理等とを行うことなぐ撮影し生 成した画像データを、又は画像データを圧縮符号化して生成した圧縮画像データを 内部に記憶しておき、これらの画像データ又は圧縮画像データをデジタルカメラの外 部に出力する要求を受け付けた場合に、デジタルカメラは、サーバ装置と通信を行つ て、パターン画像と制御情報とを取得し、画像照合とモザイク処理等とを行うとしても よい。
[0168] また、デジタルカメラは、撮影時に画像照合とモザイク処理等とを行うことなぐ撮影 し生成した画像データを、又は画像データを圧縮符号化して生成した圧縮画像デー タを内部に記憶しておき、また、デジタルカメラは、 GPS (Global Positioning System ) による位置検出ユニットを備えており、位置検出ユニットにより、自身の現在位置を取 得し、取得した現在位置を用いて、デジタルカメラが所定のドメイン内に存在するか 否かを判断し、デジタルカメラが、当該ドメインカゝら外に持ち出されたと判断する場合 に、デジタルカメラは、サーバ装置と通信を行って、ノターン画像と制御情報とを取 得し、画像照合とモザイク処理等とを行うとしてもよ 、。
[0169] これにより、モザイク処理等をするように登録されている人物が画像データに写って いる場合であっても、当該ドメイン内ではモザイク処理されず、そのまま見ることができ 、デジタルカメラ力 ドメイン力も持ち出されたときにモザイク処理が施される。
(3)サーバ装置は、画像照合とモザイク処理等を行う時点を示すタイミング情報を 予め記憶しており、デジタルカメラから利用者識別子が送信された場合に、記憶して いるタイミング情報をデジタルカメラへ送信する。デジタルカメラは、前記タイミング情 報を受信し、受信したタイミング情報に合わせて、画像照合とモザイク処理等とを行う としてちよい。
[0170] ここで、タイミング情報の一例は、撮影時である。また、他の一例は、撮影により生成 された画像データをデジタルカメラの外部に出力する時である。また、他の一例は、 デジタルカメラが所定の範囲力も外に持ち出された時である。
(4)画像照合とモザイク処理等との対象は、デジタルカメラによる現在撮影中の画 像データだけでなぐ以前に撮影して蓄積している画像データであってもよい。この 場合に、デジタルカメラは、撮影して生成した画像データを、蓄積サーバ装置に送信 し、蓄積サーバ装置は、画像データを受信して蓄積し、蓄積サーバ装置は、実施の 形態のデジタルカメラと同様にして、蓄積している画像データに対して、画像照合と モザイク処理等とを施す。このとき、蓄積サーバ装置は、画像照合とモザイク処理等と の実行に先立って、サーバ装置 100と通信を行って、パターン画像と制御情報とを 取得する。または、蓄積サーバ装置は、さらに、サーバ装置 100と同様の構成を有し 、蓄積サーバ装置の内部からパターン画像と制御情報とを取得するとしてもよい。
[0171] このようにして、サーバ装置に蓄えられている画像データを対象として、撮影後に、 画像データに対して、画像照合とモザイク処理等とを施すことにより、登録した人物な どの肖像権を保護することができる。
また、この場合において、画像データがサーバ装置に蓄積された後に、パターン画 像がサーバ装置に登録された場合であっても、パターン画像の登録以前に既に蓄積 されている画像データに対して、画像照合とモザイク処理等とを施すとしてもよい。こ うして、パターン画像として登録した人物などの肖像権が保護される。
[0172] (5)生成された画像データ又は蓄積されて 、る画像データに画像照合とモザイク処 理等とを施す際に、これらの処理を施した画像データを生成するとともに、元の画像 データに、暗号鍵を用いて、暗号化処理を施して、暗号ィ匕画像データを生成して記 憶する。暗号鍵を知る者のみが、復号装置により、この暗号鍵を用いて、暗号化画像 データを復号して、画像データが得られる。
[0173] これにより、暗号鍵を有している限定された人だけは、元の画像データを復元する ことができる。
このとき、生成した暗号ィ匕画像データをデジタルカメラ内部にのみ保持しておくとし てもよい。また、画像処理が施された画像データとともに、暗号化画像データを、利用 者に要求に応じて、メモリカードに書き込むとしてもよ 、。 [0174] また、画像処理が施された画像データと生成された暗号化画像データとを、一体と する 1個のファイルを生成し、生成したファイルをメモリカードに書き込むとしてもよ!/ヽ また、撮影により生成された画像データの全体に暗号化を施すのではなぐ画像デ ータのうち、パターン画像に相当する部分のみに暗号ィ匕を施し、暗号化部分画像デ ータを生成し、生成した暗号ィ匕部分データを記憶するとしてもよい。また、画像処理 が施された画像データと生成された暗号化部分画像データとを、一体とする 1個のフ アイルを生成し、生成したファイルをメモリカードに書き込むとしてもよい。このとき、画 像データのうち、パターン画像に相当する部分の位置を示す情報を、前記ファイルに 含めて保存するとしてもよ 、。
[0175] また、前記暗号鍵は、上位ビットの部分鍵と下位ビットの部分鍵とに分割され、それ ぞれが異なる二者又は異なる二機関が有する 2台の装置、又は 2枚の記録媒体に記 録されて!/ヽるとしてもよ ヽ。それぞれの装置又は記録媒体に記録されて ヽる上位ビッ トの部分鍵及び下位ビットの部分鍵の両方が揃った場合に限り、暗号鍵が再生され、 このときに限り、この暗号鍵を用いて、暗号ィ匕画像データを復号して、画像データが 得られる。
[0176] 例えば、暗号鍵を分割して得られた 2個の部分鍵を警察と裁判所とが分散して持つ ことにより、犯罪搜查時などの場合に、両者が合意すれば、 2個の部分鍵を揃え、結 合して 1個の暗号鍵を生成し、生成した暗号鍵を用いて、画像照合とモザイク処理等 とを施す際に用いた元の画像データを復元し、証拠画像を得ることができる。
(6)利用者を登録することにより、登録された利用者がデジタルカメラを操作する場 合には、画像照合とモザイク処理等とを行わな 、としてもよ!/、。
[0177] 具体的には、デジタルカメラは、登録用のパスワードの入力を受け付け、受け付け た登録用のパスワードを内部に記憶する。デジタルカメラは、利用者に対して認証用 のパスワードの入力を要求し、認証用のパスワードの入力を受け付け、内部に記憶し ている登録用のパスワードと入力を受け付けた認証用のパスワードとが一致する力否 かを判断する。一致すると判断する場合には、画像照合とモザイク処理等とを行わな い。一致しないと判断する場合には、上述したように、デジタルカメラは、撮影時に、 サーバ装置と通信を行って、パターン画像と制御情報とを取得し、画像照合とモザィ ク処理等とを行う。
[0178] これにより、例えば、登録されている本人による操作では、このデジタルカメラは、本 人自身を撮影できるようになる。
ここで、上記の本人の認証は、パスワードによるものには限定されない。例えば、デ ジタルカメラは、本人の指紋や虹彩に関する特徴情報を予め記憶しており、撮影の 際に、指紋や虹彩の入力を要求し、入力された指紋や虹彩の特徴情報と、予め記憶 している特徴情報とを比較することにより、本人の認証を行うとしてもよい。
[0179] また、デジタルカメラを識別するカメラ識別情報を予めサーバ装置に登録しておき、 デジタルカメラは、撮影時に、サーバ装置に登録されているか否かを問い合わせ、登 録されたデジタルカメラは、画像照合とモザイク処理等とを行わないとしてもよい。ま た、逆に、登録されたデジタルカメラは、画像照合とモザイク処理等とを行うとしてもよ い。
(7)上記の実施の形態では、デジタルカメラは、撮影のたびに、サーバ装置に問い 合わせをしてパターン画像と制御情報とを取得するとしている力 これには限定され ない。
[0180] 例えば、サーバ装置から定期的に、記憶された全てのパターン画像、制御情報、付 加情報、利用者情報テーブルなどの全て、又はその一部がデジタルカメラに送信さ れ、デジタルカメラは、これらを受信し、記憶する。デジタルカメラは、撮影時に、サー バ装置に情報を要求することなぐ内部からパターン画像と制御情報とを取得し、取 得したパターン画像と制御情報とを用いて、画像照合とモザイク処理等とを行う。
[0181] このデジタルカメラによると、デジタルカメラ内部にて情報を取得できるので、デジタ ルカメラとサーバ装置とのトラフィック量を軽減し、またサーバ装置の負荷を軽減する ことができる。
(8)上記の実施の形態では、デジタルカメラに画像データが記録される前に、画像 照合とモザイク処理等とを行うとして 、る力 これには限定されな!、。
[0182] デジタルカメラは、撮影して生成した画像データを内部に一次記録し、記録して ヽ る画像データを定期的にサーバ装置へ送信するとしてもよい。サーバ装置は、画像 データを受信し、受信した画像データを内部に記録する。このとき、サーバ装置は、 内部からパターン画像と制御情報と取得し、取得したパターン画像と制御情報とを用 いて、画像照合とモザイク処理等とを行う。
[0183] (9)デジタルカメラは、特定の場所で用いられる場合、特定の被写体を撮影する場 合、特定のユーザが操作する場合にのみ、画像照合とモザイク処理等を行うとしても よい。
(10)デジタルカメラは、画像照合とモザイク処理等とを行わず、撮影のみを行って 画像データを生成して、サーバ装置へ送信し、サーバ装置は、上記の実施の形態の デジタルカメラと同様に、画像データに対して、画像照合とモザイク処理等とを施すと してちよい。
[0184] 具体的には、例えば、このデジタルカメラは、常時、又は一定時間毎に、被写体を 撮影をして 、るライブカメラであり、撮影して得られた画像データをサーバ装置へ送 信する。
サーバ装置は、画像データを受信し、受信した画像データに対して、画像照合とモ ザイク処理等を施すとしてもよい。この後、サーバ装置は、モザイク処理等が施された 画像データを、ネットワーク、例えば、インターネットを介して、他のパーソナルコンビ ユータなどの装置へ配信する。
[0185] (11)デジタルカメラは、被写体の撮影を行って画像データを生成して、サーバ装 置へ送信し、サーバ装置は、画像データを受信し、受信した画像データを蓄積する。 サーバ装置は、このように、画像データの蓄積用として用いられる。デジタルカメラは 、利用者の操作により、利用者により指定された画像データをサーバ装置力 受信し 、受信した画像データに対して、上記の実施の形態の同様に、画像照合とモザイク 処理等とを施すとしてもよ ヽ。
[0186] (12)上記実施の形態では、画像データに付加情報を付加するとして ヽるが、画像 データに、電子透かし技術を用いて、付加情報を埋め込むとしてもよい。
(13)撮影により生成された画像データと、パターン画像とを比較する場合に、バタ ーン画像を面積比で 1. 5倍に拡大して拡大パターン画像を生成し、撮影により生成 された画像データと、生成した拡大パターン画像とを比較するとしてもよい。また、パ ターン画像を面積比で 0. 75倍に縮小して縮小画像を生成し、縮小画像と前記画面 データとを比較するとしてもよ 、。
[0187] また、画面データとパターン画像の比較、画面データと拡大パターン画像との比較 、及び画面データと縮小パターン画像の比較を、同時に行うとしてもよい。
また、拡大比率、縮小比率を別のものに代えるとしてもよい。
(14)撮影により生成された画像データと、パターン画像とを比較する場合に、バタ ーン画像の一部分を取り出して、部分パターン画像を生成し、撮影により生成された 画像データと、生成した部分パターン画像とを比較するとしてもよ ヽ。
[0188] また、上記の拡大パターン画像、縮小パターン画像との比較を組合わせるとしても よい。つまり、また、画面データとパターン画像の比較、画面データと拡大パターン画 像との比較、画面データと縮小パターン画像の比較を、及び画面データと部分パタ ーン画像の比較を、同時に行うとしてもよい。
また、部分パターン画像を拡大、又は縮小して、拡大部分パターン画像、縮小部分 ノターン画像を生成し、生成した拡大部分パターン画像、縮小部分パターン画像を 比較にぉ 、て用いるとしてもよ 、。
[0189] また、パターン画像は、予め、取り出す部分パターン画像の位置を示す情報を含ん でいるとしてもよい。このとき、パターン画像力も前記情報が取り出され、取り出された 情報により、部分パターン画像が特定され、特定された部分パターン画像が比較に おいて、用いられる。
(15)撮影により生成された画像データと、パターン画像とを比較する場合に、画像 データから一画素ごとに、画素を取り出して、抽出画像データを生成し、パターン画 像から一画素ごとに、画素を取り出して、抽出パターン画像を生成し、抽出画像デー タと、抽出パターン画像とを比較するとしてもよい。
[0190] また、画像データから二画素ごとに、画素を取り出して、抽出画像データを生成し、 パターン画像から二画素ごとに、画素を取り出して、抽出パターン画像を生成すると してもよい。さらに、画素を取り出す間隔を空けるとしてもよい。
このようにして、撮影により生成された画像データ内に、パターン画像に相当する部 分が存在することが分力つた場合に、取り出す画素の密度が高い場合ほど、その一 致度は、高いと言える。こうして、一致の度合いを判定することができるる。
[0191] こうして得られる一致の度合いを、上述したモザイク処理を行う際のサイズと連動さ せるとしてもよい。例えば、一致の度合いが高い場合には、モザイク処理のサイズを 大きくし、一致の度合いが低い場合には、モザイク処理のサイズを小さくするとしても よい。
この方法は、 CG処理を施す場合にも適用できる。例えば、多くの描画命令を含む 第 1の CGデータと、これより少ない描画命令を含む第 2の CGデータとを用意してお き、例えば、前記の一致の度合いが高い場合には、第 1の CGデータを用いて、 CG 処理を施し、一致の度合いが低い場合には、第 2の CGデータを用いて、 CG処理を 施すとしてもよい。
[0192] ここで、 CGデータには、線分、直線、円、点などを描く描画命令を含み、これらの描 画命令は、元に画像に対して、上書きをし、 CG処理の対象とする全範囲を塗りつぶ す描画命令は含まな 、ものとする。これによりモザイク処理と同様の効果が得られる。
(16)撮影により生成された画像データ内に、 2個以上のパターン画像に相当する 部分が存在するか否かを探すとしてもよい。このとき、 2個以上のパターン画像は、各 々、 2個以上の制御情報に対応しているものとする。こうして、 2個以上のパターン画 像に相当する部分が存在することが分かった場合に、各部分に対して、対応する制 御情報に従って、画像処理を施す。
[0193] (17)画像置換において、撮影により生成された画像データのうちパターン画像に 相当する部分画像と、置換画像とに、各種の演算を施して、演算結果を前記部分画 像に上書きするとしてもよい。
(18)付加情報は、複製回数や複製期限などの利用制御情報に対応付けて、モザ イク処理、画像置換、フレーム消去などの処理を示す命令を含むとしてもよいし、利 用制御情報に対応付けて、各処理の詳細情報を含むとしてもよ 、。
[0194] ここで、複製回数とは、情報記憶部 204に記憶されて 、る圧縮画像データをメモリ カード 300へ複製する回数を言い、複製期限とは、情報記憶部 204に記憶されてい る圧縮画像データをメモリカード 300へ複製する行為が許可されている期限を言う。 情報記憶部 204に記憶されて 、る圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200は、圧縮画像データに付加された付加情報に含まれる利 用制御情報及び各処理を示す操作命令に応じて、対応する処理を当該圧縮画像デ ータに対して施す。
[0195] 付加情報の一例を図 21〜図 25に示す。図 21に示す付加情報 153は、異なる複製 回数に対して、同一の処理が対応付けられている例であり、図 22に示す付加情報 1 54は、異なる複製回数に対して、異なる処理が対応付けられている例である。
また、図 23に示す付加情報 155は、異なる複製期間に対して、同一の処理が対応 付けられている例であり、図 24に示す付加情報 156は、異なる複製期間に対して、 異なる処理が対応付けられて ヽる例である。
[0196] さらに、図 25に示す付加情報 157は、上記の混合型であり、異なる複製期間及び 複製期間に対して、異なる処理が対応付けられて!/、る例である。
なお、付加情報 153〜157は、デジタルカメラ 200において、パターン画像による マッチングが行われ、パターン画像と一致する部分画像が検出され、各処理が施さ れる領域が確定した後に、その領域を示す範囲情報が上書きされたものである。
[0197] また、前記領域を示す範囲情報が上書きされる前には、付加情報 153〜157には 、図 9に示すような範囲情報 ((9999,9999)-(9999,9999))が書き込まれており、範囲情 報 ((9999,9999)-(9999,9999))が書き込まれた付加情報がサーバ装置 100に記憶され ている。デジタルカメラ 200は、サーバ装置 100から、上記の実施の形態において説 明したように、範囲情報 ((9999,9999)-(9999,9999))が書き込まれた付加情報を取得し 、取得した
付加情報に前記領域を示す範囲情報を上書きする。こうして、付加情報 153〜157 が得られる。
[0198] (a)図 21に示す付加情報 153は、異なる 3種類の複製回数に対応付けて、同一の 処理命令を含んでいる。
具体的には、付加情報 153は、モザイク処理を示す操作命令を含む。また、付加情 報 153は、複製回数の範囲(1〜4回)に対応付けて、詳細情報として範囲情報 ((010,010)-(020,020》とサイズ (1)とを含み、複製回数の範囲(5〜10回)に対応付け て、詳細情報として範囲情報 ((010,010)- (020,020》とサイズ (3)とを含み、複製回数の 範囲(11回以上)に対応付けて、詳細情報として範囲情報((000,000)-(999,999》と サイズ (5)とを含む。なお、範囲情報 ((000,000)-(999,999))は、画像の全範囲を示すも のである。
[0199] デジタルカメラ 200は、現時点以前にお 、て、情報記憶部 204に記憶されて 、る圧 縮画像データが、メモリカード 300へ複製された回数を示す累積回数を、情報記憶 部 204において、記憶している。
情報記憶部 204に記憶されて 、る圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、圧縮画像データに付加された付加情報 1 53から操作命令と詳細情報とを読み出し、次に情報記憶部 204に記憶されている累 積回数に「1」を加算して得られた比較回数が、詳細情報内の 、ずれの複製回数の 範囲に含まれているかを判断する。
[0200] 比較回数が、複製回数の範囲(1〜4回)に含まれると判断する場合には、制御部 2 08は、モザイク処理を示す操作命令とともに、範囲情報 ((010,010)- (020,020》とサイ ズ (1)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命 令、範囲情報及びサイズに従って、動作する。
また、比較回数が、複製回数の範囲(5〜10回)に含まれると判断する場合には、 制御部 208は、モザイク処理を示す操作命令とともに、範囲情報
((010,010)-(020,020》とサイズ (3)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命令、範囲情報及びサイズに従って、動作する。
[0201] さらに、比較回数が、複製回数の範囲(11回以上)に含まれると判断する場合には 、制御部 208は、モザイク処理を示す操作命令とともに、範囲情報
((000,000)-(999,999》とサイズ (5)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命令、範囲情報及びサイズに従って、動作する。ここで、範 囲情報 ((000,000)-(999,999))は、画像の全範囲を示すものであるので、画像処理部 203は、画像の全範囲に対して、サイズ (5)〖こよるモザイク処理を施す。
[0202] 制御部 208は、比較回数を情報記憶部 204に記憶されている累積回数に上書きす る。
(b)図 22に示す付加情報 154は、異なる 3種類の複製回数に対応付けて、それぞ れ異なる 3種類の処理命令を含んで 、る。
具体的には、付加情報 154は、複製回数の範囲(1〜4回)に対応付けて、モザイク 処理を示す操作命令を含み、詳細情報として範囲情報 ((010,010)-(020,020》とサイ ズ (3)とを含む。また、複製回数の範囲(5〜10回)に対応付けて、画像置換を示す操 作命令を含み、詳細情報として範囲情報 ((010,010)-(020,020》と CGデータ識別子 (CG009)とを含む。さらに、複製回数の範囲(11回以上)に対応付けて、フレーム消 去を示す操作命令を含む。
[0203] 上述したように、デジタルカメラ 200は、情報記憶部 204にお 、て累積回数を記憶 している。
情報記憶部 204に記憶されて 、る圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、圧縮画像データに付加された付加情報 1 54から操作命令と詳細情報とを読み出し、次に情報記憶部 204に記憶されている累 積回数に「1」を加算して得られた比較回数が、詳細情報内の 、ずれの複製回数の 範囲に含まれているかを判断する。
[0204] 比較回数が、複製回数の範囲(1〜4回)に含まれると判断する場合には、制御部 2 08は、モザイク処理を示す操作命令とともに、範囲情報 ((010,010)- (020,020》とサイ ズ (3)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命 令、範囲情報及びサイズに従って、動作する。
また、比較回数が、複製回数の範囲(5〜10回)に含まれると判断する場合には、 制御部 208は、画像置換を示す操作命令とともに、範囲情報 ((010,010)- (020,020》と CGデータ識別子 (CG009)とを、画像処理部 203に対して出力し、画像処理部 203は 、受け取った操作命令、範囲情報及び CGデータ識別子に従って、動作する。
[0205] さらに、比較回数が、複製回数の範囲(11回以上)に含まれると判断する場合には 、制御部 208は、フレーム消去を示す操作命令を、画像処理部 203に対して出力し 、画像処理部 203は、受け取った操作命令に従って、動作する。
制御部 208は、比較回数を情報記憶部 204に記憶されている累積回数に上書きす る。
[0206] (c)図 23に示す付加情報 155は、異なる 3種類の複製期間に対応付けて、同一の 処理命令を含んでいる。
具体的には、付加情報 155は、モザイク処理を示す操作命令を含む。また、付加情 報 153は、複製期間 (2005.10.01〜2005.10.31)に対応付けて、詳細情報として範囲 情報 ((010,010)- (020,020》とサイズ (1)とを含み、複製期間 (2005.11.01〜2005.11.30) に対応付けて、詳細情報として範囲情報 ((010,010)- (020,020))とサイズ (3)とを含み、 複製期間 (2005.12.01〜)に対応付けて、詳細情報として範囲情報((
000,000)- (999,999))とサイズ (5)とを含む。なお、上述したように、範囲情報
((000,000)-(999,999》は、画像の全範囲を示すものである。
[0207] 情報記憶部 204に記憶されている圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、現在日時を取得し、圧縮画像データに付 カロされた付加情報 155から操作命令と詳細情報とを読み出し、次に取得した現在日 時が、詳細情報内のいずれの複製期間に含まれているかを判断する。
現在日時力 複製期間 (2005.10.01〜2005.10.31)に含まれると判断する場合には、 制御部 208は、モザイク処理を示す操作命令とともに、範囲情報
((010,010)-(020,020》とサイズ (1)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命令、範囲情報及びサイズに従って、動作する。
[0208] また、現在日時力 複製期間 (2005.11.01〜2005.11.30)に含まれると判断する場合 には、制御部 208は、モザイク処理を示す操作命令とともに、範囲情報
((010,010)-(020,020》とサイズ (3)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命令、範囲情報及びサイズに従って、動作する。
さらに、現在日時力 複製期間 (2005.12.01〜)に含まれると判断する場合には、制 御部 208は、モザイク処理を示す操作命令とともに、範囲情報 ((000,000)-(999,999)) とサイズ (5)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操 作命令、範囲情報及びサイズに従って、動作する。ここで、範囲情報
((000,000)-(999,999》は、画像の全範囲を示すものであるので、画像処理部 203は 、画像の全範囲に対して、サイズ (5)によるモザイク処理を施す。
[0209] (d)図 24に示す付加情報 156は、異なる 3種類の複製期間に対応付けて、それぞ れ異なる 3種類の処理命令を含んで 、る。 具体的には、付加情報 156は、複製期間 (2005.10.01〜2005.10.31)に対応付けて 、モザイク処理を示す操作命令を含み、詳細情報として範囲情報
((010,010)- (020,020》とサイズ (3)とを含む。また、複製期間 (2005.11.01〜2005.11.30 )に対応付けて、画像置換を示す操作命令を含み、詳細情報として範囲情報
((010,010)- (020,020》と CGデータ識別子 (CG009)とを含む。さらに、複製期間 (2005.12.01〜)に対応付けて、フレーム消去を示す操作命令を含む。
[0210] 情報記憶部 204に記憶されている圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、現在日時を取得し、圧縮画像データに付 カロされた付加情報 156から操作命令と詳細情報とを読み出し、次に、取得した現在 日時が、詳細情報内のいずれの複製期間に含まれているかを判断する。
現在日時力 複製期間 (2005.10.01〜2005.10.31)に含まれると判断する場合には、 制御部 208は、モザイク処理を示す操作命令とともに、範囲情報
((010,010)-(020,020》とサイズ (3)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命令、範囲情報及びサイズに従って、動作する。
[0211] また、現在日時力 複製期間 (2005.11.01〜2005.11.30)に含まれると判断する場合 には、制御部 208は、画像置換を示す操作命令とともに、範囲情報
((010,010)-(020,020》と CGデータ識別子 (CG009)とを、画像処理部 203に対して出 力し、画像処理部 203は、受け取った操作命令、範囲情報及び CGデータ識別子に 従って、動作する。
さらに、現在日時力 複製期間 (2005.12.01〜)に含まれると判断する場合には、制 御部 208は、フレーム消去を示す操作命令を、画像処理部 203に対して出力し、画 像処理部 203は、受け取った操作命令に従って、動作する。
[0212] 制御部 208は、比較回数を情報記憶部 204に記憶されている累積回数に上書きす る。
(e)図 25に示す付加情報 157は、異なる 3種類の複製回数と複製期間とに対応付 けて、それぞれ異なる 3種類の処理命令を含んでいる。
具体的には、付加情報 157は、複製回数の範囲(1〜4回)に対応付けて、モザイク 処理を示す操作命令を含み、詳細情報として範囲情報 ((010,010)-(020,020》とサイ ズ (3)とを含む。また、複製回数の範囲(5〜10回)に対応付けて、画像置換を示す操 作命令を含み、詳細情報として範囲情報 ((010,010)-(020,020》と CGデータ識別子 (CG009)とを含む。さらに、複製期間 (2005.12.01〜)に対応付けて、フレーム消去を 示す操作命令を含む。
[0213] 上述したように、デジタルカメラ 200は、情報記憶部 204にお 、て累積回数を記憶 している。
情報記憶部 204に記憶されて 、る圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、現在日時を取得し、圧縮画像データに付 カロされた付加情報 157から操作命令と詳細情報とを読み出し、次に情報記憶部 204 に記憶されている累積回数に「1」を加算して得られた比較回数が、詳細情報内のい ずれの複製回数の範囲に含まれているかを判断し、また、取得した現在日時が、詳 細情報内の複製期間に含まれているかを判断する。
[0214] 比較回数が、複製回数の範囲(1〜4回)に含まれると判断する場合には、制御部 2 08は、モザイク処理を示す操作命令とともに、範囲情報 ((010,010)- (020,020》とサイ ズ (3)とを、画像処理部 203に対して出力し、画像処理部 203は、受け取った操作命 令、範囲情報及びサイズに従って、動作する。
また、比較回数が、複製回数の範囲(5〜10回)に含まれると判断する場合には、 制御部 208は、画像置換を示す操作命令とともに、範囲情報 ((010,010)- (020,020》と CGデータ識別子 (CG009)とを、画像処理部 203に対して出力し、画像処理部 203は 、受け取った操作命令、範囲情報及び CGデータ識別子に従って、動作する。
[0215] さらに、現在日時力 複製期間 (2005.12.01〜)に含まれると判断する場合には、制 御部 208は、フレーム消去を示す操作命令を、画像処理部 203に対して出力し、画 像処理部 203は、受け取った操作命令に従って、動作する。
(f)上記においては、図 21〜図 25に示す付加情報において、範囲情報が、それぞ れ、範囲情報 ((9999,9999)-(9999,9999))に置き換えられたものが、サーバ装置 100 に記憶されており、デジタルカメラ 200において、パターン画像によるマッチングが行 われ、パターン画像と一致する部分画像が検出され、各処理が施される領域が確定 した後に、その領域を示す範囲情報が上書きされる。これにより、図 21〜図 25に示 す付加情報が得られるとして 、る。
[0216] しかし、付加情報において上書きされる情報は、上記の範囲情報に限定されない。
例えば、図 21〜図 25に示す付加情報に含まれている複製回数の範囲、複製期間 につ 、ても、デジタルカメラ 200にお!/、て上書きされるとしてもよ!/、。
例えば、図 23に示す付加情報 155において、複製期間 (2005.10.01〜2005.10.31) 、(2005.11.01〜2005.11.30)、 (2005.12.01〜)に代えて、複製期間 (X1〜X2)、 (X3 〜X4)、(X5〜;)が含まれている。ここで、 X1〜X5は、それぞれの期日が確定してい な 、ことを示す文字列である。
[0217] 情報記憶部 204に記憶されている圧縮画像データを、メモリカード 300へ複製する 際に、デジタルカメラ 200の制御部 208は、現在日時を取得し、次に、以下の式によ り、 X1〜X5に相当する期日を算出する。
XI =現在日時
X2 =現在日時 + 30日
X3=X2+ 1日
X4=X3 + 30日
X5=X4+ 1日
次に、制御部 208は、算出した期日を、各複製期間の対応する位置に書き込む。
[0218] (19)画像置換命令は、デジタルカメラによる撮影により得られた画像データ (又は 、直前の画像データ、つまり、他の処理が施された画像データ)の一部分について、 その部分に表示されたオブジェクト (つまり、人物や建物など)の大きさや向きを変更 する命令であるとしてもよい。また、その部分の色調の調整をする命令、例えば、明る さやコントラストを変更したり、 2階調化したりする命令であるとしてもよい。
[0219] (20)上記にぉ 、て、制御情報及び付加情報は、コンピュータプログラムであり、各 操作情報は、機械語形式のコンピュータ命令であるとしているが、このようないわゆる 高級な言語によるものには、限定されない。
制御情報及び付加情報は、上述したモザイク処理、記録、画像置換、フレーム消去 などに対応する制御情報を含むシーケンス情報力 構成されているとしてもよい。
[0220] (21)上記の実施の形態の具体的な適用例について以下に説明する。 デジタルカメラ力 集合住宅(マンション)の入口付近を撮影するように、設置されて おり、繰り返し、入口付近を自動的に撮影する。このデジタルカメラは、防犯用に設け られたものであり、このデジタルカメラにより生成された画像データは、例えば、集合 住宅内において窃盗などの犯罪が発生した場合に、解析され、犯人の検挙のための 情報を提供する。
[0221] しかし、このデジタルカメラにより得られた画像には、集合住宅の住人も写っており、 このような画像データは、集合住宅の住人のプライバシー権を侵害しかねな 、と!/、う 問題がある。
そこで、このような問題点を解決することができる画像処理システム 10の具体例を 以下に示す。
[0222] 防犯サービス提供業者が、複数の集合住宅に対して、カメラ撮影による防犯サービ スを提供している。
デジタルカメラ 200aは、ある集合住宅のエントランス部の内側上部において、ェント ランス部のドア方向を撮影するように、設置されている。デジタルカメラ 200aは、繰り 返し、具体的には 5秒に 1回、ドア方向を自動的に撮影し、撮影により得られた画像 データを内部に記録する。
[0223] また、デジタルカメラ 200bは、別の集合住宅にお!/、て、デジタルカメラ 200aと同様 に設置されており、デジタルカメラ 200aと同様に動作する。さらに、その他のデジタ ルカメラは、さらに別の集合住宅において、同様に設置されており、同様に動作する サーバ装置 100は、防犯サービス提供業者の事務所に設置されている。
[0224] サーバ装置 100の情報記憶部 103は、防犯サービス提供業者による防犯サービス の提供先の全ての集合住宅の全ての住人の顔写真を、パターン画像 131、 132、 · · 'として記憶している。
サーバ装置 100の情報記憶部 103に記憶されている利用者情報テーブル 121に おいて、利用者識別子は、集合住宅を識別する。つまり、利用者は、集合住宅に対 応している。
[0225] サーバ装置 100の情報記憶部 103に記憶されている制御情報 141は、一例として 、図 4に示すように、モザイク処理命令と記録命令とから構成される。モザイク処理命 令に対応する詳細情報は、条件「パターン画像一致」を含み、モザイクのブロックの サイズは、「5」である。また、記録命令では、記録先としてメモリカードが指定されてい る。
制御情報 141が実行されると、デジタルカメラ 200aによる撮影により得られた画像 データ内の一部分が、パターン画像 (つまり、住民の顔写真)と一致すると判断された 場合に、前記画像データ内の一部分 (つまり、住民の顔部分)に対して、ブロックのサ ィズが「5」であるモザイク処理命令が実行され、次に、モザイク処理が施された画像 データが、メモリカードに書き込まれる。
[0226] このようにして、画像処理システム 10を適用すると、デジタルカメラにより得られた画 像データに、集合住宅の住人の顔部分が写った場合には、住人の顔部分にモザイク 処理を施すので、住人のプライバシー権を保護することができる。
一方、画像データに住人以外の者が写った場合には、モザイク処理を施すことなく 、そのまま記録する。こうして、住人のプライバシー権の保護と、防犯機能の双方を両 立させることができる。
[0227] なお、この具体例では、住人の顔部分にモザイク処理を施すとして!/、るが、モザイク 処理には限定されない。住人の顔部分を他の画像に置き換えるとしてもよいし、住人 の顔が写って 、る画像データを消去するとしてもよ 、。
また、 1個の集合住宅において、 2台以上のデジタルカメラが設置されているとして ちょい。
[0228] また、この具体例では、防犯サービス提供業者が複数の集合住宅に対して、上記 の防犯サービスを提供するとしている力 これには限定されない。例えば、デジタル カメラ 200a、 200b,サーバ装置 100は、 1個の集合住宅において設置されており、 画像処理システム 10は、当該 1個の集合住宅に対してのみ、上述したような防犯サ 一ビスを提供するとしてもよ ヽ。
[0229] (22)上記の各装置は、具体的には、マイクロプロセッサ、 ROM、 RAMなどから構 成されるコンピュータシステムである。前記 RAMには、コンピュータプログラムが記憶 されている。ここで、コンピュータプログラムは、所定の機能を達成するために、コンビ ユータに対する指令を示す命令コードが複数個組み合わされて構成されたものであ る。前記マイクロプロセッサ力 前記コンピュータプログラムに従って動作することによ り、各装置は、その機能を達成する。つまり、前記マイクロプロセッサは、前記コンビュ ータプログラムに含まれる各命令を 1個ずつ読み出し、読み出した命令を解読し、解 読結果に従って動作する。
[0230] (23)上記の各装置を構成する構成要素の一部又は全部は、 1個のシステム LSI ( Large Scale Integration:大規模集積回路)から構成されているとしてもよい。システム LSIは、複数の構成部を 1個のチップ上に集積して製造された超多機能 LSIであり、 具体的には、マイクロプロセッサ、 ROM、 RAMなどを含んで構成されるコンピュータ システムである。前記 RAMには、コンピュータプログラムが記憶されている。前記マイ クロプロセッサが、前記コンピュータプログラムに従って動作することにより、システム L SIは、その機能を達成する。
[0231] また、上記の各装置を構成する構成要素の各部は、個別に 1チップィ匕されても良い し、一部又は全てを含むように 1チップ化されてもよい。また、ここでは、 LSIとしたが、 集積度の違いにより、 IC、システム LSI、スーパー LSI、ウルトラ LSIと呼称されること もめる。
また、集積回路化の手法は LSIに限るものではなぐ専用回路又は汎用プロセッサ で実現してもよい。 LSI製造後に、プログラムすることが可能な FPGA (Field
Programmable Gate Array)や LSI内部の回路セルの接続や設定を再構成可能なリコ ンフィギユラブル ·プロセッサを利用しても良 、。
[0232] (24)上記の各装置を構成する構成要素の一部又は全部は、各装置に脱着可能な ICカード又は単体のモジュール力も構成されて 、るとしてもよ 、。前記 ICカード又は 前記モジュールは、マイクロプロセッサ、 ROM, RAM,などから構成されるコンビュ ータシステムである。前記 ICカード又は前記モジュールは、上記の超多機能 LSIを 含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作するこ とにより、前記 ICカード又は前記モジュールは、その機能を達成する。この ICカード 又はこのモジュールは、耐タンパ性を有するとしてもよ!/、。
[0233] (25)本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンビュ ータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプ ログラム力もなるデジタル信号であるとしてもよい。
また、本発明は、前記コンピュータプログラム又は前記デジタル信号をコンピュータ 読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、 CD— RO M、 MO、 DVD, DVD-ROM, DVD -RAM, BD (Blu— ray Disc)、半導体メ モリなど、〖こ記録したものとしてもよい。また、これらの記録媒体に記録されている前 記コンピュータプログラム又は前記デジタル信号であるとしてもよい。
[0234] また、本発明は、前記コンピュータプログラム又は前記デジタル信号を、電気通信 回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送 等を経由して伝送するものとしてもよい。
また、本発明は、マイクロプロセッサとメモリとを備えたコンピュータシステムであって 、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサ は、前記コンピュータプログラムに従って動作するとしてもよい。
[0235] また、前記プログラム又は前記デジタル信号を前記記録媒体に記録して移送する ことにより、又は前記プログラム又は前記デジタル信号を前記ネットワーク等を経由し て移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい
(26)上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよ!/、。 産業上の利用可能性
[0236] 本発明の画像処理システムを構成する各装置は、撮影により得られた画像データ を利用する産業において、経営的に、また反覆的、継続的に利用される。また、各装 置は、電気器機製造業において、生産され販売されることにより、経営的に、また反 覆的、継続的に利用される。

Claims

請求の範囲
[1] 照合画像との対比結果に応じて撮影画像に画像処理を施す画像処理装置であつ て、
撮影により生成された撮影画像を記憶している第 1画像記憶手段と、
画像処理を示す処理命令を記憶している命令記憶手段と、
予め生成された照合画像を記憶している第 2画像記憶手段と、
前記撮影画像内に前記照合画像に相当する部分が存在するか否かを判断する判 断手段と、
前記判断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像 処理を施す実行手段と
を備えることを特徴とする画像処理装置。
[2] 前記画像処理装置は、さらに、
被写体を撮影して前記撮影画像を生成し、生成した前記撮影画像を前記第 1画像 記憶手段に書き込む撮影手段
を含むことを特徴とする請求項 1に記載の画像処理装置。
[3] 前記画像処理装置は、ネットワークを介して、サーバ装置と接続されており、
前記画像処理装置は、さらに、
被写体を撮影して前記撮影画像を生成する撮影手段と、
生成した前記撮影画像をネットワークを介して前記サーバ装置へ送信する送信手 段と、
前記サーバ装置からネットワークを介して前記撮影画像を受信する受信手段と、 受信した前記撮影画像を前記第 1画像記憶手段に書き込む書込手段と を含み、
前記サーバ装置は、前記撮影画像を受信し、蓄積し、送信する
ことを特徴とする請求項 1に記載の画像処理装置。
[4] 前記画像処理装置は、ネットワークを介して、撮影装置と接続されており、
前記撮影装置は、被写体を撮影して前記撮影画像を生成し、生成した前記撮影画 像をネットワークを介して、前記画像処理装置へ送信し、 前記画像処理装置は、さらに、
前記撮影装置から、ネットワークを介して、前記撮影画像を受信する受信手段と、 受信した前記撮影画像を前記第 1画像記憶手段に書き込む書込手段と を含むことを特徴とする請求項 1に記載の画像処理装置。
[5] 前記画像処理装置は、ネットワークを介して、サーバ装置と接続されており、
前記サーバ装置は、あらかじめ前記処理命令及び前記照合画像を記憶しており、 前記画像処理装置からの要求に応じて、前記処理命令及び前記照合画像を、前記 画像処理装置へ送信し、
前記画像処理装置は、さらに、
前記サーバ装置へ、前記処理命令及び前記照合画像の要求を送信する送信手段 と、
前記サーバ装置から、前記処理命令及び前記照合画像を受信する受信手段と、 受信した前記処理命令を前記命令記憶手段に書き込み、受信した前記照合画像 を前記第 2画像記憶手段に書き込む書込手段と
を含むことを特徴とする請求項 1に記載の画像処理装置。
[6] 前記送信手段は、所定条件を満たす前記処理命令及び前記照合画像の要求を送 信する
ことを特徴とする請求項 5に記載の画像処理装置。
[7] 前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置の利用 者に係るものであることであり、
前記送信手段は、当該画像処理装置の利用者に係る前記処理命令及び前記照 合画像の要求を送信し、
前記サーバ装置は、前記利用者に係る前記処理命令及び前記照合画像を記憶し ており、前記処理命令及び前記照合画像を送信する
ことを特徴とする請求項 6に記載の画像処理装置。
[8] 前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置の利用 者を識別する利用者識別子に対応するものであることであり、
前記送信手段は、前記要求として、前記利用者を識別する利用者識別子を送信し 前記サーバ装置は、前記利用者識別子に対応付けて、前記処理命令及び前記照 合画像を記憶しており、受信した前記利用者識別子に対応する前記処理命令及び 前記照合命令を抽出し、抽出した前記処理命令及び前記照合命令を送信する ことを特徴とする請求項 7に記載の画像処理装置。
[9] 前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置に係るも のであることであり、
前記送信手段は、当該画像処理装置に係る前記処理命令及び前記照合画像の 要求を送信し、
前記サーバ装置は、当該画像処理装置に係る前記処理命令及び前記照合画像を 記憶しており、前記処理命令及び前記照合画像を送信する
ことを特徴とする請求項 6に記載の画像処理装置。
[10] 前記所定条件は、前記処理命令及び前記照合画像が当該画像処理装置を識別 する利用者識別子に対応するものであることであり、
前記送信手段は、前記要求として、当該画像処理装置を識別する装置識別子を送 信し、
前記サーバ装置は、前記装置識別子に対応付けて、前記処理命令及び前記照合 画像を記憶しており、受信した前記装置識別子に対応する前記処理命令及び前記 照合命令を抽出し、抽出した前記処理命令及び前記照合命令を送信する
ことを特徴とする請求項 9に記載の画像処理装置。
[11] 前記所定条件は、前記処理命令及び前記照合画像が撮影対象の被写体に係るも のであることであり、
前記送信手段は、被写体に係る前記処理命令及び前記照合画像の要求を送信し 前記サーバ装置は、当該被写体に係る前記処理命令及び前記照合画像を記憶し ており、前記処理命令及び前記照合画像を送信する
ことを特徴とする請求項 6に記載の画像処理装置。
[12] 前記所定条件は、前記処理命令及び前記照合画像が被写体に貼付された ICタグ 識別するタグ識別子に対応するものであることであり、
前記画像処理装置は、さらに、
被写体に貼付された ICタグから、当該 ICタグを識別するタグ識別子を取得する取 得手段を備え、
前記送信手段は、前記要求として、取得した前記タグ識別子を送信し、 前記サーバ装置は、前記タグ識別子に対応付けて、前記処理命令及び前記照合 画像を記憶しており、受信した前記タグ識別子に対応する前記処理命令及び前記照 合命令を抽出し、抽出した前記処理命令及び前記照合命令を送信する
ことを特徴とする請求項 11に記載の画像処理装置。
[13] 前記送信手段は、前記処理命令及び前記照合画像の要求を、随時、サーバ装置 へ送信する
ことを特徴とする請求項 5に記載の画像処理装置。
[14] 前記送信手段は、前記処理命令及び前記照合画像の要求を、定期的に繰り返し、 サーバ装置へ送信する
ことを特徴とする請求項 5に記載の画像処理装置。
[15] 前記実行手段は、前記判断手段により、前記撮影画像内に前記照合画像に相当 する部分が存在すると判断される場合に、前記照合画像に相当する部分に対して、 前記画像処理を施す
ことを特徴とする請求項 1に記載の画像処理装置。
[16] 前記処理命令により示される画像処理は、モザイク処理であり、
前記実行手段は、前記照合画像に相当する部分に対して、モザイク処理を施す ことを特徴とする請求項 15に記載の画像処理装置。
[17] 前記処理命令により示される画像処理は、画像上書処理であり、
前記実行手段は、前記照合画像に相当する部分に対して、画像上書処理を施す ことを特徴とする請求項 15に記載の画像処理装置。
[18] 前記画像処理は、コンピュータグラフィック処理による画像上書処理であり、
前記実行手段は、前記照合画像に相当する部分に対して、コンピュータグラフイツ ク処理を施す ことを特徴とする請求項 17に記載の画像処理装置。
[19] 前記画像処理は、他の画像への置き換えによる画像上書処理であり、
前記実行手段は、前記照合画像に相当する部分を、他の画像に置き換える ことを特徴とする請求項 17に記載の画像処理装置。
[20] 前記処理命令により示される画像処理は、さらに、暗号化処理を含み、
前記実行手段は、さらに、前記処理命令に含まれる暗号化処理に従って、前記撮 影画像に前記暗号化処理を施して、暗号化画像を生成する
ことを特徴とする請求項 15に記載の画像処理装置。
[21] 前記実行手段は、二者が分散して有する 2個の鍵に基づいて、前記暗号化処理を 施す
ことを特徴とする請求項 20に記載の画像処理装置。
[22] 前記処理命令により示される画像処理は、情報付加であり、
前記実行手段は、撮影画像に対して、画像処理を示す処理命令を含む制御情報 を付加する
ことを特徴とする請求項 15に記載の画像処理装置。
[23] 前記実行手段は、撮影画像に対して、制御情報を電子透力しとして埋め込むことに より、付加する
ことを特徴とする請求項 22に記載の画像処理装置。
[24] 前記実行手段は、前記判断手段により、前記撮影画像内に前記照合画像に相当 する部分が存在しな ヽと判断される場合に、前記画像処理を施す
ことを特徴とする請求項 1に記載の画像処理装置。
[25] 前記処理命令により示される画像処理は、画像消去であり、
前記実行手段は、前記第 1画像記憶手段に記憶されて!、る前記撮影画像を消去 する
ことを特徴とする請求項 24に記載の画像処理装置。
[26] 前記画像処理装置は、さらに、
被写体を撮影して前記撮影画像を生成し、生成した前記撮影画像を前記第 1画像 記憶手段に書き込む撮影手段を含み、 前記判断手段は、前記撮影手段により前記撮影画像が生成された場合に、前記判 断を行う
ことを特徴とする請求項 1に記載の画像処理装置。
[27] 前記画像処理装置は、さらに、
前記第 1画像記憶手段に記憶されている前記撮影画像を外部へ出力する出力手 段を含み、
前記判断手段は、前記出力手段により前記撮影画像が出力される場合に、前記判 断を行い、
前記出力手段は、前記画像処理が施された撮影画像を外部へ出力する ことを特徴とする請求項 1に記載の画像処理装置。
[28] 前記画像処理装置は、さらに、
当該画像処理装置が存在する現在位置を取得する位置取得手段と、 取得した現在位置が、所定の範囲外にある力否かを判断する範囲判断手段とを含 み、
前記判断手段は、前記範囲判断手段により前記範囲外にあると判断される場合に 、前記判断を行う
ことを特徴とする請求項 1に記載の画像処理装置。
[29] 予め生成された照合画像と、画像処理を示す処理命令とを記憶して!/ヽる記憶手段 と、
ネットワークを介して接続されて 1ゝる画像処理装置から、前記照合画像及び処理命 令の送信要求を受信する受信手段と、
前記送信要求を受信すると、前記記憶手段から前記照合画像及び処理命令を読 み出す読出手段と、
読み出した前記照合画像及び処理命令を、ネットワークを介して、前記画像処理装 置へ送信する送信手段と
を備えることを特徴とするサーバ装置。
[30] 前記受信手段は、所定条件を満たす前記処理命令及び前記照合画像の要求を受 信し、 前記読出手段は、前記記憶手段から、前記所定条件を満たす前記処理命令及び 前記照合画像を読み出す
ことを特徴とする請求項 29に記載のサーバ装置。
[31] ネットワークを介して接続されたサーバ装置と画像処理装置とから構成される画像 処理システムであって、
前記サーバ装置は、
予め生成された照合画像と、画像処理を示す処理命令とを記憶して!/、る記憶手段 と、
前記画像処理装置から、前記照合画像及び処理命令の送信要求を受信する受信 手段と、
前記送信要求を受信すると、前記記憶手段から前記照合画像及び処理命令を読 み出す読出手段と、
読み出した前記照合画像及び処理命令を、ネットワークを介して、前記画像処理装 置へ送信する送信手段とを備え、
前記画像処理装置は、
撮影により生成された撮影画像を記憶している第 1画像記憶手段と、
前記サーバ装置へ、前記処理命令及び前記照合画像の要求を送信する送信手段 と、
前記サーバ装置から、前記処理命令及び前記照合画像を受信する受信手段と、 前記撮影画像内に前記照合画像に相当する部分が存在するか否かを判断する判 断手段と、
前記判断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像 処理を施す実行手段とを備える
ことを特徴とする画像処理システム。
[32] 被写体を撮影して撮影画像を生成し、照合画像との対比結果に応じて撮影画像に 画像処理を施す画像撮影装置であって、
第 1画像記憶手段と、
被写体を撮影して撮影画像を生成し、生成した前記撮影画像を前記第 1画像記憶 手段に書き込む撮影手段と、
画像処理を示す処理命令を記憶している命令記憶手段と、
予め生成された照合画像を記憶している第 2画像記憶手段と、
前記撮影画像内に前記照合画像に相当する部分が存在するか否かを判断する判 断手段と、
前記判断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像 処理を施す実行手段と
を備えることを特徴とする画像撮影装置。
[33] 照合画像との対比結果に応じて撮影画像に画像処理を施す画像処理装置で用い られる画像処理方法であって、
前記画像処理装置は、撮影により生成された撮影画像を記憶して!/、る第 1画像記 憶手段と、画像処理を示す処理命令を記憶している命令記憶手段と、予め生成され た照合画像を記憶している第 2画像記憶手段とを備え、
前記画像処理方法は、
前記撮影画像内に前記照合画像に相当する部分が存在するか否かを判断する判 断ステップと、
前記判断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像 処理を施す実行ステップと
を含むことを特徴とする画像処理方法。
[34] 照合画像との対比結果に応じて撮影画像に画像処理を施すコンピュータで用いら れる画像処理プログラムであって、
前記コンピュータは、撮影により生成された撮影画像を記憶して ヽる第 1画像記憶 手段と、画像処理を示す処理命令を記憶している命令記憶手段と、予め生成された 照合画像を記憶している第 2画像記憶手段とを備え、
前記画像処理プログラムは、
前記撮影画像内に前記照合画像に相当する部分が存在するか否かを判断する判 断ステップと、
前記判断結果に応じて、前記撮影画像に対して前記処理命令に従って、前記画像 処理を施す実行ステップと
を含むことを特徴とする画像処理プログラム。
前記画像処理プログラムは、コンピュータ読み取り可能な記録媒体に記録されて 、 る
ことを特徴とする請求項 34に記載の画像処理プログラム。
PCT/JP2005/008866 2004-05-18 2005-05-16 画像処理装置 WO2005112438A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2006513578A JP4795941B2 (ja) 2004-05-18 2005-05-16 画像処理装置
EP05739130A EP1748642A1 (en) 2004-05-18 2005-05-16 Image processing apparatus
US11/579,869 US8077980B2 (en) 2004-05-18 2005-05-16 Image processing apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004147396 2004-05-18
JP2004-147396 2004-05-18

Publications (1)

Publication Number Publication Date
WO2005112438A1 true WO2005112438A1 (ja) 2005-11-24

Family

ID=35394524

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/008866 WO2005112438A1 (ja) 2004-05-18 2005-05-16 画像処理装置

Country Status (5)

Country Link
US (1) US8077980B2 (ja)
EP (1) EP1748642A1 (ja)
JP (1) JP4795941B2 (ja)
CN (1) CN1954592A (ja)
WO (1) WO2005112438A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007104149A (ja) * 2005-09-30 2007-04-19 Fuji Xerox Co Ltd 監視システム
JP2009083211A (ja) * 2007-09-28 2009-04-23 Oki Data Corp 画像形成装置
JP2009522679A (ja) * 2006-01-06 2009-06-11 ノキア コーポレイション キャプチャされたコンテンツを管理するためのシステム及び方法
JP2009194439A (ja) * 2008-02-12 2009-08-27 Canon Inc 撮像装置、画像処理装置、撮像装置の制御方法、画像処理方法、プログラム及び記憶媒体
JP2009302887A (ja) * 2008-06-13 2009-12-24 Kyocera Mita Corp 情報秘匿化方法および情報秘匿化装置
JP2010016544A (ja) * 2008-07-02 2010-01-21 Nikon Corp 撮像装置および画像処理装置、並びに画像処理プログラム
JP2011510521A (ja) * 2007-09-12 2011-03-31 ディジセンサリー・テクノロジーズ・プロプライアタリー・リミテッド チップ上スマート・ネットワーク・カメラ・システム
JP2016208128A (ja) * 2015-04-16 2016-12-08 パナソニックIpマネジメント株式会社 事件映像ログデータ生成装置、事件映像処理システム、事件映像ログデータ生成方法、及びプログラム
CN110969167A (zh) * 2018-09-29 2020-04-07 北京利络科技有限公司 一种实时图像处理分析方法

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4690785B2 (ja) * 2005-06-09 2011-06-01 株式会社リコー 画像形成装置、記録媒体
US8234502B2 (en) 2008-08-29 2012-07-31 International Business Machines Corporation Automated password authentication
KR101297720B1 (ko) * 2008-09-25 2013-08-26 삼성전자주식회사 스캐너, 이를 포함하는 화상형성장치, 스캐너의 이미지 처리방법 및 화상형성장치의 인쇄방법
KR20110047398A (ko) * 2009-10-30 2011-05-09 삼성전자주식회사 영상제공시스템 및 그 영상제공방법
JP5435142B2 (ja) * 2010-09-30 2014-03-05 富士通株式会社 画像暗号化システムおよび画像復号システム
US9591149B2 (en) * 2012-04-30 2017-03-07 Qualcomm Incorporated Generation of a combined image of a presentation surface
US20140168396A1 (en) * 2012-12-18 2014-06-19 General Electric Company Method for viewing contents of a refrigerator appliance
WO2014173588A1 (en) * 2013-04-22 2014-10-30 Sony Corporation Security feature for digital imaging
US10545092B2 (en) 2016-11-07 2020-01-28 Alarm.Com Incorporated Automated optical device monitoring
CN107329845B (zh) * 2017-07-05 2020-10-16 武汉斗鱼网络科技有限公司 图像处理方法、装置、终端及服务端
JP7030534B2 (ja) 2018-01-16 2022-03-07 キヤノン株式会社 画像処理装置および画像処理方法
CN111031348B (zh) * 2019-12-11 2022-03-15 浙江宇视科技有限公司 一种视频加扰方法、装置、服务器和存储介质
JP2021190780A (ja) * 2020-05-27 2021-12-13 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278584A (ja) * 1999-03-19 2000-10-06 Minolta Co Ltd 画像処理機能を備えた画像入力装置および画像処理プログラムを記録した記録媒体

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6456729B1 (en) * 1994-04-14 2002-09-24 Lewis J. Moore Anti-counterfeiting and tracking system
US6628824B1 (en) * 1998-03-20 2003-09-30 Ken Belanger Method and apparatus for image identification and comparison
US6765608B1 (en) * 1999-03-09 2004-07-20 Minolta Co., Ltd. Image processing apparatus and system executing predetermined image processing on image data shot by camera, and image recording medium recorded with image processing program
JP3548096B2 (ja) * 1999-04-14 2004-07-28 インターナショナル・ビジネス・マシーンズ・コーポレーション 改変判定装置およびその方法
JP2001086407A (ja) * 1999-09-17 2001-03-30 Matsushita Electric Ind Co Ltd モザイク機能付きの撮像装置およびモザイク処理装置
JP3678404B2 (ja) 2000-05-12 2005-08-03 株式会社東芝 映像情報処理装置
JP2002182275A (ja) 2000-12-19 2002-06-26 Konica Corp 写真撮影許可機能付きカメラ、写真撮影許可システム及び写真撮影許可方法
JP2002334097A (ja) * 2001-02-09 2002-11-22 Seiko Epson Corp サービス提供システム、管理端末、移動体、サービス提供プログラム及びサービス提供方法
JP2003032616A (ja) * 2001-07-17 2003-01-31 Nhk Computer Service:Kk 映像情報生成装置及び映像編集装置及び映像情報生成プログラム並びに映像編集プログラム
JP2003204427A (ja) 2002-01-08 2003-07-18 Canon Inc 情報処理装置、情報処理方法、画像データの処理方法、記憶媒体、及びプログラム
US7076101B2 (en) * 2002-02-14 2006-07-11 Sun Microsystems, Inc. Method and apparatus for local image quantification verification
JP4179836B2 (ja) * 2002-09-26 2008-11-12 富士フイルム株式会社 情報記録装置
JP2004312511A (ja) * 2003-04-09 2004-11-04 Nippon Telegr & Teleph Corp <Ntt> 映像編集システム,園児モニタリングシステム,福祉施設モニタリングシステム,記念ビデオ作成システム,行動モニタリングシステムおよび映像編集方法
JP4206888B2 (ja) * 2003-09-30 2009-01-14 カシオ計算機株式会社 画像処理装置及びプログラム
US7330593B2 (en) * 2004-06-25 2008-02-12 Stmicroelectronics, Inc. Segment based image matching method and system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000278584A (ja) * 1999-03-19 2000-10-06 Minolta Co Ltd 画像処理機能を備えた画像入力装置および画像処理プログラムを記録した記録媒体

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007104149A (ja) * 2005-09-30 2007-04-19 Fuji Xerox Co Ltd 監視システム
JP2009522679A (ja) * 2006-01-06 2009-06-11 ノキア コーポレイション キャプチャされたコンテンツを管理するためのシステム及び方法
JP2011510521A (ja) * 2007-09-12 2011-03-31 ディジセンサリー・テクノロジーズ・プロプライアタリー・リミテッド チップ上スマート・ネットワーク・カメラ・システム
JP4505004B2 (ja) * 2007-09-28 2010-07-14 株式会社沖データ 画像形成装置
JP2009083211A (ja) * 2007-09-28 2009-04-23 Oki Data Corp 画像形成装置
US8363839B2 (en) 2007-09-28 2013-01-29 Oki Data Corporation Image forming apparatus
JP2009194439A (ja) * 2008-02-12 2009-08-27 Canon Inc 撮像装置、画像処理装置、撮像装置の制御方法、画像処理方法、プログラム及び記憶媒体
JP2009302887A (ja) * 2008-06-13 2009-12-24 Kyocera Mita Corp 情報秘匿化方法および情報秘匿化装置
JP2010016544A (ja) * 2008-07-02 2010-01-21 Nikon Corp 撮像装置および画像処理装置、並びに画像処理プログラム
JP2016208128A (ja) * 2015-04-16 2016-12-08 パナソニックIpマネジメント株式会社 事件映像ログデータ生成装置、事件映像処理システム、事件映像ログデータ生成方法、及びプログラム
US10026448B2 (en) 2015-04-16 2018-07-17 Panasonic Intellectual Property Management Co., Ltd. Case video log data generating apparatus, case video processing system, and case video log data generating method
US10573346B2 (en) 2015-04-16 2020-02-25 Panasonic I-Pro Sensing Solutions Co., Ltd. Case video log data generating apparatus, case video processing system, and case video log data generating method
CN110969167A (zh) * 2018-09-29 2020-04-07 北京利络科技有限公司 一种实时图像处理分析方法

Also Published As

Publication number Publication date
US8077980B2 (en) 2011-12-13
JP4795941B2 (ja) 2011-10-19
EP1748642A1 (en) 2007-01-31
JPWO2005112438A1 (ja) 2008-03-27
US20070286496A1 (en) 2007-12-13
CN1954592A (zh) 2007-04-25

Similar Documents

Publication Publication Date Title
JP4795941B2 (ja) 画像処理装置
US11155725B2 (en) Method and apparatus for redacting video for compression and identification of releasing party
US7984300B2 (en) System and method of authenicating a digitally captured image
US20060104483A1 (en) Wireless digital image capture device with biometric readers
US7511859B2 (en) Mobile terminal having camera for inserting watermark data into image data and method thereof
US20080089554A1 (en) Device and method for digitally watermarking an image with data
JP2008269486A (ja) 撮像機器及びその認証方法
CN104079830B (zh) 暗码添加方法和装置、暗码照片处理方法和装置
US7400349B2 (en) Electronic camera and image processing method
JP2009033738A (ja) 撮像装置、画像ファイルのデータ構造
KR101460552B1 (ko) 프라이버시 영역의 마스킹 및 복원 방법
CN104092926A (zh) 一种数码相机及该相机的图像保密方法
US20070292034A1 (en) Device and method for digitally watermarking an image with GPS data
US20110125998A1 (en) Network photographing apparatus having a partial encryption function
US20070242852A1 (en) Method and apparatus for watermarking sensed data
WO2008048356A2 (en) Device and method for digitally watermarking an image with gps data
KR100678035B1 (ko) 휴대단말기의 촬영자 식별장치 및 방법
JP4654330B2 (ja) 映像変更装置、映像変更方法および映像変更プログラム
JP4105533B2 (ja) 画像仲介システム
JP2009027503A (ja) 撮像装置、改竄検出方法、および改竄検出装置
JP4449717B2 (ja) 携帯端末
JP2011223109A (ja) 撮像装置および画像ファイル生成方法
JP6213238B2 (ja) 情報処理装置、情報処理装置の制御方法、及びプログラム
JP2015115741A (ja) 画像管理装置、画像管理方法およびプログラム
JP3792242B2 (ja) 画像撮影装置および画像撮影方法

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2006513578

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 200580015868.8

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

WWW Wipo information: withdrawn in national office

Country of ref document: DE

WWE Wipo information: entry into national phase

Ref document number: 2005739130

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 2005739130

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 11579869

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 11579869

Country of ref document: US