JP2008219261A - Method of controlling transfer of image and image transfer device - Google Patents

Method of controlling transfer of image and image transfer device Download PDF

Info

Publication number
JP2008219261A
JP2008219261A JP2007051510A JP2007051510A JP2008219261A JP 2008219261 A JP2008219261 A JP 2008219261A JP 2007051510 A JP2007051510 A JP 2007051510A JP 2007051510 A JP2007051510 A JP 2007051510A JP 2008219261 A JP2008219261 A JP 2008219261A
Authority
JP
Japan
Prior art keywords
image
transfer
identification information
control unit
transmission device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007051510A
Other languages
Japanese (ja)
Other versions
JP4761312B2 (en
Inventor
Kenichiro Ayaki
健一郎 綾木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2007051510A priority Critical patent/JP4761312B2/en
Publication of JP2008219261A publication Critical patent/JP2008219261A/en
Application granted granted Critical
Publication of JP4761312B2 publication Critical patent/JP4761312B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To prevent a transferred image from being transferred to others against the intention of a person who transfers the image when transferring the image. <P>SOLUTION: Storage sections 28b and 28c of receivers 1b, 1c store identification information 42 and 45 indicating the owners of the receivers 1b, 1c, respectively. A storage section 7a of a transmitter 1a stores the image 43 acquired by photographing, or the like. When the image 43 is transferred to the receivers 1b, 1c from a receiver 1a, the receivers 1b and 1c transfer the identification information 42 and 45 to the transmitter 1a. The transmitter 1a creates an image file containing the image 43 and the identification information 42 for transfer to the receiver 1b. An image file containing the image 43 and the identification information 45 is created for transfer to the receiver 1c. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、撮像機能と通信機能を兼ね備えた装置から他の装置に画像を転送するときの転送制御方法と、その方法により画像の転送を行う画像転送装置に関する。   The present invention relates to a transfer control method for transferring an image from a device having an imaging function and a communication function to another device, and an image transfer device that transfers an image using the method.

デジタルカメラ付き携帯電話が普及し、撮影した画像を他の装置に転送することは、比較的簡単になった。このような状況は、便利である反面、撮影者の意図に反して画像が流出するおそれがある。   With the popularization of mobile phones with digital cameras, it has become relatively easy to transfer captured images to other devices. Such a situation is convenient, but there is a risk that the image may leak out against the photographer's intention.

画像の流出を防止または抑制する方法としては、送信時に電子証明書を要求したり、転送状況を画面に表示することで無断送信を防止する方法(特許文献1、2参照)が提案されている。また、送信端末に固有の個体識別データを画像に付加することで、無断撮影された画像が配信された際に発信元を特定できるようにする方法(特許文献3参照)などが提案されている。
特開2005−159726号公報 特開2005−352682号公報 特開2004−312163号公報
As a method for preventing or suppressing the outflow of an image, a method for preventing unauthorized transmission by requesting an electronic certificate at the time of transmission or displaying a transfer status on a screen has been proposed (see Patent Documents 1 and 2). . In addition, a method has been proposed (see Patent Document 3), in which individual identification data unique to a transmission terminal is added to an image, so that a transmission source can be specified when an image taken without permission is distributed. .
JP 2005-159726 A JP 2005-352682 A JP 2004-312163 A

特許文献1、2が示す方法によれば、撮影者が所有する装置から、撮影者の意図に反して画像が流出することは防げる。しかし、撮影者が自らの意志で画像を転送した場合、その先の転送を抑制することはできない。また、特許文献3が示す方法によれば、無断撮影された画像の配信は、抑制することができる。しかし、この方法もまた、撮影者が自ら画像を転送した場合、画像を受け取った者による再転送を抑制することはできない。   According to the methods disclosed in Patent Documents 1 and 2, it is possible to prevent an image from leaking from a device owned by the photographer against the photographer's intention. However, when the photographer transfers an image on his / her own will, the forward transfer cannot be suppressed. Further, according to the method disclosed in Patent Document 3, it is possible to suppress distribution of an image taken without permission. However, this method also cannot suppress retransfer by the person who received the image when the photographer transfers the image by himself / herself.

本発明の目的は、撮影者が自ら画像を転送した場合に、撮影者の意図に反して、画像がさらに転送されてしまうことを防止することにある。   An object of the present invention is to prevent further transfer of an image against the photographer's intention when the photographer transfers the image himself.

本発明が提案する第1の方法は、撮像機能および通信機能を備えた画像送信装置から、通信機能を備えた画像受信装置への、画像の転送を制御する方法であって、次の手順により画像の転送を行なう。   The first method proposed by the present invention is a method for controlling the transfer of an image from an image transmitting apparatus having an imaging function and a communication function to an image receiving apparatus having a communication function. Transfer images.

まず、画像受信装置の記憶部には、その画像受信装置の所有者を表す識別情報を記憶せしめておく。但し「所有者」とは、所有権を有する者に限らず、装置の管理者、使用者なども含むものとする。画像受信装置の所有者を表す識別情報は、所有者の名前や連絡先を表す文字情報か、所有者の生体認証情報、もしくはそれらの組み合わせとすることが好ましい。一方で、画像送信装置の記憶部には、撮像機能または通信機能により取得した画像を記憶せしめておく。続いて、画像受信装置から画像送信装置に、識別情報を転送する。識別情報の転送は、画像送信装置からの要求に対する応答として行なってもよい。画像送信装置は、画像送信装置の記憶部に記憶されている画像と、画像受信装置から転送された識別情報とを含む画像ファイルを生成する。画像送信装置が生成した画像ファイルは、画像受信装置へと転送される。   First, identification information representing the owner of the image receiving apparatus is stored in the storage unit of the image receiving apparatus. However, the “owner” is not limited to a person who has the ownership, but includes an administrator and a user of the apparatus. The identification information representing the owner of the image receiving device is preferably character information representing the name and contact information of the owner, biometric information of the owner, or a combination thereof. On the other hand, the image acquired by the imaging function or the communication function is stored in the storage unit of the image transmission apparatus. Subsequently, the identification information is transferred from the image receiving apparatus to the image transmitting apparatus. The identification information may be transferred as a response to a request from the image transmission apparatus. The image transmission device generates an image file including an image stored in the storage unit of the image transmission device and identification information transferred from the image reception device. The image file generated by the image transmission device is transferred to the image reception device.

第1の方法により画像ファイルを転送した場合、転送される画像ファイルの中には、転送先である画像受信装置の所有者を表す識別情報が記録される。したがって、転送された画像ファイルが、さらに他の装置(者)に転送された場合、再転送された画像ファイルに含まれる識別情報を確認することで、再転送を行なった装置(者)を特定することができる。   When the image file is transferred by the first method, identification information indicating the owner of the image receiving apparatus that is the transfer destination is recorded in the transferred image file. Therefore, if the transferred image file is transferred to another device (person), the identification information contained in the re-transferred image file is confirmed to identify the device (person) that performed the retransfer. can do.

本発明が提案する第2の方法は、第1の方法と同じく、撮像機能および通信機能を備えた画像送信装置から、通信機能を備えた画像受信装置への、画像の転送を制御する方法であり、次の手順により画像の転送を行なう。   The second method proposed by the present invention is a method for controlling the transfer of an image from an image transmission device having an imaging function and a communication function to an image reception device having a communication function, as in the first method. Yes, the image is transferred according to the following procedure.

まず、画像送信装置の記憶部に、撮像機能または通信機能により取得した画像を記憶せしめておく。続いて、画像送信装置の動作を制御することにより、転送事情を表す識別情報を取得して画像送信装置の記憶部に記憶せしめる。「転送事情」とは、転送を行なった日時、場所、相手および状況のことであり、転送事情を表す識別情報は、転送日時や転送場所を表す文字情報、転送場所周辺の情景を表す画像、画像受信装置の所有者の生体認証情報、もしくはそれらの組み合わせとすることが好ましい。画像送信装置は、画像送信装置の記憶部に記憶されている画像と転送事情を表す識別情報とを含む画像ファイルを生成し、その画像ファイルを画像受信装置に転送する。   First, the image acquired by the imaging function or the communication function is stored in the storage unit of the image transmission apparatus. Subsequently, by controlling the operation of the image transmission apparatus, identification information indicating the transfer situation is acquired and stored in the storage unit of the image transmission apparatus. “Transfer situation” refers to the date, place, partner, and status of the transfer, and the identification information representing the transfer situation includes the transfer date, character information representing the transfer location, an image representing the scene around the transfer location, It is preferable to use biometric authentication information of the owner of the image receiving apparatus or a combination thereof. The image transmission device generates an image file including an image stored in the storage unit of the image transmission device and identification information indicating a transfer situation, and transfers the image file to the image reception device.

第2の方法では、画像送信装置が自ら識別情報を取得するので、画像受信装置からの識別情報の供給がなくても、転送する画像ファイルの中に、転送相手を特定する情報または連想させる情報を記録しておくことができる。これにより、第1の方法同様、転送された画像ファイルが、さらに他の装置(者)に転送された場合、再転送された画像ファイルに含まれる識別情報を確認することで、再転送を行なった装置(者)を特定することができる。   In the second method, since the image transmission apparatus acquires identification information by itself, even if there is no supply of identification information from the image reception apparatus, information for identifying a transfer partner or information associated with the image file to be transferred Can be recorded. As a result, as in the first method, when the transferred image file is further transferred to another device (person), the re-transfer is performed by confirming the identification information included in the re-transferred image file. The device (person) can be identified.

また、第1の方法、第2の方法とも、画像受信装置は、画像ファイルに含まれる画像を、画像ファイルに含まれる識別情報とともに、所定の画面に出力することが好ましい。このような画面表示を行うことにより、画像ファイルを受け取った者に、画像ファイルを再転送すれば、その者が再転送を行なったことは簡単に特定されるということを、知らしめることができる。   In both the first method and the second method, it is preferable that the image receiving apparatus outputs an image included in the image file on a predetermined screen together with identification information included in the image file. By performing such a screen display, it is possible to inform the person who has received the image file that if the image file is retransferred, it is easily specified that the person has retransferred. .

また、画像送信装置が生成する画像ファイルは、識別情報が画像のメタデータとして付加された画像ファイルでもよいし、識別情報が画像に電子透かしとして埋め込まれた画像ファイルでもよい。メタデータとしての付加は、画像の画質に影響しないという利点がある。一方、電子透かしとしての付加は、データの改ざんにより識別情報を削除されにくいという利点がある。   The image file generated by the image transmission apparatus may be an image file in which identification information is added as metadata of an image, or an image file in which identification information is embedded in an image as a digital watermark. The addition as metadata has the advantage of not affecting the image quality. On the other hand, the addition as a digital watermark has an advantage that the identification information is not easily deleted by falsification of data.

また、画像ファイルの生成は、画像送信装置の記憶部に記憶されている画像が、識別情報を伴わない画像であるときのみ、行うようにしてもよい。転送の度に画像ファイルに識別情報を記録することとすると、転送が繰り返された場合に画像ファイルのサイズが増加するという不都合があり、一方、画像流出の要因を作ったのは最初に再転送を行なった者であり、その者のみを特定できれば十分な場合も少なくないからである。   Further, the image file may be generated only when the image stored in the storage unit of the image transmission apparatus is an image without identification information. If the identification information is recorded in the image file every time it is transferred, there is a disadvantage that the size of the image file increases when the transfer is repeated. This is because it is often sufficient to identify only that person.

本発明の第1の画像転送装置は、第1の転送制御方法において画像送信装置として機能する装置であり、撮影により画像を取得する撮像部、転送先装置との通信を制御する通信制御部、撮像部により取得された画像や通信制御部を介して取得された画像を記憶する画像記憶部、および、通信制御部を介して転送先装置から取得した転送先装置の所有者を表す識別情報と、画像記憶部に記憶されている画像とを含む画像ファイルを生成して、転送先装置に転送する転送制御部を備えるものである。   The first image transfer device of the present invention is a device that functions as an image transmission device in the first transfer control method, an imaging unit that acquires an image by shooting, a communication control unit that controls communication with a transfer destination device, An image storage unit for storing an image acquired by the imaging unit or an image acquired via the communication control unit, and identification information representing the owner of the transfer destination device acquired from the transfer destination device via the communication control unit; And a transfer control unit that generates an image file including an image stored in the image storage unit and transfers the image file to the transfer destination device.

また、本発明の第2の画像転送装置は、第2の転送制御方法において画像送信装置として機能する装置であり、撮影により画像を取得する撮像部、転送先装置との通信を制御する通信制御部、撮像部により取得された画像や通信制御部を介して取得された画像を記憶する画像記憶部、および転送事情を表す識別情報を取得するための動作を行い、その動作により取得した転送事情を表す識別情報と画像記憶部に記憶されている画像とを含む画像ファイルを生成して、転送先装置に転送する転送制御部を備えるものである。   The second image transfer apparatus of the present invention is an apparatus that functions as an image transmission apparatus in the second transfer control method, and a communication control that controls communication with an imaging unit that acquires an image by shooting and a transfer destination apparatus. The image storage unit that stores the image acquired by the image capturing unit and the image acquired via the communication control unit, and the transfer situation acquired by the operation for acquiring the identification information indicating the transfer situation A transfer control unit that generates an image file including identification information representing the image and an image stored in the image storage unit and transfers the generated image file to the transfer destination device.

本発明の方法および装置によれば、転送した画像が、さらに転送され、流出してしまった場合に、画像ファイルを調べるだけで、再転送を行なった者を特定することができる。また、本発明の方法により転送を行なっていることを画面表示で知らしめることにより、再転送を抑制することもできる。   According to the method and apparatus of the present invention, when the transferred image is further transferred and leaked, it is possible to identify the person who performed the retransfer only by examining the image file. In addition, it is possible to suppress re-transfer by informing on the screen display that transfer is being performed by the method of the present invention.

以下、本発明の方法および装置の一実施形態として、前述した第1の転送制御方法と第2の転送制御方法を選択的に用いることができるデジタルカメラを開示する。但し、本発明が提案する2種類の転送制御方法および2種類の画像転送装置は、それぞれ独立して実施可能であり、以下に説明する実施形態に限定されるものではない。   Hereinafter, as an embodiment of the method and apparatus of the present invention, a digital camera that can selectively use the first transfer control method and the second transfer control method described above will be disclosed. However, the two types of transfer control methods and the two types of image transfer devices proposed by the present invention can be implemented independently, and are not limited to the embodiments described below.

はじめにデジタルカメラの構成について説明する。図1Aおよび図1Bは、デジタルカメラ1の外観を示す図であり、図1Aはデジタルカメラの正面を、図1Bは背面を示している。これらの図に示すように、デジタルカメラ1は、撮像レンズ2、シャッタレリーズボタン3、内蔵フラッシュ4、操作ダイヤル5a、各種操作ボタン5b〜5f、モニタ6を備えている。また、デジタルカメラ1の下部には開閉可能なスロットカバーがあり、スロットカバーの中にはメモリカード7を装填するカードスロットが備えられている。   First, the configuration of the digital camera will be described. 1A and 1B are views showing the appearance of the digital camera 1. FIG. 1A shows the front of the digital camera, and FIG. 1B shows the back. As shown in these drawings, the digital camera 1 includes an imaging lens 2, a shutter release button 3, a built-in flash 4, an operation dial 5a, various operation buttons 5b to 5f, and a monitor 6. In addition, a slot cover that can be opened and closed is provided below the digital camera 1, and a card slot into which a memory card 7 is loaded is provided in the slot cover.

図2は、デジタルカメラ1の内部構成を示す図である。この図に示すように、デジタルカメラ1は、撮像レンズ2、レンズ駆動部16、絞り13、絞り駆動部17、CCD14およびタイミングジェネレータ(TG)18からなる撮像部を備える。撮像レンズ2は、被写体にピントを合わせるためのフォーカスレンズ、ズーム機能を実現するためのズームレンズなど複数の機能別レンズにより構成される。レンズ駆動部16はステッピングモータなど小型のモータで、CCD14から各機能別レンズのまでの距離が目的に適った距離となるように各機能別レンズの位置を調整する。絞り13は複数の絞り羽根からなる。絞り駆動部17は、ステッピングモータなど小型のモータで、絞りの開口サイズが目的に適ったサイズになるように絞り羽根の位置を調整する。CCD14は原色カラーフィルタを伴う500〜1200万画素のCCDで、タイミングジェネレータ18からの指示信号に応じて蓄積された電荷を放出する。タイミングジェネレータ18は、CCD14に所望の時間のみ電荷が蓄積されるようにCCD14に対して信号を送り、これによりシャッタ速度を調整する。   FIG. 2 is a diagram illustrating an internal configuration of the digital camera 1. As shown in this figure, the digital camera 1 includes an imaging unit including an imaging lens 2, a lens driving unit 16, a diaphragm 13, a diaphragm driving unit 17, a CCD 14, and a timing generator (TG) 18. The imaging lens 2 includes a plurality of functional lenses such as a focus lens for focusing on a subject and a zoom lens for realizing a zoom function. The lens driving unit 16 is a small motor such as a stepping motor, and adjusts the position of each functional lens so that the distance from the CCD 14 to each functional lens is a suitable distance for the purpose. The diaphragm 13 is composed of a plurality of diaphragm blades. The aperture drive unit 17 is a small motor such as a stepping motor, and adjusts the position of the aperture blades so that the aperture size of the aperture becomes a size suitable for the purpose. The CCD 14 is a CCD having 5 to 12 million pixels with a primary color filter, and discharges accumulated charges in response to an instruction signal from the timing generator 18. The timing generator 18 sends a signal to the CCD 14 so that charges are accumulated in the CCD 14 only for a desired time, thereby adjusting the shutter speed.

また、デジタルカメラ1は、CCD14の出力信号をデジタル信号に変換するA/D変換部15と、A/D変換部15が出力した画像データをシステムバス24を介して他の処理部に転送する画像入力制御部23と、画像入力制御部23から転送された画像データを一時記憶するメモリ22を備える。   The digital camera 1 also transfers an A / D conversion unit 15 that converts the output signal of the CCD 14 into a digital signal, and image data output from the A / D conversion unit 15 to another processing unit via the system bus 24. An image input control unit 23 and a memory 22 for temporarily storing image data transferred from the image input control unit 23 are provided.

また、デジタルカメラ1は、フラッシュ4と、フラッシュ4の発光タイミングや発光量を制御するフラッシュ制御部19と、レンズ駆動部16にレンズの移動を指示して焦点合わせを行う焦点調節部20と、絞り値とシャッタ速度を決定し、絞り駆動部17とタイミングジェネレータ18に指示信号を送出する露出調整部21を備える。また、デジタルカメラ1は、メモリ22に記憶されている画像データに対して画像処理を施す画像処理部25を備える。画像処理部25は、画像を自然な色合い、明るさにするための色階調補正や明るさ補正、また画像データが赤目を含むものであるときに赤目を黒目に修正する処理など、画像の見栄えを良くするための各種仕上げ処理を行う。画像処理部25により処理された処理済画像データは、再度メモリ22に格納される。   The digital camera 1 includes a flash 4, a flash control unit 19 that controls the timing and amount of light emitted from the flash 4, a focus adjustment unit 20 that instructs the lens driving unit 16 to move the lens, and performs focusing. An exposure adjusting unit 21 that determines an aperture value and a shutter speed and sends an instruction signal to the aperture driving unit 17 and the timing generator 18 is provided. The digital camera 1 also includes an image processing unit 25 that performs image processing on the image data stored in the memory 22. The image processing unit 25 enhances the appearance of the image, such as color tone correction and brightness correction for natural color and brightness of the image, and processing for correcting red eyes to black eyes when the image data includes red eyes. Various finishing processes are performed to improve the quality. The processed image data processed by the image processing unit 25 is stored in the memory 22 again.

また、デジタルカメラ1は、メモリ22に記憶されている画像データのモニタ6への出力を制御する表示制御部26を備える。表示制御部26は、メモリ22に記憶されている画像データの画素数を、表示に適した大きさとなるように間引きしてから液晶モニタ9に出力する。また、表示制御部26は、動作条件などの設定画面の表示も制御する。   The digital camera 1 also includes a display control unit 26 that controls output of image data stored in the memory 22 to the monitor 6. The display control unit 26 thins out the number of pixels of the image data stored in the memory 22 so as to have a size suitable for display, and then outputs it to the liquid crystal monitor 9. The display control unit 26 also controls display of setting screens such as operating conditions.

また、デジタルカメラ1は、メモリ22に記憶されている画像データのメモリカード7への書込み、およびメモリカード7に記録されている画像データのメモリ22へのロードを制御する記録読出制御部27を備える。記録読出制御部27は、ユーザの設定に応じて撮影により取得された画像データをそのまま、もしくは圧縮符号化し、Exif(Exchangeable Image File Format)ファイルとして、メモリカード7に記録する。Exifは、日本電子工業振興協会(JEIDA)が定めたファイルフォーマット規格である。また、メモリカード7に記録されている画像ファイルの再生を要求する操作が行われたときには、Exifファイルに含まれる画像データを、メモリ22にロードする。画像データが圧縮されている場合には伸長した後、メモリ22にロードする。   Further, the digital camera 1 includes a recording / reading control unit 27 that controls writing of image data stored in the memory 22 to the memory card 7 and loading of image data recorded on the memory card 7 to the memory 22. Prepare. The recording / reading control unit 27 records the image data obtained by photographing according to the user setting as it is or compression-encoded, and stores it in the memory card 7 as an Exif (Exchangeable Image File Format) file. Exif is a file format standard defined by the Japan Electronics Industry Promotion Association (JEIDA). When an operation for requesting reproduction of an image file recorded on the memory card 7 is performed, the image data included in the Exif file is loaded into the memory 22. If the image data is compressed, it is decompressed and loaded into the memory 22.

また、デジタルカメラ1は、デジタルカメラ1の所有者の識別情報を記憶するメモリ28を備える。本実施形態では、メモリ28には、所有者の顔画像が記憶されているものとする。但し、所有者の識別情報は、顔画像以外の生体情報(指紋、虹彩、静脈パターンなど)でもよいし、所有者の氏名や連絡先を示す文字情報(氏名、住所、メールアドレスなど)でもよい。識別情報は1種類である必要はなく、複数種類の識別情報をメモリ28に記憶せしめておき、選択的にまたは組み合わせて利用することもできる。   The digital camera 1 also includes a memory 28 that stores identification information of the owner of the digital camera 1. In the present embodiment, it is assumed that the face image of the owner is stored in the memory 28. However, the identification information of the owner may be biometric information other than the face image (fingerprint, iris, vein pattern, etc.), or character information (name, address, email address, etc.) indicating the owner's name and contact information. . There is no need for one type of identification information, and a plurality of types of identification information can be stored in the memory 28 and used selectively or in combination.

所有者の顔画像は、デジタルカメラ1で撮影を行うことにより取得する。あるいは、他のカメラにより撮影された顔画像を、メモリカード7を介してデジタルカメラ1に取り込んでもよい。指紋、虹彩、静脈パターンなどを識別情報として記憶せしめる場合には、専用の装置(例えば指紋読取装置)によりそれらの情報を取得し、メモリカード7を介してデジタルカメラ1に取り込むことが好ましい。文字情報を識別情報として記憶せしめる場合には、デジタルカメラ1の設定画面において文字情報を入力する。あるいは、パソコンなどにより文字情報を生成し、メモリカード7を介してデジタルカメラ1に取り込むことも可能である。   The face image of the owner is acquired by photographing with the digital camera 1. Alternatively, a face image taken by another camera may be taken into the digital camera 1 via the memory card 7. In the case where fingerprints, irises, vein patterns, etc. are stored as identification information, it is preferable to acquire such information with a dedicated device (for example, a fingerprint reader) and take it into the digital camera 1 via the memory card 7. When character information is stored as identification information, the character information is input on the setting screen of the digital camera 1. Alternatively, character information can be generated by a personal computer or the like and imported into the digital camera 1 via the memory card 7.

また、デジタルカメラ1は、薄型の内蔵アンテナ11と、通信制御部12を備える。通信制御部12は、無線LAN、TCP/IP(Transmission Control Protocol / Internet Protocol)およびPTP−IP(Picture Transfer Protocol over TCP/IP networks)に準拠した画像転送を行なう。また、通信制御部12は、UPnP(Universal Plug and Play)機能も備えている。なお、無線LANはIEEE802.11に、TCP/IPはIETF(Internet Engineering Task Force)のRFC(Request for Comment)791および793に、またPTP−IPはCIPA(カメラ映像機器工業会)のDC−005に、UPnPはUPnP Forum発行の仕様書で、規定されている。   The digital camera 1 also includes a thin built-in antenna 11 and a communication control unit 12. The communication control unit 12 performs image transfer conforming to a wireless LAN, TCP / IP (Transmission Control Protocol / Internet Protocol), and PTP-IP (Picture Transfer Protocol over TCP / IP networks). The communication control unit 12 also has a UPnP (Universal Plug and Play) function. The wireless LAN is IEEE 802.11, TCP / IP is RFC (Request for Comment) 791 and 793 of IETF (Internet Engineering Task Force), and PTP-IP is DC-005 of CIPA (Camera & Imaging Products Association). UPnP is defined in a specification issued by UPnP Forum.

デジタルカメラ1は、この他、CPU(Central Processor Unit)31、操作/制御プログラムが格納されたRAM(Random Access Memory)32、各種設定値が記憶されているEEPROM(Electronically Erasable and Programmable Read Only Memory)33からなる全体制御部30を備える。全体制御部30のCPU31は、EEPROM33に記憶された設定値を参照し、その設定値に基づいてRAM32に記憶されているプログラムを選択、実行する。これにより、全体制御部30は、シャッタレリーズボタン3、操作ダイヤル/ボタン5a〜5fの操作を検出し、前述したフラッシュ制御部19、焦点調節部20、露出調整部21、画像入力制御部23、画像処理部25、表示制御部26、記録読出制御部27および通信制御部12に対し、実行すべき処理を指示する指示信号を送出する。これにより、デジタルカメラ1の動作が制御される。   In addition, the digital camera 1 includes a CPU (Central Processor Unit) 31, a RAM (Random Access Memory) 32 in which an operation / control program is stored, and an EEPROM (Electronically Erasable and Programmable Read Only Memory) in which various setting values are stored. An overall control unit 30 is provided. The CPU 31 of the overall control unit 30 refers to the setting value stored in the EEPROM 33, and selects and executes a program stored in the RAM 32 based on the setting value. Thereby, the overall control unit 30 detects the operation of the shutter release button 3 and the operation dial / buttons 5a to 5f, and the above-described flash control unit 19, focus adjustment unit 20, exposure adjustment unit 21, image input control unit 23, An instruction signal for instructing a process to be executed is sent to the image processing unit 25, the display control unit 26, the recording / reading control unit 27, and the communication control unit 12. Thereby, the operation of the digital camera 1 is controlled.

本実施形態では、デジタルカメラ1の動作モードとして、撮影モード、再生モード、設定モードおよび通信モードがある。撮影モードでは、全体制御部30の制御の下で、各処理部が、それぞれ焦点調節、露出制御、フラッシュ制御、画像処理、記録などを実行することにより画像が取得される。再生モードでは、全体制御部30の制御の下で、メモリカード7に記録されている画像がモニタ6に出力される。設定モードでは、全体制御部30の制御の下で、モニタ6に設定画面が表示され、操作ダイヤル/ボタン5a〜5fからの操作入力が受け付けられる。設定画面において、ユーザが操作ダイヤル/ボタン5a〜5fを使って選択した情報、あるいはメモリカード7から取り込まれた情報は、メモリ28やEEPROM33に記憶される。通信モードでは、メモリカード7に記録されている画像が、他のデジタルカメラ、パソコンあるいはプリンタに転送される。あるいは、他のデジタルカメラなどから転送された画像が、メモリカード7に記録される。   In the present embodiment, the operation mode of the digital camera 1 includes a shooting mode, a playback mode, a setting mode, and a communication mode. In the shooting mode, an image is acquired by each processing unit performing focus adjustment, exposure control, flash control, image processing, recording, and the like under the control of the overall control unit 30. In the playback mode, an image recorded on the memory card 7 is output to the monitor 6 under the control of the overall control unit 30. In the setting mode, a setting screen is displayed on the monitor 6 under the control of the overall control unit 30, and operation inputs from the operation dial / buttons 5a to 5f are accepted. Information selected by the user using the operation dial / buttons 5 a to 5 f on the setting screen or information taken from the memory card 7 is stored in the memory 28 or the EEPROM 33. In the communication mode, the image recorded on the memory card 7 is transferred to another digital camera, personal computer or printer. Alternatively, an image transferred from another digital camera or the like is recorded on the memory card 7.

以下、デジタルカメラ1が行なう転送制御処理について、さらに説明する。図3は、デジタルカメラ1(以下、送信側カメラと称する)から他のデジタルカメラ(以下、受信側カメラと称する)への画像の転送手順を示すフローチャートである。受信側カメラは、デジタルカメラ1と同様の構成を備えており、送信側カメラ、受信側カメラは、いずれも通信モードに設定されているものとする。   Hereinafter, transfer control processing performed by the digital camera 1 will be further described. FIG. 3 is a flowchart illustrating a procedure for transferring an image from the digital camera 1 (hereinafter referred to as a transmission-side camera) to another digital camera (hereinafter referred to as a reception-side camera). The receiving camera has the same configuration as the digital camera 1, and both the transmitting camera and the receiving camera are set to the communication mode.

送信側カメラおよび受信側カメラの全体制御部30は、通信モードに設定されたことを検出すると、それぞれの通信制御部12に対し、通信可能機器の探索を指示する。この指示を受けて、通信制御部12は、UPnPプロトコルに基づき通信可能な機器を探索する(S101,S201)。探索の範囲は、アンテナの性能や通信規格にもよるが、概ね、半径数十m〜百数十mの範囲となる。詳細には、通信制御部12は、機器探索コマンドをマルチキャストで送信し、所定の時間、機器探索コマンドを受信した機器が応答パケットを返信してくるのを待つ。応答パケットを受信した場合には、そのパケットに含まれるIPアドレスの情報を参照する。そして、そのIPアドレスを宛先アドレスとして機器名称などの詳細情報を問い合わせるコマンドを送信し、相手の機器からの返信を待つ。複数の機器からの応答パケットを受信した場合には、機器ごとに詳細情報の問い合わせを行う。そして、取得した詳細情報を全体制御部30に対し送出する。   When detecting that the communication mode is set, the overall control unit 30 of the transmission side camera and the reception side camera instructs each communication control unit 12 to search for a communicable device. Upon receiving this instruction, the communication control unit 12 searches for devices that can communicate based on the UPnP protocol (S101, S201). The search range depends on the antenna performance and the communication standard, but is generally in the range of several tens of meters to hundreds of tens of meters. Specifically, the communication control unit 12 transmits a device search command by multicast, and waits for a predetermined time for a device that has received the device search command to return a response packet. When a response packet is received, information on the IP address included in the packet is referred to. Then, a command for inquiring detailed information such as a device name is transmitted using the IP address as a destination address, and a reply from the partner device is awaited. When response packets from a plurality of devices are received, detailed information is inquired for each device. Then, the acquired detailed information is sent to the overall control unit 30.

全体制御部30は、所定時間通信制御部12からの詳細情報の供給が無いときは、通信可能な機器は1台も検出されなかったと判断し(S102,S202)、カメラの動作モードを再生モードへと移行する。一方、通信可能な機器が検出されたときは(S102,S202)、全体制御部30は、検出された機器の機器名称を、モニタ6に表示するよう、表示制御部26に指示する。一方で、全体制御部30は、操作ボタン5dの操作を検出することにより、モニタ6に表示された機器の中から一または複数の機器を選択する操作を受け付ける(S103)。なお、図は、送信側カメラでは機器の選択操作を行い、受信側カメラでは機器の選択操作を行わない場合を例示している。   When the detailed information is not supplied from the communication control unit 12 for a predetermined time, the overall control unit 30 determines that no communicable device has been detected (S102, S202), and sets the camera operation mode to the playback mode. Migrate to On the other hand, when a communicable device is detected (S102, S202), the overall control unit 30 instructs the display control unit 26 to display the device name of the detected device on the monitor 6. On the other hand, the overall control unit 30 receives an operation of selecting one or a plurality of devices from the devices displayed on the monitor 6 by detecting the operation of the operation button 5d (S103). Note that the figure illustrates a case in which a device selection operation is performed on the transmission side camera and a device selection operation is not performed on the reception side camera.

送信側カメラの全体制御部30は、ステップS103において機器の選択操作を受け付けると、通信制御部12に対し、選択された機器との間で通信を行なうための初期化処理を行うよう指示する。通信制御部12は、この指示を受けて、PTP―IPで規定された手順にしたがって、選択された機器との間で通信コネクションを確立し、通信セッションを開く。すなわち通信を行うために必要な初期化処理を行う(S104)。受信側カメラの通信制御部12も、送信側カメラからのコネクション要求を受けて、同様の初期化処理を実行する(S203)。初期化処理の完了は、送信側カメラ、受信側カメラそれぞれの全体制御部30に通知される。   When receiving the device selection operation in step S103, the overall control unit 30 of the transmission-side camera instructs the communication control unit 12 to perform an initialization process for performing communication with the selected device. In response to this instruction, the communication control unit 12 establishes a communication connection with the selected device and opens a communication session according to a procedure defined by PTP-IP. That is, initialization processing necessary for communication is performed (S104). The communication control unit 12 of the receiving camera also receives the connection request from the transmitting camera and executes the same initialization process (S203). The completion of the initialization process is notified to the overall control unit 30 of each of the transmission side camera and the reception side camera.

送信側カメラの全体制御部30は、続いて通信制御部12に、通信相手の機器の所有者識別情報の取得を指示する。通信制御部12は、この指示を受け、相手機器に対し、所有者識別情報を要求する所定フォーマットのパケットを送信する(S105)。この要求パケットは受信側カメラの通信制御部12を介して受信側カメラの全体制御部30に届く。受信側カメラの全体制御部30は、この要求パケットを受信すると(S204)、受信側カメラのメモリ28に記憶されている所有者識別情報を、通信制御部12を介して送信側カメラに送信する(S205)。この所有者識別情報は、送信側カメラの通信制御部12を介して送信側カメラの全体制御部30により受信される(S106)。送信側カメラの全体制御部30は、相手の機器の所有者識別情報を取得できたときは(S107)、表示制御部26に対し、取得した所有者識別情報をモニタ6に出力するよう指示する。相手の機器の所有者識別情報を取得できなかったときの処理(A−A´)については、後述する。   Subsequently, the overall control unit 30 of the transmission-side camera instructs the communication control unit 12 to acquire owner identification information of the communication partner device. Upon receiving this instruction, the communication control unit 12 transmits a packet in a predetermined format requesting owner identification information to the counterpart device (S105). This request packet reaches the overall control unit 30 of the receiving camera via the communication control unit 12 of the receiving camera. When receiving the request packet (S204), the overall control unit 30 of the receiving camera transmits the owner identification information stored in the memory 28 of the receiving camera to the transmitting camera via the communication control unit 12. (S205). The owner identification information is received by the overall control unit 30 of the transmission side camera via the communication control unit 12 of the transmission side camera (S106). The overall control unit 30 of the transmitting camera instructs the display control unit 26 to output the acquired owner identification information to the monitor 6 when the owner identification information of the counterpart device can be acquired (S107). . Processing (A-A ′) when the owner identification information of the counterpart device cannot be acquired will be described later.

表示制御部26は、この指示を受け、通信相手の所有者識別情報をモニタ6に表示する(S108)。また、表示制御部26は、記録読出制御部27を介してメモリカード7から画像ファイルを読み出し、転送の対象として選択可能な画像を通信相手の所有者識別情報とともに、モニタ6に表示する。例えば、所有者識別情報が顔画像である場合には、図4に例示するように、送信側カメラのモニタ画面40は、選択可能な画像の一覧41と、通信相手の顔画像42とが配置された画面となる。   Upon receiving this instruction, the display control unit 26 displays the owner identification information of the communication partner on the monitor 6 (S108). The display control unit 26 reads an image file from the memory card 7 via the recording / reading control unit 27, and displays an image selectable as a transfer target on the monitor 6 together with owner identification information of the communication partner. For example, when the owner identification information is a face image, as shown in FIG. 4, the monitor screen 40 of the transmitting camera includes a list 41 of selectable images and a face image 42 of the communication partner. Screen.

送信側カメラの全体制御部30は、表示制御部26に上記画面表示を要求する一方で、操作ボタン5dの操作を検出することにより、画像一覧41の中から一または複数の画像を選択する操作を受け付ける(S109)。そして画像の選択操作を受け付けたら、各画像について転送用の画像ファイルを生成する(S110)。   The overall control unit 30 of the transmission side camera requests the display control unit 26 to display the screen, and detects one or more images from the image list 41 by detecting the operation of the operation button 5d. Is accepted (S109). When an image selection operation is accepted, a transfer image file is generated for each image (S110).

以下、図5および図6を参照して、転送用の画像ファイルのフォーマットについて説明する。転送用の画像ファイル8は、基本的には、撮影時に生成される画像ファイルと同じExifファイルである。但し、ファイル内に、所有者識別情報が記録されている点が、撮影時に生成される画像ファイルと異なる。   Hereinafter, the format of the image file for transfer will be described with reference to FIGS. The transfer image file 8 is basically the same Exif file as the image file generated at the time of shooting. However, the point that owner identification information is recorded in the file is different from the image file generated at the time of shooting.

画像ファイル8は、図5に示すとおり、TIFFヘッダ81、ExifIFD(Image File Directory)82および画像データ本体83により構成される。ExifIFD82は、画像データ本体83に関する情報、すなわちメタデータを記録する領域である。ExifIFD82のフォーマットは規格で定められているが、その中に、MakernoteIFD9と呼ばれる領域がある。MakernoteIFD9は、デジタルカメラのメーカが任意のデータを記録し得る領域として確保された領域である。本実施形態では、このMakernoteIFD9に送信側カメラの所有者の所有者識別情報と、受信側カメラの所有者の所有者識別情報とを記録したものを、転送用の画像ファイルとする。送信側カメラの所有者の所有者識別情報は、送信側カメラのメモリ28に記憶されている情報を読み出して記録する。受信側カメラの所有者の所有者識別情報は、ステップS105〜S106において取得した情報を記録する。   As shown in FIG. 5, the image file 8 includes a TIFF header 81, an Exif IFD (Image File Directory) 82, and an image data body 83. The Exif IFD 82 is an area for recording information about the image data main body 83, that is, metadata. The format of the Exif IFD 82 is defined by the standard, and there is an area called Makernote IFD 9 in the format. The Makernote IFD 9 is an area secured as an area where a digital camera maker can record arbitrary data. In this embodiment, the makernote IFD 9 is recorded with the owner identification information of the owner of the transmitting camera and the owner identification information of the owner of the receiving camera as an image file for transfer. As the owner identification information of the owner of the transmitting camera, information stored in the memory 28 of the transmitting camera is read and recorded. The information acquired in steps S105 to S106 is recorded as the owner identification information of the owner of the receiving camera.

図6は、MakernoteIFD9に所有者識別情報を記録するときのフォーマットの一例を示す図であり、幅方向が12バイト(0〜11)の領域を表している。本実施形態では、MakernoteIFD9の、最初の12バイトの領域91をディレクトリエントリとして、次の12バイトの領域92をディレクトリ0として、その次の12バイトの領域93をディレクトリ1として、その次の12バイトの領域は次のIFDへのオフセットを記録する領域として使用する。その後の領域94および95は、送信側カメラの所有者の所有者識別情報と、受信側カメラの所有者の所有者識別情報を記録する領域として使用する。   FIG. 6 is a diagram illustrating an example of a format when owner identification information is recorded in the Makernote IFD 9, and represents an area of 12 bytes (0 to 11) in the width direction. In this embodiment, the first 12-byte area 91 of the Makernote IFD 9 is a directory entry, the next 12-byte area 92 is a directory 0, the next 12-byte area 93 is a directory 1, and the next 12 bytes. This area is used as an area for recording an offset to the next IFD. Subsequent areas 94 and 95 are used as areas for recording owner identification information of the owner of the transmitting camera and owner identification information of the owner of the receiving camera.

ディレクトリエントリには、通常、そのIFDに記録されるディレクトリの数が記録される。本実施形態では、送信側カメラの所有者の所有者識別情報と、受信側カメラの所有者の所有者識別情報という2つの情報を記録するので、領域91に記録される値は、ディレクトリ数が2個であることを示す0x0002となる。領域92は、送信側カメラの所有者識別情報(顔画像)を記録する領域として、領域93は受信側カメラの所有者識別情報(顔画像)を記録する領域として使用する。詳細には、領域92および93ともに、先頭2バイトはデータの種類を示すタグ番号、次の2バイトはデータのタイプ、次の4バイトは顔画像データのサイズ(画像サイズ)、最後4バイトは顔画像データへのオフセットを記録する領域として使用する。そして、タグ番号の領域には、データの種類に固有の番号として予め規定された番号を記録する。データのタイプの領域には、8ビット符号無し整数を意味する番号0x0001を記録する。データサイズの領域は、所有者識別情報のデータサイズを記録する。オフセットとしては、それぞれ、領域94の先頭および領域95の先頭アドレスを記録する。   In the directory entry, the number of directories recorded in the IFD is usually recorded. In this embodiment, since two pieces of information, that is, owner identification information of the owner of the transmitting camera and owner identification information of the owner of the receiving camera are recorded, the value recorded in the area 91 is the number of directories. It becomes 0x0002 indicating that there are two. The area 92 is used as an area for recording owner identification information (face image) of the transmitting camera, and the area 93 is used as an area for recording owner identification information (face image) of the receiving camera. Specifically, in both areas 92 and 93, the first 2 bytes are a tag number indicating the type of data, the next 2 bytes are the data type, the next 4 bytes are the size of the face image data (image size), and the last 4 bytes are It is used as an area for recording an offset to face image data. In the tag number area, a number defined in advance as a number unique to the type of data is recorded. In the data type area, the number 0x0001 which means an 8-bit unsigned integer is recorded. The data size area records the data size of the owner identification information. As the offset, the head of the area 94 and the head address of the area 95 are recorded, respectively.

再び図3を参照して説明する。送信側カメラの全体制御部30は、上記フォーマットの画像ファイル8を生成すると、通信制御部12に対し、その画像ファイルの転送を指示する。通信制御部12は、この指示を受けて、画像ファイル8を受信側カメラに転送する(S111)。図7に、画像ファイル8の転送が行われている最中の、送信側カメラのモニタ画面40の表示例を示す。図の例のように、画像ファイル8の転送中は、転送中の画像43が画面の左側から右側へと移動するアニメーション表示など、転送が行われていることがユーザにわかるような表示を行うことが好ましい。   A description will be given with reference to FIG. 3 again. When generating the image file 8 in the above format, the overall control unit 30 of the transmission side camera instructs the communication control unit 12 to transfer the image file. Upon receiving this instruction, the communication control unit 12 transfers the image file 8 to the receiving camera (S111). FIG. 7 shows a display example of the monitor screen 40 of the transmitting camera while the image file 8 is being transferred. As shown in the figure, during the transfer of the image file 8, a display is made so that the user can know that the transfer is being performed, such as an animation display in which the image 43 being transferred moves from the left side to the right side of the screen. It is preferable.

受信側カメラの全体制御部30は、通信制御部12を介して画像ファイル8を受信する(S206)。そして、画像ファイル8に含まれる画像データ本体83および2つの所有者識別情報(領域94、95に記録されている情報)を取得し、表示制御部26に対し、それらの情報の表示を指示する。表示制御部26は、この指示を受けて、モニタ6に画像データ本体および2つの所有者識別情報を表示する。本実施形態では、所有者識別情報は顔画像であるので、図8に例示するように、受信側カメラのモニタ画面50は、受信した画像データ43と、送信側カメラの所有者の顔画像44と受信側カメラの所有者の顔画像42とが配置された画面となる。なお、図の例では、画面の左側にも、送信側カメラの所有者の顔画像44を表示している。   The overall control unit 30 of the receiving camera receives the image file 8 via the communication control unit 12 (S206). Then, the image data body 83 and two pieces of owner identification information (information recorded in the areas 94 and 95) included in the image file 8 are acquired, and the display control unit 26 is instructed to display the information. . Upon receiving this instruction, the display control unit 26 displays the image data body and the two owner identification information on the monitor 6. In this embodiment, since the owner identification information is a face image, as illustrated in FIG. 8, the monitor screen 50 of the receiving camera displays the received image data 43 and the face image 44 of the owner of the transmitting camera. And a face image 42 of the owner of the receiving camera. In the example shown in the figure, the face image 44 of the owner of the transmitting camera is also displayed on the left side of the screen.

送信側カメラのステップS109〜S111の処理は、通信モード終了の操作が行われるまで(S112)繰り返される。受信側カメラのステップS206〜S207の処理も通信モード終了の操作が行われるまで(S208)繰り返される。なお、送信側カメラ、受信側カメラとも、全体制御部30は、通信モード終了の操作を検出したときには、動作モードを再生モードへと移行する。   The processing of steps S109 to S111 of the transmission side camera is repeated until an operation for ending the communication mode is performed (S112). The processing of steps S206 to S207 of the receiving camera is repeated until the operation for ending the communication mode is performed (S208). In both the transmission-side camera and the reception-side camera, the overall control unit 30 shifts the operation mode to the reproduction mode when detecting an operation for ending the communication mode.

図9および図10は、上記方法により画像を転送することの利点について説明するための図である。図9に示すように、撮影者のカメラ1aのメモリカード7aには、撮影により取得された画像43が記録されており、メモリ28aには、その撮影者の顔画像44が記憶されているものとする。また、撮影者と異なる2人の人物が所有するカメラ1b、1cのメモリ28a、28bにも、それぞれ、その人物の顔画像42、45が記憶されているものとする。そして、カメラ1aから、カメラ1bとカメラ1cに、それぞれ画像43を含む画像ファイルが転送されるものとする。   9 and 10 are diagrams for explaining the advantages of transferring an image by the above method. As shown in FIG. 9, an image 43 obtained by photographing is recorded in the memory card 7a of the photographer's camera 1a, and the photographer's face image 44 is stored in the memory 28a. And In addition, it is assumed that face images 42 and 45 of the persons are also stored in the memories 28a and 28b of the cameras 1b and 1c owned by two persons different from the photographer. Then, it is assumed that an image file including the image 43 is transferred from the camera 1a to the camera 1b and the camera 1c.

図に示すように、本実施形態の画像転送制御方法によれば、カメラ1bに転送された画像ファイルには、顔画像44と顔画像42が含まれることになる。一方、カメラ1cに転送された画像ファイルには、顔画像44と顔画像45が含まれることになる。但し、図の表示は概念的なものであり、実際には顔画像44、42、45は、前述したMakernoteIFD9の領域94,95に記録されている。   As shown in the figure, according to the image transfer control method of the present embodiment, the face image 44 and the face image 42 are included in the image file transferred to the camera 1b. On the other hand, the face image 44 and the face image 45 are included in the image file transferred to the camera 1c. However, the display of the figure is conceptual, and the face images 44, 42, and 45 are actually recorded in the areas 94 and 95 of the Makernote IFD 9 described above.

したがって、例えば、画像43が、撮影者に無断でインターネットの画像公開サイトに登録されてしまった場合、登録されている画像ファイルのMakernoteIFD9の領域94,95に記録されている情報を調べれば、無断登録を行なった者を特定することができる。例えば、その画像ファイルの領域94,95に、図10に例示するように、顔画像44と顔画像42が記録されていれば、画像を無断登録したのは、カメラ1bの所有者であるということが、直ぐに判明する。このように、本実施形態の方法で転送を行なえば、画像の公開、再転送などを行なった者を簡単に特定することができるので、その公開などが、撮影者の意図に反するものであったときには、当人に対し抗議あるいは法的措置をとることができる。   Therefore, for example, when the image 43 has been registered on the Internet image public site without the photographer's permission, if the information recorded in the areas 94 and 95 of the Makernote IFD 9 of the registered image file is examined, it is The person who registered can be identified. For example, if the face image 44 and the face image 42 are recorded in the areas 94 and 95 of the image file as illustrated in FIG. 10, it is the owner of the camera 1b that registered the image without permission. It turns out immediately. In this way, if transfer is performed by the method of the present embodiment, it is possible to easily identify the person who made the image public or re-transferred, so that the release is contrary to the photographer's intention. If you do, you can take protests or take legal action against the person.

また、本実施形態では、図8に例示した画面表示を行うことにより、画像ファイルを受け取る者が、その画像ファイルに自身の顔画像が含まれていることを認識できるようにしている。多くの者は、再転送した者の特定が可能であることがわかれば、撮影者の意図に反した再転送は行なわない。よって、図8に例示した画面表示により、再転送を抑制することができる。   In the present embodiment, the screen display illustrated in FIG. 8 is performed so that a person who receives the image file can recognize that the face image is included in the image file. Many people do not perform re-transmissions contrary to the photographer's intention if it is known that the re-transferrs can be identified. Therefore, retransfer can be suppressed by the screen display illustrated in FIG.

なお、本実施形態では、悪意や不注意による転送を行なった者を特定できればよいとの考えから、画像ファイルに記録する識別情報は最初の送信者と最初の受信者の2人分のみとしている。すなわち、図3のステップS110において、転送の対象として選択された画像が、識別情報を伴う画像ファイルとして記憶されている画像であるときは、その画像ファイルをそのまま転送用の画像ファイルとする。すなわち、相手先装置から取得した識別情報は、画像ファイルには記録しない。これに対し、画像の転送に関与した全ての装置および人物を特定したい場合には、転送が行なわれる度に、そのときの受信者の識別情報を取得し画像ファイル8に記録するようにしてもよい。   In the present embodiment, the identification information to be recorded in the image file is limited to only the first sender and the first receiver because it is only necessary to identify the person who performed malicious or careless transfer. . That is, if the image selected as the transfer target in step S110 in FIG. 3 is an image stored as an image file with identification information, the image file is used as an image file for transfer. That is, the identification information acquired from the counterpart device is not recorded in the image file. On the other hand, when it is desired to specify all devices and persons involved in the transfer of the image, the identification information of the recipient at that time is acquired and recorded in the image file 8 each time the transfer is performed. Good.

続いて、受信側カメラから所有者識別情報を取得できない場合の処理について説明する。受信側カメラが、図3のステップS105において送信された要求パケットへの応答を返す機能を備えていない場合、ステップS204およびS205の処理は実行されない。この場合、ステップS106の処理はタイムアウトにより終了する。また、受信側カメラが、要求パケットへの応答を返す機能は備えているものの、所有者識別情報が登録されていないこともある。この場合、受信側カメラは、ステップS205において、所有者識別情報が未登録であることを示す情報を返信する。これらのケースでは、送信側カメラの全体制御部30は、ステップS107において、相手の所有者識別情報を取得できなかったと判断し、図11に示す処理を実行する。   Next, processing when the owner identification information cannot be acquired from the receiving camera will be described. When the receiving camera does not have a function of returning a response to the request packet transmitted in step S105 in FIG. 3, the processes in steps S204 and S205 are not executed. In this case, the process in step S106 ends due to a timeout. In addition, although the receiving camera has a function of returning a response to the request packet, the owner identification information may not be registered. In this case, in step S205, the receiving camera returns information indicating that the owner identification information is unregistered. In these cases, the overall control unit 30 of the transmission-side camera determines in step S107 that the partner owner identification information has not been acquired, and executes the processing shown in FIG.

相手の所有者識別情報を取得できなかった場合、送信側カメラの全体制御部30は、表示制御部26に対し、撮影要求メッセージの表示を指示する。表示制御部26は、この指示を受けて、モニタ6に撮影要求メッセージを表示する(S121)。図12に、撮影要求メッセージが表示された送信側カメラのモニタ画面40を例示する。図に例示するように、撮影要求メッセージとは、転送時の事情を表す識別情報を取得するための撮影を促すメッセージである。転送時の事情とは、いつ、どこで、誰に対し、どのような状況で画像を転送したかである。転送時の事情を記録しておけば、後日その情報から画像を転送した相手を特定することができる。記録する識別情報は、相手の顔画像、全身画像像など相手を直接的に特定し得る情報に限らず、相手を間接的に特定し得る情報であってもよい。間接的に特定し得る情報とは、相手を連想させるような情報である。例えば相手が常時持ち歩いている物、常時連れているペット、画像の転送を行なった場所周辺の情景を写した画像も、相手の人物と1対1で対応づけることができる場合は、その識別情報により相手を識別することができる。   When the owner identification information of the other party cannot be acquired, the overall control unit 30 of the transmission side camera instructs the display control unit 26 to display a photographing request message. Upon receiving this instruction, the display control unit 26 displays a photographing request message on the monitor 6 (S121). FIG. 12 illustrates a monitor screen 40 of the transmitting camera on which the photographing request message is displayed. As illustrated in the figure, the shooting request message is a message that prompts shooting for acquiring identification information indicating the circumstances at the time of transfer. The situation at the time of transfer is when, where, to whom and in what situation the image was transferred. If the circumstances at the time of transfer are recorded, it is possible to identify the other party who transferred the image from the information later. The identification information to be recorded is not limited to information that can directly specify the partner, such as a face image or a whole body image of the partner, but may be information that can indirectly specify the partner. Information that can be indirectly specified is information that is reminiscent of the other party. For example, if an object that the other party always carries, a pet that is always carried, or an image that shows a scene around the place where the image was transferred can be associated with the other person on a one-to-one basis, the identification information Can identify the other party.

全体制御部30は、撮影要求メッセージを表示すると、カメラを自動で撮影モードへと移行し、シャッタレリーズボタン3が操作されるのを待つ。全体制御部30は、シャッタレリーズボタン3の操作を検出すると(S122)、その操作により取得された撮影画像を、転送相手の識別情報としてメモリ28に記録する(S123)。また、表示制御部26に対し、その撮影画像を表示するよう指示する。表示制御部26は、この指示を受けて撮影画像をモニタ6に表示する(S124)。その後、送信側カメラは、図3のステップS109以降の処理を行う。   When the photographing request message is displayed, the overall control unit 30 automatically shifts the camera to the photographing mode and waits for the shutter release button 3 to be operated. When the operation of the shutter release button 3 is detected (S122), the overall control unit 30 records the captured image acquired by the operation in the memory 28 as transfer partner identification information (S123). Further, the display control unit 26 is instructed to display the captured image. In response to this instruction, the display control unit 26 displays the captured image on the monitor 6 (S124). Thereafter, the transmission-side camera performs processing from step S109 onward in FIG.

図11に示す処理が実行された場合には、送信側カメラのモニタ画面40の表示は、図13に例示するような画面となる。すなわち、転送先を示す画像として、そのときの撮影により取得された画像46が表示される。また、画像ファイル8の生成処理では、領域96に、撮影により取得された画像46が記録される。そして、受信側カメラのモニタ画面50の表示は、図14に例示するようなものとなる。すなわち、撮影により取得された画像46が、画像43に添付された識別情報として表示される。これにより、受信側カメラから所有者識別情報を取得できた場合と同様、意図に反した再転送が行なわれることを抑制することができる。また、万一、意図に反して画像が再転送されてしまっても、再転送を行なった者を特定することができる。   When the process shown in FIG. 11 is executed, the monitor screen 40 of the transmitting camera is displayed as shown in FIG. That is, an image 46 acquired by shooting at that time is displayed as an image indicating the transfer destination. Further, in the generation process of the image file 8, the image 46 acquired by photographing is recorded in the area 96. The display on the monitor screen 50 of the receiving camera is as illustrated in FIG. That is, the image 46 acquired by photographing is displayed as identification information attached to the image 43. As a result, as in the case where the owner identification information can be acquired from the receiving camera, it is possible to suppress unintended retransfer. Also, even if an image is retransferred against the intention, the person who performed the retransfer can be identified.

なお、以上に説明した実施形態では、MakernoteIFD9に識別情報を記録することとしているが、画像ファイル8を構成する画像データ本体83に、識別情報を電子透かしとして埋め込む方法も考えられる。例えば、特開2000−209426号公報には、著作権情報を電子透かしとして埋め込む手法およびそのための装置構成が示されているが、同様の手法および構成を採用すれば、前述した所有者識別情報を画像ファイル8の画像データ本体83に電子透かしとして埋め込むことができる。MakernoteIFD9に識別情報を記録する方法は、画像の画質に影響しないという利点があり、電子透かしとしての付加は、データの改ざんにより識別情報を削除されにくいという利点がある。   In the embodiment described above, the identification information is recorded in the Makernote IFD 9. However, a method of embedding the identification information as a digital watermark in the image data body 83 constituting the image file 8 is also conceivable. For example, Japanese Patent Application Laid-Open No. 2000-209426 discloses a technique for embedding copyright information as a digital watermark and a device configuration therefor. However, if a similar technique and configuration are employed, the above-described owner identification information is changed. It can be embedded as a digital watermark in the image data body 83 of the image file 8. The method of recording the identification information in the Makernote IFD 9 has an advantage that it does not affect the image quality of the image, and the addition as a digital watermark has the advantage that the identification information is difficult to be deleted due to data alteration.

また、上記実施形態では、相手先の装置から識別情報を取得できなかったときに、撮影要求メッセージを表示し撮影を促すこととしているが、転送が実行された日時を表す文字情報を識別情報として自動的に画像ファイルに記録する形態も考えられる。デジタルカメラは通常撮影日を記録するための時計機能を備えているので、転送日時はその時計機能により取得することが可能である。あるいは、デジタルカメラがGPS(Global Positioning System)機能を備えているときには、転送が実行された場所を表す文字情報を識別情報として自動的に画像ファイルに記録する形態も考えられる。また、例えば、送信側カメラが指紋読取装置を備えているときには、指紋登録を促すメッセージを表示し、相手先の装置の所有者の指紋を読み取って、識別情報として記憶してもよい。識別情報として取得、使用し得る情報の種類は、送信側の装置が備える機能に依存し、特に限定されない。   In the above embodiment, when identification information cannot be acquired from the counterpart device, a shooting request message is displayed to prompt shooting. Character information representing the date and time when the transfer is executed is used as the identification information. A form of automatically recording in an image file is also conceivable. Since the digital camera has a clock function for recording the normal shooting date, the transfer date and time can be acquired by the clock function. Alternatively, when the digital camera has a GPS (Global Positioning System) function, it is also conceivable to automatically record character information indicating the location where the transfer is performed in the image file as identification information. Further, for example, when the sending camera is equipped with a fingerprint reader, a message for encouraging fingerprint registration may be displayed, and the fingerprint of the owner of the partner device may be read and stored as identification information. The type of information that can be acquired and used as identification information depends on the function of the transmission-side apparatus and is not particularly limited.

また、上記実施形態では、送信側カメラの所有者の識別情報をも画像ファイルに記録し、画像の撮影者が誰であるかわかるようにしているが、送信側カメラの所有者の識別情報は、必ずしも画像ファイルに記録しなくてもよい。   In the above embodiment, the identification information of the owner of the transmitting camera is also recorded in the image file so that the photographer of the image can be identified. However, the identification information of the owner of the transmitting camera is It is not always necessary to record the image file.

また、上記実施形態は、通信機能つきのデジタルカメラ同士の画像転送に関するものであるが、本発明はデジタルカメラ付き携帯電話など撮像機能と通信機能を備えたあらゆる装置に適用可能である。通信の方法も無線LANに限定されるものではなく、赤外線通信や電話網を介した通信でもよい。画像ファイル8のフォーマットも図5および図6に例示したフォーマットに限定されるものではない。この他、デジタルカメラの構成や画面表示についても、種々の変形例が考えられる。   Moreover, although the said embodiment is related to the image transfer of the digital cameras with a communication function, this invention is applicable to all apparatuses provided with the imaging function and the communication function, such as a mobile phone with a digital camera. The communication method is not limited to the wireless LAN, and may be infrared communication or communication via a telephone network. The format of the image file 8 is not limited to the format illustrated in FIGS. In addition, various modifications can be considered for the configuration of the digital camera and the screen display.

デジタルカメラの外観図(正面)External view of digital camera (front) デジタルカメラの外観図(背面)External view of digital camera (back) デジタルカメラの内部構成を示す図Diagram showing the internal configuration of the digital camera 画像転送時の送信側および受信側の処理を示すフローチャートA flowchart showing processing on the transmission side and reception side during image transfer 送信側カメラの画面表示例(画像選択時)を示す図The figure which shows the screen display example (at the time of image selection) of a transmission side camera 転送用の画像ファイルのフォーマットを示す図Diagram showing image file format for transfer 転送用の画像ファイルのフォーマットの詳細を示す図Diagram showing details of format of image file for transfer 送信側カメラの画面表示例(画像転送中)を示す図Figure showing a screen display example of the sending camera (during image transfer) 受信側カメラの画面表示例(画像受信時)を示す図The figure which shows the example of the screen display of the receiving camera 画像ファイルに識別情報を記録することの利点について説明するための図The figure for demonstrating the advantage of recording identification information on an image file 画像ファイルに識別情報を記録することの利点について説明するための図The figure for demonstrating the advantage of recording identification information on an image file 相手先装置の識別情報を取得できない場合の処理を示すフローチャートFlow chart showing processing when identification information of counterpart device cannot be acquired 送信側カメラの画面表示例(撮影要求時)を示す図Figure showing a screen display example of the sending camera (when shooting is requested) 送信側カメラの画面表示例(画像選択時)を示す図The figure which shows the screen display example (at the time of image selection) of a transmission side camera 受信側カメラの画面表示例(画像受信時)を示す図The figure which shows the screen display example (at the time of image reception) of the receiving camera

符号の説明Explanation of symbols

1 デジタルカメラ、 2 レンズ、 3 シャッタレリーズボタン、 4 フラッシュ、 5a〜5f 操作ダイヤル/ボタン、 6 モニタ、 7 メモリカード、 11 内蔵アンテナ、 24 システムバス、
8 画像ファイル、 40 送信側カメラの画面、 50 受信側カメラの画面
DESCRIPTION OF SYMBOLS 1 Digital camera, 2 Lens, 3 Shutter release button, 4 Flash, 5a-5f Operation dial / button, 6 Monitor, 7 Memory card, 11 Built-in antenna, 24 System bus,
8 Image file, 40 Sending camera screen, 50 Receiving camera screen

Claims (9)

撮像機能および通信機能を備えた画像送信装置から、通信機能を備えた画像受信装置への、画像の転送を制御する方法であって、
画像受信装置の記憶部に、該画像受信装置の所有者を表す識別情報を記憶せしめ、
画像送信装置の記憶部に、前記撮像機能または前記通信機能により取得した画像を記憶せしめ、
前記画像受信装置から前記画像送信装置に、前記識別情報を転送し、
前記画像送信装置が、該画像送信装置の記憶部に記憶されている前記画像と、前記画像受信装置から転送された前記識別情報とを含む画像ファイルを生成し、
前記画像送信装置から前記画像受信装置に前記画像ファイルを転送する、画像の転送制御方法。
A method for controlling transfer of an image from an image transmission device having an imaging function and a communication function to an image reception device having a communication function,
Storing identification information representing the owner of the image receiving device in the storage unit of the image receiving device;
The image acquired by the imaging function or the communication function is stored in the storage unit of the image transmission device,
Transferring the identification information from the image receiving device to the image transmitting device;
The image transmission device generates an image file including the image stored in the storage unit of the image transmission device and the identification information transferred from the image reception device;
An image transfer control method for transferring the image file from the image transmission device to the image reception device.
前記画像受信装置の所有者を表す識別情報の中に、該画像受信装置の所有者の名前および/または連絡先を表す文字情報、該所有者の生体認証情報のうち、少なくとも1つが含まれていることを特徴とする、請求項1記載の画像の転送制御方法。   The identification information indicating the owner of the image receiving device includes at least one of the name information and / or the character information indicating the contact information of the owner of the image receiving device and the biometric information of the owner. The image transfer control method according to claim 1, wherein: 撮像機能および通信機能を備えた画像送信装置から、通信機能を備えた画像受信装置への、画像の転送を制御する方法であって、
画像送信装置の記憶部に、前記撮像機能または前記通信機能により取得した画像を記憶せしめ、
前記画像送信装置の動作を制御することにより、転送事情を表す識別情報を取得して該画像送信装置の記憶部に記憶せしめ、
前記画像送信装置が、該画像送信装置の記憶部に記憶されている前記画像と前記転送事情を表す識別情報とを含む画像ファイルを生成し、
前記画像送信装置から前記画像受信装置に前記画像ファイルを転送する、画像の転送制御方法。
A method for controlling transfer of an image from an image transmission device having an imaging function and a communication function to an image reception device having a communication function,
The image acquired by the imaging function or the communication function is stored in the storage unit of the image transmission device,
By controlling the operation of the image transmission device, the identification information indicating the transfer situation is acquired and stored in the storage unit of the image transmission device,
The image transmission device generates an image file including the image stored in a storage unit of the image transmission device and identification information indicating the transfer situation;
An image transfer control method for transferring the image file from the image transmission device to the image reception device.
前記転送事情を表す識別情報の中に、転送日時および/または転送場所を表す文字情報、転送場所周辺の情景を表す画像、前記画像受信装置の所有者の生体認証情報のうち、少なくとも1つが含まれていることを特徴とする、請求項3記載の画像の転送制御方法。   The identification information indicating the transfer situation includes at least one of character information indicating the transfer date and / or transfer location, an image indicating a scene around the transfer location, and biometric information of the owner of the image receiving device. 4. The image transfer control method according to claim 3, wherein: 前記画像受信装置が、前記画像ファイルに含まれる前記画像を、前記画像ファイルに含まれる前記識別情報とともに、所定の画面に出力することを特徴とする、請求項1から4のいずれか1項記載の画像の転送制御方法。   5. The image receiving apparatus according to claim 1, wherein the image receiving device outputs the image included in the image file together with the identification information included in the image file to a predetermined screen. Image transfer control method. 前記画像送信装置が生成する画像ファイルは、前記識別情報が前記画像のメタデータとして付加された画像ファイル、または前記識別情報が前記画像に電子透かしとして埋め込まれた画像ファイルであることを特徴とする、請求項1から5のいずれか1項記載の画像の転送方法。   The image file generated by the image transmission device is an image file in which the identification information is added as metadata of the image, or an image file in which the identification information is embedded in the image as a digital watermark. The image transfer method according to claim 1, wherein 前記画像送信装置は、該画像送信装置の記憶部に記憶されている画像が、前記識別情報を伴わない画像であるときのみ、前記画像ファイルの生成を行うことを特徴とする、請求項1から6のいずれか1項記載の画像の転送方法。   The image transmission device generates the image file only when the image stored in the storage unit of the image transmission device is an image without the identification information. The image transfer method according to any one of claims 6 to 6. 撮影により画像を取得する撮像部、
転送先装置との通信を制御する通信制御部、
前記撮像部により取得された画像および/または前記通信制御部を介して取得された画像を記憶する画像記憶部、および
前記通信制御部を介して前記転送先装置から取得した、該転送先装置の所有者を表す識別情報と、前記画像記憶部に記憶されている前記画像とを含む画像ファイルを生成して、前記転送先装置に転送する転送制御部を備えた画像転送装置。
An imaging unit for acquiring an image by shooting;
A communication control unit for controlling communication with the transfer destination device,
An image storage unit for storing an image acquired by the imaging unit and / or an image acquired via the communication control unit, and the transfer destination device acquired from the transfer destination device via the communication control unit An image transfer apparatus including a transfer control unit that generates an image file including identification information representing an owner and the image stored in the image storage unit and transfers the image file to the transfer destination device.
撮影により画像を取得する撮像部、
転送先装置との通信を制御する通信制御部、
前記撮像部により取得された画像および/または前記通信制御部を介して取得された画像を記憶する画像記憶部、および
転送事情を表す識別情報を取得するための動作を行い、該動作により取得した転送事情を表す識別情報と前記画像記憶部に記憶されている前記画像とを含む画像ファイルを生成して、前記転送先装置に転送する転送制御部を備えた画像転送装置。
An imaging unit for acquiring an image by shooting;
A communication control unit for controlling communication with the transfer destination device,
An image storage unit for storing an image acquired by the imaging unit and / or an image acquired via the communication control unit, and an operation for acquiring identification information indicating a transfer situation are performed, and acquired by the operation An image transfer apparatus comprising a transfer control unit that generates an image file including identification information indicating transfer circumstances and the image stored in the image storage unit and transfers the image file to the transfer destination device.
JP2007051510A 2007-03-01 2007-03-01 Image transfer control method and image transfer apparatus Expired - Fee Related JP4761312B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007051510A JP4761312B2 (en) 2007-03-01 2007-03-01 Image transfer control method and image transfer apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007051510A JP4761312B2 (en) 2007-03-01 2007-03-01 Image transfer control method and image transfer apparatus

Publications (2)

Publication Number Publication Date
JP2008219261A true JP2008219261A (en) 2008-09-18
JP4761312B2 JP4761312B2 (en) 2011-08-31

Family

ID=39838809

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007051510A Expired - Fee Related JP4761312B2 (en) 2007-03-01 2007-03-01 Image transfer control method and image transfer apparatus

Country Status (1)

Country Link
JP (1) JP4761312B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014527786A (en) * 2012-08-21 2014-10-16 鶴山世達光電科技有限公司 Communication system for authentication by fingerprint information and use thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002271672A (en) * 2001-03-09 2002-09-20 Fuji Photo Film Co Ltd Electronic equipment
JP2002279394A (en) * 2001-03-21 2002-09-27 Casio Comput Co Ltd Digital camera and information transmitter, imaging system, image distributing apparatus, and image distribution system
JP2004312163A (en) * 2003-04-03 2004-11-04 Casio Comput Co Ltd Information terminal, data originator identifiying method, and program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002271672A (en) * 2001-03-09 2002-09-20 Fuji Photo Film Co Ltd Electronic equipment
JP2002279394A (en) * 2001-03-21 2002-09-27 Casio Comput Co Ltd Digital camera and information transmitter, imaging system, image distributing apparatus, and image distribution system
JP2004312163A (en) * 2003-04-03 2004-11-04 Casio Comput Co Ltd Information terminal, data originator identifiying method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014527786A (en) * 2012-08-21 2014-10-16 鶴山世達光電科技有限公司 Communication system for authentication by fingerprint information and use thereof

Also Published As

Publication number Publication date
JP4761312B2 (en) 2011-08-31

Similar Documents

Publication Publication Date Title
US7783890B2 (en) Multimedia recording apparatus, object-specifying information providing apparatus, server apparatus, verification apparatus, multimedia recording method, object-specifying information providing method, server method, verification method, and multimedia recording system
US8477202B2 (en) Photographing apparatus and communication establishing method and program
JP5369974B2 (en) Imaging apparatus and image sharing system
JP5469628B2 (en) Device registration method and device registration system
KR101435963B1 (en) Configuring apparatus, image output apparatus, and methods of controlling the same
JP4114350B2 (en) Electronic camera, electronic device, image transmission system, and image transmission method
JP2006352661A (en) Videophone terminal, imaging method, and imaging program
WO2013070461A1 (en) Wireless camera with image sharing route prioritization
US7277124B2 (en) Image sensing apparatus, information processing apparatus, control method for these apparatuses, image processing apparatus and method, and image processing system
JP7033717B2 (en) Image pickup device and image transfer method
KR20060098524A (en) Vicarious civil appeal system using mobile communication terminal and the method of the same
JP4911705B2 (en) Imaging device
JP2011191839A (en) Terminal equipment, authentication system, and program
JP2008060948A (en) Communication system and imaging apparatus
JP4761312B2 (en) Image transfer control method and image transfer apparatus
JP2005123817A (en) Portable communication terminal
JP6529852B2 (en) Information acquisition apparatus, information acquisition system including the same, control method of information acquisition apparatus, and program for information acquisition apparatus
US20030231249A1 (en) Digital camera system
JP2004179919A (en) Image mediation system
JP6882012B2 (en) Communication device, control method of communication device, and program
JP2010147716A (en) Terminal, method and program for processing information
JP4397118B2 (en) Communication system and method
KR20100093421A (en) Digital photograping apparatus and control method thereof
KR102128591B1 (en) System and method for photo shooting and photo print requesting of mobile device
JP2005167835A (en) Mobile phone

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090910

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110317

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110510

RD15 Notification of revocation of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7435

Effective date: 20110510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110601

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140617

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4761312

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees