JP2020022150A - Information processing system and information processing method - Google Patents

Information processing system and information processing method Download PDF

Info

Publication number
JP2020022150A
JP2020022150A JP2018213833A JP2018213833A JP2020022150A JP 2020022150 A JP2020022150 A JP 2020022150A JP 2018213833 A JP2018213833 A JP 2018213833A JP 2018213833 A JP2018213833 A JP 2018213833A JP 2020022150 A JP2020022150 A JP 2020022150A
Authority
JP
Japan
Prior art keywords
unit
imaging
display device
imaging device
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018213833A
Other languages
Japanese (ja)
Inventor
円香 堺谷
Madoka Sakaiya
円香 堺谷
茂木 健一
Kenichi Mogi
健一 茂木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Artrigger Inc
Original Assignee
Artrigger Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Artrigger Inc filed Critical Artrigger Inc
Priority to JP2018213833A priority Critical patent/JP2020022150A/en
Publication of JP2020022150A publication Critical patent/JP2020022150A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide techniques for increasing reliability of storage of image data.SOLUTION: An information processing system S is equipped with an imaging device 1 and a display device 2. The imaging device 1 is equipped with: a biometric information acquisition unit 10 for acquiring biometric information; a verification unit 150 for verifying whether biometric information acquired by the biometric information acquisition unit 10 matches previously registered biometric information; an imaging unit 11 for permitting imaging under the condition that the verification carried out by the verification unit 150 has been successful; an encoding unit 151 for encoding image data captured by the imaging unit 11, and thereby generating encoded data; and a data output unit 152 for outputting the encoded data to the display device 2 via a connection terminal 12 connected to the display device 2. The display device 2 is equipped with: an acquisition unit 240 for acquiring encoded data via a connection terminal 22 connected to the imaging device 1; a decoding unit 241 for decoding the encoded data acquired by the acquisition unit 240; and a display unit 20 for displaying image data acquired as a result of the decoding carried out by the decoding unit 241.SELECTED DRAWING: Figure 3

Description

本発明は情報処理システム及び情報処理方法に関し、特に、撮影画像を安全に保管して表示するための技術に関する。   The present invention relates to an information processing system and an information processing method, and more particularly to a technique for securely storing and displaying a captured image.

アーティストが生み出した作品やその鑑定書、不動産や高額な動産の取引の際にとりかわす契約書、又は雇用契約等、何らかの意思や主張を証明するために、文書にサイン又は押印(以下、単に「サイン等」と記載する。)することは日常的に行われている。文書に残されたサイン等は、その後、必要に応じて真贋が鑑定されることになる。しかしながら、日本国においてはサイン等の真贋の鑑定に責任を負う立場にある者は存在せず、サイン等が付された文書に関わる事項の利害関係者等が、真贋を判断しているのが現状である。そのため、その判断結果に責任は伴っておらず、サイン等の真贋管理は不十分と言わざるを得ない。   Sign or seal a document to prove any intention or claim, such as a work created by an artist or its appraisal, a contract to be exchanged for real estate or expensive personal property transactions, or an employment contract, etc. Etc.) are performed on a daily basis. The signature or the like left on the document is then verified for authenticity as necessary. However, there is no person in Japan responsible for the authenticity of signatures, etc., and stakeholders in matters related to documents with signatures, etc. judge authenticity. It is the current situation. Therefore, no responsibility is attached to the judgment result, and it must be said that the authenticity management of signatures and the like is insufficient.

このため、サイン等が付された文書を撮像して画像データを作成し、撮像時刻とともに安全に保管することにより、事後的に真贋鑑定に利用することも考えられる。例えば、特許文献1は、画像データを安全に保管する技術が提案されている。   For this reason, it is also conceivable that the document with the signature or the like is imaged, image data is created, and the image data is stored safely with the image capturing time, so that it can be used for post-authentication evaluation. For example, Patent Literature 1 proposes a technique for securely storing image data.

特開2001−306273号公報JP 2001-306273 A

上記のような技術は、ネットワークを介して遠隔のサーバに画像データを保管する技術である。ネットワークのセキュリティを保つ技術は日々進歩する一方で、クラッキング等の技術もまた日々進化を遂げている。ネットワークのセキュリティを保つ技術とそれを破るための技術はいわば「いたちごっこ」の関係にあり、上記のような技術で画像データを保管することでは、元データの信頼性は必ずしも保証されない。   The above technology is a technology for storing image data in a remote server via a network. While the technology for maintaining network security is evolving every day, the technology such as cracking is also evolving every day. The technology for maintaining network security and the technology for breaking it are in a so-called "pretend play" relationship, and storing image data with the above-mentioned technology does not necessarily guarantee the reliability of the original data.

本発明はこれらの点に鑑みてなされたものであり、画像データの保管の信頼性を向上させるための技術を提供することを目的とする。   The present invention has been made in view of these points, and an object of the present invention is to provide a technique for improving the reliability of storage of image data.

本発明の第1の態様は、情報処理システムである。このシステムは、撮像装置と前記撮像装置が撮像した画像を表示するための表示装置とを備える。前記撮像装置は、生体情報を取得する生体情報取得部と、前記生体情報取得部が取得した生体情報があらかじめ登録された登録生体情報と一致するか否かを認証する認証部と、前記認証部による認証が成功したことを条件として撮像を許可する撮像部と、前記撮像部が撮像した画像データを暗号化して暗号化データを生成する暗号化部と、前記表示装置との接続端子を介して前記暗号化データを前記表示装置に出力するデータ出力部と、を備える。前記表示装置は、前記撮像装置との接続端子を介して前記暗号化データを取得する取得部と、前記取得部が取得した暗号化データを復号する復号部と、前記復号部が復号して取得した画像データを表示する表示部と、を備える。   A first aspect of the present invention is an information processing system. The system includes an imaging device and a display device for displaying an image captured by the imaging device. The imaging device, a biometric information acquisition unit that acquires biometric information, an authentication unit that authenticates whether the biometric information obtained by the biometric information acquisition unit matches registered biometric information registered in advance, and the authentication unit An imaging unit that permits imaging on condition that authentication by the imaging unit succeeds, an encryption unit that encrypts image data captured by the imaging unit to generate encrypted data, and a connection terminal with the display device. A data output unit that outputs the encrypted data to the display device. The display device, an acquisition unit that acquires the encrypted data via a connection terminal with the imaging device, a decryption unit that decrypts the encrypted data acquired by the acquisition unit, and a decryption unit that decrypts and acquires the data. And a display unit for displaying the obtained image data.

前記撮像装置のデータ出力部は、前記撮像装置の認証部における認証が成功したことを条件として、前記暗号化データを前記表示装置に出力してもよい。   The data output unit of the imaging device may output the encrypted data to the display device on condition that the authentication by the authentication unit of the imaging device is successful.

前記撮像装置は、ペン先と印鑑との少なくともいずれか一方をさらに備えてもよい。   The imaging device may further include at least one of a pen point and a seal.

前記撮像装置は、前記暗号化部が前記画像データを暗号化するために用いる第1暗号鍵を格納する撮像装置側記憶部をさらに備えてもよく、前記表示装置は、前記第1暗号鍵で暗号化されたデータを前記復号部が復号するための第2暗号鍵を格納する表示装置側記憶部をさらに備えてもよい。   The imaging device may further include an imaging device-side storage unit that stores a first encryption key used by the encryption unit to encrypt the image data, and the display device uses the first encryption key. The display device-side storage unit that stores a second encryption key for the decryption unit to decrypt the encrypted data may be further provided.

前記表示装置は、前記表示部に表示させるための画像を撮像する表示装置側撮像部をさらに備えてもよく、前記表示部は、前記復号部が復号した画像データと、前記表示装置側撮像部が新たに撮像した画像データとを比較可能な態様で表示してもよい。   The display device may further include a display device-side imaging unit that captures an image to be displayed on the display unit, wherein the display unit includes image data decoded by the decoding unit, and the display device-side imaging unit. May be displayed in a manner that allows comparison with newly captured image data.

前記撮像装置は、前記撮像部が撮像した時刻を取得する時刻取得部をさらに備えてもよく、前記暗号化部は、暗号化した画像データと当該画像データの撮像時刻を示す情報とを対応づけて前記暗号化データを生成してもよい。   The imaging device may further include a time acquisition unit that acquires a time when the imaging unit captures the image, and the encryption unit associates the encrypted image data with information indicating an imaging time of the image data. To generate the encrypted data.

前記表示装置は、前記取得部が取得した暗号化データが過去に受信したいずれの暗号化データとも異なる場合、取得した暗号化データのハッシュ値を生成するハッシュ値生成部と、通信ネットワークを介して前記ハッシュ値をネットワーク上のデータベースに登録するハッシュ値管理部と、をさらに備えてもよい。   When the encrypted data obtained by the obtaining unit is different from any encrypted data received in the past, the display device includes a hash value generating unit that generates a hash value of the obtained encrypted data, and a communication network. A hash value management unit that registers the hash value in a database on a network.

前記ハッシュ値管理部は、前記データベースへの前記ハッシュ値の登録が完了することを契機として、前記通信ネットワークとの通信を切断してもよい。   The hash value management unit may disconnect communication with the communication network when registration of the hash value in the database is completed.

本発明の第2の態様は、撮像装置と表示装置とを備える情報システムにおいて実行される情報処理方法である。この方法において、前記撮像装置が、生体情報を取得するステップと、取得した前記生体情報があらかじめ登録された登録生体情報と一致するか否かを認証するステップと、前記認証が成功したことを条件として撮像を許可するステップと、撮像した画像データを暗号化して暗号化データを生成するステップと、前記表示装置との接続端子を介して前記暗号化データを前記表示装置に出力するステップと、実行する。前記表示装置が、前記撮像装置との接続端子を介して前記暗号化データを取得するステップと、取得した前記暗号化データを復号するステップと、復号して取得した画像データを前記表示装置が備える表示部に表示させるステップと、を実行する。   A second aspect of the present invention is an information processing method executed in an information system including an imaging device and a display device. In this method, the imaging apparatus obtains biometric information, authenticates whether the obtained biometric information matches registered biometric information registered in advance, and sets a condition that the authentication is successful. Permitting imaging, encrypting captured image data to generate encrypted data, outputting the encrypted data to the display device via a connection terminal with the display device, and executing I do. The display device acquires the encrypted data via a connection terminal with the imaging device, decrypts the encrypted data, and the display device includes decrypted and acquired image data. And displaying on the display unit.

なお、以上の構成要素の任意の組み合わせ、本発明の表現を方法、装置、システム、コンピュータプログラム、データ構造、記録媒体などの間で変換したものもまた、本発明の態様として有効である。   Note that any combination of the above-described components and any conversion of the expression of the present invention between a method, an apparatus, a system, a computer program, a data structure, a recording medium, and the like are also effective as embodiments of the present invention.

本発明によれば、画像データの保管の信頼性を向上させるための技術を提供することができる。   According to the present invention, it is possible to provide a technique for improving the reliability of storage of image data.

実施の形態に係る情報処理システムの全体構成を模式的に示す図である。FIG. 1 is a diagram schematically illustrating an overall configuration of an information processing system according to an embodiment. 実施の形態に係る情報処理システムの利用シーンの一例を模式的に示す図である。FIG. 3 is a diagram schematically illustrating an example of a use scene of the information processing system according to the embodiment. 実施の形態に係る撮像装置及び表示装置の機能構成を模式的に示す図である。FIG. 2 is a diagram schematically illustrating a functional configuration of an imaging device and a display device according to the embodiment. 実施の形態に係る表示部に表示される比較画面の一例を模式的に示す図である。FIG. 5 is a diagram schematically illustrating an example of a comparison screen displayed on the display unit according to the embodiment. 実施の形態に係る撮像装置が実行する情報処理の流れを説明するためのシーケンス図である。FIG. 4 is a sequence diagram for describing a flow of information processing executed by the imaging device according to the embodiment.

<実施の形態の概要>
実施の形態の概要を述べる。実施の形態に係る情報処理システムは、撮像装置と表示装置とを備えている。撮像装置は生体認証機能を備えており、あらかじめ登録されているユーザの生体情報を用いて認証を行い、認証が成功することを条件として撮像を許可するように構成されている。
<Outline of Embodiment>
An outline of an embodiment will be described. An information processing system according to an embodiment includes an imaging device and a display device. The imaging apparatus has a biometric authentication function, performs authentication using biometric information of a user registered in advance, and is configured to permit imaging on condition that authentication is successful.

撮像装置は、撮像して取得した画像データを、撮像装置の製造時に撮像装置の製造者によって読み出し専用メモリに格納された暗号鍵を用いて画像データを暗号化した上で、画像データの撮像時刻と関連づけて撮像装置内に保管する。   The imaging device encrypts the image data obtained by imaging by using the encryption key stored in the read-only memory by the manufacturer of the imaging device at the time of manufacturing the imaging device, and then sets the time at which the image data was captured. And store it in the imaging device in association with.

表示装置は、撮像装置が撮像した画像データを表示するための装置である。表示装置には、撮像装置に格納されている暗号鍵とペアとなる暗号鍵が、表示装置の製造時に表示装置の製造者によって読み出し専用メモリに格納されている。表示装置は、撮像装置から取得した暗号化データを、読み出し専用メモリに格納されている暗号鍵を用いて復号する。表示装置は、復号して得られた画像データを、表示装置が備える表示部に表示させる。   The display device is a device for displaying image data captured by the imaging device. In the display device, an encryption key paired with an encryption key stored in the imaging device is stored in a read-only memory by a manufacturer of the display device when the display device is manufactured. The display device decrypts the encrypted data obtained from the imaging device using the encryption key stored in the read-only memory. The display device displays the image data obtained by decoding on a display unit provided in the display device.

ここで、撮像装置と表示装置とは、物理的に接触する接続端子を介して暗号化データをやり取りする。また、撮像装置は、あらかじめ登録されているユーザの生体情報を用いて認証を行い、認証が成功することを条件として、暗号化データを表示装置に出力する。さらに、表示装置は外部機器への映像出力機能を備えておらず、表示装置自身が備える表示部にのみ画像データを表示するように構成されている。なお、表示装置は、画像データの表示が終了してから所定の期間(例えば10分間)が経過すると、表示装置から自動で削除するように設定することもできる。   Here, the imaging device and the display device exchange encrypted data via a connection terminal that makes physical contact. In addition, the imaging device performs authentication using the biometric information of the user registered in advance, and outputs the encrypted data to the display device on condition that the authentication is successful. Further, the display device does not have a function of outputting video to an external device, and is configured to display image data only on a display unit included in the display device itself. It should be noted that the display device can also be set so as to be automatically deleted from the display device when a predetermined period (for example, 10 minutes) elapses after the display of the image data ends.

加えて、ある撮像装置が保持している暗号鍵のペアとなる暗号鍵を保持している表示装置は1台だけである。このため、ある撮像装置が保管している暗号化データを表示装置に出力しても、その表示装置が撮像装置から取得した暗号化データを復号するための暗号鍵を保管していない場合、表示装置は画像データを表示することはできない。   In addition, only one display device holds an encryption key that is a pair of an encryption key held by a certain imaging device. Therefore, even if the encrypted data stored by a certain imaging device is output to the display device, but the display device does not store the encryption key for decrypting the encrypted data obtained from the imaging device, the display is performed. The device cannot display image data.

このように、実施の形態に係る情報処理システムにおいては、撮像装置が備える生体認証機能の認証に成功した者のみが撮像機能を利用できる。また、撮像装置で撮像した画像データは、ペアとなる専用の表示装置でのみ閲覧することができる。撮像装置と表示装置との間のデータのやり取りは有線であり、また表示装置は外部出力機能を持たない。このため、撮像装置で撮像した画像データに第三者がアクセスすることが困難となっている。これにより、実施の形態に係る情報処理システムは、画像データの保管の信頼性を向上することができる。   As described above, in the information processing system according to the embodiment, only a person who has successfully authenticated the biometric authentication function of the imaging device can use the imaging function. Further, image data captured by the imaging device can be viewed only on a dedicated display device that forms a pair. The exchange of data between the imaging device and the display device is wired, and the display device has no external output function. For this reason, it is difficult for a third party to access the image data captured by the imaging device. Thereby, the information processing system according to the embodiment can improve the reliability of storage of image data.

<情報処理システムSの全体構成>
図1は、実施の形態に係る情報処理システムSの全体構成を模式的に示す図である。上述したように、実施の形態に係る情報処理システムSは撮像装置1と表示装置2とを備えている。ここで、表示装置2は、通信ネットワークNを介して複数の計算機によって実現される一種のデータベースであるブロックチェーンBと通信可能な態様で接続することができる。
<Overall Configuration of Information Processing System S>
FIG. 1 is a diagram schematically illustrating an overall configuration of an information processing system S according to an embodiment. As described above, the information processing system S according to the embodiment includes the imaging device 1 and the display device 2. Here, the display device 2 can be connected via a communication network N to a block chain B, which is a kind of database realized by a plurality of computers, in a communicable manner.

撮像装置1は、生体情報取得部10、撮像部11、及び接続端子12を備えている。また、図1に例示する撮像装置1は、ペン先13も備えている。表示装置2は、表示部20、表示装置側撮像部21、及び接続端子22を備えている。撮像装置1が備える接続端子12は、いわゆるメスの接続端子である。   The imaging device 1 includes a biological information acquisition unit 10, an imaging unit 11, and a connection terminal 12. The imaging device 1 illustrated in FIG. 1 also includes a pen tip 13. The display device 2 includes a display unit 20, a display device-side imaging unit 21, and a connection terminal 22. The connection terminal 12 included in the imaging device 1 is a so-called female connection terminal.

一方、表示装置2が備える接続端子22は、いわゆるオスの接続端子である。接続端子12を接続端子22に差し込むことによって接続端子12と接続端子22とが接触し、撮像装置1は暗号化データを接続端子22に出力するための経路が構成される。また、撮像装置1はメスの接続端子であるため、撮像装置1の筐体内に端子が収容されており、撮像装置1の外部に突出していない。これにより、ユーザが撮像装置1を筆記用具として使用するときに、接続端子12が筆記の妨げとなることがなくなる。   On the other hand, the connection terminal 22 included in the display device 2 is a so-called male connection terminal. By inserting the connection terminal 12 into the connection terminal 22, the connection terminal 12 and the connection terminal 22 come into contact with each other, and the imaging device 1 forms a path for outputting the encrypted data to the connection terminal 22. Further, since the imaging device 1 is a female connection terminal, the terminal is accommodated in the housing of the imaging device 1 and does not protrude outside the imaging device 1. Thereby, when the user uses the imaging device 1 as a writing implement, the connection terminal 12 does not hinder writing.

表示装置2は、インターネット等の通信ネットワークNを介してネットワーク状に構成されているブロックチェーンBにアクセスすることもできる。詳細は後述するが、表示装置2は、撮像装置1から新たな暗号化データを取得すると、取得した暗号化データのハッシュ値を生成する。表示装置2は、生成したハッシュ値を通信ネットワークNを介してブロックチェーンBに登録する。   The display device 2 can also access a blockchain B configured like a network via a communication network N such as the Internet. Although details will be described later, when the display device 2 acquires new encrypted data from the imaging device 1, the display device 2 generates a hash value of the acquired encrypted data. The display device 2 registers the generated hash value in the blockchain B via the communication network N.

図1に示すように、ブロックチェーンBはネットワーク上に存在する複数の端末が参加して構成される。周知のように、ブロックチェーンは、参加端末全ての取引の履歴を記録した巨大な元帳を、参加端末全員で共有する一つの分散データベース技術であると捉えることもできる。同一の情報を複数の端末が共有しており、情報の正当性は参加端末の多数決で決定される。このため、ブロックチェーンに保持された情報を改ざんするためには過半数以上の参加端末それぞれが格納している情報を同時に改ざんする必要があり、改ざんが困難なデータベースであると言われている。   As shown in FIG. 1, the block chain B is configured by a plurality of terminals existing on a network participating. As is well known, the blockchain can be regarded as one distributed database technology in which a huge ledger that records the transaction history of all participating terminals is shared by all participating terminals. The same information is shared by a plurality of terminals, and the validity of the information is determined by majority vote of participating terminals. For this reason, in order to falsify the information held in the blockchain, it is necessary to simultaneously falsify the information stored in each of the majority or more participating terminals, and it is said that the database is difficult to falsify.

表示装置2は、暗号化データのハッシュ値を安全なブロックチェーンBに格納することにより、必要に応じてデジタル情報として画像データの正当性を検証することもできる。これにより、情報処理システムSは、画像データの保管の信頼性をさらに向上させることができる。また、通信ネットワークN上に存在するブロックチェーンBには画像データそのものではなく、画像データを暗号化したデータのさらにハッシュ値であるため、万が一、ブロックチェーンBが格納している情報が第三者に漏洩したとしても、そこから画像データを特定することは実質的に不可能である。   By storing the hash value of the encrypted data in the secure block chain B, the display device 2 can verify the validity of the image data as digital information as needed. Thereby, the information processing system S can further improve the reliability of storage of the image data. In addition, since the blockchain B existing on the communication network N is not the image data itself but a hash value of the data obtained by encrypting the image data, the information stored in the blockchain B may be a third party. Even if it leaks, it is practically impossible to specify the image data therefrom.

図2(a)−(b)は、実施の形態に係る情報処理システムSの利用シーンの一例を模式的に示す図である。具体的には、図2(a)は撮像装置1を用いた撮像の様子を示す図であり、図2(b)は表示装置2による画像データの表示の様子を示す図である。   FIGS. 2A and 2B are diagrams schematically illustrating an example of a use scene of the information processing system S according to the embodiment. Specifically, FIG. 2A is a diagram illustrating a state of imaging using the imaging device 1, and FIG. 2B is a diagram illustrating a state of displaying image data by the display device 2.

図2に示す撮像装置1において、生体情報取得部10はユーザUの指紋を生体情報として取得するためのセンサである。限定はしないが、生体情報取得部10を構成するセンサは指で押下することが可能であり、生体情報取得部10を押下すると撮像部11が撮像するように構成されている。具体的には、ユーザUの指が生体情報取得部10に触れた時点で生体情報取得部10はユーザUの指紋情報を取得し、その指紋情報による認証が成功すると、生体情報取得部10の押下に連動して撮像部11が撮像して画像データを生成する。   In the imaging apparatus 1 shown in FIG. 2, the biometric information acquisition unit 10 is a sensor for acquiring the fingerprint of the user U as biometric information. Although not limited, the sensor constituting the biometric information acquisition unit 10 can be pressed by a finger, and the imaging unit 11 is configured to take an image when the biometric information acquisition unit 10 is pressed. Specifically, when the finger of the user U touches the biometric information acquisition unit 10, the biometric information acquisition unit 10 acquires the fingerprint information of the user U, and when the authentication based on the fingerprint information succeeds, the biometric information acquisition unit 10 The imaging unit 11 captures an image in conjunction with the pressing, and generates image data.

なお、撮像部11は、ユーザUによる撮像の指示(図2に示す例では、生体情報取得部10の押下)があってから所定の時間が経過した後に撮像してもよい。このとき、撮像部11は、撮像装置1が備える図示しない音声出力部に、撮像するまでのタイミングを通知するためのカウントダウンを音声で出力させるようにしてもよい。これにより、撮像部11は、いつ撮像が行われるかをユーザUに示すことができるので、撮像時のユーザUの利便性を向上することができる。所定の時間は、ユーザUが設定できるようにしてもよい。   In addition, the imaging unit 11 may perform imaging after a predetermined time has elapsed after an instruction of imaging by the user U (in the example illustrated in FIG. 2, the depression of the biological information acquisition unit 10). At this time, the imaging unit 11 may cause a sound output unit (not shown) included in the imaging device 1 to output a countdown for notifying the timing until the image is picked up by sound. Thereby, the imaging unit 11 can indicate to the user U when the imaging is performed, so that the convenience of the user U at the time of imaging can be improved. The predetermined time may be set by the user U.

図2(a)は、撮像部11の撮像対象物Oが契約書である場合の例を示している。図2(a)に示すように、撮像対象物Oである契約書にはユーザU自身のサインSgが記されている。これにより、ユーザUは、自身が記したサインSgが記された契約書を撮像した画像データを撮像装置1に保管することができる。   FIG. 2A illustrates an example in which the imaging target object O of the imaging unit 11 is a contract. As shown in FIG. 2A, the contract S, which is the imaging object O, has a signature Sg of the user U himself. Thereby, the user U can store the image data obtained by imaging the contract in which the signature Sg written by the user U is written in the imaging device 1.

図2(b)は、撮像装置1の接続端子12と表示装置2の接続端子22とが接続されている様子を示している。撮像装置1の接続端子12と表示装置2の接続端子22とが接続されると、撮像装置1に保管されている暗号化された画像データが表示装置2に出力される。図2(b)は、撮像装置1に保管された画像データのうち、ユーザUのサインSgが拡大されて表示部20に表示されている様子を示している。ユーザUは、表示部20に表示されたサインSgと、撮像対象物Oとを並べることにより、サインSgの真贋を判定するための情報を提供することができる。   FIG. 2B illustrates a state in which the connection terminal 12 of the imaging device 1 and the connection terminal 22 of the display device 2 are connected. When the connection terminal 12 of the imaging device 1 is connected to the connection terminal 22 of the display device 2, the encrypted image data stored in the imaging device 1 is output to the display device 2. FIG. 2B shows a state in which the sign Sg of the user U among the image data stored in the imaging device 1 is enlarged and displayed on the display unit 20. The user U can provide information for determining the authenticity of the signature Sg by arranging the signature Sg displayed on the display unit 20 and the imaging target O.

<実施の形態に係る撮像装置1及び表示装置2の機能構成>
続いて、上述した情報処理システムSを実現するための撮像装置1及び表示装置2の機能構成について詳細に説明する。
<Functional Configuration of Imaging Device 1 and Display Device 2 According to Embodiment>
Next, the functional configuration of the imaging device 1 and the display device 2 for realizing the above-described information processing system S will be described in detail.

図3は、実施の形態に係る撮像装置1及び表示装置2の機能構成を模式的に示す図である。撮像装置1は、生体情報取得部10、撮像部11、接続端子12、ペン先13、撮像装置側記憶部14、及び制御部15を備える。また、表示装置2は、表示部20、表示装置側撮像部21、接続端子22、表示装置側記憶部23、及び制御部24を備える。   FIG. 3 is a diagram schematically illustrating a functional configuration of the imaging device 1 and the display device 2 according to the embodiment. The imaging device 1 includes a biological information acquisition unit 10, an imaging unit 11, a connection terminal 12, a pen tip 13, an imaging device storage unit 14, and a control unit 15. The display device 2 includes a display unit 20, a display-side imaging unit 21, a connection terminal 22, a display-side storage unit 23, and a control unit 24.

図3において、矢印は主なデータの流れを示しており、図3に示していないデータの流れがあってもよい。図3において、各機能ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図3に示す機能ブロックは単一の装置内に実装されてもよく、あるいは複数の装置内に分かれて実装されてもよい。機能ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてもよい。   In FIG. 3, arrows indicate main data flows, and there may be data flows not shown in FIG. In FIG. 3, each functional block shows a configuration of a function unit, not a configuration of a hardware (device) unit. Therefore, the functional blocks illustrated in FIG. 3 may be implemented in a single device, or may be separately implemented in a plurality of devices. The transfer of data between the functional blocks may be performed via any means such as a data bus, a network, a portable storage medium, and the like.

撮像装置側記憶部14は、撮像装置1を実現するコンピュータのBIOS(Basic Input Output System)等を格納するROM(Read Only Memory)や撮像装置1の作業領域となるRAM(Random Access Memory)、OS(Operating System)やアプリケーションプログラム、当該アプリケーションプログラムの実行時に参照される種々の情報を格納するHDD(Hard Disk Drive)やSSD(Solid State Drive)等の大容量記憶装置である。   The imaging device-side storage unit 14 includes a ROM (Read Only Memory) for storing a BIOS (Basic Input Output System) of a computer that implements the imaging device 1, a RAM (Random Access Memory) serving as a work area of the imaging device 1, and an OS. (Operating System), application programs, and large-capacity storage devices such as HDDs (Hard Disk Drives) and SSDs (Solid State Drives) that store various information referred to when the application programs are executed.

同様に、表示装置側記憶部23は、表示装置2を実現するコンピュータのBIOS等を格納するROMや表示装置2の作業領域となるRAM、OSやアプリケーションプログラム、当該アプリケーションプログラムの実行時に参照される種々の情報を格納するHDDやSSD等の大容量記憶装置である。   Similarly, the display device-side storage unit 23 is a ROM that stores a BIOS or the like of a computer that implements the display device 2, a RAM that is a work area of the display device 2, an OS or an application program, and is referred to when the application program is executed. It is a large-capacity storage device such as an HDD or SSD that stores various information.

制御部15は、撮像装置1のCPU(Central Processing Unit)やGPU(Graphics Processing Unit)等のプロセッサであり、撮像装置側記憶部14に記憶されたプログラムを実行することによって認証部150、暗号化部151、データ出力部152、及び時刻取得部153として機能する。   The control unit 15 is a processor such as a CPU (Central Processing Unit) or a GPU (Graphics Processing Unit) of the imaging device 1, and executes the program stored in the imaging device-side storage unit 14 to execute the authentication unit 150 and the encryption. It functions as the unit 151, the data output unit 152, and the time acquisition unit 153.

同様に、制御部24は、表示装置2のCPUやGPU等のプロセッサであり、表示装置側記憶部23に記憶されたプログラムを実行することによって取得部240、復号部241、ハッシュ値生成部242、及びハッシュ値管理部243として機能する。   Similarly, the control unit 24 is a processor such as a CPU or a GPU of the display device 2, and executes a program stored in the display device-side storage unit 23 to obtain an acquisition unit 240, a decoding unit 241, and a hash value generation unit 242. , And a hash value management unit 243.

撮像装置1の生体情報取得部10は、撮像装置1のユーザUの生体情報を取得する。ここで「生体情報」とは、生体認証に用いられる情報であり、人間の身体的特徴を表す情報である。生体情報の一例としては、指紋情報、虹彩情報、声紋情報、静脈パターン等が挙げられるが、これらに限定されない。   The biological information acquisition unit 10 of the imaging device 1 acquires biological information of the user U of the imaging device 1. Here, “biological information” is information used for biometric authentication, and is information representing a physical characteristic of a human. Examples of the biological information include, but are not limited to, fingerprint information, iris information, voiceprint information, and vein pattern.

認証部150は、生体情報取得部10が取得した生体情報があらかじめ登録された登録生体情報と一致するか否かを認証する。ここで、「あらかじめ登録された登録生体情報」は、例えば撮像装置1の初期設定時にユーザUが登録したユーザU自身の生体情報である。   The authentication unit 150 authenticates whether the biometric information acquired by the biometric information acquisition unit 10 matches registered biometric information registered in advance. Here, the “preregistered registered biometric information” is, for example, biometric information of the user U registered by the user U at the time of initial setting of the imaging apparatus 1.

撮像部11は、認証部150による認証が成功したことを条件としてユーザUによる撮像を許可する。言い換えると、認証部150による認証が失敗した場合、ユーザUは撮像部11を用いて撮像することはできない。つまり、撮像装置1に生体情報を登録していない者は、撮像装置1を用いて画像データを生成することはできない。これにより、撮像装置1が保管している画像データは、撮像装置1に生体情報を登録したユーザUが撮像したデータであることを保証することができる。   The imaging unit 11 permits imaging by the user U on condition that the authentication by the authentication unit 150 is successful. In other words, if the authentication by the authentication unit 150 fails, the user U cannot take an image using the imaging unit 11. That is, a person who does not register biometric information in the imaging device 1 cannot generate image data using the imaging device 1. Thereby, it is possible to guarantee that the image data stored in the imaging device 1 is data captured by the user U who has registered the biological information in the imaging device 1.

暗号化部151は、撮像部11が撮像した画像データを暗号化して暗号化データを生成する。暗号化部151が生成した暗号化データは、撮像装置側記憶部14に格納されて保管される。暗号化部151は、画像データの暗号化に成功した場合、平文の画像データを削除してもよい。これにより、万が一、撮像装置側記憶部14が格納されている情報が第三者に漏洩したとしても、第三者が平文の画像データを取得する事態を防ぐことができる。   The encryption unit 151 encrypts image data captured by the imaging unit 11 to generate encrypted data. The encrypted data generated by the encryption unit 151 is stored and stored in the imaging device-side storage unit 14. If the encryption of the image data is successful, the encryption unit 151 may delete the plaintext image data. Thus, even if the information stored in the imaging device-side storage unit 14 leaks to a third party, it is possible to prevent a situation in which the third party acquires plaintext image data.

また、暗号化部151が画像データの暗号化に用いる暗号鍵は、撮像装置1の製造時に撮像装置1の製造者によって撮像装置側記憶部14中の読み出し専用のセキュアメモリ内に格納される。撮像装置1の製造者は、撮像装置1毎に異なる暗号鍵を格納する。   The encryption key used by the encryption unit 151 for encrypting image data is stored in a read-only secure memory in the imaging device-side storage unit 14 by the manufacturer of the imaging device 1 when the imaging device 1 is manufactured. The manufacturer of the imaging device 1 stores a different encryption key for each imaging device 1.

データ出力部152は、表示装置2との接続端子12を介して暗号化部151が生成した暗号化データを表示装置2に出力する。表示装置2の取得部240は、撮像装置1との接続端子22を介して撮像装置1から暗号化データを取得する。このように、撮像装置1と表示装置2とは、物理的な接続端子で接続することによって暗号化データのやり取りを実行する。このため、撮像装置1と表示装置2とが無線でデータをやりとりする場合と比較して、撮像装置1と表示装置2とが暗号化データを通信中に第三者がその暗号化データを取得することが難しくなる。結果として、情報処理システムSは、撮像装置1が保管している暗号化データの漏洩に対する頑健性を高めることができる。   The data output unit 152 outputs the encrypted data generated by the encryption unit 151 to the display device 2 via the connection terminal 12 with the display device 2. The acquisition unit 240 of the display device 2 acquires the encrypted data from the imaging device 1 via the connection terminal 22 with the imaging device 1. As described above, the imaging device 1 and the display device 2 exchange encrypted data by being connected by the physical connection terminal. Therefore, as compared with the case where the imaging device 1 and the display device 2 exchange data wirelessly, a third party obtains the encrypted data while the imaging device 1 and the display device 2 communicate encrypted data. It becomes difficult to do. As a result, the information processing system S can increase the robustness against leakage of the encrypted data stored in the imaging device 1.

復号部241は、取得部240が取得した暗号化データを復号する。ここで、復号部241が暗号化データの復号に用いる暗号鍵は、表示装置2の製造時に表示装置2の製造者によって表示装置側記憶部23中の読み出し専用のセキュアメモリ内に格納される。撮像装置1の暗号化部151が画像データの暗号化に用いる暗号鍵と、表示装置2の復号部241が暗号化データの復号に用いる暗号鍵とは対となる暗号鍵である。言い換えると、暗号化部151がある暗号鍵で暗号化したデータは、その暗号鍵と対となる暗号鍵でなければ復号部241は復号することができない。   The decryption unit 241 decrypts the encrypted data acquired by the acquisition unit 240. Here, the encryption key used by the decryption unit 241 to decrypt the encrypted data is stored in the read-only secure memory in the display device-side storage unit 23 by the manufacturer of the display device 2 when the display device 2 is manufactured. The encryption key used by the encryption unit 151 of the imaging device 1 to encrypt the image data and the encryption key used by the decryption unit 241 of the display device 2 to decrypt the encrypted data are paired encryption keys. In other words, the data encrypted by the encryption unit 151 using the encryption key cannot be decrypted by the decryption unit 241 unless the encryption key is paired with the encryption key.

以下、暗号化部151が画像データを暗号化するために用いる暗号鍵を「第1暗号鍵」、第1暗号鍵で暗号化されたデータを復号部241が復号するために用いる暗号鍵を「第2暗号鍵」と記載する。第1暗号鍵は撮像装置側記憶部14に格納され、第2暗号鍵は表示装置側記憶部23に格納されている。第1暗号鍵及び第2暗号鍵は、例えば、それぞれ公開鍵暗号方式の秘密鍵及び公開鍵で実現される。これにより、第1暗号鍵を格納する撮像装置1と、その第1暗号鍵と対となる第2暗号鍵を格納する表示装置2とも対となる。   Hereinafter, the encryption key used by the encryption unit 151 to encrypt the image data is “first encryption key”, and the encryption key used by the decryption unit 241 to decrypt the data encrypted with the first encryption key is “ Second encryption key ". The first encryption key is stored in the imaging device-side storage unit 14, and the second encryption key is stored in the display device-side storage unit 23. The first encryption key and the second encryption key are realized by, for example, a secret key and a public key of a public key cryptosystem, respectively. Thereby, the imaging device 1 that stores the first encryption key and the display device 2 that stores the second encryption key paired with the first encryption key are also paired.

表示部20は、復号部241が復号して取得した画像データを表示する。取得部240は、例えばLCD(Liquid Crystal Display)や有機EL(Electroluminescence)ディスプレイで実現され、表示装置2と一体化されている。表示部20は、タッチパネル機能を搭載してもよく、この場合、表示部20は表示装置2の入力インタフェースとしても機能する。   The display unit 20 displays the image data obtained by decoding by the decoding unit 241. The acquisition unit 240 is realized by, for example, an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence) display, and is integrated with the display device 2. The display unit 20 may have a touch panel function. In this case, the display unit 20 also functions as an input interface of the display device 2.

上述したように、撮像装置1と表示装置2とは対となっている。すなわち、ある撮像装置1で撮像した画像データは、撮像装置1と対となる表示装置2以外の装置では表示することができない。撮像装置1は、いわば専用のビューワ装置でしか表示できないという点で、撮像装置1に保管された画像データの信頼性を高めている。   As described above, the imaging device 1 and the display device 2 form a pair. That is, image data captured by a certain imaging device 1 cannot be displayed on a device other than the display device 2 paired with the imaging device 1. The imaging device 1 enhances the reliability of the image data stored in the imaging device 1 in that the image data can be displayed only by a dedicated viewer device.

また、撮像装置1の接続端子12と表示装置2の接続端子22とが接続されたとき、撮像装置1のデータ出力部152は、撮像装置1の認証部150における認証が成功したことを条件として、暗号化データを表示装置2に出力する。これにより、撮像装置1は、撮像装置1に生体情報を登録した者以外の者が表示装置2に画像データを転送することを抑制できる。限られた者のみが撮像装置1から画像データを取り出すことができるので、撮像装置1は、画像データの保管の信頼性を向上させることができる。   When the connection terminal 12 of the imaging device 1 is connected to the connection terminal 22 of the display device 2, the data output unit 152 of the imaging device 1 sets a condition that authentication in the authentication unit 150 of the imaging device 1 succeeds. , And outputs the encrypted data to the display device 2. Thereby, the imaging device 1 can suppress transfer of image data to the display device 2 by a person other than the person who registered the biological information in the imaging device 1. Since only a limited number of persons can retrieve image data from the imaging device 1, the imaging device 1 can improve the reliability of storage of image data.

撮像装置1の時刻取得部153は、撮像部11が撮像した時刻を取得する。暗号化部151は、暗号化した画像データとその画像データの撮像時刻を示す情報とを対応づけて暗号化データを生成する。ここで時刻取得部153が取得する時刻には、撮像部11が撮像した年月日も含まれる。   The time acquisition unit 153 of the imaging device 1 acquires the time at which the imaging unit 11 captured an image. The encryption unit 151 generates encrypted data by associating the encrypted image data with information indicating the image capturing time of the image data. Here, the time acquired by the time acquiring unit 153 includes the date when the image capturing unit 11 captures an image.

撮像部11が契約書を撮像して画像データを生成する場合を考える。一般に、契約書には契約を締結した日付が記載されている。契約書を撮像した画像データにその撮像時刻を対応づけることにより、暗号化部151は、契約書の締結日に画像データが撮像されたか否かを事後的に確認するための情報を提供することができる。   Consider a case where the imaging unit 11 captures a contract and generates image data. Generally, the contract will state the date the contract was signed. By associating the image capturing time with the image data obtained by capturing the contract, the encryption unit 151 provides information for ex-post confirmation of whether or not the image data was captured on the date on which the contract was concluded. Can be.

契約書の締結日と画像データの撮像年月日とが一致する場合は、契約書の締結日と画像データの撮像年月日とが異なる場合と比較して、その画像データが本物の契約書を撮像したデータである蓋然性は高い。暗号化部151が暗号化した画像データとその画像データの撮像時刻を示す情報とを対応づけて暗号化データを生成することにより、撮像装置1は、画像データの保管の信頼性を向上させることができる。   If the contract date and the image data capture date are the same, the image data is compared to the case where the contract date and the image data capture date are different. It is highly probable that this is data obtained by imaging the image. By generating the encrypted data by associating the image data encrypted by the encryption unit 151 with the information indicating the imaging time of the image data, the imaging apparatus 1 improves the reliability of storage of the image data. Can be.

表示装置2のハッシュ値生成部242は、取得部240が撮像装置1から取得した暗号化データが過去に受信したいずれの暗号化データとも異なる場合、取得した暗号化データのハッシュ値を生成する。ハッシュ値生成部242は、例えばSHA3(Secure Hash Algorithm version 3)等の既知のハッシュ生成アルゴリズムを用いて暗号化データのハッシュ値を生成する。   The hash value generation unit 242 of the display device 2 generates a hash value of the acquired encrypted data when the encrypted data acquired by the acquisition unit 240 from the imaging device 1 is different from any encrypted data received in the past. The hash value generation unit 242 generates a hash value of the encrypted data using a known hash generation algorithm such as SHA3 (Secure Hash Algorithm version 3).

ハッシュ値管理部243は、通信ネットワークNを介してハッシュ値生成部242が生成したハッシュ値をネットワーク上のデータベースに登録する。具体的には、ハッシュ値管理部243は、ハッシュ値生成部242が生成したハッシュ値を、通信ネットワークN上に構成されたブロックチェーンBに登録する。これにより、表示装置2は、2回目以降に撮像装置1から取得した暗号化データが、撮像装置1から初めて取得した暗号化データと一致するか否かを判定することができる。これにより、表示装置2は、撮像装置1に格納されている暗号化データが事後的に改変されていないことを確認できるので、撮像装置1による画像データの保管の信頼性を向上させることができる。   The hash value management unit 243 registers the hash value generated by the hash value generation unit 242 via the communication network N in a database on the network. Specifically, the hash value management unit 243 registers the hash value generated by the hash value generation unit 242 in the block chain B configured on the communication network N. Thereby, the display device 2 can determine whether or not the encrypted data acquired from the imaging device 1 for the second time or later matches the encrypted data acquired from the imaging device 1 for the first time. Accordingly, the display device 2 can confirm that the encrypted data stored in the imaging device 1 has not been modified afterward, and thus the reliability of storage of image data by the imaging device 1 can be improved. .

具体的には、ハッシュ値管理部243は、ハッシュ値生成部242が生成した暗号化データに対応づけられている撮像時刻と、撮像装置1を特定するための撮像装置識別子とを、ハッシュ値に対応づけてブロックチェーンBに登録する。ここで、ハッシュ値管理部243がハッシュ値に対応づける撮像装置識別子は、暗号化データの元データである画像データを撮像した撮像装置を特定するための識別子である。撮像装置識別子は撮像装置1の製造者によって撮像装置1の製造時に撮像装置側記憶部14中の読み出し専用のセキュアメモリ内に格納される。撮像装置識別子は、暗号化データとともに取得部240が撮像装置1から取得する。   Specifically, the hash value management unit 243 converts the imaging time associated with the encrypted data generated by the hash value generation unit 242 and the imaging device identifier for identifying the imaging device 1 into a hash value. Register it in the blockchain B in association with it. Here, the imaging device identifier associated with the hash value by the hash value management unit 243 is an identifier for specifying the imaging device that has captured the image data that is the original data of the encrypted data. The imaging device identifier is stored in a read-only secure memory in the imaging device side storage unit 14 when the imaging device 1 is manufactured by the manufacturer of the imaging device 1. The acquisition unit 240 acquires the imaging device identifier from the imaging device 1 together with the encrypted data.

ハッシュ値管理部243は、撮像装置識別子と撮像時刻とをキーとしてブロックチェーンBを参照し、撮像装置1から取得した暗号化データがブロックチェーンBに登録されているか否かを判定する。ハッシュ値管理部243は、取得部240が撮像装置1から取得した暗号化データが過去に受信したいずれの暗号化データとも異なる場合、ハッシュ値生成部242に暗号化データのハッシュ値を生成させ、そのハッシュ値をブロックチェーンBに登録する。   The hash value management unit 243 refers to the block chain B using the imaging device identifier and the imaging time as keys, and determines whether the encrypted data acquired from the imaging device 1 is registered in the block chain B. The hash value management unit 243 causes the hash value generation unit 242 to generate a hash value of the encrypted data when the encrypted data acquired by the acquisition unit 240 from the imaging device 1 is different from any encrypted data received in the past. The hash value is registered in the block chain B.

ハッシュ値管理部243は、通信ネットワークN上のデータベースへのハッシュ値の登録が完了することを契機として、通信ネットワークNとの通信を切断する。すなわち、ハッシュ値管理部243は、ブロックチェーンBにハッシュ値が既に登録されているか否かの確認と、ハッシュ値を登録するときとを除いて、オフラインとなっている。   The hash value management unit 243 disconnects communication with the communication network N when the registration of the hash value in the database on the communication network N is completed. That is, the hash value management unit 243 is off-line except for checking whether the hash value has already been registered in the block chain B and when registering the hash value.

このように、表示装置2はオンラインとなる必要があるときを除いて通常はオフラインとなっているため、悪意のある第三者が通信ネットワークNを介して表示装置2にアクセスする機会を最小限としている。これにより、情報処理システムS全体として、撮像装置1による画像データの保管の信頼性を向上させることができる。   As described above, since the display device 2 is usually offline except when it is necessary to be online, the opportunity for a malicious third party to access the display device 2 via the communication network N is minimized. And Thereby, as a whole of the information processing system S, the reliability of storage of image data by the imaging device 1 can be improved.

図2は、表示装置2の表示部20に表示されるサインSgと、契約書自体とを並べて比較する場合について示す図である。ここで、比較対象の契約書もデジタル化されていると、画像処理を利用した比較等に利用できて便利である。   FIG. 2 is a diagram illustrating a case where the signature Sg displayed on the display unit 20 of the display device 2 and the contract itself are compared side by side. Here, if the contract to be compared is also digitized, it can be conveniently used for comparison and the like using image processing.

そこで、表示装置側撮像部21は、表示部20に表示させるための画像を撮像する。表示部20は、復号部241が復号した画像データと、表示装置側撮像部21が新たに撮像した画像データとを比較可能な態様で表示する。   Thus, the display device-side imaging unit 21 captures an image to be displayed on the display unit 20. The display unit 20 displays the image data decoded by the decoding unit 241 and the image data newly picked up by the display device-side image pickup unit 21 in a comparable manner.

図4は、実施の形態に係る表示部20に表示される比較画面の一例を模式的に示す図である。図4に示す比較画面では、撮像装置1の撮像装置側記憶部14に格納されていた「メモリ内画像」と、表示装置側撮像部21が撮像した「カメラ画像」とが、表示部20に横並びで同時に表示されている。メモリ内画像とカメラ画像とのそれぞれの下部には、画像を拡大又は縮小するための拡大・縮小インタフェース200、201も表示されている。また、メモリ内画像を表示する領域には、画像データの撮像時刻も表示されている。   FIG. 4 is a diagram schematically illustrating an example of the comparison screen displayed on the display unit 20 according to the embodiment. In the comparison screen illustrated in FIG. 4, the “image in memory” stored in the imaging device storage unit 14 of the imaging device 1 and the “camera image” captured by the display device imaging unit 21 are displayed on the display unit 20. They are displayed side by side at the same time. Below each of the in-memory image and the camera image, enlargement / reduction interfaces 200 and 201 for enlarging or reducing the image are also displayed. Further, in the area for displaying the image in the memory, the imaging time of the image data is also displayed.

表示部20がタッチスクリーンである場合、ユーザUは、拡大・縮小インタフェース200を操作することでメモリ内画像を拡大又は縮小することができる。同様に、ユーザUは、拡大・縮小インタフェース201を操作することでカメラ画像を拡大又は縮小することができる。これにより、ユーザUはメモリ内画像とカメラ画像とのそれぞれに含まれるサインSgの大きさを揃えることができるので、表示装置2は、ユーザUに対してサインSgを比較するための有用は情報を提供することができる。   When the display unit 20 is a touch screen, the user U can enlarge or reduce the in-memory image by operating the enlargement / reduction interface 200. Similarly, the user U can enlarge or reduce the camera image by operating the enlargement / reduction interface 201. Accordingly, the user U can equalize the size of the signature Sg included in each of the in-memory image and the camera image. Therefore, the display device 2 has information useful for comparing the signature U with the user U. Can be provided.

<撮像装置1が実行する情報処理の流れを説明するシーケンス図>
図5は、実施の形態に係る撮像装置1が実行する情報処理の流れを説明するためのシーケンス図である。本シーケンス図における処理は、例えば撮像装置1が起動したときに開始する。
<Sequence diagram illustrating the flow of information processing executed by the imaging device 1>
FIG. 5 is a sequence diagram for describing a flow of information processing executed by the imaging device 1 according to the embodiment. The processing in the sequence diagram starts when, for example, the imaging device 1 is activated.

生体情報取得部10は、撮像装置1のユーザUの生体情報を取得する(S2)。認証部150は、生体情報取得部10が取得したユーザUの生体情報があらかじめ登録された登録生体情報と一致するか否かを認証する(S4)。生体情報の認証が失敗している間は(S6のNo)、撮像装置1はステップS2に戻って生体情報の取得及び認証を継続する。   The biological information acquisition unit 10 acquires biological information of the user U of the imaging device 1 (S2). The authentication unit 150 authenticates whether the biometric information of the user U acquired by the biometric information acquiring unit 10 matches registered biometric information registered in advance (S4). While the authentication of the biometric information has failed (No in S6), the imaging device 1 returns to step S2 and continues acquiring and authenticating the biometric information.

生体情報の認証が成功すると(S6のYes)、撮像部11は撮像を許可する(S8)。暗号化部151は、撮像部11が撮像して得られた画像データを、第1暗号鍵を用いて暗号化する(S10)。データ出力部152は、表示装置2との接続端子12を介して暗号化データを表示装置2に出力する(S12)。   When the biometric information authentication is successful (Yes in S6), the imaging unit 11 permits imaging (S8). The encryption unit 151 encrypts the image data obtained by the imaging unit 11 using the first encryption key (S10). The data output unit 152 outputs the encrypted data to the display device 2 via the connection terminal 12 with the display device 2 (S12).

表示装置2の取得部240は、撮像装置1との接続端子22を介して撮像装置1から暗号化データを取得する(S14)。復号部241は、取得部240が取得した暗号化データを、第2暗号鍵を用いて復号する(S16)。表示部20は、復号部241が復号して取得した画像データを表示部20に表示させる(S18)。   The acquisition unit 240 of the display device 2 acquires the encrypted data from the imaging device 1 via the connection terminal 22 with the imaging device 1 (S14). The decryption unit 241 decrypts the encrypted data acquired by the acquisition unit 240 using the second encryption key (S16). The display unit 20 causes the display unit 20 to display the image data obtained by decoding by the decoding unit 241 (S18).

<実施の形態に係る情報処理システムSの他の利用シーン>
図2を参照して、情報処理システムSのユーザUが自らの契約書を撮像する場合の例を説明した。この他、情報処理システムSのユーザUは、各種代理人や企業の法務担当者、経理担当者、公務員、又は投資家であってもよい。この場合、撮像装置1の撮像対象物Oに加えて、領収書等も撮像対象となりうる。
<Other Usage Scenes of Information Processing System S According to Embodiment>
An example in which the user U of the information processing system S images his or her contract has been described with reference to FIG. In addition, the user U of the information processing system S may be various agents, legal staff, accounting staff, public servants, or investors of a company. In this case, in addition to the imaging target object O of the imaging device 1, a receipt or the like may be an imaging target.

さらに、ユーザUが作品を生み出すアーティスト又はその親族である場合、自分自身又は親族の作品の真贋鑑定や作品管理の一環として、作品に付されたサインSgや作品の鑑定書に付されたサインSgを撮像対象物Oとしてもよい。このため、撮像装置1は、複数のユーザUの指紋を登録できるようにしてもよい。このとき、撮像装置1の撮像部11の使用を含め撮像装置1のすべての機能の使用を許可する管理権限ユーザと、撮像装置1に格納された暗号化データを表示装置2に転送する機能を使用すること等、使用可能な機能に制限が設けられた制限ユーザとに分類できるようにしてもよい。   Further, when the user U is an artist who creates a work or a relative thereof, the signature Sg attached to the work or the signature Sg attached to the work certificate as part of authenticity evaluation of the work of himself or the relative or work management. May be set as the imaging target O. For this reason, the imaging device 1 may be able to register fingerprints of a plurality of users U. At this time, a management authority user who permits use of all functions of the imaging device 1 including the use of the imaging unit 11 of the imaging device 1 and a function of transferring encrypted data stored in the imaging device 1 to the display device 2 are provided. It may be possible to classify users as restricted users who have restrictions on available functions such as use.

具体的には、例えば、撮像装置1に初めて生体情報を登録したユーザUは管理権限ユーザとして登録され、管理権限ユーザがすでに登録されている状態で生体情報を登録したユーザUは制限ユーザとして登録されるようにしてもよい。このように、暗号化データの転送機能等の使用にのみ制限されたユーザUの登録を認めることにより、撮像装置1は、何らかの理由で管理権限ユーザであるアーティストが撮像装置1を操作できなくなっても、親族や指定された管理人等が撮像装置1の暗号化データを表示装置2に表示させることができるようになる。   Specifically, for example, a user U who has registered biometric information for the first time in the imaging apparatus 1 is registered as a management authority user, and a user U who has registered biometric information with the management authority user already registered is registered as a restricted user. May be performed. As described above, by permitting the registration of the user U who is limited only to the use of the transfer function of the encrypted data and the like, the imaging apparatus 1 cannot operate the imaging apparatus 1 by the artist who is the administrative authority user for some reason. Also, a relative or a designated administrator can display the encrypted data of the imaging device 1 on the display device 2.

<実施の形態に係る撮像装置1が奏する効果>
以上説明したように、実施の形態に係る撮像装置1によれば、画像データの保管の信頼性を向上させるための技術を提供することができる。
<Effects of Imaging Device 1 According to Embodiment>
As described above, according to the imaging device 1 according to the embodiment, it is possible to provide a technique for improving the reliability of storage of image data.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の分散・統合の具体的な実施の形態は、以上の実施の形態に限られず、その全部又は一部について、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を合わせ持つ。   As described above, the present invention has been described using the embodiment, but the technical scope of the present invention is not limited to the scope described in the above embodiment, and various modifications and changes are possible within the scope of the gist. is there. For example, the specific embodiment of the dispersion / integration of the apparatus is not limited to the above-described embodiment, and all or a part of the apparatus may be functionally or physically dispersed / integrated in an arbitrary unit. Can be. Further, new embodiments that are generated by arbitrary combinations of the plurality of embodiments are also included in the embodiments of the present invention. The effect of the new embodiment caused by the combination has the effect of the original embodiment.

<第1の変形例>
上記では、撮像装置1がペン先13を備える場合について説明した。これに変えて、撮像装置1は印鑑を備えてもよい。これにより、ユーザUは、押印を要求される書類があっても、撮像装置1に加えて印鑑を用意する手間を省くことができる。
<First Modification>
The case where the imaging device 1 includes the pen tip 13 has been described above. Alternatively, the imaging device 1 may include a seal. Thereby, even if there is a document for which a seal is required, the user U can save the trouble of preparing a seal in addition to the imaging device 1.

<第2の変形例>
撮像装置1がペン先13や印鑑を備えているとユーザUの利便性は向上するが、一方で、ペン先13や印鑑は撮像装置1の必須の構成ではない。撮像装置1がペン先13や印鑑を備えていない場合、撮像装置1は、生体認証機能付き画像生成・保管装置として機能する。ユーザUは、撮像装置1を用いて契約書等の画像を保管する場合には、撮像装置1の他にペン又は印鑑を用意して契約等の手続きに臨めばよい。
<Second Modification>
The convenience of the user U is improved if the imaging device 1 includes the pen tip 13 and the seal, but the pen tip 13 and the seal are not essential components of the imaging device 1. When the imaging device 1 does not include the pen point 13 or the seal, the imaging device 1 functions as an image generation / storage device with a biometric authentication function. When the user U uses the imaging apparatus 1 to store an image such as a contract, the user U may prepare a pen or a seal in addition to the imaging apparatus 1 and proceed with a procedure such as a contract.

<第3の変形例>
上記では、表示装置2の表示部20がメモリ内画像とカメラ画像とを並列して表示する場合について説明した。これに加えて、表示装置2がメモリ内画像とカメラ画像との一致・不一致を自動で判定してもよい。この場合、表示装置2の制御部24内に、図示しない画像比較部を設ければよい。画像比較部は、復号部241が復号した画像データと、表示装置側撮像部21が新たに撮像した画像データとが一致するか否かを判定する。画像比較部は、例えばパターンマッチング等の既知の画像処理技術を用いて実現できる。
<Third Modification>
The case where the display unit 20 of the display device 2 displays the in-memory image and the camera image in parallel has been described above. In addition, the display device 2 may automatically determine whether the image in the memory matches the camera image. In this case, an image comparison unit (not shown) may be provided in the control unit 24 of the display device 2. The image comparing unit determines whether or not the image data decoded by the decoding unit 241 matches the image data newly picked up by the display-side image pickup unit 21. The image comparison unit can be realized using a known image processing technique such as pattern matching.

<第4の変形例>
上記では、通信ネットワークN上のデータベースがブロックチェーンBであることについて主に説明した。しかしながら、通信ネットワークN上のデータベースはブロックチェーンBには限定されない。安全性が担保できることを条件として、ブロックチェーンB以外の形式のデータベースであってもよい。
<Fourth modification>
In the above, it has been mainly described that the database on the communication network N is the blockchain B. However, the database on the communication network N is not limited to the blockchain B. A database other than the blockchain B may be used, provided that security can be ensured.

1・・・撮像装置
10・・・生体情報取得部
11・・・撮像部
12・・・接続端子
13・・・ペン先
14・・・撮像装置側記憶部
15・・・制御部
150・・・認証部
151・・・暗号化部
152・・・データ出力部
153・・・時刻取得部
2・・・表示装置
20・・・表示部
21・・・表示装置側撮像部
22・・・接続端子
23・・・表示装置側記憶部
24・・・制御部
240・・・取得部
241・・・復号部
242・・・ハッシュ値生成部
243・・・ハッシュ値管理部
N・・・通信ネットワーク
S・・・情報処理システム
DESCRIPTION OF SYMBOLS 1 ... Imaging device 10 ... Biological information acquisition part 11 ... Imaging part 12 ... Connection terminal 13 ... Nib 14 ... Imaging device side storage part 15 ... Control part 150 ... Authentication unit 151 Encryption unit 152 Data output unit 153 Time acquisition unit 2 Display device 20 Display unit 21 Display unit-side imaging unit 22 Connection Terminal 23 Display-side storage unit 24 Control unit 240 Acquisition unit 241 Decoding unit 242 Hash value generation unit 243 Hash value management unit N Communication network S: Information processing system

Claims (9)

撮像装置と前記撮像装置が撮像した画像を表示するための表示装置とを備え、
前記撮像装置は、
生体情報を取得する生体情報取得部と、
前記生体情報取得部が取得した生体情報があらかじめ登録された登録生体情報と一致するか否かを認証する認証部と、
前記認証部による認証が成功したことを条件として撮像を許可する撮像部と、
前記撮像部が撮像した画像データを暗号化して暗号化データを生成する暗号化部と、
前記表示装置との接続端子を介して前記暗号化データを前記表示装置に出力するデータ出力部と、を備え、
前記表示装置は、
前記撮像装置との接続端子を介して前記暗号化データを取得する取得部と、
前記取得部が取得した暗号化データを復号する復号部と、
前記復号部が復号して取得した画像データを表示する表示部と、を備える、
情報処理システム。
An imaging device and a display device for displaying an image captured by the imaging device,
The imaging device,
A biological information acquisition unit that acquires biological information,
An authentication unit that authenticates whether the biometric information obtained by the biometric information obtaining unit matches registered biometric information registered in advance,
An imaging unit that permits imaging on condition that the authentication by the authentication unit is successful;
An encryption unit that encrypts the image data captured by the imaging unit to generate encrypted data;
A data output unit that outputs the encrypted data to the display device via a connection terminal with the display device,
The display device,
An acquisition unit that acquires the encrypted data through a connection terminal with the imaging device;
A decryption unit for decrypting the encrypted data acquired by the acquisition unit,
A display unit that displays the image data obtained by decoding by the decoding unit,
Information processing system.
前記撮像装置のデータ出力部は、前記撮像装置の認証部における認証が成功したことを条件として、前記暗号化データを前記表示装置に出力する、
請求項1に記載の情報処理システム。
The data output unit of the imaging device outputs the encrypted data to the display device, on condition that the authentication in the authentication unit of the imaging device is successful.
The information processing system according to claim 1.
前記撮像装置は、ペン先と印鑑との少なくともいずれか一方をさらに備える、
請求項1又は2に記載の情報処理システム。
The imaging device further includes at least one of a pen point and a seal,
The information processing system according to claim 1.
前記撮像装置は、前記暗号化部が前記画像データを暗号化するために用いる第1暗号鍵を格納する撮像装置側記憶部をさらに備え、
前記表示装置は、前記第1暗号鍵で暗号化されたデータを前記復号部が復号するための第2暗号鍵を格納する表示装置側記憶部をさらに備える、
請求項1から3のいずれか1項に記載の情報処理システム。
The imaging device further includes an imaging device-side storage unit that stores a first encryption key used by the encryption unit to encrypt the image data,
The display device further includes a display device-side storage unit that stores a second encryption key for the decryption unit to decrypt data encrypted with the first encryption key,
The information processing system according to claim 1.
前記表示装置は、前記表示部に表示させるための画像を撮像する表示装置側撮像部をさらに備え、
前記表示部は、前記復号部が復号した画像データと、前記表示装置側撮像部が新たに撮像した画像データとを比較可能な態様で表示する、
請求項1から4のいずれか1項に記載の情報処理システム。
The display device further includes a display device-side imaging unit that captures an image to be displayed on the display unit,
The display unit displays the image data decoded by the decoding unit and the image data newly captured by the display device-side imaging unit in a manner that allows comparison.
The information processing system according to claim 1.
前記撮像装置は、前記撮像部が撮像した時刻を取得する時刻取得部をさらに備え、
前記暗号化部は、暗号化した画像データと当該画像データの撮像時刻を示す情報とを対応づけて前記暗号化データを生成する、
請求項1から5のいずれか1項に記載の情報処理システム。
The imaging apparatus further includes a time acquisition unit that acquires a time at which the imaging unit captures an image,
The encryption unit generates the encrypted data by associating the encrypted image data with information indicating the imaging time of the image data,
The information processing system according to claim 1.
前記表示装置は、前記取得部が取得した暗号化データが過去に受信したいずれの暗号化データとも異なる場合、取得した暗号化データのハッシュ値を生成するハッシュ値生成部と、
通信ネットワークを介して前記ハッシュ値をネットワーク上のデータベースに登録するハッシュ値管理部と、
をさらに備える請求項1から6のいずれか1項に記載の情報処理システム。
The display device, if the encrypted data obtained by the obtaining unit is different from any previously received encrypted data, a hash value generating unit that generates a hash value of the obtained encrypted data,
A hash value management unit that registers the hash value in a database on the network via a communication network;
The information processing system according to any one of claims 1 to 6, further comprising:
前記ハッシュ値管理部は、前記データベースへの前記ハッシュ値の登録が完了することを契機として、前記通信ネットワークとの通信を切断する、
請求項7に記載の情報処理システム。
The hash value management unit disconnects the communication with the communication network when the registration of the hash value to the database is completed,
The information processing system according to claim 7.
撮像装置と表示装置とを備える情報システムにおいて実行される情報処理方法であって、
前記撮像装置が、
生体情報を取得するステップと、
取得した前記生体情報があらかじめ登録された登録生体情報と一致するか否かを認証するステップと、
前記認証が成功したことを条件として撮像を許可するステップと、
撮像した画像データを暗号化して暗号化データを生成するステップと、
前記表示装置との接続端子を介して前記暗号化データを前記表示装置に出力するステップと、
を実行し、
前記表示装置が、
前記撮像装置との接続端子を介して前記暗号化データを取得するステップと、
取得した前記暗号化データを復号するステップと、
復号して取得した画像データを前記表示装置が備える表示部に表示させるステップと、を実行する、
情報処理方法。
An information processing method executed in an information system including an imaging device and a display device,
The imaging device,
Obtaining biological information;
Authenticating whether the obtained biometric information matches registered biometric information registered in advance,
Allowing imaging on condition that the authentication is successful;
Encrypting the captured image data to generate encrypted data;
Outputting the encrypted data to the display device via a connection terminal with the display device;
Run
The display device,
Obtaining the encrypted data via a connection terminal with the imaging device;
Decrypting the obtained encrypted data;
Displaying the decoded and acquired image data on a display unit included in the display device.
Information processing method.
JP2018213833A 2018-11-14 2018-11-14 Information processing system and information processing method Pending JP2020022150A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018213833A JP2020022150A (en) 2018-11-14 2018-11-14 Information processing system and information processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018213833A JP2020022150A (en) 2018-11-14 2018-11-14 Information processing system and information processing method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018142382A Division JP6616868B1 (en) 2018-07-30 2018-07-30 Information processing system and information processing method

Publications (1)

Publication Number Publication Date
JP2020022150A true JP2020022150A (en) 2020-02-06

Family

ID=69588879

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018213833A Pending JP2020022150A (en) 2018-11-14 2018-11-14 Information processing system and information processing method

Country Status (1)

Country Link
JP (1) JP2020022150A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021200092A1 (en) * 2020-03-30 2021-10-07 ソニーグループ株式会社 Imaging device, information processing device, information processing method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021200092A1 (en) * 2020-03-30 2021-10-07 ソニーグループ株式会社 Imaging device, information processing device, information processing method, and program

Similar Documents

Publication Publication Date Title
US11777726B2 (en) Methods and systems for recovering data using dynamic passwords
US20210409221A1 (en) Portable Biometric Identity on a Distributed Data Storage Layer
US10127378B2 (en) Systems and methods for registering and acquiring E-credentials using proof-of-existence and digital seals
US20190311148A1 (en) System and method for secure storage of electronic material
TWI578749B (en) Methods and apparatus for migrating keys
WO2017032263A1 (en) Identity authentication method and apparatus
US9189612B2 (en) Biometric verification with improved privacy and network performance in client-server networks
WO2019199288A1 (en) System and method for secure storage of electronic material
BR112018007449B1 (en) COMPUTING DEVICE, COMPUTER IMPLEMENTED METHOD AND COMPUTER READABLE MEMORY DEVICE
US20060242423A1 (en) Isolated authentication device and associated methods
JP7021417B2 (en) Biodata template update
US20060242693A1 (en) Isolated authentication device and associated methods
US10951413B2 (en) Trusted key server
KR102321260B1 (en) Authentication terminal, authentication device, and authentication method using the same
TWI728587B (en) Computer-implemented methods, systems, apparatus for securely performing cryptographic operations
AU2018100503A4 (en) Split data/split storage
KR102068041B1 (en) Appratus and method of user authentication and digital signature using user&#39;s biometrics
JP6616868B1 (en) Information processing system and information processing method
JP2020022150A (en) Information processing system and information processing method
CN114238909A (en) Virtual asset storage method and device and virtual asset query method and device
US20200204377A1 (en) Digital notarization station that uses a biometric identification service
US11681787B1 (en) Ownership validation for cryptographic asset contracts using irreversibly transformed identity tokens
TWI772648B (en) Method of verifying partial data based on collective certificate
WO2022255151A1 (en) Data management system, data management method, and non-transitory recording medium
JP2009282945A (en) Biometric authentication method and system