JP6428152B2 - Portrait right protection program, information communication device, and portrait right protection method - Google Patents
Portrait right protection program, information communication device, and portrait right protection method Download PDFInfo
- Publication number
- JP6428152B2 JP6428152B2 JP2014217719A JP2014217719A JP6428152B2 JP 6428152 B2 JP6428152 B2 JP 6428152B2 JP 2014217719 A JP2014217719 A JP 2014217719A JP 2014217719 A JP2014217719 A JP 2014217719A JP 6428152 B2 JP6428152 B2 JP 6428152B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- user
- image
- permission
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、肖像権保護技術に関する。 The present invention relates to portrait right protection technology.
近年のスマートフォンに代表されるモバイル情報通信技術(information-communication technology:ICT)デバイスの発展により、いつでもどこでも高精細なデジタル撮影が可能となっている。さらに、スマートフォンに続くモバイルICTデバイスとして、身に着けるウェアラブルデバイスに注目が集まっている。ウェアラブルデバイスでは、明示的な撮影という動作を行わずに画像の撮影が可能である。したがって、以前にも増して盗撮による肖像権の侵害が発生し易い状況になってきていると言える。また意図的な盗撮だけでなく、ユーザが無意識の内に、肖像権の侵害をしてしまう場合も発生する。 With the recent development of information-communication technology (ICT) devices represented by smartphones, high-definition digital photography is possible anytime and anywhere. Furthermore, as a mobile ICT device following a smartphone, attention is focused on a wearable device that can be worn. The wearable device can shoot an image without performing an explicit shooting operation. Therefore, it can be said that the infringement of portrait rights by voyeurism is more likely to occur than before. In addition to intentional sneak shots, the user may unconsciously infringe on portrait rights.
肖像権の保護に関して、ユーザ自身が他人の肖像権の侵害を犯している、という認識がないことが問題の一つと言える。他人の肖像権の侵害を犯している認識がある場合に、撮影後の画像から人物の顔を認識して、ぼかし、黒目線、白抜きなどの処理を行う、ポスト処理による保護が実施される場合が多い。 Regarding the protection of portrait rights, it can be said that one of the problems is that there is no recognition that the user himself is infringing on the portrait rights of others. When there is a recognition that another person's portrait rights have been infringed, the person's face is recognized from the image after shooting, and processing such as blurring, black eyes, whitening, etc. is performed, and protection by post processing is implemented There are many cases.
また、近年では犯罪防止や事故の記録を目的として、街頭に多数の監視カメラが設置される傾向にある。こういった監視カメラによる個人の撮影行為も肖像権の侵害に当たると考えられるが、その対処として、監視カメラ画像の顔部分の白抜きを試みる研究なども為されている。 In recent years, many surveillance cameras tend to be installed on the streets for the purpose of crime prevention and accident recording. It is thought that personal photography with such a surveillance camera is also an infringement of portrait rights, but as a countermeasure, research has been made to try to white out the face portion of the surveillance camera image.
肖像権の保護に関して、次の技術がある。
第1の技術として、公開対象の画像に他人が写っているか否かを判定する判定手段と、その判定結果が肯定の場合にその判定対象となった画像に対して他人が特定されないようにするための加工を行う加工手段とを備えた画像処理装置がある(例えば、特許文献1)。
Regarding the protection of portrait rights, there are the following techniques.
As a first technique, determination means for determining whether or not another person appears in the image to be disclosed, and when the determination result is affirmative, the other person is not specified for the image to be determined. There is an image processing apparatus provided with a processing means for performing processing (for example, Patent Document 1).
第2の技術として、撮像した映像情報に映る人物の顔を認識し、除去可能なぼかし画像処理を施す技術がある(例えば、特許文献2)。 As a second technique, there is a technique for recognizing a human face reflected in captured video information and performing a removable blur image process (for example, Patent Document 2).
第3の技術として、撮像した画像を元に顔検出器にて顔を検出し、出力処理部において、検出した顔、またはその背景の画像に対しモザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施すことによりプライバシーを保護する技術がある(例えば、特許文献3)。 As a third technique, a face detector is used to detect a face based on the captured image, and a privacy mask process such as mosaic / blurring / painting is performed on the detected face or its background image in the output processing unit. There is a technology for protecting privacy by this (for example, Patent Document 3).
第1の技術では、カメラで撮影した画像を画像記憶部に記録し、画像記憶部に蓄積保存されている画像の全てまたはユーザによって選択された一部の画像をサーバにアップロードしてサーバに登録し、肖像権保護のための処理を行っている。 In the first technique, an image taken by a camera is recorded in an image storage unit, and all of the images stored and stored in the image storage unit or a part of images selected by the user are uploaded to the server and registered in the server. And we are processing to protect portrait rights.
第2の技術では、CCDカメラ手段からの映像信号をエンコードして記録可能なエンコードサーバー手段に記録し、撮像した映像情報に映る人物の顔を認識し、除去可能なぼかし画像処理を施している。 In the second technique, a video signal from the CCD camera means is encoded and recorded in an encode server means that can be recorded, and a human face reflected in the picked-up video information is recognized and subjected to removable blur image processing. .
しかしながら、第1及び第2の技術では、記憶部に蓄積保存されている画像は、肖像権保護のための処理がされておらず、これらの画像に肖像権保護のための処理を施すか否かはユーザの意思に委ねられている。
また、記憶部に蓄積保存されている画像は、肖像権保護のための処理がされていないため、ユーザの不注意により公開されたり、悪意のあるユーザにより盗み出されたり、またはネットワークからのハッキング行為等により流出したりするおそれもある。
However, in the first and second techniques, the image stored and stored in the storage unit is not subjected to the portrait right protection process, and whether or not these images are subjected to the process for the portrait right protection. It is up to the user's will.
In addition, the images stored and stored in the storage unit are not processed to protect portrait rights, so they are disclosed by the user's carelessness, stolen by malicious users, or hacked from the network. There is a risk of spillage.
また、第3の技術では、テレビ電話、テレビ会議、ビデオチャット等において、自分の顔や自分の周囲の環境を通信相手に見られたくないことを希望する利用者のプライバシー保護や機密保護を想定しており、他人の肖像権保護を想定したものではない。 In addition, the third technology assumes privacy protection and confidentiality protection for users who do not want their communication partners to see their faces and their surroundings in video calls, video conferences, video chats, etc. It is not intended to protect the portrait rights of others.
本発明は、一側面として、撮像した画像を、肖像権に関する権利処理の完了後に初めてユーザに対して利用可能にする技術を提供する。 The present invention provides, as one aspect, a technique for making a captured image available to a user for the first time after completion of a right processing relating to a portrait right.
本発明の一側面にかかる肖像権保護プログラムは、コンピュータに、以下の処理を実行させる。すなわち、コンピュータは、撮像許可を得た人物と該人物について撮像許可を得た画像の解像度とを示している許可情報をサーバ装置に送信する。コンピュータは、撮像して得られた第1画像データを、ユーザが利用可能な状態で保存される前に取得する。コンピュータは、取得した第1画像データをユーザがアクセスできない第2記憶領域に保存する。コンピュータは、取得した第1画像データをサーバ装置に送信する。コンピュータは、取得した第1画像データに、許可情報に基づいて特定される人物であって取得した第1画像データで表されている画像の解像度では撮像許可を得ていない該人物が写っている場合に、該撮像許可を得ていない人物が特定できないように画像処理がサーバ装置により行われて得られた第2画像データを受信する。コンピュータは、受信した第2画像データを、ユーザがアクセスできる第1記憶領域に保存する。 The portrait right protection program according to one aspect of the present invention causes a computer to execute the following processing. In other words, the computer transmits permission information indicating the person who has obtained permission for image capturing and the resolution of the image for which image capturing permission has been obtained for the person to the server device. The computer acquires the first image data obtained by imaging before being stored in a state where the user can use it. The computer stores the acquired first image data in a second storage area that the user cannot access. The computer transmits the acquired first image data to the server device. Computer, the first image data acquired, is reflected is the person not getting captured permitted in the resolution of the image represented by the first image data acquired by a person specified on the basis of authorization information In this case, the second image data obtained by performing image processing by the server device is received so that a person who does not have the imaging permission cannot be identified . The computer stores the received second image data in a first storage area accessible by the user .
本発明によれば、一側面として、撮像した画像を、肖像権に関する権利処理の完了後に初めてユーザに対して利用可能にすることができる。 According to the present invention, as one aspect, the captured image can be made available to the user for the first time after the right processing relating to the portrait right is completed.
図1は、本実施形態における肖像権保護システムの一例を示す。肖像権保護システム1は、情報通信装置2、サーバ装置8を含む。情報通信装置2は、第1記憶部3、撮像部4、保存制御部5を含む。
FIG. 1 shows an example of a portrait right protection system in the present embodiment. The portrait
第1記憶部3は、情報を記憶する。第1記憶部3aの一例として、ユーザアクセス可能領域22aやメモリ22cが挙げられる。
The
撮像部4は、撮像して画像データを出力する。撮像部4の一例として、カメラ23が挙げられる。
The
保存制御部5は、撮像部4から出力された第1画像データを、ユーザが利用可能な状態で保存される前に取得する。保存制御部5は、取得した第1画像データに撮像許可を得ていない人物が写っている場合に人物が特定できないように画像処理が行われた第2画像データを第1記憶部3aに保存する。保存制御部5の一例として、プロセッサ21が挙げられる。
The
このように構成することにより、撮像した画像を、肖像権に関する権利処理の完了後に初めてユーザに対して利用可能にすることができる。すなわち、撮像した画像を肖像権に関して権利処理が完了するまで、ユーザに利用させないようにすることができる。 By configuring in this way, the captured image can be made available to the user for the first time after the rights processing relating to the portrait right is completed. In other words, it is possible to prevent the user from using the captured image until the right processing regarding the portrait right is completed.
情報通信装置2は、ユーザがアクセスできない第2記憶部3bを含む。第2記憶部3bの一例として、ユーザアクセス不可領域22bやメモリ22dが挙げられる。保存制御部5は、取得した第1画像データを第2記憶部3bに保持し、画像処理が行われた第2画像データをユーザがアクセスできる第1記憶部3aに保存する。
The
このように構成することにより、撮像した画像を、肖像権に関する権利処理の完了後に初めてユーザに対して利用可能にすることができる。 By configuring in this way, the captured image can be made available to the user for the first time after the rights processing relating to the portrait right is completed.
情報通信装置2は、さらに、通信部6を含む。通信部6は、取得した第1画像データをサーバ装置8に送信し、サーバ装置8により画像処理が行われた第2画像データを受信する。通信部6の一例として、無線デバイス27が挙げられる。このとき、保存制御部5は、受信した第2画像データを第1記憶部3aに保存する。
The
このように構成することにより、ユーザが撮影した画像についてサーバ装置により権利処理が行われた画像をユーザに提供することができる。 With this configuration, it is possible to provide the user with an image that has been subjected to right processing by the server device for the image captured by the user.
情報通信装置2は、さらに、顔検出部7を含む。顔検出部7は、取得した第1画像データから人物の顔を検出する。顔検出部7の一例として、プロセッサ21が挙げられる。通信部6は、取得した第1画像データから顔が検出された場合、第1画像データをサーバ装置8に送信する。保存制御部5は、取得した第1画像データから記顔が検出されなかった場合、第1画像データを第1記憶部3aへ格納する。
The
このように構成することにより、肖像権についての権利処理が要求される画像だけをサーバ装置8へ送信することができる。
With this configuration, it is possible to transmit to the
また、顔検出部7は、取得した第1画像データから人物の顔が検出された場合、第1画像データから顔部分の画像データを抽出してもよい。この場合、通信部6は、抽出した顔部分の画像データをサーバ装置8に送信する。保存制御部5は、サーバ装置8から受信した画像処理が行われた顔部分の画像データと、取得した第1画像データとを結合した第2画像データを生成し、生成した第2画像データを第1記憶部3aに保存する。
The
このように構成することにより、情報通信装置とサーバ装置間の通信データ量を削減することができる。 With this configuration, the amount of communication data between the information communication device and the server device can be reduced.
以下に、さらに、本実施形態について詳述する。
ユーザに提供されるウェアラブルデバイス等のICTデバイスは、登録フェーズにおいて、認証機能を有するサーバに登録される。肖像権についての権利処理フェーズにおいて、ICTデバイスで撮影した静止画や動画像等の画像データは、ICTデバイス本体にユーザに利用可能な形式で保存されずに、一度、サーバに送信される。以下、静止画及び動画像を単に、画像と称する。
Hereinafter, this embodiment will be described in detail.
An ICT device such as a wearable device provided to a user is registered in a server having an authentication function in the registration phase. In the right processing phase for the portrait right, image data such as a still image or a moving image captured by the ICT device is transmitted to the server once without being stored in a format usable by the user in the ICT device body. Hereinafter, still images and moving images are simply referred to as images.
ここで、本実施形態において、肖像権についての権利処理(肖像権処理)とは、撮影された画像に人物が写り込んだ場合に、その写りこんだ人物から予め撮影の許可を受けているか否かに応じて画像処理を行うことである。例えば、その写りこんだ人物から予め撮影の許可を受けている場合には、撮影された画像に表示されたその人物の顔画像をそのまま表示させる。その写りこんだ人物から予め撮影の許可を受けていない場合には、顔画像を表示させない処理を行う。 Here, in the present embodiment, the right processing (portrait right processing) for the portrait right means that when a person is reflected in a photographed image, permission for photographing has been received from the photographed person in advance. The image processing is performed according to the above. For example, when the photographing permission is received in advance from the reflected person, the face image of the person displayed in the photographed image is displayed as it is. When the photographing permission is not received in advance from the reflected person, processing for not displaying the face image is performed.
サーバは、画像データと共に送信された機器情報やユーザ情報を用いて、ICTデバイスとユーザを識別する。サーバは、撮影した画像に、そのICTデバイスを用いて撮影することを許可した人物以外の人物(撮影不許可の人物)の顔が写っていないかを調べる。撮影不許可の人物が写っている場合には、サーバは、顔の部分に修正を入れる。ここでは、サーバは、画像に撮影された人物のうち、予め登録されたICTデバイスに紐付いている人物を残し、それ以外の人の顔を修正する。サーバは、修正した画像データをICTデバイスに送信する。このプロセスを経てICTデバイス側は撮影した画像データを保存することが可能となり、ユーザがその画像データを閲覧することができる。 The server identifies the ICT device and the user using the device information and user information transmitted together with the image data. The server checks whether the face of a person other than the person who is permitted to shoot using the ICT device (person who is not allowed to shoot) is captured in the shot image. When a person who is not allowed to take a picture is shown, the server corrects the face portion. Here, the server leaves the person associated with the ICT device registered in advance among the persons photographed in the image, and corrects the faces of other persons. The server transmits the corrected image data to the ICT device. Through this process, the ICT device can store the captured image data, and the user can view the image data.
この一連の仕組みにより、ユーザは自身が所有するICTデバイスに関係付けられて登録されている人物の撮影は可能だが、そうでない人物の画像は撮影できなくなるため、ユーザ自身が意識することなく肖像権に配慮することができる。より詳細については、以降に続く実施例において説明する。 With this series of mechanisms, the user can take a picture of a person registered in association with his / her own ICT device, but cannot take a picture of a person who is not, so the portrait right is not noticed by the user himself / herself. Can be considered. More details will be described in the following examples.
ユーザが意識することなく、デバイスおよびユーザ単位で肖像権の保護に配慮した画像を、ユーザがリアルタイムに取得することが可能なシステムを提供する。 Provided is a system in which a user can acquire an image in consideration of protection of a portrait right in real time for each device and user without being conscious of the user.
図2は、本実施形態における登録フェーズ及び肖像権処理フェーズでのシステム構成を示す。図2(A)は、本実施形態における登録フェーズでのシステム構成を示す。 FIG. 2 shows a system configuration in the registration phase and the portrait right processing phase in the present embodiment. FIG. 2A shows a system configuration in the registration phase in the present embodiment.
図2(A)では、パーソナルコンピュータ(PC)12とサーバ13とは、インターネット等の通信ネットワーク17で接続されている。PC12とICTデバイス11とは、ユニバーサルシリアルバス(USB)等の通信プロトコルに基づく通信ケーブルで接続されている。
In FIG. 2A, the personal computer (PC) 12 and the
図2(A)に示す登録フェーズでは、ICTデバイス11と接続されたパーソナルコンピュータ(PC)12を用いて、ユーザは、図2(B)に示す肖像権処理フェーズのために、予め各種情報の登録を行う。例えば、ユーザは、PC11を用いて、ICTデバイス11にユーザ情報を設定したり、ICTデバイス11に関する情報とユーザ情報とをサーバ13に登録したり、ユーザの肖像画像を登録したり、ユーザ間の撮影許可に関する情報を登録する。
In the registration phase shown in FIG. 2 (A), using the personal computer (PC) 12 connected to the
サーバ13は、デバイス登録データベース14、許可リストデータベース15、ユーザ肖像データベース16を記憶装置に格納する。以下、データベースを「DB」と称する。デバイス登録DB14には、ICTデバイス11に関する情報とユーザ情報とが登録される。許可リストDB15には、そのICTデバイスによる撮影に対して、撮影許可をした人物に関する情報が登録されている。ユーザ肖像DB16には、ユーザの肖像画データが登録されている。
The
図2(B)は、本実施形態における肖像権処理フェーズでのシステム構成を示す。図2(B)では、ICTデバイス11は、無線通信を用いて、サーバ13と通信する。サーバ13は、ICTデバイス11から送信された画像について肖像権処理を行い、処理済みの画像をICTデバイス11へ返す。
FIG. 2B shows a system configuration in the portrait right processing phase in the present embodiment. In FIG. 2B, the
図3は、本実施形態におけるICTデバイスのハードウェア構造を示す。ICTデバイス11は、プロセッサ21、メモリ22、カメラ23、ユーザID用メモリ24、機器ID用メモリ25、バッテリー26、無線デバイス27、センサー28を含む。また、ICTデバイス11は、筐体表面に、リセットボタン29、操作ボタン1(30)、操作ボタン2(31)、電源ボタン32を有する。
FIG. 3 shows the hardware structure of the ICT device in this embodiment. The
プロセッサ21は、MCU(Micro Control Unit)またはMPU(Micro Processing Unit)等の演算装置である。プロセッサ21は、本実施形態に係るプログラム等を格納するフラッシュメモリ等の記憶部21aを含む。プロセッサ21は、本実施形態に係るプログラムを実行し、各種処理を行う。
The
メモリ22は、データの格納領域を含む記憶装置であり、ユーザがアクセスできる領域とアクセスできない領域を有する。または、メモリ22は、ユーザがアクセスできるメモリ装置と、ユーザがアクセスできないメモリ装置とのメモリグループであってもよい。
The
カメラ23は、Charge Coupled Device(CCD)等の撮像デバイスである。なお、カメラ23は、内蔵タイプのものでもよいし、外付けタイプのものでよい。
The
ユーザID用メモリ24は、ユーザを識別する情報(ユーザID)を保持する記憶装置である。機器ID用メモリ25は、機器のシリアル番号等、機器固有の識別情報(機器ID)を保持する記憶装置である。
The
バッテリー26は、ICTデバイスを構成する電子部品に電力を供給する充電池である。無線デバイス27は、無線により通信するための通信デバイスである。センサー28は、加速度センサー、重力センサー、ジャイロスコープ等のセンサー群である。
The
リセットボタン29は、ICTデバイス11本体をリセットするボタンである。操作ボタン1(30)、操作ボタン2(31)はそれぞれ、ICTデバイス11を操作するためのボタンである。電源ボタン32は、ICTデバイス11本体を起動またはシャットダウンさせるためのボタンである。
The
ICTデバイス11は、ウェアラブルデバイス、スマートフォン、タブレット端末等のモバイルデバイスに限定されず、デスクトップ型PC、ノート型PC等であってもよい。
The
図4は、本実施形態におけるICTデバイスのメモリの一例を示す。メモリ22は、図4(A)に示すように、ユーザからのアクセスができない記憶領域(ユーザアクセス不可領域)22bと、ユーザからのアクセスができる記憶領域(ユーザアクセス可能領域)22aを含む。
FIG. 4 shows an example of the memory of the ICT device in this embodiment. As shown in FIG. 4A, the
また、メモリ22は、図4(B)に示すように、ユーザからのアクセスができないメモリ(ユーザアクセス不可メモリ)22dと、ユーザからのアクセスができるメモリ(ユーザアクセス可能メモリ)22cのメモリ群であってもよい。
As shown in FIG. 4B, the
ユーザアクセス不可領域22bやメモリ22dへのユーザの操作に基づくアクセスは、オペレーティングシステム(OS)やファームウェア等による制御により制限されている。したがって、ユーザアクセス不可領域22bやメモリ22dに保持されたデータへは、ユーザはアクセスすることができない。
Access to the user
一方、ユーザアクセス可能領域22aやメモリ22cへのユーザの操作に基づくアクセスは、制限されていない。したがって、ユーザアクセス可能領域22aやメモリ22cに保持されたデータへは、ユーザはアクセスすることができる。
On the other hand, access based on user operations to the user
カメラ23で撮像された画像データであって、肖像権についての権利処理がまだ行われていない画像データは、プロセッサ21によって、ユーザアクセス不可領域22bやメモリ22dに格納される。なお、仕様によって、カメラ23で撮像された画像データであって、肖像権についての権利処理がまだ行われていない画像データがユーザにアクセスされないことが保証されている場合、ユーザアクセス不可領域22bやメモリ22dはなくてもよい。
Image data that has been captured by the
カメラ23で撮像された画像データであって、肖像権についての権利処理が完了した画像データは、プロセッサ21によって、ユーザアクセス可能領域22aやメモリ22cに格納される。
The image data captured by the
以下では、まず、図2(A)の登録フェーズについて説明し、その後、図2(B)の肖像権処理フェーズを説明する。 In the following, the registration phase of FIG. 2A will be described first, and then the portrait right processing phase of FIG. 2B will be described.
<登録フェーズ>
図5は、本実施形態におけるデバイスユーザ登録画面の一例を示す。図2(A)に示すように、ユーザは、ICTデバイス11をUSBケーブルや無線LAN(Local Area Network)などを用いてPC12に接続し、WEBブラウザを用いてサーバ13にアクセスする。
<Registration phase>
FIG. 5 shows an example of a device user registration screen in the present embodiment. As shown in FIG. 2A, the user connects the
このとき、PC12のディスプレイには、WEBブラウザに基づいて、図5のデバイスユーザ登録画面41が表示される。デバイスユーザ登録画面41には、ユーザID入力欄42、ユーザパスワード入力欄43、ログインボタン44が設けられている。
At this time, the device
ユーザが、サーバ13上で予め登録してあるユーザIDとユーザパスワードをユーザID入力欄42、ユーザパスワード入力欄43に入力して、ログインボタン44を押下することにより、サーバ13にログインする。すると、PC12に接続されているICTデバイス11の機器IDがサーバ13に登録され、さらに、ユーザIDがICTデバイス11へ登録される。
The user logs in to the
ここで、ユーザIDはICTデバイス11のユーザID用メモリ24へ格納される。機器IDは出荷時に機器ID用メモリ25に書き込まれており、機器ID用メモリ25には機器名やシリアル番号などの機器に固有の情報が書き込まれている。これらの情報が機器ID用メモリ25から読み込まれて、ユーザIDと関連付けられて、サーバ13のデバイス登録DB14に登録される。
Here, the user ID is stored in the
図6は、本実施形態における撮影許可設定画面の構成例の一例を示す。撮影許可設定画面51は、ユーザ間で撮影許可を行う場合のサーバ13における、WEBブラウザにより表示される画面例を示す。
FIG. 6 shows an example of the configuration example of the photographing permission setting screen in the present embodiment. The photographing
撮影許可設定画面51は、撮影許可申請リスト52、撮影許可受付リスト53、フレンドリスト54、ユーザID検索用入力欄55、検索ボタン56、「肖像画の編集」ボタン57、「デバイスの編集」ボタン58を含む。
The photographing
ユーザ間で撮影の許可を申請するには、予め既存のソーシャルネットワーキングサービス(SNS)にあるようなフレンド登録をしておくこととする。フレンドはユーザID検索入力欄55にフレンドのユーザIDを入力し、検索ボタン56を押下して、ユーザIDを検索して、フレンド申請をすることで行われる。
In order to apply for permission for photographing between users, friend registration as in an existing social networking service (SNS) is made in advance. The friend inputs the user ID of the friend in the user ID
フレンドリスト54は、フレンド登録したユーザのユーザIDが表示される。撮影許可申請リスト52は、自身が持っている機器に対してフレンドの撮影を許可してもらうための情報を表示している。例えば、許可申請するボタンを押すことで、対応するユーザに対して撮影の許可依頼がメールやプッシュ通信などで発せられる。
The
撮影許可申請リスト52は、「フレンドユーザID」52−1、「機器ID」52−2、「撮影許可申請(HD画像)」52−3、「撮影許可申請(SD画像)」52−4、「撮影許可申請(SD画像/月10枚)」52−5の項目を含む。
The shooting
「フレンドユーザID」52−1には、フレンドユーザのユーザIDが表示される。「機器ID」52−2には、ログインユーザの機器IDが表示される。 In “Friend user ID” 52-1, the user ID of the friend user is displayed. The “device ID” 52-2 displays the device ID of the logged-in user.
「撮影許可申請(HD画像)」52−3には、フレンドユーザに対して、「機器ID」52−2に表示されたICTデバイスによるHD(High Definition)画質での撮影の許可申請をするためのボタンが表示される。また、「撮影許可申請(HD画像)」52−3には、許可申請後には、「許可申請中」、フレンドユーザからの「許可済み」、「NA(Not Applicable)」等のステータスが表示させる。例えば、HD画像に対して「許可済み」であれば、それ以下の解像度(SD画像、SD画像の枚数制限)は自動的に許可されたものとして、「NA」とステータス表示をする。 In the “photographing permission application (HD image)” 52-3, an application for permission of photographing with HD (High Definition) image quality by the ICT device displayed in the “device ID” 52-2 is made to a friend user. Button is displayed. In addition, the “photographing permission application (HD image)” 52-3 displays statuses such as “applying permission”, “permitted”, “NA (Not Applicable)” from a friend user after the permission application. . For example, if “permitted” for an HD image, the resolution (SD image, number limit of SD images) lower than that is automatically permitted, and “NA” is displayed as a status.
「撮影許可申請(SD画像)」52−4には、フレンドユーザに対して、「機器ID」52−2に表示されたICTデバイスによるSD(Standard Definition)画質での撮影の許可申請をするためのボタンが表示される。また、「撮影許可申請(SD画像)」52−4には、許可申請後には、「許可申請中」、フレンドユーザからの「許可済み」等のステータスが表示させる。 In “photographing permission application (SD image)” 52-4, an application for permission of photographing with SD (Standard Definition) image quality by the ICT device displayed in “device ID” 52-2 is made to a friend user. Button is displayed. In addition, in the “photographing permission application (SD image)” 52-4, after permission application, statuses such as “permitting permission” and “permitted” from a friend user are displayed.
「撮影許可申請(SD画像/月10枚)」52−5には、フレンドユーザに対して、「機器ID」52−2に表示されたICTデバイスによるSD(Standard Definition)画質での撮影(月10枚まで)の許可申請をするためのボタンが表示される。また、「撮影許可申請(SD画像/月10枚)」52−5には、「許可申請中」、フレンドユーザからの「許可済み」等のステータスが表示させる。 In the “photographing permission application (SD image / 10 images per month)” 52-5, the ICT device displayed in the “device ID” 52-2 is photographed with SD (Standard Definition) image quality (monthly) to the friend user. A button for applying for permission (up to 10) is displayed. In addition, a status such as “Applying for permission” or “Allowed” from a friend user is displayed in “Photographing permission application (SD image / 10 images per month)” 52-5.
撮影許可受付リスト53は、他のユーザが所有する機器に対して、ログインユーザ自身の撮影を許可するかどうかの情報を示したものである。例えば、許可するボタンを押すことで、他ユーザから来ている撮影許可依頼に対して許可を出すことになる。
The photographing
撮影許可受付リスト53は、「フレンドユーザID」53−1、「所有機器ID」53−2、「HD画像撮影を許可する」53−3、「SD画像撮影を許可する」53−4、「SD画像/月10枚を許可する」53−5の項目を含む。
The photographing
「フレンドユーザID」53−1には、フレンドユーザのユーザIDが表示される。「所有機器ID」53−2には、フレンドユーザの所有する機器の機器IDが表示される。「HD画像撮影を許可する」53−3には、他のユーザから、他のユーザが所有する機器に対して、撮影許可申請があった場合には「許可する」ボタンが表示される。「許可する」ボタンを押下すると、「許可済み」が表示される。他ユーザから撮影許可申請がない場合には、「HD画像撮影を許可する」53−3には、「NA」が表示される。 In “Friend User ID” 53-1, the user ID of the friend user is displayed. The “owned device ID” 53-2 displays the device ID of the device owned by the friend user. In “Permit HD image shooting” 53-3, an “Allow” button is displayed when a shooting permission application is made from another user to a device owned by another user. When the “permit” button is pressed, “permitted” is displayed. When there is no application for photographing permission from another user, “NA” is displayed in “Permit HD image photographing” 53-3.
「SD画像撮影を許可する」53−4には、他のユーザから、他のユーザが所有する機器に対して、撮影許可申請があった場合には「許可する」ボタンが表示される。「許可する」ボタンを押下すると、「許可済み」が表示される。他ユーザから撮影許可申請がない場合には、「SD画像撮影を許可する」53−4には、「NA」が表示される。 In “Permit SD image shooting” 53-4, an “Allow” button is displayed when another user has made a shooting permission application to a device owned by another user. When the “permit” button is pressed, “permitted” is displayed. When there is no photographing permission application from another user, “NA” is displayed in “Permit SD image photographing” 53-4.
「SD画像/月10枚を許可する」53−5には、他のユーザから、他のユーザが所有する機器に対して、撮影許可申請があった場合には「許可する」ボタンが表示される。「許可する」ボタンを押下すると、「許可済み」が表示される。他ユーザから撮影許可申請がない場合には、「SD画像撮影を許可する」53−4には、「NA」が表示される。 In “permit SD image / 10 images per month” 53-5, a “permit” button is displayed when there is an application for photographing permission from another user to a device owned by another user. The When the “permit” button is pressed, “permitted” is displayed. When there is no photographing permission application from another user, “NA” is displayed in “Permit SD image photographing” 53-4.
「肖像画の編集」ボタン57を押下すると、ユーザ自身の肖像画を編集する画面(図7)へ遷移する。「デバイスの編集」ボタン58を押下すると、ログインユーザの所有するICTデバイスの編集を行う画面(図8)へ遷移する。
When the “edit portrait”
図6の撮影許可設定画面51に登録した内容は、許可リストDB15に登録される。
図7は、本実施形態における肖像画編集画面の一例を示す。肖像画編集画面61は、WEBブラウザにより表示される。肖像画編集画面61は、ユーザ肖像画一覧62、「戻る」ボタン63を含む。ユーザ肖像画一覧62では、ユーザが自身の正面画、右画像、左画像等の肖像データをユーザ肖像DB16に登録(アップロード)、更新することができる。「戻る」ボタン63を押下すると、図6の画面に戻る。
The contents registered in the photographing
FIG. 7 shows an example of a portrait editing screen in the present embodiment. The
図8は、本実施形態におけるデバイス編集画面の一例を示す。デバイス編集画面71は、登録したICTデバイスの更新や削除等ができる画面である。デバイス編集画面71は、WEBブラウザにより表示される。デバイス編集画面71は、デバイス登録一覧72、「戻る」ボタン73を含む。「戻る」ボタン73を押下すると、図6の画面に戻る。
FIG. 8 shows an example of a device editing screen in the present embodiment. The
デバイス登録一覧72は、「機器ID」72−1、「デバイス更新」72−2、「デバイス引継」72−3、「デバイス削除」72−4の項目を含む。「機器ID」72−1には、ログインユーザの登録している機器の機器IDが表示される。
The
「デバイス更新」72−2の「更新」ボタンを押下すると、所定の画面が表示され、その画面に新たな機器IDを入力して、機器IDを更新することができる。「デバイス引継」72−3の「引継」ボタンを押下すると、所定の画面が表示され、その画面にデータの引継先のICTデバイスの機器IDを入力すると、「機器ID」72−1に表示された機器から、その引継先へデータの引継ぎができる。「デバイス削除」72−4の「削除」ボタンを押下すると、そのデバイスの登録そのものを削除することができる。 When the “update” button of “device update” 72-2 is pressed, a predetermined screen is displayed, and the device ID can be updated by inputting a new device ID on the screen. When the “takeover” button of “device takeover” 72-3 is pressed, a predetermined screen is displayed. When the device ID of the ICT device that is the data takeover destination is input to this screen, the “device ID” 72-1 is displayed. Data can be transferred from the connected device to the transfer destination. When the “Delete” button of “Delete Device” 72-4 is pressed, the registration of the device itself can be deleted.
図9は、本実施形態におけるデバイス登録DBの一例を示す。デバイス登録DB14は、「デバイス登録No.」14−1、「ユーザID」14−2、「所有機器ID」14−3のデータ項目を含む。
FIG. 9 shows an example of a device registration DB in the present embodiment. The
「デバイス登録No.」14−1には、ユーザIDと所有機器IDとの組み合わせから一意に決まる番号(デバイス登録No.)が登録される。「ユーザID」14−2には、ユーザを識別する情報(ユーザID)が格納される。「所有機器ID」14−3には、ICTデバイス11の機器IDが登録される。
In “Device Registration No.” 14-1, a number (device registration No.) uniquely determined from the combination of the user ID and the owned device ID is registered. The “user ID” 14-2 stores information for identifying the user (user ID). In the “owned device ID” 14-3, the device ID of the
図10は、本実施形態における許可リストDBの一例を示す。許可リストDB15は、ユーザが所有している機器のそれぞれに対して、誰が撮影許可をしているかを示したデータベースである。
FIG. 10 shows an example of the permission list DB in the present embodiment. The
許可リストDB15は、「許可リストNo.」15−1、「デバイス登録No.」15−2、「許可ユーザID」15−3、「HD解像度」15−4、「SD解像度」15−5、「SD解像度/月10枚」15−6のデータ項目を含む。
The
「許可リストNo.」15−1には、許可リストDBに登録された各エントリを識別する情報が登録される。「デバイス登録No.」15−2には、誰がどんなデバイスを所有するかを示す番号であるデバイス登録No.が登録される。「許可ユーザID」15−3には、そのデバイス登録No.で示されるデバイスを用いた撮影において撮影許可をしたユーザのユーザIDが登録される。「HD解像度」15−4には、HD解像度で撮影許可をしたか否かの情報が登録される。「SD解像度」15−5には、SD解像度で撮影許可をしたか否かの情報が登録される。「SD解像度/月10枚」15−6には、1ヶ月間で10枚までの範囲で、その月にあと何枚までSD解像度で撮影可能であるかが登録される。 In the “permission list No.” 15-1, information for identifying each entry registered in the permission list DB is registered. The “device registration number” 15-2 includes a device registration number, which is a number indicating who owns what device. Is registered. The “permitted user ID” 15-3 includes the device registration number. The user ID of the user who has permitted photographing in the photographing using the device indicated by is registered. In “HD resolution” 15-4, information on whether or not shooting is permitted at HD resolution is registered. In “SD resolution” 15-5, information indicating whether or not photographing is permitted at the SD resolution is registered. In the “SD resolution / 10 images per month” 15-6, the number of images that can be shot at the SD resolution in the month is registered in the range of up to 10 images in one month.
例えば、図10では、デバイス登録No.の“000001”に対しては、Jack、Michael、Emilyの3人が許可ユーザとして登録されている。 For example, in FIG. For “000001”, three people, Jack, Michael and Emily, are registered as authorized users.
図11は、本実施形態におけるユーザ肖像DBの一例を示す。ユーザ肖像DB16は、「ユーザID」16−1、「正面図」16−2、「右画像1」16−3、「右画像2」16−4、「左画像1」16−5、「左画像2」16−6、「上画像」16−7、「下画像16−8」のデータ項目を含む。
FIG. 11 shows an example of the user portrait DB in the present embodiment. The
「ユーザID」16−1には、ユーザIDが登録される。「正面図」16−2には、ユーザを正面から撮影した画像(バイナリデータ)が登録される。「右画像1」16−3、「右画像2」16−4には、ユーザを右側から撮影した画像(バイナリデータ)が登録される。「左画像1」16−5、「左画像2」16−6には、ユーザを左側から撮影した画像(バイナリデータ)が登録される。「上画像」16−7には、ユーザを上側から撮影した画像(バイナリデータ)が登録される。「下画像16−8」には、ユーザを下側から撮影した画像(バイナリデータ)が登録される。
A user ID is registered in the “user ID” 16-1. In the “front view” 16-2, an image (binary data) obtained by photographing the user from the front is registered. In “
ここで、正面画や右画像はこれに限ったものではなく、あくまで構成の一例として示したものであり、システムの要件によって構成やデータの精度は変わるものである。また、ユーザ肖像DBを作成するための専用のスタジオなどを設置し、そこでユーザに肖像画作成のサービスを提供するなども考えられる。 Here, the front image and the right image are not limited to this, but are merely shown as an example of the configuration, and the configuration and data accuracy vary depending on the requirements of the system. It is also conceivable to install a dedicated studio for creating the user portrait DB and provide a portrait creation service to the user there.
図12−図14は、本実施形態における許可リストDB登録フローを示す。図6の撮影許可設定画面51において、ユーザが、登録済みの機種に対する撮影許可をフレンドに申請した場合、すなわち、撮影許可申請リスト52の「許可申請」ボタンを押下した場合(S1で「Yes」)、サーバ13は、許可申請処理を行う(S2)。
12 to 14 show a permission list DB registration flow in the present embodiment. In the shooting
ユーザが、撮影許可受付リスト53の「許可する」ボタンを押下した場合(S3で「Yes」)、サーバ13は、許可処理を行う(S4)。
When the user presses the “permit” button in the photographing permission acceptance list 53 (“Yes” in S3), the
許可申請処理(S2)が行われる場合、サーバ13は、ログインしているユーザのユーザIDと、そのユーザの所有機器IDを用いて、デバイス登録DB14からデバイス登録No.を取得する(S11)。
When the permission application process (S2) is performed, the
サーバ13は、許可リストDB15から、取得したデバイス登録No.に対応するエントリを検索する(S12)。許可リストDB15に、取得したデバイス登録No.に対応するエントリがない場合(S12で「No」)、サーバ13は、許可リストDB15の最終エントリの許可リストNo.に1を加算した新規エントリを作成する(S13)。
The
サーバ13は、新規に作成したエントリに、デバイス登録No.と、撮影許可を求めたユーザのユーザID(フレンド)とを登録し(S14)、HD解像度、SD解像度、SD解像度/月10枚の各エントリを“NO”で初期化する(S15)。
The
許可リストDB15に、取得したデバイス登録No.に対応するエントリがある場合(S12で「Yes」)、またはS15の処理後、サーバ13は、許可申請がどの解像度に対する許可申請であるかを判定する(S16)。
In the
許可申請がHD解像度の許可申請である場合(S16で「Yes」)、サーバ13は、フレンドがログインしたフレンド側の撮影許可設定画面51において次の処理を行う。すなわち、サーバ13は、フレンド側の撮影許可設定画面51の撮影許可受付リスト53にて、許可申請があったユーザのユーザIDに対応する「HD解像度を許可する」53−3に「許可する」ボタンを表示させる。このとき、サーバ13は、「SD解像度を許可する」53−4、「SD画像/月10枚を許可する」53−4のエントリに“NA”を表示させる(S17)。
When the permission application is an HD resolution permission application (“Yes” in S16), the
許可申請がSD解像度の許可申請である場合(S16で「No」、S18で「Yes」)、サーバ13は、フレンドがログインしたフレンド側の撮影許可設定画面51において次の処理を行う。すなわち、サーバ13は、フレンド側の撮影許可設定画面51の撮影許可受付リスト53にて、許可申請があったユーザのユーザIDに対応する「SD解像度を許可する」53−4に「許可する」ボタンを表示させる。このとき、サーバ13は、「SD画像/月10枚を許可する」53−4のエントリに“NA”を表示させる(S19)。
When the permission application is an SD resolution permission application (“No” in S16, “Yes” in S18), the
許可申請がSD画像/月10枚の許可申請である場合(S18で「No」)、サーバ13は、フレンドがログインしたフレンド側の撮影許可設定画面51において次の処理を行う。すなわち、サーバ13は、フレンド側の撮影許可設定画面51の撮影許可受付リスト53にて、許可申請があったユーザのユーザIDに対応する「SD画像/月10枚を許可する」53−5に「許可する」ボタンを表示させる(S20)。
If the permission application is an SD image / month permission application (“No” in S18), the
許可処理が行われる場合(S4)、サーバ13は、撮影許可設定画面51の撮影許可受付リスト53において、どの解像度についての許可ボタンであるかを判定する(S21,S25)。
When the permission process is performed (S4), the
撮影許可受付リスト53の「HD解像度を許可する」53−3に表示された「許可する」ボタンが押下された場合(S21で「Yes」)、サーバ13は、対応する許可リストDB15の「HD解像度」15−4のエントリに“YES”を設定する。また、サーバ13は、その対応する許可リストDB15の「SD解像度」15−5、「SD解像度/月10枚」15−6のエントリに“−”を設定する(S22)。
When the “permit” button displayed in the “permit HD resolution” 53-3 of the photographing
サーバ13は、ログインユーザの撮影許可設定画面51の撮影許可受付リスト53の「HD解像度を許可する」53−3のエントリを“許可済み”に設定する。また、サーバは、「SD画像撮影を許可する」53−4、「SD画像/月10枚を許可する」53−5のエントリに“NA”を設定する(S23)。
The
サーバ13は、フレンド側の撮影許可設定画面51の撮影許可申請リスト52の「撮影許可申請(HD画像)」52−3に対するエントリを“許可済み”に設定する。また、サーバ13は、「撮影許可申請(SD画像)」52−4、「撮影許可申請(SD画像/月10枚)」52−5のエントリに“NA”を設定する(S24)。
The
撮影許可受付リスト53の「SD解像度を許可する」53−4に表示された「許可する」ボタンが押下された場合(S25で「Yes」)、サーバ13は、対応する許可リストDB15の「SD解像度」15−5のエントリに“YES”を設定する。また、サーバ13は、その対応する許可リストDB15の「SD解像度/月10枚」15−6のエントリに“−”を設定する(S22)。
When the “permit” button displayed in the “permit SD resolution” 53-4 of the photographing
サーバ13は、ログインユーザの撮影許可設定画面51の撮影許可受付リスト53の「SD解像度を許可する」53−4のエントリを“許可済み”に設定する。また、サーバは、「SD画像/月10枚を許可する」53−5のエントリに“NA”を設定する(S27)。
The
サーバ13は、フレンド側の撮影許可設定画面51の撮影許可申請リスト52の「撮影許可申請(SD画像)」52−4に対するエントリを“許可済み”に設定する。また、サーバ13は、「撮影許可申請(SD画像/月10枚)」52−5のエントリに“NA”を設定する(S28)。
The
撮影許可受付リスト53の「SD画像/月10枚を許可する」53−5に表示された「許可する」ボタンが押下された場合(S25で「No」)、サーバ13は、対応する許可リストDB15の「SD解像度/月10枚」15−6のエントリに“YES”を設定する(S29)。
When the “permit” button displayed in the “permit SD image /
サーバ13は、ログインユーザの撮影許可設定画面51の撮影許可受付リスト53の「SD画像/月10枚を許可する」53−5のエントリを“許可済み”に設定する(S30)。
The
サーバ13は、フレンド側の撮影許可設定画面51の撮影許可申請リスト52の「撮影許可申請(SD画像/月10枚)」52−5に対するエントリを“許可済み”に設定する(S31)。
The
<肖像権処理フェーズ>
以下では、ユーザがICTデバイスを用いて撮影した画像について、ユーザが能動的に肖像権処理を行わなくても、サーバ側で肖像権処理を行い、肖像権処理された画像をユーザに利用させることについて説明する。
<Portrait processing phase>
In the following, for a picture taken by a user using an ICT device, the portrait right process is performed on the server side without the user actively performing the portrait right process, and the user uses the image subjected to the portrait right process. Will be described.
(実施例1)
実施例1では、ユーザのプライバシー意識の有無に関わらず、デバイス単位及びユーザ単位で、システムが自動的にプライバシーを保護する仕組みを提供する。
(Example 1)
The first embodiment provides a mechanism in which the system automatically protects privacy on a device basis and on a user basis, regardless of whether or not the user is aware of privacy.
図15は、本実施形態(実施例1)におけるICTデバイス−サーバ間の処理を説明するための図である。ユーザは、ICTデバイス11を用いて静止画像または動画像の撮影を行う。撮影された画像は、ユーザアクセス不可領域22bまたはユーザアクセス不可メモリ22dに保持される。以下では、一例として、ユーザアクセス不可領域22bを用いて説明するが、ユーザアクセス不可領域22bの代わりにユーザアクセス不可メモリ22cを用いてもよい。
FIG. 15 is a diagram for explaining processing between the ICT device and the server in the present embodiment (Example 1). The user takes a still image or a moving image using the
ICTデバイス11において、ユーザアクセス不可領域22bに一時的に保持された画像に対して、顔検出処理(S41)が行われる。顔検出処理(S41)は、ユーザアクセス不可領域22bに保持された撮影画像に人物の顔が撮影されていない場合には、ICTデバイス11は、次の処理を行う。すなわち、ICTデバイス11は、ユーザアクセス可能領域22aまたはユーザアクセス可能メモリ22cに、ユーザアクセス不可領域22bに保持された画像データを保存する。以下では、一例として、ユーザアクセス可能領域22aを用いて説明するが、ユーザアクセス可能領域22aの代わりにユーザアクセス可能メモリ22cを用いてもよい。このとき、ユーザアクセス不可領域22bに保持されたままの画像データは、削除されてもよいし、新たに取得した撮像画像データによって上書きされてもよい。
In the
撮影された画像に人物の顔が撮影されていた場合は、ICTデバイス11は、ICTデバイス11の機器IDと、そのデバイスを使用するユーザのユーザIDとを機器ID用メモリ25、ユーザID用メモリ24からそれぞれ読み出す。また、ICTデバイス11は、ユーザアクセス不可領域22bから撮像画像データを読み出す。そして、ICTデバイス11は、読み出した機器IDとユーザIDとを撮影画像データと共に、サーバ13に送信する(S42)。
When a person's face is photographed in the photographed image, the
ここで、顔検出処理(S41)のアルゴリズムは実際のシステム要件によって決まるものとし、特定のアルゴリズムに限定されない。 Here, the algorithm of the face detection process (S41) is determined by actual system requirements, and is not limited to a specific algorithm.
サーバ13は、撮影画像、機器ID、ユーザIDを受信すると(S43)、機器IDとユーザIDを用いてデバイス登録DB14に登録されているデバイス登録No.を検索する。
When the
デバイス登録DB14からデバイス登録No.が得られると、サーバ13は、その得られたデバイス登録No.を用いて、許可リストDB15から撮影許可をしたユーザのユーザID(許可ユーザID)を検索する。
The device registration No. Is obtained, the
次に、サーバ13は、許可リストDB15から得られた許可ユーザIDを用いて、ユーザ肖像DB16から許可ユーザに対する肖像画像を取得する。
Next, the
サーバ13は、ユーザ肖像DB16から得られたユーザ画像を用いて、撮影画像に対して修正を施す人物画像処理(S44)を行う。
The
人物画像処理(S44)では、サーバ13は、撮影画像において、ユーザ肖像DB16から得られた画像に一致すると判定された人物の顔部分の画像を残す。一方、サーバ13は、S44で、ユーザ肖像DB16から得られた画像に一致しないと判定された人物の顔部分の画像については、その人物が特定できないようにマスキング加工する画像処理を行う。マスキング加工するとは、例えば、顔部分を削除したり、顔部分にモザイクやぼかしを掛けたり、目周辺を覆い隠したりするマスキング処理を行う。修正済の画像はサーバ13からICTデバイス11に送信される(S45)。
In the person image processing (S44), the
ICTデバイス11は、サーバ13から修正済画像を受信すると、ユーザアクセス可能領域22aに保存し、ディスプレイに画像を表示する(S46)。このとき、ユーザアクセス不可領域22bに保持されたままの画像データは、削除されてもよいし、新たに取得した撮像画像によって上書きされてもよい。この一連の処理を経て、ユーザは初めて撮影画像にアクセスすることが可能となる。
When receiving the corrected image from the
図16は、本実施形態(実施例1)における肖像権処理の全体フローを示す。ユーザがICTデバイスのカメラ23を用いて、写真を撮影する。すると、ICTデバイスのプロセッサ21は、カメラ23から出力された撮影画像データを取得し(S50)、ユーザアクセス不可領域22bに保持する(S51)。
FIG. 16 shows an overall flow of portrait right processing in the present embodiment (Example 1). A user takes a picture using the
プロセッサ21は、顔検出処理を行って、ユーザアクセス不可領域22bに保持された撮影画像に人物の顔が含まれているか否かを判定する(S52)。その撮影画像に人物の顔が含まれていない場合(S52で「No」)、プロセッサ21は、その撮影画像をユーザアクセス可能領域22aに保存する(S63)。
The
その撮影画像に人物の顔が含まれている場合(S52で「Yes」)、プロセッサ21は、機器ID用メモリ25、ユーザID用メモリ24からそれぞれ機器ID,ユーザIDを読み出す。また、ICTデバイス11は、ユーザアクセス不可領域22bから撮像画像データを読み出す。プロセッサ21は、撮影画像データ、機器ID、ユーザIDをサーバ13に送信する(S53)。
When the photographed image includes a human face (“Yes” in S52), the
サーバ13は、ICTデバイス11から送信された撮影画像データ、機器ID、ユーザIDを受信する(S54)。サーバ13は、受信した機器ID、ユーザIDを用いてデバイス登録DB14から、デバイス登録No.を検索する(S55)。
The
デバイス登録DB14から、受信した機器ID、ユーザIDの組み合わせに対応するデバイス登録No.が検索されなかった場合(S56で「No」)、サーバ13は、撮像画像から全ての人物の画像を削除する画像処理を行う(S59)。
From the
デバイス登録DB14から、受信した機器ID、ユーザIDの組み合わせに対応するデバイス登録No.が検索された場合(S56で「Yes」)、サーバ13は、S55で取得したデバイス登録No.を用いて、許可リストDB15から、許可ユーザIDを検索する(S57)。
From the
許可リストDB15から、S55で取得したデバイス登録No.に対応する許可ユーザIDが検索されなかった場合(S58で「No」)、サーバ13は、撮像画像から全ての人物の画像を削除する画像処理を行う(S59)。
From the
許可リストDB15から、S55で取得したデバイス登録No.に対応する許可ユーザIDが検索された場合(S58で「Yes」)、サーバ13は、解像度関連画像処理を行う(S60)。S60の処理については後述する。
From the
S59またはS60の処理後、サーバ13は、修正済みの画像をICTデバイス11に送信する(S61)。
After the process of S59 or S60, the
プロセッサ21は、サーバ13から送信された修正済みの撮像画像データを受信すると(S62)、ユーザアクセス可能領域22aに保存する(S63)。ユーザの操作によっては、プロセッサ21はユーザアクセス可能領域22aに保存した撮像画像をICTデバイス11のディスプレイ等の出力装置に出力してもよい(S64)。
When the
図17は、本実施形態(実施例1)における解像度関連画像処理(S60)のフローを示す。許可リストDB15から、S55で取得したデバイス登録No.に対応する許可ユーザIDが検索された場合(S57,S58)、サーバ13は、許可ユーザが撮影を許可している解像度を判定する。すなわち、サーバ13は、検索された許可ユーザIDに対応する「HD解像度」15−4、「SD解像度」15−5、「SD解像度/月10枚」15−6の許可内容を判定する(S71〜S73)。
FIG. 17 shows a flow of resolution-related image processing (S60) in the present embodiment (Example 1). From the
検索された許可ユーザIDに対応する「HD解像度」15−4に“YES”が登録されている場合(S71で「Yes」)、サーバ13は、許可ユーザIDに対して、HD解像度を許可する情報を付加する(S74)。
When “YES” is registered in “HD resolution” 15-4 corresponding to the retrieved permitted user ID (“Yes” in S 71), the
検索された許可ユーザIDに対応する「SD解像度」15−5に“YES”が登録されている場合(S72で「Yes」)、サーバ13は、許可ユーザIDに対して、SD解像度を許可する情報を付加する(S75)。
When “YES” is registered in the “SD resolution” 15-5 corresponding to the retrieved permitted user ID (“Yes” in S72), the
検索された許可ユーザIDに対応する「SD解像度/月10枚」15−6に、1以上の値が登録されている場合(S71で「Yes」)、サーバ13は、「SD解像度/月10枚」15−6に登録された値から1を差し引く(S76)。さらに、サーバ13は、許可ユーザIDに対して、SD解像度を許可する情報を付加する(S75)。
When one or more values are registered in the “SD resolution / 10 images per month” 15-6 corresponding to the retrieved permitted user ID (“Yes” in S71), the
サーバ13は、許可ユーザIDを用いて、ユーザ肖像DB16から対応するユーザ画像を検索する(S77)。ユーザ肖像DB16から、許可ユーザIDに対応するユーザ画像が検索されなかった場合(S78で「No」)、サーバ13は、撮像画像から全ての人物の顔を特定できないようにマスキング加工により修正する画像処理を行う(S83)。
The
ユーザ肖像DB16から、許可ユーザIDに対応するユーザ画像が検索された場合(S78で「Yes」)、サーバ13は、撮像画像の解像度がHD解像度かSD解像度かを判定する(S79)。
When a user image corresponding to the permitted user ID is searched from the user portrait DB 16 (“Yes” in S78), the
撮像画像の解像度がHD解像度である場合(S79で「Yes」)、サーバ13は、許可ユーザIDに、HD解像度を許可する付加情報があるか否かを判定する(S81)。許可ユーザIDに、HD解像度を許可する付加情報がある場合(S81で「Yes」)、サーバ13は、取得したユーザ画像を用いて、対応ユーザの顔は残して、他の全ての人物の顔を特定できないようにマスキング加工により修正する(S82)。許可ユーザIDに、HD解像度を許可する付加情報がない場合(S81で「No」)、サーバ13は、撮像画像から全ての人物の顔を特定できないようにマスキング加工により修正する画像処理を行う(S83)。
When the resolution of the captured image is the HD resolution (“Yes” in S79), the
撮像画像の解像度がSD解像度である場合(S79で「No」)、サーバ13は、許可ユーザIDに、SD解像度を許可する付加情報があるか否かを判定する(S80)。許可ユーザIDに、SD解像度を許可する付加情報がある場合(S80で「Yes」)、サーバ13は、取得したユーザ画像を用いて、対応ユーザの顔は残して、他の全ての人物の顔を特定できないようにマスキング加工により修正する(S82)。許可ユーザIDに、SD解像度を許可する付加情報がない場合(S80で「No」)、サーバ13は、撮像画像から全ての人物の顔を特定できないようにマスキング加工により修正する画像処理を行う(S83)。
When the resolution of the captured image is the SD resolution (“No” in S79), the
なお、ICTデバイス周辺の電波状況が悪く、圏外である場合、ICTデバイス11は、サーバ13と通信することができないので、サーバ13に撮像画像を送信することができない。この場合、ICTデバイス11は、電波状況が改善するまで、ユーザアクセス不可領域22bに撮影画像を保持しておき、電波状況が改善したら、サーバ13にその撮影画像を送信してもよい。
In addition, when the radio wave condition around the ICT device is bad and out of service area, the
以上に示した一連の処理を行うことで、ユーザはユーザ自身のICTデバイスに対応付けて登録された人物(例えば、家族や友人など)の顔画像は残すことが可能となり、それ以外の人物の顔画像は自動的に削除されたり、モザイク等が付与されたりする。したがって、本実施形態(実施例1)によるシステムによれば、ユーザが意識することなく、肖像権に配慮した画像を得ることができる。 By performing the series of processes described above, the user can leave the face image of a person (for example, a family member or friend) registered in association with the user's own ICT device. The face image is automatically deleted or a mosaic is added. Therefore, according to the system according to the present embodiment (Example 1), an image in consideration of the portrait right can be obtained without the user being conscious.
(実施例2)
実施例2では、サーバ側の構成を変更したシステムについて説明する。なお、実施例2において、実施例1と同じ構成、同じ機能、または同じ処理は実施例1と同一の符号を付与し、その説明を省略する。
(Example 2)
In the second embodiment, a system in which the configuration on the server side is changed will be described. In the second embodiment, the same configurations, the same functions, or the same processes as those in the first embodiment are denoted by the same reference numerals as those in the first embodiment, and the description thereof is omitted.
図18は、本実施形態(実施例2)におけるICTデバイス−画像処理サーバ−DBサーバ間の処理を説明するための図である。実施例2のシステムでは、実施例1のサーバ13が、画像処理サーバ13aとDBサーバ13bとに分かれており、それ以外の構成及び機能は図15のシステム構成及び機能と同様である。画像処理サーバ13aは、画像の修正を行う。DBサーバ13bは、ユーザ情報の管理を行う。実施例2の処理の流れは実施例1の場合と同様である。
FIG. 18 is a diagram for explaining processing between the ICT device, the image processing server, and the DB server in the present embodiment (Example 2). In the system of the second embodiment, the
(実施例3)
実施例1では、撮像画像から人物の顔が検出された場合に、その撮像画像をサーバに送信して肖像権処理を行った。それに対して、実施例3では、撮像画像から人物の顔が検出されたか否かに関わらず、その撮像画像をサーバに送信して肖像権処理を行う。なお、実施例3において、実施例1または2と同じ構成、同じ機能、または同じ処理は実施例1または2と同一の符号を付与し、その説明を省略する。
Example 3
In the first embodiment, when a human face is detected from a captured image, the captured image is transmitted to the server to perform portrait right processing. On the other hand, in the third embodiment, regardless of whether or not a human face has been detected from the captured image, the captured image is transmitted to the server to perform portrait right processing. In the third embodiment, the same configurations, the same functions, or the same processes as those in the first or second embodiment are given the same reference numerals as those in the first or second embodiment, and the description thereof is omitted.
図19は、本実施形態(実施例3)におけるICTデバイス−サーバ間の処理を説明するための図である。実施例3では、実施例1のICTデバイスにおける顔検出処理(S41)を行わず、それ以外の構成及び機能は図15のシステム構成及び機能と同様である。ICTデバイスにて撮影された画像は、ユーザアクセス不可領域22bに一旦保持された後、その画像に人物の顔が含まれているか否かに依らず、サーバ13に送信される。
FIG. 19 is a diagram for explaining processing between the ICT device and the server in the present embodiment (Example 3). In the third embodiment, the face detection process (S41) in the ICT device of the first embodiment is not performed, and other configurations and functions are the same as the system configuration and functions of FIG. An image photographed by the ICT device is temporarily stored in the user
図20は、本実施形態(実施例3)における肖像権処理の全体フローを示す。図20のフローでは、図16のフローからS52の判定処理が削除されている。したがって、ICTデバイス11は、撮影された画像をユーザアクセス不可領域22bに一旦保持した後(S51)、人物の顔が含まれているか否かに依らず、サーバ13に送信する(S53)。
FIG. 20 shows an overall flow of portrait right processing in the present embodiment (Example 3). In the flow of FIG. 20, the determination process of S52 is deleted from the flow of FIG. Therefore, the
実施例3によれば、ICTデバイス11で顔検出処理を行わないので、ICTデバイス11の処理負担を軽くすることができる。
According to the third embodiment, since the face detection process is not performed by the
(実施例4)
実施例1では、サーバ13に撮像画像全体を送った。それに対して、実施例4では、撮像画像から抽出した顔部分の画像をサーバ13に送って、肖像権処理を行う。なお、実施例4において、実施例1〜3と同じ構成、同じ機能、または同じ処理は実施例1〜3と同一の符号を付与し、その説明を省略する。
(Example 4)
In the first embodiment, the entire captured image is sent to the
図21は、本実施形態(実施例4)におけるICTデバイス−サーバ間の処理を説明するための図である。実施例4では、実施例1におけるICTデバイス11の処理に、S71〜S73の処理を追加したものである。
FIG. 21 is a diagram for explaining processing between the ICT device and the server in the present embodiment (Example 4). In the fourth embodiment, the processes of S71 to S73 are added to the process of the
ICTデバイス11では、カメラ23により撮影された撮影画像データがユーザアクセス不可領域22bに一旦保持される。ユーザアクセス不可領域22bに保持された撮影画像に対して、顔検出処理が行われる(S41)。顔検出処理によりその撮影画像データから人物の顔が検出された場合、ICTデバイス11は、ユーザアクセス不可領域22bに保持された撮影画像から、検出した顔の部分のみの画像(顔画像)を切り出す(S71)。ICTデバイス11は、切り出した顔画像を機器ID及びユーザIDと合わせてサーバ13に送信する(S42)。
In the
サーバ13は、ICTデバイスから送信された顔画像、機器ID及びユーザIDを受信すると(S43)、顔画像について実施例1と同様に修正処理(人物画像処理)を行う(S44)。サーバ13は、顔画像について人物画像処理を行った後、人物画像処理済の顔画像をICTデバイス13に送信する(S45)。
Upon receiving the face image, device ID, and user ID transmitted from the ICT device (S43), the
ICTデバイス11は、サーバ13から送信された人物画像処理済みの顔画像を受信すると(S72)、人物画像処理済みの顔画像と、ユーザアクセス不可領域22bに保持された撮影画像とを結合する(S73)。これにより、顔部分が修正された全体画像が得られる。得られた全体画像はユーザアクセス可能領域22aに保存され、ユーザが閲覧できるように出力される。
When the
図22は、本実施形態(実施例4)における肖像権処理の全体フローを示す。図20のフローでは、図16のフローに、S81、S82の処理が追加されている。また、図22のフローでは、S53〜S62の画像データは、撮影画像から抽出された顔部分の画像(顔画像)データである。 FIG. 22 shows an overall flow of portrait right processing in the present embodiment (Example 4). In the flow of FIG. 20, the processes of S81 and S82 are added to the flow of FIG. In the flow of FIG. 22, the image data of S53 to S62 is image (face image) data of the face portion extracted from the photographed image.
S52で、プロセッサ21は、顔検出処理を行って、ユーザアクセス不可領域22bに保持された撮影画像に人物の顔が含まれているか否かを判定する。その撮影画像に人物の顔が含まれている場合(S52で「Yes」)、プロセッサ21は、顔抽出処理を行って、その撮影画像から、検出した顔の部分のみの画像(顔画像)を抽出する(S81)。
In S52, the
プロセッサ21は、機器ID用メモリ25、ユーザID用メモリ24からそれぞれ機器ID、ユーザIDを読み出す。プロセッサ21は、画像(具体的には、顔画像)データ、機器ID、ユーザIDをサーバ13に送信する(S53)。その後、顔画像について、図16のフローと同様に、S53〜S62の処理を行う。
The
ICTデバイス11は、サーバ13から人物画像処理済みの顔画像を受信し(S62)、人物画像処理済みの顔画像と、ユーザアクセス不可領域22bに保持された撮影画像とを結合し(S82)、ユーザアクセス可能領域22aに保存する(S63)。ユーザの操作によっては、ICTデバイス11はユーザアクセス可能領域22aに保存した撮像画像をICTデバイス11のディスプレイ等の出力装置に出力してもよい(S64)。
The
実施例4によれば、ICTデバイス11とサーバ13間の通信データ量を削減することができ、通信回線のバンド幅が狭いシステムなどに向いている。
According to the fourth embodiment, the amount of communication data between the
(実施例5)
実施例5では、実施例1に加えて、さらに、許可ユーザの名前を画像に付与する。なお、実施例5において、実施例1〜4と同じ構成、同じ機能、または同じ処理は実施例1〜4と同一の符号を付与し、その説明を省略する。
(Example 5)
In the fifth embodiment, in addition to the first embodiment, the name of the authorized user is further given to the image. In the fifth embodiment, the same configurations, the same functions, or the same processes as those in the first to fourth embodiments are denoted by the same reference numerals as those in the first to fourth embodiments, and the description thereof is omitted.
図23は、本実施形態(実施例5)におけるICTデバイス−サーバ間の処理を説明するための図である。実施例5では、実施例1におけるサーバ13の処理にS91の処理を追加し、ユーザ肖像DB16をユーザ肖像DB16aに置き換えたものである。
FIG. 23 is a diagram for explaining processing between the ICT device and the server in the present embodiment (Example 5). In the fifth embodiment, the process of S91 is added to the process of the
人物画像処理を行う場合に、画像に残すことのできる人物(撮影許可をした人物)の名称を付加することが可能であると、ユーザにとって利便性が上がる場合がある。そこで、実施例5では、人物画像処理(S44)に続いて、ユーザ肖像DB16aを用いて人物名称付加処理(S91)を加えることで、撮像が可能なユーザの名前を明示することが可能となる。その他の処理については、実施例1と同様であるため、説明は省略する。
When performing person image processing, if it is possible to add names of persons (persons permitted to shoot) that can be left in the image, convenience for the user may be improved. Therefore, in the fifth embodiment, following the person image process (S44), by adding a person name addition process (S91) using the
図24は、本実施形態(実施例5)におけるユーザ肖像DBの一例を示す。ユーザ肖像DB16aは、図11のユーザ肖像DB16に、「名前」カラム16−11を追加したものである。「名前」カラム16−11には、ユーザIDで識別される人物の氏名が格納されている。
FIG. 24 shows an example of a user portrait DB in the present embodiment (Example 5). The
図25は、本実施形態(実施例5)における肖像権処理の全体フローを示す。図24のフローでは、図16のフローのS60とS61との間に、S101の処理が追加されている。サーバ13は、S60の解像度関連画像処理後、ユーザ肖像DB16aから、許可ユーザIDに対応する「名前」を取得し、解像度関連画像処理済みの画像に、その取得した名前を付加する(S101)。ユーザの名前は画像上に付加してもよいし、画像のヘッダ情報として付加してもよいし、画像とは別データとして出力してもよい。
FIG. 25 shows the overall flow of portrait right processing in the present embodiment (Example 5). In the flow of FIG. 24, the process of S101 is added between S60 and S61 of the flow of FIG. After the resolution-related image processing in S60, the
S59またはS101の処理後、サーバ13は、修正済みの画像をICTデバイス11に送信する(S61)。これ以降は、図16と同様の処理なので、その説明を省略する。
After the processing of S59 or S101, the
(実施例6)
実施例6では、実施例1に加えて、さらに、撮像画像に、指名手配者または行方不明者が写っていた場合には、撮像画像にアラート情報を付与する。なお、実施例6において、実施例1〜5と同じ構成、同じ機能、または同じ処理は実施例1〜5と同一の符号を付与し、その説明を省略する。
(Example 6)
In the sixth embodiment, in addition to the first embodiment, when a wanted person or a missing person is reflected in the captured image, alert information is added to the captured image. In the sixth embodiment, the same configurations, the same functions, or the same processes as those in the first to fifth embodiments are given the same reference numerals as those in the first to fifth embodiments, and the description thereof is omitted.
図26は、本実施形態(実施例6)におけるICTデバイス−サーバ間の処理を説明するための図である。実施例6では、実施例1におけるサーバ13の処理にS111の処理を追加し、サーバ13の記憶装置に指名手配者/行方不明者肖像DB81を追加したものである。
FIG. 26 is a diagram for explaining processing between the ICT device and the server in the present embodiment (Example 6). In the sixth embodiment, the processing of S111 is added to the processing of the
実施例5では、人物の顔を検索する際にその人物の名前も取得して、名前情報を画像に付加した。それに対して、実施例6ではサーバ13に指名手配者/行方不明者肖像DB81を追加する。これにより、肖像権の保護を行うと同時に、ユーザが撮影した画像に指名手配者や行方不明者が撮影されていないかを調べて、指名手配者や行方不明者が撮影されていた場合には、撮影画像にアラートを付加して出力する。
In Example 5, when searching for a person's face, the person's name was also acquired, and name information was added to the image. On the other hand, in the sixth embodiment, a wanted person / missing
図27は、本実施形態(実施例6)における指名手配者/行方不明者肖像DBの一例を示す。指名手配者/行方不明者肖像DB81は、「名前」81−1、「属性」81−2、「正面画」81−3、「右画像1」81−4、「右画像2」81−5、「左画像1」81−6、「左画像2」81−7、「上画像」81−8、「下画像」81−9のカラムを含む。
FIG. 27 shows an example of the wanted person / missing person portrait DB in the present embodiment (Example 6). The wanted person / missing
「名前」81−1は、指名手配者または行方不明者の指名が格納されている。「属性」81−2には、「名前」81−1に格納された氏名の人物が指名手配者であるのか、または行方不明者であるのかを示す情報が格納されている。 “Name” 81-1 stores the nomination of the wanted person or the missing person. The “attribute” 81-2 stores information indicating whether the person with the name stored in the “name” 81-1 is a wanted person or a missing person.
「正面画」81−3、「右画像1」81−4、「右画像2」81−5、「左画像1」81−6、「左画像2」81−7、「上画像」81−8、「下画像」81−9のカラムには、「名前」81−1に格納された氏名の人物の顔画像データが格納されている。ここで、正面画や右画像はこれに限ったものではなく、一例として示したものであり、システムの要件によって構成やデータの精度は変わるものである。
“Front Image” 81-3, “
図28は、本実施形態(実施例6)における肖像権処理の全体フローを示す。図28のフローでは、図16のフローのS60とS61との間に、S121〜S123の処理が追加されている。 FIG. 28 shows the entire flow of portrait right processing in the present embodiment (Example 6). In the flow of FIG. 28, the processes of S121 to S123 are added between S60 and S61 of the flow of FIG.
サーバ13は、S60の解像度関連画像処理後、S54で受信した画像データに含まれる人物の画像と、指名手配者/行方不明者肖像DB81に登録された人物の各肖像データと照合する。これにより、サーバ13は、S54で受信した画像データから指名手配者/行方不明者肖像DB81に登録された人物を検索する(S121)。
After the resolution-related image processing in S60, the
S54で受信した画像データから指名手配者/行方不明者肖像DB81に登録された人物が検索された場合(S122で「Yes」)、サーバ13は、S59またはS101の処理後の画像にアラート情報を付加する(S123)。ここで、アラート情報には、その検索された人物が指名手配者または行方不明者であることを示す情報、または、その検索された人物が指名手配者または行方不明者であることを示す情報に加えて、さらにその検索された人物の名前が付加されていてもよい。
When a person registered in the wanted person / missing
S123の処理後、サーバ13は、修正済みの画像をICTデバイス11に送信する(S61)。これ以降は、図16と同様の処理なので、その説明を省略する。
After the process of S123, the
図29は、本実施形態におけるサーバのハードウェア環境の構成ブロック図である。サーバ13は、出力I/F91、CPU92、ROM93、通信I/F94、入力I/F95、RAM96、記憶装置97、読み取り装置98、バス99を含む。サーバ13は、出力機器101、及び入力機器102と接続可能である。
FIG. 29 is a block diagram showing the hardware environment of the server in this embodiment. The
ここで、CPUは、中央演算装置を示す。ROMは、リードオンリメモリを示す。RAMは、ランダムアクセスメモリを示す。I/Fは、インターフェースを示す。バス99には、出力I/F91、CPU92、ROM93、通信I/F94、入力I/F95、RAM96、記憶装置97、読み取り装置98が接続されている。読み取り装置98は、可搬型記録媒体を読み出す装置である。出力機器101は、出力I/F91に接続されている。入力機器102は、入力I/F95に接続されている。
Here, CPU indicates a central processing unit. ROM indicates a read-only memory. RAM indicates random access memory. I / F indicates an interface. An output I /
記憶装置97としては、ハードディスクドライブ、フラッシュメモリ装置、磁気ディスク装置など様々な形式の記憶装置を使用することができる。
As the
記憶装置97またはROM93には、例えば、本実施形態で説明したサーバ側の処理を実現するプログラムが格納されている。または、記憶装置97またはROM93には、デバイス登録DB14、許可リストDB15、ユーザ肖像DB16,16a、指名手配者/行方不明者肖像DB81が格納されている。
For example, the
CPU92は、記憶装置97等に格納した本実施形態で説明したサーバ側の処理を実現するプログラムを読み出し、当該プログラムを実行する。
The
本実施形態で説明したサーバ側の処理を実現するプログラムは、プログラム提供者側から通信ネットワーク100、および通信I/F94を介して、例えば記憶装置97に格納してもよい。また、第1または第2の実施形態で説明した処理を実現するプログラムは、市販され、流通している可搬型記憶媒体に格納されていてもよい。この場合、この可搬型記憶媒体は読み取り装置98にセットされて、CPU92によってそのプログラムが読み出されて、実行されてもよい。可搬型記憶媒体としてはCD−ROM、フレキシブルディスク、光ディスク、光磁気ディスク、IC(integrated circuit)カード、USB(Universal Serial Bus)メモリ装置など様々な形式の記憶媒体を使用することができる。このような記憶媒体に格納されたプログラムが読み取り装置98によって読み取られる。
The program that realizes the server-side processing described in the present embodiment may be stored, for example, in the
また、入力機器102には、キーボード、マウス、電子カメラ、ウェブカメラ、マイク、スキャナ、センサ、タブレット、タッチパネルなどを用いることが可能である。また、出力機器101には、ディスプレイ、プリンタ、スピーカなどを用いることが可能である。また、ネットワーク100は、インターネット、LAN、WAN、専用線、有線、無線等の通信網であってよい。
As the
本実施形態によれば、ユーザ側においても、ユーザに意識させることなく、システム側で配慮することにより、ユーザはより安心してデバイスを使用することができる。また、ICTデバイス11の使用者は、登録されたICTデバイスを使用すれば、プライバシーの保護を理由に、使用制限をされることがなくなる。また、登録されたICTデバイスが増加することで、撮影される側においても、肖像権の侵害リスクを軽減することが可能となる。また、デバイスメーカにとっては、登録されたICTデバイスであることがプライバシーに配慮したデバイスであると認識されるため、一般消費者にとっての信頼性に対する基準の一つとなる。
According to the present embodiment, the user can use the device with more peace of mind by considering the system side without making the user aware of the user side. Further, if the user of the
なお、本発明は、以上に述べた実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の構成または実施形態を取ることができる。 The present invention is not limited to the above-described embodiment, and various configurations or embodiments can be taken without departing from the gist of the present invention.
上記実施形態に関し、さらに以下の付記を開示する。
(付記1)
コンピュータに、
撮像して得られた第1画像データを、ユーザが利用可能な状態で保存される前に取得し、
取得した前記第1画像データに撮像許可を得ていない人物が写っている場合に、該人物が特定できないように画像処理が行われた第2画像データを第1記憶領域に保存する
処理を実行させる肖像権保護プログラム。
(付記2)
前記第1画像データの取得において、該第1画像データをユーザがアクセスできない第2記憶領域に保持し、
前記第2画像データの保存において、前記第2画像データを前記ユーザがアクセスできる前記第1記憶領域に保存する
処理を実行させることを特徴とする付記1に記載の肖像権保護プログラム。
(付記3)
前記コンピュータに、さらに、
前記取得した第1画像データをサーバ装置に送信し、
前記サーバ装置により前記画像処理が行われた第2画像データを受信する
処理を実行させ、
前記第2画像データの保存において、受信した前記第2画像データを前記第1記憶領域に保存する
ことを特徴とする付記1または2に記載の肖像権保護プログラム。
(付記4)
前記送信において、前記取得した第1画像データから人物の顔が検出された場合、前記第1画像データを前記サーバ装置に送信し、
前記コンピュータに、さらに、
前記取得した第1画像データから前記顔が検出されなかった場合、該第1画像データを前記第1記憶領域へ格納する
処理を実行させる付記1または2に記載の肖像権保護プログラム。
(付記5)
前記送信において、前記取得した第1画像データから人物の顔が検出された場合、前記第1画像データから抽出した顔部分の画像データを前記サーバ装置に送信し、
前記サーバ装置から受信した前記画像処理が行われた前記顔部分の画像データと、前記取得した第1画像データとを結合した画像である前記第2画像データを前記第1記憶領域に保存する
処理を実行させる付記1または2に記載の肖像権保護プログラム。
(付記6)
情報を記憶する第1記憶部と、
撮像して画像データを出力する撮像部と、
前記撮像部から出力された第1画像データを、ユーザが利用可能な状態で保存される前に取得し、取得した該第1画像データに撮像許可を得ていない人物が写っている場合に、該人物が特定できないように画像処理が行われた第2画像データを前記第1記憶部に保存する保存制御部と、
を備えることを特徴とする情報通信装置。
(付記7)
前記情報通信装置は、さらに、
ユーザがアクセスできない第2記憶部
を備え、
前記保存制御部は、前記取得した第1画像データを前記第2記憶部に保持し、前記画像処理が行われた第2画像データを前記ユーザがアクセスできる前記第1記憶部に保存する
処理を実行させることを特徴とする付記6に記載の情報通信装置。
(付記8)
前記情報通信装置は、さらに、
前記取得した第1画像データをサーバ装置に送信し、該サーバ装置により前記画像処理が行われた前記第2画像データを受信する通信部
を備え、
前記保存制御部は、受信した前記第2画像データを前記第1記憶部に保存する
ことを特徴とする付記6または7に記載の情報通信装置。
(付記9)
前記情報通信装置は、さらに、
前記取得した第1画像データから人物の顔を検出する顔検出部
を備え、
前記通信部は、前記取得した第1画像データから前記顔が検出された場合、前記第1画像データを前記サーバ装置に送信し、
前記保存制御部は、前記取得した第1画像データから前記顔が検出されなかった場合、該第1画像データを前記第1記憶部へ格納する
処理を実行させる付記8に記載の情報通信装置。
(付記10)
前記情報通信装置は、さらに、
前記取得した第1画像データから人物の顔が検出された場合、該第1画像データから顔部分の画像データを抽出する顔検出部
を備え、
前記通信部は、抽出した前記顔部分の画像データを前記サーバ装置に送信し、
前記保存制御部は、前記サーバ装置から受信した前記画像処理が行われた前記顔部分の画像データと、前記取得した第1画像データとを結合した前記第2画像データを生成し、生成した該第2画像データを前記第1記憶部に保存する
処理を実行させる付記6に記載の情報通信装置。
(付記11)
情報通信装置は、撮像して得られた第1画像データを、ユーザが利用可能な状態で保存される前に取得して、サーバ装置に送信し、
前記サーバ装置は、前記第1画像データに撮像許可を得ていない人物が写っている場合に該人物が特定できないように画像処理を行い、前記画像処理がされた第2画像データを前記情報通信装置に送信し、
前記情報通信装置は、前記情報通信装置から受信した前記第2画像データを前記ユーザがアクセスできる第1記憶領域に保存する
ことを特徴とする肖像権保護方法。
(付記12)
前記第1画像データの取得において、該第1画像データをユーザがアクセスできない第2記憶領域に保持し、
前記第2画像データの保存において、前記第2画像データを前記ユーザがアクセスできる前記第1記憶領域に保存する
処理を実行させることを特徴とする付記11に記載の肖像権保護方法。
(付記13)
前記情報通信装置は、さらに、
前記第1画像デーらから人物の顔が検出された場合、前記第1画像データを前記サーバ装置に送信し、
前記第1画像データから前記顔が検出されなかった場合、前記取得した第1画像データを前記第1記憶領域へ格納する
ことを特徴とする付記9に記載の肖像権保護方法。
(付記14)
前記情報通信装置は、さらに、
前記取得した第1画像データから人物の顔が検出された場合、前記第1画像データから抽出した顔部分の画像データを前記サーバ装置に送信し、
前記サーバ装置から受信した前記画像処理が行われた前記顔部分の画像データと、前記取得した第1画像データとを結合した画像データである前記第2画像データを前記第1記憶領域に保存する
ことを特徴とする付記9に記載の肖像権保護方法。
Regarding the above embodiment, the following additional notes are disclosed.
(Appendix 1)
On the computer,
First image data obtained by imaging is acquired before being stored in a state where the user can use it,
When the acquired first image data includes a person who does not have imaging permission, the second image data subjected to image processing so that the person cannot be specified is stored in the first storage area. Portrait rights protection program.
(Appendix 2)
In the acquisition of the first image data, the first image data is held in a second storage area that cannot be accessed by a user;
The portrait right protection program according to
(Appendix 3)
In addition to the computer,
Transmitting the acquired first image data to a server device;
Receiving the second image data on which the image processing has been performed by the server device;
3. The portrait right protection program according to
(Appendix 4)
In the transmission, when a human face is detected from the acquired first image data, the first image data is transmitted to the server device,
In addition to the computer,
The portrait right protection program according to
(Appendix 5)
In the transmission, when a human face is detected from the acquired first image data, the image data of the face portion extracted from the first image data is transmitted to the server device,
Processing for storing the second image data, which is an image obtained by combining the image data of the face portion that has been subjected to the image processing received from the server device and the acquired first image data, in the first storage area The portrait right protection program according to
(Appendix 6)
A first storage unit for storing information;
An imaging unit for imaging and outputting image data;
When the first image data output from the imaging unit is acquired before being stored in a usable state by the user, and a person who does not have imaging permission is reflected in the acquired first image data, A storage control unit that stores, in the first storage unit, second image data that has been subjected to image processing so that the person cannot be identified;
An information communication device comprising:
(Appendix 7)
The information communication device further includes:
A second storage unit that the user cannot access,
The storage control unit stores the acquired first image data in the second storage unit, and stores the second image data subjected to the image processing in the first storage unit accessible by the user. The information communication apparatus according to appendix 6, wherein the information communication apparatus is executed.
(Appendix 8)
The information communication device further includes:
A communication unit that transmits the acquired first image data to a server device and receives the second image data that has been subjected to the image processing by the server device;
The information communication device according to
(Appendix 9)
The information communication device further includes:
A face detection unit for detecting a human face from the acquired first image data;
When the face is detected from the acquired first image data, the communication unit transmits the first image data to the server device,
The information communication apparatus according to
(Appendix 10)
The information communication device further includes:
A face detection unit that extracts face image data from the first image data when a human face is detected from the acquired first image data;
The communication unit transmits the extracted image data of the face part to the server device,
The storage control unit generates the second image data obtained by combining the image data of the face portion that has been subjected to the image processing received from the server device and the acquired first image data, The information communication apparatus according to appendix 6, wherein the second image data is stored in the first storage unit.
(Appendix 11)
The information communication device acquires the first image data obtained by imaging before being stored in a state where the user can use it, and transmits the first image data to the server device.
The server device performs image processing so that the person cannot be identified when a person who does not have imaging permission is captured in the first image data, and the second image data subjected to the image processing is transmitted to the information communication To the device,
The information communication device stores the second image data received from the information communication device in a first storage area accessible by the user.
(Appendix 12)
In the acquisition of the first image data, the first image data is held in a second storage area that cannot be accessed by a user;
12. The portrait right protection method according to
(Appendix 13)
The information communication device further includes:
When a human face is detected from the first image data, the first image data is transmitted to the server device,
The portrait right protection method according to appendix 9, wherein the acquired first image data is stored in the first storage area when the face is not detected from the first image data.
(Appendix 14)
The information communication device further includes:
When a human face is detected from the acquired first image data, the image data of the face portion extracted from the first image data is transmitted to the server device,
The second image data, which is image data obtained by combining the image data of the face portion that has been subjected to the image processing received from the server device and the acquired first image data, is stored in the first storage area. The method for protecting a portrait right according to appendix 9, wherein
1 肖像権保護システム
2 情報通信装置
3 記憶部
3a 第1記憶領域
3b 第2記憶領域
4 撮像部
5 保存制御部
6 通信部
7 顔検出部
8 サーバ装置
11 ICTデバイス
12 PC
13 サーバ
14 デバイス登録DB
15 許可リストDB
16 ユーザ肖像DB
21 プロセッサ
22 メモリ
22a ユーザアクセス可能領域
22b ユーザアクセス不可領域
22c ユーザアクセス可能メモリ
22d ユーザアクセス不可メモリ
23 カメラ
24 ユーザID用メモリ
25 機器ID用メモリ
26 バッテリー
27 無線デバイス
28 センサー
DESCRIPTION OF
13
15 Allow list DB
16 User portrait DB
21
Claims (5)
撮像許可を得た人物と該人物について撮像許可を得た画像の解像度とを示している許可情報をサーバ装置に送信し、
撮像して得られた第1画像データを、ユーザが利用可能な状態で保存される前に取得し、
取得した前記第1画像データを前記ユーザがアクセスできない第2記憶領域に保存し、
取得した前記第1画像データを前記サーバ装置に送信し、
取得した前記第1画像データに、前記許可情報に基づいて特定される人物であって取得した前記第1画像データで表されている画像の解像度では撮像許可を得ていない該人物が写っている場合に、該撮像許可を得ていない人物が特定できないように画像処理が前記サーバ装置により行われて得られた第2画像データを受信し、
受信した前記第2画像データを、前記ユーザがアクセスできる第1記憶領域に保存する
処理を実行させる肖像権保護プログラム。 On the computer,
Sending permission information indicating the person who has obtained permission for imaging and the resolution of the image for which imaging permission has been obtained for the person to the server device;
First image data obtained by imaging is acquired before being stored in a state where the user can use it,
Storing the acquired first image data in a second storage area that the user cannot access;
Transmitting the acquired first image data to the server device;
The acquired first image data includes a person who is identified based on the permission information and does not obtain imaging permission at the resolution of the image represented by the acquired first image data. The second image data obtained by performing image processing by the server device so that a person who does not have the imaging permission cannot be identified,
A portrait right protection program for executing a process of storing the received second image data in a first storage area accessible by the user.
前記コンピュータに、さらに、
前記取得した第1画像データから前記顔が検出されなかった場合、該第1画像データを前記第1記憶領域へ格納する
処理を実行させる請求項1に記載の肖像権保護プログラム。 In the transmission, when a human face is detected from the acquired first image data, the first image data is transmitted to the server device,
In addition to the computer,
The portrait right protection program according to claim 1, wherein when the face is not detected from the acquired first image data, a process of storing the first image data in the first storage area is executed.
前記コンピュータに、さらに、
前記サーバ装置から受信した前記画像処理が行われた前記顔部分の画像データと、前記取得した第1画像データとを結合した画像である前記第2画像データを前記第1記憶領域に保存する
処理を実行させる請求項1に記載の肖像権保護プログラム。 In the transmission, when a human face is detected from the acquired first image data, the image data of the face portion extracted from the first image data is transmitted to the server device,
In addition to the computer,
Processing for storing the second image data, which is an image obtained by combining the image data of the face portion that has been subjected to the image processing received from the server device and the acquired first image data, in the first storage area The portrait right protection program according to claim 1, wherein:
撮像して画像データを出力する撮像部と、
撮像許可を得た人物と該人物について撮像許可を得た画像の解像度とを示している許可情報をサーバ装置に送信する許可情報送信部と、
前記撮像部から出力された第1画像データを、前記ユーザが利用可能な状態で保存される前に取得する取得部と、
取得した前記第1画像データを前記第2記憶領域に保存する第1画像データ保存制御部と、
取得した前記第1画像データを前記サーバ装置に送信する画像データ送信部と、
取得した該第1画像データに、前記許可情報に基づいて特定される人物であって取得した前記第1画像データで表されている画像の解像度では撮像許可を得ていない該人物が写っている場合に、該撮像許可を得ていない人物が特定できないように画像処理が前記サーバ装置により行われて得られた第2画像データを受信する受信部と、
受信した前記第2画像データを前記第1記憶領域に保存する第2画像データ保存制御部と、
を備えることを特徴とする情報通信装置。 A storage unit for storing information, the storage unit having a first storage area accessible by a user and a second storage area not accessible by the user;
An imaging unit for imaging and outputting image data;
A permission information transmission unit that transmits permission information indicating a person who has obtained permission for imaging and a resolution of an image for which imaging permission has been obtained for the person to the server device;
An acquisition unit that acquires the first image data output from the imaging unit before being stored in a state usable by the user;
A first image data storage control unit for storing the acquired first image data in the second storage area;
An image data transmission unit for transmitting the acquired first image data to the server device;
In the acquired first image data, the person who is specified based on the permission information and does not obtain imaging permission at the resolution of the image represented by the acquired first image data is shown. A receiving unit that receives second image data obtained by performing image processing by the server device so that a person who does not have the imaging permission cannot be identified;
A second image data storage control unit for storing the received second image data in the first storage area;
An information communication device comprising:
前記情報通信装置は、撮像して得られた第1画像データを、ユーザが利用可能な状態で保存される前に取得し、
前記情報通信装置は、取得した前記第1画像データをサーバ装置に送信し、
前記サーバ装置は、前記第1画像データに、前記許可情報に基づいて特定される人物であって取得した前記第1画像データで表されている画像の解像度では撮像許可を得ていない該人物が写っている場合に、該撮像許可を得ていない人物が特定できないように画像処理を行い、前記画像処理がされて得られた第2画像データを前記情報通信装置に送信し、
前記情報通信装置は、前記サーバ装置から受信した前記第2画像データを、前記ユーザがアクセスできる第1記憶領域に保存する
ことを特徴とする肖像権保護方法。 The information communication device transmits permission information indicating a person who has obtained permission for imaging and the resolution of an image for which the person has permission to capture images to the server device,
The information communication device acquires the first image data obtained by imaging before being stored in a usable state by the user,
The information communication device transmits the acquired first image data to a server device,
The server device includes, in the first image data, a person who is identified based on the permission information and has not obtained an imaging permission at the resolution of the image represented by the acquired first image data. If that is reflected, it performs image processing so anyone not give the imaging permission can not be identified, sending the second image data obtained by said image processing to said information communication apparatus,
The information communication apparatus stores the second image data received from the server apparatus in a first storage area accessible by the user.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217719A JP6428152B2 (en) | 2014-10-24 | 2014-10-24 | Portrait right protection program, information communication device, and portrait right protection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217719A JP6428152B2 (en) | 2014-10-24 | 2014-10-24 | Portrait right protection program, information communication device, and portrait right protection method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016085594A JP2016085594A (en) | 2016-05-19 |
JP6428152B2 true JP6428152B2 (en) | 2018-11-28 |
Family
ID=55973031
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014217719A Active JP6428152B2 (en) | 2014-10-24 | 2014-10-24 | Portrait right protection program, information communication device, and portrait right protection method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6428152B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3579160A1 (en) * | 2017-02-03 | 2019-12-11 | Panasonic Intellectual Property Management Co., Ltd. | Learned model generating method, learned model generating device, and learned model use device |
JP7361711B2 (en) * | 2018-10-22 | 2023-10-16 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Control method, content management system, and program |
WO2020240817A1 (en) * | 2019-05-31 | 2020-12-03 | 株式会社ウフル | Data use promotion device, data use permission method and data use permission program |
CN112241704A (en) * | 2020-10-16 | 2021-01-19 | 百度(中国)有限公司 | Method and device for judging portrait infringement, electronic equipment and storage medium |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4206888B2 (en) * | 2003-09-30 | 2009-01-14 | カシオ計算機株式会社 | Image processing apparatus and program |
JP2006155109A (en) * | 2004-11-26 | 2006-06-15 | Yec Co Ltd | Image processor |
JP5048736B2 (en) * | 2009-09-15 | 2012-10-17 | みずほ情報総研株式会社 | Image processing system, image processing method, and image processing program |
JP2014078910A (en) * | 2012-10-12 | 2014-05-01 | Sony Corp | Image processing apparatus, image processing system, image processing method, and program |
-
2014
- 2014-10-24 JP JP2014217719A patent/JP6428152B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016085594A (en) | 2016-05-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6360558B2 (en) | File locking method, file locking device, program, and recording medium | |
US10165178B2 (en) | Image file management system and imaging device with tag information in a communication network | |
JP6428152B2 (en) | Portrait right protection program, information communication device, and portrait right protection method | |
US11025603B2 (en) | Service providing system, service delivery system, service providing method, and non-transitory recording medium | |
JP2015165274A (en) | Monitoring device, monitoring system, log management method, and computer program | |
US11128623B2 (en) | Service providing system, service delivery system, service providing method, and non-transitory recording medium | |
US11076010B2 (en) | Service providing system, service delivery system, service providing method, and non-transitory recording medium | |
KR20190015555A (en) | Service providing system, service communication system, service providing method and recording medium | |
JP5891828B2 (en) | Mobile terminal, photographed image disclosure method, program | |
JP6711621B2 (en) | Robot, robot control method, and robot program | |
JP6413500B2 (en) | Imaging device | |
JP7251247B2 (en) | Communication system and communication method | |
US11108772B2 (en) | Service providing system, service delivery system, service providing method, and non-transitory recording medium | |
JP4420450B2 (en) | Image recording device | |
JP2019057288A (en) | Electronic apparatus | |
JP2015138409A (en) | Image management device, image management method, and program | |
JP7077504B1 (en) | Information processing equipment, programs, and control methods for information processing equipment | |
JP6318514B2 (en) | INPUT PROCESSING SYSTEM, INFORMATION STORAGE DEVICE, INFORMATION PROCESSING DEVICE, AND INPUT METHOD | |
JP2018151782A (en) | Image processing device, image processing system and control method | |
JP2017157956A (en) | Information processing apparatus, information processing apparatus control method, and program | |
JP2016103677A (en) | Imaging apparatus, server, and system | |
JP2013207544A (en) | Imaging device, server device, and evaluation system | |
WO2015075770A1 (en) | Image processing device, image processing method, and image processing program | |
JP2014204273A (en) | Image recording device, control method therefor, and control program | |
JP2015022365A (en) | Authentication processing device and authentication processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170704 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180621 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180703 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180827 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180911 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180912 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181002 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181015 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6428152 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |