JP2016192758A - 電子機器及び類似顔画像置き換えプログラム - Google Patents

Abstract

【課題】特定された顔の特徴点により顔部分を置き換えた顔ハメ画像を作成することで、ユニークで娯楽性に富んだ画像を作成できる電子機器及び類似顔画像置き換えプログラムを提供する。【解決手段】電子機器において、（１）でユーザーが肖像画、ポスター、絵画、又は写真などから有名な人物像を撮影する。（２）でユーザーが人物を撮影する。次いで、ユーザーは、撮影された顔ハメ元画像の顔部分を類似する人物像の人物画像の顔部分に置き換え要求する操作を行うと、（３）で撮影された人物の顔ハメ元画像から顔部分を検出する。（４）で検出された顔部分から顔の特徴点を抽出する。（５）で人物画像の中から抽出した特徴点に最も似ている顔の人物画像から顔部分を取り出す。（６）で顔ハメ元画像の顔部分を（５）で取り出した人物画像の顔部分に置き換えた顔ハメ画像を作成する。（７）で顔ハメ画像を用紙に印刷する。【選択図】図２

Description

本発明は、画像を合成する機能を有する電子機器に関する。

最近の技術によれば、人物の顔画像から目、鼻、及び口などの各器官の特徴点を特定することで、本人であるか否かの認証（本人認証）、顔画像から似顔絵の作成（似顔絵作成）、又は顔画像から似ている有名人を検索（類似有名人検索）などを行うことができる。例えば、特許文献１の顔認識装置及び顔器官の特徴点特定方法では、顔画像における複数の器官の配置関係を考慮して特徴点を特定することで、各器官の特徴点を高精度に特定できる技術が開示されている。このような顔認識装置及び顔器官の特徴点特定方法により、より精度の高い本人認証、似顔絵作成、又は類似有名人検索などを容易に行うことができる。

特開２０１０−２３１３５４号公報

しかし、特許文献１の顔認識装置及び顔器官の特徴点特定方法では、精度の高い本人認証、似顔絵作成、又は類似有名人検索などを行うことができるが、特定された顔の特徴点を用いてユニークで娯楽性に富んだ画像を作成することができない。

本発明はこのような状況に鑑みてなされたものであり、上記課題を解決できる電子機器及び類似顔画像置き換えプログラムを提供することを目的とする。

本発明の電子機器は、人物像の人物画像を登録する人物画像登録部と、人物が撮影された顔ハメ元画像を記憶する顔ハメ元画像記憶部と、前記顔ハメ元画像の顔部分を検出して特徴点を抽出し、前記顔ハメ元画像の顔部分を前記特徴点が最も似ている前記人物画像の顔部分に置き換えた顔ハメ画像を作成する類似顔画像置き換え部とを備えることを特徴としている。
また、本発明の電子機器は、カメラ部を備え、前記類似顔画像置き換え部は、前記顔ハメ元画像の顔部分を前記カメラ部で撮影された前記人物像の前記人物画像の顔部分に置き換えることを特徴としている。
また、本発明の電子機器は、ネットワーク通信部を備え、前記類似顔画像置き換え部は、前記ネットワーク通信部により受信した前記顔ハメ元画像の顔部分を、前記ネットワーク通信部により受信した前記人物画像の顔部分に置き換えることを特徴としている。
また、本発明の電子機器は、カメラ部と、スキャナー部とを備え、前記類似顔画像置き換え部は、前記カメラ部で撮影された人物の前記顔ハメ元画像の顔部分を前記スキャナー部で読み取った人物像の前記人物画像の顔部分に置き換えることを特徴としている。
また、本発明の電子機器の前記類似顔画像置き換え部は、前記顔ハメ元画像に付けられている名前と前記人物画像に付けられている名前とを組み合わせて作成したタイトルと前記顔ハメ画像とを合成することを特徴としている。
また、本発明の電子機器は、印刷部を備え、前記印刷部は、前記顔ハメ画像を用紙に印刷することを特徴としている。
本発明の類似顔画像置き換えプログラムは、人物像の人物画像を登録する人物画像登録部、及び人物が撮影された顔ハメ元画像を記憶する顔ハメ元画像記憶部と、前記顔ハメ元画像の顔部分を検出して特徴点を抽出し、前記顔ハメ元画像の顔部分を前記特徴点が最も似ている前記人物画像の顔部分に置き換えた顔ハメ画像を作成する類似顔画像置き換え部として電子機器のコンピューターを機能させることを特徴としている。

本発明の電子機器及び類似顔画像置き換えプログラムは、特定された顔の特徴点により顔部分を置き換えた画像（以下、「顔ハメ画像」という）を作成することで、ユニークで娯楽性に富んだ画像を作成することができる。

本発明の実施形態に係る電子機器の機能構成を示す図である。 本発明の実施形態に係る類似顔画像置き換え手順を説明する図である。 本発明の実施形態に係る類似顔画像置き換え処理の流れを示すフローチャートである。

以下、本発明を実施するための形態（以下、「実施形態」という）を、図面を参照して説明する。

実施形態における電子機器１００の機能構成について、図１を用いて説明する。図１に示す電子機器１００は、制御部１０１、メモリー部１０２、データ記憶部１０３、操作パネル１０４、操作パネル処理部１０５、スキャナー部１０６、画像形成部１０７、カメラ部１０８、ネットワーク通信部１０９、及び印刷部１１０を備え、これら各部はバスなどにより接続される構成となっている。制御部１０１には、人物画像登録処理部１０１ａと類似顔画像置き換え処理部１０１ｂが設けられている。メモリー部１０２には、顔ハメ画像の元となる画像（以下、「顔ハメ元画像」という）データ一時記憶エリア１０２ａが設けられている。データ記憶部１０３には、画像データ記憶エリア１０３ａと人物画像データ記憶エリア１０３ｂが設けられている。

制御部１０１は、ＲＡＭやＲＯＭ等の主記憶デバイス、及びＣＰＵ(Central Processing Unit)等のプロセッサーを備えている。また、制御部１０１は、各種Ｉ／Ｏや、ＵＳＢ（ユニバーサル・シリアル・バス）等のインターフェイス、バスコントローラー等を含む総合的な電子機器１００の制御を行う。
人物画像登録処理部１０１ａは、ユーザーがカメラ部１０８で撮影した肖像画、ポスター、絵画、又は写真などの人物像の人物画像を人物画像データ記憶エリア１０３ｂに記憶する。
類似顔画像置き換え処理部１０１ｂは、ユーザーがカメラ部１０８で撮影した人物の顔ハメ元画像の顔部分を検出して特徴点を抽出し、顔ハメ元画像の顔部分を特徴点が最も似ている人物画像データ記憶エリア１０３ｂに記憶された人物画像の顔部分に置き換える。なお、類似顔画像置き換え処理部１０１ｂが実行する類似顔画像置き換え処理の詳細については、後述する。

メモリー部１０２は、フラッシュメモリー等の補助記憶装置で、制御部１０１が実行する処理のプログラムやデータを記憶する。
顔ハメ元画像データ一時記憶エリア１０２ａは、カメラ部１０８が撮影した人物の顔ハメ元画像を一時的に記憶する。なお、カメラ部１０８で撮影された人物の顔ハメ元画像には人物の名前が付けられて記憶される。

データ記憶部１０３は、データやプログラムを記憶するハードディスクドライブである。
画像データ記憶エリア１０３ａは、スキャナー部１０６がスキャンして画像形成部１０７により画像に形成された図面や原稿の画像、カメラ部１０８が撮影した画像、又はネットワーク通信部１０９が受信した画像などを記憶する。なお、記憶されている画像には名称が付けられ、この名称で識別される。
人物画像データ記憶エリア１０３ｂは、ユーザーが撮影した肖像画、ポスター、絵画、又は写真などの人物像の複数の人物画像を記憶する。なお、記憶されている人物画像には名前が付けられ、この名前で識別される。

操作パネル１０４は、操作画面やメッセージの表示、画像の表示、ユーザーによる操作受け付けを行う液晶パネルである。

操作パネル処理部１０５は、電子機器１００が備えている機能に対する操作項目やメッセージを操作パネル１０４に表示する処理、画像を操作パネル１０４に表示する処理、又は操作パネル１０４からユーザーの操作を入力する処理を行う。

スキャナー部１０６は、電子機器１００の原稿台にセットされた図面や原稿のスキャンを行うことで図面や原稿をデジタル化するもので、ユーザーが操作パネル１０４からスキャン要求を行うと、スキャナー部１０６は図面や原稿を読み取り、読み取った図面データや原稿データを画像処理部１０７に出力する。

画像形成部１０７は、スキャナー部１０６から図面データや原稿データを入力すると、電子機器１００で処理可能な画像に形成して画像データ記憶エリア１０３ａに記憶する。

カメラ部１０８は、撮影機能を備え、撮影した画像を電子機器１００で処理可能な画像に形成し、指定された顔ハメ元画像データ一時記憶エリア１０２ａ、画像データ記憶エリア１０３ａ、又は人物画像データ記憶エリア１０３ｂに記憶する。

ネットワーク通信部１０９は、ネットワーク２００に接続するための着脱可能なＬＡＮインターフェイスを備えている。ＬＡＮインターフェイスには、ＴＣＰ／ＩＰ、ＡｐｐｌｅＴａｌｋ、ＳＭＢ等の各種ネットワークプロトコルのインテリジェントな送受信を行うネットワーク部を含んでいる。

印刷部１１０は、印刷要求のあった画像を入力し、コピー用紙やシール用紙などに印刷する。

次に、実施形態における電子機器１００が顔ハメ元画像の顔部分を、登録されている人物画像の中から最も似ている顔部分に置き換える類似顔画像置き換え手順について、図２と図３を用いて説明する。なお、登録されている人物画像とは、人物画像データ記憶エリア１０３ｂに記憶されているカメラ部１０８で撮影された肖像画、ポスター、絵画、又は写真などの人物像の人物画像である。

まず、（１）に示すように、ユーザーが肖像画、ポスター、絵画、又は写真などから有名な人物像をカメラ部１０８で撮影する。なお、撮影された人物像の人物画像は、人物画像データ記憶エリア１０３ｂに記憶される。次いで、（２）に示すようにユーザーが人物をカメラ部１０８で撮影する。なお、撮影された人物の顔ハメ元画像は、顔ハメ元画像データ一時記憶エリア１０２ａに記憶される。次いで、ユーザーは人物の顔ハメ元画像の顔部分を類似する人物画像の顔部分に置き換え要求する操作（以下、「類似顔画像置き換え要求操作」という）を操作パネル１０４から行うと、（３）に示すように、類似顔画像置き換え処理部１０１ｂは、撮影された人物の顔ハメ元画像から顔部分を検出する。次いで（４）に示すように、類似顔画像置き換え処理部１０１ｂは、検出した顔部分から顔の特徴点を抽出する。次いで（５）に示すように、類似顔画像置き換え処理部１０１ｂは、人物画像データ記憶エリア１０３ｂに記憶されている人物画像の中から抽出した特徴点に最も似ている人物画像の顔部分を取り出す。次いで（６）に示すように、類似顔画像置き換え処理部１０１ｂは、撮影された人物の顔ハメ元画像の顔部分を（５）で取り出した人物画像の顔部分に置き換えた顔ハメ画像を作成する。次いで（７）に示すように、顔ハメ画像を印刷部１１０により用紙に印刷する。このときに、顔ハメ元画像の名前と人物画像の名前とを組み合わせて作成したタイトルを用紙に印刷できる。例えば、「Ｅくん」の顔ハメ元画像の顔部分を「織田信長」の人物画像の顔部分に置き換えたときには、それぞれの名前である「Ｅくん」と「織田信長」とを組み合わせて作成したタイトル「Ｅくんの織田信長像」が用紙に印刷される。

次に、電子機器１００の類似顔画像置き換え処理部１０１ｂが実行する類似顔画像置き換え処理の詳細について説明する。ユーザーが操作パネル１０４から類似顔画像置き換え要求操作を行うと、操作パネル処理部１０５が類似顔画像置き換え要求通知を制御部１０１に出力する。制御部１０１は、類似顔画像置き換え要求通知を入力すると、類似顔画像置き換え処理部１０１ｂを起動する。類似顔画像置き換え処理部１０１ｂが起動されると、類似顔画像置き換え処理部１０１ｂは、類似顔画像置き換え処理を開始する。以下、図３に示す類似顔画像置き換え処理のフローチャートを用いてステップ順に説明する。

（ステップＳ１０１）
まず、類似顔画像置き換え処理部１０１ｂは、顔ハメ元画像データ一時記憶エリア１０２ａからユーザーがカメラ部１０８で撮影した人物の顔ハメ元画像を取り出す。

（ステップＳ１０２）
次いで、類似顔画像置き換え処理部１０１ｂは、ステップＳ１０１で取り出した顔ハメ元画像から顔部分だけを検出する。

（ステップＳ１０３）
次いで、類似顔画像置き換え処理部１０１ｂは、顔部分の目、鼻、及び口などの各器官の位置情報により特徴点を抽出する。

（ステップＳ１０４）
次いで、類似顔画像置き換え処理部１０１ｂは、ステップＳ１０３で抽出した特徴点に最も似ている顔の人物画像を人物画像データ記憶エリア１０３ｂから取り出す。

（ステップＳ１０５）
次いで、類似顔画像置き換え処理部１０１ｂは、人物画像から顔部分を取り出すと、ステップＳ１０１で取り出した顔ハメ元画像の顔部分を人物画像の顔部分に置き換えた顔ハメ画像を作成する。

（ステップＳ１０６）
次いで、類似顔画像置き換え処理部１０１ｂは、顔ハメ元画像の名前と人物画像の名前を組み合わせたタイトルを作成する。

（ステップＳ１０７）
次いで、類似顔画像置き換え処理部１０１ｂは、ステップＳ１０５で作成した顔ハメ画像と、ステップＳ１０６で作成したタイトルとを合成した顔ハメ画像を印刷部１１０に出力すると、類似顔画像置き換え処理を終了する。なお、印刷部１１０は、タイトルと合成された顔ハメ画像を入力すると、顔ハメ画像を用紙に印刷する。

以上により、ユーザーが肖像画、ポスター、絵画、又は写真などの人物像を撮影し、またユーザーが職場やサークルの人をカメラ部１０８で撮影させてもらうことで、撮影された職場やサークルの人の顔ハメ元画像の顔部分を職場やサークルの人の顔に最も似ている有名な人物像の顔に置き換えた顔ハメ画像を作成することができる。また、職場やサークルの人の顔を有名な人物像の顔に置き換えた顔ハメ画像を印刷することができる。このように職場やサークルの人に対して有名人をイメージさせることで、職場やサークルの人に親しみを感じ、また職場やサークルのコミュニケーションを図ることで、仕事やサークルの活動を円滑に行うことができる。

なお、実施形態においては、ユーザーが予め肖像画、ポスター、絵画、又は写真などの人物像をカメラ部１０８で撮影した複数の人物画像を人物画像データ記憶エリア１０３ｂに記憶し、また職場やサークルの人を撮影した顔ハメ元画像を顔ハメ元画像データ一時記憶エリア１０２ａするようにしたが、これに限定されない。例えば、電子機器１００は、カメラを備えている他の電子機器１００で撮影した肖像画、ポスター、絵画、又は写真などの人物像の人物画像を、ネットワーク２００を経由して受信することができる。同様に、電子機器１００は、カメラを備えている他の電子機器１００で人物を撮影した顔ハメ元画像を、ネットワーク２００を経由して受信することができる。ネットワーク２００を経由して受信した人物画像と顔ハメ元画像は、最初に画像データ記憶エリア１０３ａに記憶されるが、画像データ記憶エリア１０３ａの人物画像を人物画像データ記憶エリア１０３ｂに移動し、また画像データ記憶エリア１０３ａの顔ハメ元画像を顔ハメ元画像データ一時記憶エリア１０２ａに移動させることで、カメラを備えていない電子機器１００であっても、顔ハメ元画像の顔部分を最も似ている有名な人物像の人物画像の顔部分に置き換えた顔ハメ画像を作成できる。

また、実施形態においては、電子機器１００が顔部分を置き換えた顔ハメ画像を印刷するようにしたが、これに限定されない。例えば、画像を印刷する機能を備えていない電子機器１００においては、印刷機能を備えた他の電子機器１００に顔ハメ画像を送信して印刷することも可能である。また、印刷せずに電子機器１００の操作パネル１０４に顔ハメ画像を表示することも可能である。このときには、印刷の場合と同様に、顔ハメ元画像の名前と人物画像の名前とを組み合わせて作成したタイトルも操作パネル１０４に表示できる。

また、実施形態においては、カメラ部１０８で撮影された肖像画、ポスター、絵画、又は写真などの人物像の人物画像を人物画像データ記憶エリア１０３ｂに記憶するようにしたが、ポスターや写真などのようにスキャナー部１０６で読み取り可能であれば、スキャナー部１０６で読み取ったポスターや写真などの人物像の人物画像を人物画像データ記憶エリア１０３ｂに記憶することができる。これにより、スキャナー部１０６で読み取ったポスターや写真などの人物像の人物画像の顔部分を顔ハメ元画像の顔部分に置き換えることができる。

また、実施形態の電子機器１００は、ＰＣ（パソコン）、スマートフォン、携帯電話、タブレット端末、又は複合機（Ｍｕｌｔｉｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）などの画像形成装置を含むコンピューターで動作する機器である。

このような本発明の電子機器及び類似顔画像置き換えプログラムによれば、特定された顔の特徴点により顔ハメ画像を作成することで、ユニークで娯楽性に富んだ画像を作成できる。

以上、具体的な実施の形態により本発明を説明したが、上記実施の形態は本発明の例示であり、この実施の形態に限定されないことは言うまでもない。

本発明は、画像の一部を置き換えが可能な電子機器一般に適用できる。

１００・・・・・電子機器
１０１・・・・・制御部
１０１ａ・・・・人物画像登録処理部
１０１ｂ・・・・類似顔画像置き換え処理部
１０２・・・・・メモリー部
１０２ａ・・・・顔ハメ元画像データ一時記憶エリア
１０３・・・・・データ記憶部
１０３ａ・・・・画像データ記憶エリア
１０３ｂ・・・・人物画像データ記憶エリア
１０４・・・・・操作パネル
１０５・・・・・操作パネル処理部
１０６・・・・・スキャナー部
１０７・・・・・画像形成部
１０８・・・・・カメラ部
１０９・・・・・ネットワーク通信部
１１０・・・・・印刷部
２００・・・・・ネットワーク

Claims (7)

1. 人物像の人物画像を登録する人物画像登録部と、
   人物が撮影された顔ハメ元画像を記憶する顔ハメ元画像記憶部と、
   前記顔ハメ元画像の顔部分を検出して特徴点を抽出し、前記顔ハメ元画像の顔部分を前記特徴点が最も似ている前記人物画像の顔部分に置き換えた顔ハメ画像を作成する類似顔画像置き換え部と
   を備えることを特徴とする電子機器。
2. カメラ部を備え、
   前記類似顔画像置き換え部は、前記顔ハメ元画像の顔部分を前記カメラ部で撮影された前記人物像の前記人物画像の顔部分に置き換えることを特徴とする請求項１に記載の電子機器。
3. ネットワーク通信部を備え、
   前記類似顔画像置き換え部は、前記ネットワーク通信部により受信した前記顔ハメ元画像の顔部分を、前記ネットワーク通信部により受信した前記人物画像の顔部分に置き換えることを特徴とする請求項１に記載の電子機器。
4. カメラ部と、
   スキャナー部とを備え、
   前記類似顔画像置き換え部は、前記カメラ部で撮影された人物の前記顔ハメ元画像の顔部分を前記スキャナー部で読み取った人物像の前記人物画像の顔部分に置き換えることを特徴とする請求項１に記載の電子機器。
5. 前記類似顔画像置き換え部は、前記顔ハメ元画像に付けられている名前と前記人物画像に付けられている名前とを組み合わせて作成したタイトルと前記顔ハメ画像とを合成することを特徴とする請求項１から請求項４のいずれか１項に記載の電子機器。
6. 印刷部を備え、
   前記印刷部は、前記顔ハメ画像を用紙に印刷することを特徴とする請求項１から請求項５のいずれか１項に記載の電子機器。
7. 人物像の人物画像を登録する人物画像登録部、及び人物が撮影された顔ハメ元画像を記憶する顔ハメ元画像記憶部と、前記顔ハメ元画像の顔部分を検出して特徴点を抽出し、前記顔ハメ元画像の顔部分を前記特徴点が最も似ている前記人物画像の顔部分に置き換えた顔ハメ画像を作成する類似顔画像置き換え部として電子機器のコンピューターを機能させることを特徴とする類似顔画像置き換えプログラム。

Images