JP2021061984A - 画像表示方法および情報処理装置 - Google Patents
画像表示方法および情報処理装置 Download PDFInfo
- Publication number
- JP2021061984A JP2021061984A JP2019187862A JP2019187862A JP2021061984A JP 2021061984 A JP2021061984 A JP 2021061984A JP 2019187862 A JP2019187862 A JP 2019187862A JP 2019187862 A JP2019187862 A JP 2019187862A JP 2021061984 A JP2021061984 A JP 2021061984A
- Authority
- JP
- Japan
- Prior art keywords
- image
- nail
- pattern
- fingertip
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000010365 information processing Effects 0.000 title claims abstract description 47
- 238000010422 painting Methods 0.000 claims description 2
- 238000003384 imaging method Methods 0.000 claims 1
- 210000000282 nail Anatomy 0.000 description 248
- 210000003811 finger Anatomy 0.000 description 66
- 210000000078 claw Anatomy 0.000 description 54
- 238000012545 processing Methods 0.000 description 36
- 210000004905 finger nail Anatomy 0.000 description 27
- 238000004891 communication Methods 0.000 description 20
- 210000004932 little finger Anatomy 0.000 description 20
- 230000006870 function Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 230000015654 memory Effects 0.000 description 11
- 210000003813 thumb Anatomy 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 239000003086 colorant Substances 0.000 description 7
- 239000004065 semiconductor Substances 0.000 description 5
- 238000005401 electroluminescence Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000008719 thickening Effects 0.000 description 2
- 210000003371 toe Anatomy 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 210000002683 foot Anatomy 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000004906 toe nail Anatomy 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000037303 wrinkles Effects 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
一側面では、本発明は、爪に合わせて模様を表示できる画像表示方法および情報処理装置を提供することを目的とする。
情報処理装置は、撮影画像を取得し、模様画像の選択を受け付け、撮影画像の部分を抽出した部分画像を生成し、部分画像に基づいて爪の大きさ、中心点、回転角を求め、模様画像の大きさを爪の大きさに合わせて変更し、模様画像を爪の回転角に合わせて回転させ、模様画像の中心点を爪の中心点に合わせて移動させた爪部模様画像を生成し、撮影画像と爪部模様画像とを重畳して表示する。
[第1の実施形態]
まず、第1の実施形態の情報処理装置について図1を用いて説明する。図1は、第1の実施形態の情報処理装置の一例を示す図である。
情報処理装置10の制御部は、撮影画像の部分を抽出した部分画像を生成し、部分画像に基づいて爪の大きさ、中心点、回転角を求める。情報処理装置10は、撮影画像から爪の部分を抽出した爪部画像を生成し、爪部画像に基づいて爪の大きさと中心点を求める。また、情報処理装置10は、撮影画像から指先の部分を抽出した指先部画像を生成し、指先部画像に基づいて爪の回転角を求める。
[第2の実施形態]
次に、第2の実施形態として、情報処理システムについて図2を用いて説明する。図2は、第2の実施形態の情報処理システムの一例を示す図である。
次に、第2の実施形態のサーバのハードウェア構成について図3を用いて説明する。図3は、第2の実施形態のサーバのハードウェア構成の一例を示す図である。
HDD113は、内蔵したディスクに対して、磁気的にデータの書き込みおよび読み出しを行う。HDD113は、サーバ100の補助記憶装置として使用される。HDD113には、OSのプログラム、アプリケーションプログラム、および各種データが記憶される。なお、HDD113に限らず、SSD(Solid State Drive)を使用することもできる。なお、補助記憶装置としては、フラッシュメモリ等の半導体記憶装置を使用することもできる。
利用者端末200は、無線通信部201、プロセッサ202、RAM203、不揮発性メモリ204、ディスプレイ205、タッチパネル206、スピーカ207a、マイクロホン207b、GPS受信機208およびカメラ210を有する。上記のユニットは、それぞれバス209に接続されている。
RAM203は、サーバ100のRAM112と同様、プロセッサ202が実行するプログラムやプロセッサ202が演算に用いるデータを一時的に記憶する揮発性の半導体メモリである。
初期画面400は、利用者端末200においてネイルアプリの機能により表示される画面である。初期画面400は、手の甲の側(手背側)から撮影した画像(手背画像)と、ネイルアートの色や模様を選択するメニューを表示した画面である。
ネイル表示画面410は、利用者端末200においてネイルアプリの機能により表示される画面である。ネイル表示画面410は、手背画像表示領域411において爪が選択され、選択された爪に色や模様が選択されたネイルアートが表示された状態を表示した画面である。ネイル表示画面410の説明において、初期画面400と同様の内容について適宜説明を省略する。
手背画像500は、手を甲の側(手背側)から撮影した画像である。利用者は、利用者端末200のカメラ210で、ネイルアートを施したように見せる対象となる手を爪が写りこむようにして撮影し、手背画像500をネイルアプリに取り込む。利用者端末200は、撮影した画像をメモリ等の記憶部に記憶する。
指先部画像510は、手背画像500より指の先端から第1関節までの部分を抽出した画像である。指先部画像510は、指の先端から第1関節までの部分を囲む領域のみを抽出した画像の一例であるが、爪や皮膚など領域内に含まれるものを備えてもよい。
爪部画像520は、手背画像500から爪の部分を抽出した画像である。爪部画像520は、爪の部分を囲む領域のみを抽出した画像であるが、爪の色や溝など領域内に含まれるものを備えてもよい。爪部画像520は、爪の大きさ(縦横の長さ)を定めるために用いる画像である。爪の大きさを定める方法については、後で図11を用いて説明する。
図10(A)は、指先部画像510から小指指先部画像515を抽出したものである。ネイルアプリは、模様を表示する角度として爪の回転角(表示された爪の傾き)を求める必要があるが、爪部画像520のみでは爪の回転角を求めることが困難である。これは、爪の形状が円形に近い場合、上下の方向が定まらず爪の傾き(回転角)が不明であるためである。また、爪は、指先方向(縦方向)に向かって伸びるものであるが、指先方向に向かって長いとは限らず、たとえば、爪の大きさが小さいため略円形に近い形状である場合もあれば、横方向の略楕円形の場合もある。
図11(A)は、爪部画像520から小指爪部画像525を抽出したものである。ネイルアプリは、爪に模様を施した画像を表示するため、爪の大きさと位置に合わせて模様画像の大きさと位置の調整を行う。このため、ネイルアプリにおいて、爪部画像520を用いて各爪の大きさと中心位置を求める。ここでは、小指爪部画像525を用いて小指の爪の大きさと中心点を求めるが、その他の指についても同様である。
爪部ベースカラー画像550は、爪部画像520に含まれる各指の爪部画像を、利用者が選択したベースカラーの色で塗潰して表示したものである。なお、爪部ベースカラー画像550は、全ての爪を同色のベースカラーで塗潰した例を示すが、それぞれの爪ごとに利用者が選択した異なる色で塗潰して表示することが可能である。
爪部模様画像560は、爪部画像520に含まれる各指の爪部画像に、利用者が選択した模様を表示したものである。ネイルアプリは、模様画像を爪ごとの大きさ、中心点に合わせて表示するため、模様が爪からはみ出して表示されることがない。また、ネイルアプリは、模様画像を爪ごとの角度(各爪の回転角)に合わせて表示するため、模様が各爪の方向に表示され、模様が逆さや横向き等で表示されることはない。
利用者端末処理は、利用者端末200が、撮影した画像を表示し、利用者からの入力を受け付け、爪にネイルアートを施したように見える画像を表示する処理である。利用者端末処理は、利用者端末200の制御部(プロセッサ202)が実行する。なお、画像を生成する処理の詳細については、後で図15を用いて説明する。
画像処理は、利用者端末200が、爪にネイルアートを施したように見える画像を生成する処理である。画像処理は、利用者端末処理における画像を生成する処理をより具体化して説明するものである。画像処理は、利用者端末200の制御部(プロセッサ202)が実行する。
[ステップS22]利用者端末200は、指先から第1関節までの部分の画像を手背画像500から抽出し、指先部画像510を生成する。
[ステップS26]利用者端末200は、爪部画像520に基づき、各指の爪部分に外接する矩形(爪部矩形)を形成する。具体的には、利用者端末200は、親指爪部画像521に外接する親指爪部矩形、人差指爪部画像522に外接する人差指爪部矩形、中指爪部画像523に外接する中指爪部矩形、薬指爪部画像524に外接する薬指爪部矩形、小指爪部画像525に外接する小指爪部矩形610を形成する。
具体的には、利用者端末200は、まず、選択された模様画像を選択された爪の回転角に合わせて回転させる(模様画像の角度調整)。
[ステップS30]利用者端末200は、手背画像500の明るさ(コントラスト)を模様画像に合わせて調整する。たとえば、利用者端末200は、手背画像500に含まれる手の皮膚部分の明るさが、模様画像の明るさと同一になるよう、手背画像500のコントラストを変更する。なお、明るさが同一とは、完全同一である必要はなく、ある程度の範囲内(たとえば、模様画像の明るさの±10%の範囲内)であればよい。
なお、上記の処理機能は、コンピュータによって実現することができる。その場合、サーバ100、情報処理装置10、利用者端末200が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、磁気記憶装置、光ディスク、光磁気記録媒体、半導体メモリ等がある。磁気記憶装置には、ハードディスク装置(HDD)、フレキシブルディスク、磁気テープ等がある。光ディスクには、DVD、DVD−RAM、CD−ROM/RW等がある。光磁気記録媒体には、MO(Magneto-Optical disk)等がある。
100 サーバ
150 ネットワーク
200 利用者端末
300 情報処理システム
Claims (7)
- 画像表示方法であって、
情報処理装置は、
撮影画像を取得し、
模様画像の選択を受け付け、
前記撮影画像の部分を抽出した部分画像を生成し、
前記部分画像に基づいて爪の大きさ、中心点、回転角を求め、
前記模様画像の大きさを前記爪の大きさに合わせて変更し、前記模様画像を前記爪の回転角に合わせて回転させ、前記模様画像の中心点を前記爪の中心点に合わせて移動させた爪部模様画像を生成し、
前記撮影画像と前記爪部模様画像とを重畳して表示する、
画像表示方法。 - 前記情報処理装置は、
前記撮影画像から前記爪の部分を抽出した爪部画像を生成し、前記爪部画像に基づいて前記爪の大きさと中心点を求め、
前記撮影画像から指先の部分を抽出した指先部画像を生成し、前記指先部画像に基づいて前記爪の回転角を求める、
請求項1記載の画像表示方法。 - 前記情報処理装置は、
前記爪部画像に外接する矩形である爪部矩形を形成し、前記爪部矩形の大きさを前記爪の大きさとし、前記爪部矩形の中心点を前記爪の中心点とする、
請求項2記載の画像表示方法。 - 前記情報処理装置は、
前記指先部画像に外接する矩形である指先部矩形を形成し、前記指先部矩形の回転角を前記爪の回転角とする、
請求項2記載の画像表示方法。 - 前記情報処理装置は、
指の先端から第1関節までの部分を前記撮影画像から抽出した画像を前記指先部画像として生成する、
請求項2記載の画像表示方法。 - 前記情報処理装置は、
前記爪の下地色の選択を受け付け、
前記爪部画像を前記下地色で塗潰した爪部下地色画像を生成し、
前記撮影画像に前記爪部下地色画像と前記爪部模様画像とを重畳して表示する、
請求項2記載の画像表示方法。 - 撮影画像を取得する撮像部と、
模様画像の選択を受け付ける受付部と、
前記撮影画像の部分を抽出した部分画像を生成し、前記部分画像に基づいて爪の大きさ、中心点、回転角を求め、前記模様画像の大きさを前記爪の大きさに合わせて変更し、前記模様画像を前記爪の回転角に合わせて回転させ、前記模様画像の中心点を前記爪の中心点に合わせて移動させた爪部模様画像を生成し、前記撮影画像と前記爪部模様画像とを重畳して表示部に表示させる制御部とを備える、
情報処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019187862A JP2021061984A (ja) | 2019-10-11 | 2019-10-11 | 画像表示方法および情報処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019187862A JP2021061984A (ja) | 2019-10-11 | 2019-10-11 | 画像表示方法および情報処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021061984A true JP2021061984A (ja) | 2021-04-22 |
Family
ID=75486772
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019187862A Pending JP2021061984A (ja) | 2019-10-11 | 2019-10-11 | 画像表示方法および情報処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021061984A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11409372B1 (en) * | 2021-09-10 | 2022-08-09 | Woongjin Thinkbig Co., Ltd. | Apparatus for supporting a reading and method for detecting a user input using the same |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012146182A (ja) * | 2011-01-13 | 2012-08-02 | Kddi Corp | 爪領域検出装置およびネイルアートシミュレータ |
JP2014045927A (ja) * | 2012-08-31 | 2014-03-17 | Casio Comput Co Ltd | ネイルプリント装置及びネイルプリント装置の印刷制御方法 |
JP2014215735A (ja) * | 2013-04-24 | 2014-11-17 | 国立大学法人筑波大学 | 爪画像合成装置、爪画像合成方法および爪画像合成プログラム |
JP2016083206A (ja) * | 2014-10-27 | 2016-05-19 | 株式会社 ディー・エヌ・エー | 体の部位に装着される印刷商品を提供するシステム、プログラム及び方法 |
JP2016120051A (ja) * | 2014-12-25 | 2016-07-07 | カシオ計算機株式会社 | 描画装置、描画装置の動作制御方法及び描画装置の動作制御プログラム |
JP2017054254A (ja) * | 2015-09-08 | 2017-03-16 | 株式会社セガゲームス | 印刷シート作成プログラム |
JP2017512116A (ja) * | 2015-02-10 | 2017-05-18 | ビューティー プロモーションズ インコーポレイテッドBeauty promotions Inc. | ユーザーカスタマイズ形ネイル装飾付着物の提供方法 |
-
2019
- 2019-10-11 JP JP2019187862A patent/JP2021061984A/ja active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012146182A (ja) * | 2011-01-13 | 2012-08-02 | Kddi Corp | 爪領域検出装置およびネイルアートシミュレータ |
JP2014045927A (ja) * | 2012-08-31 | 2014-03-17 | Casio Comput Co Ltd | ネイルプリント装置及びネイルプリント装置の印刷制御方法 |
JP2014215735A (ja) * | 2013-04-24 | 2014-11-17 | 国立大学法人筑波大学 | 爪画像合成装置、爪画像合成方法および爪画像合成プログラム |
JP2016083206A (ja) * | 2014-10-27 | 2016-05-19 | 株式会社 ディー・エヌ・エー | 体の部位に装着される印刷商品を提供するシステム、プログラム及び方法 |
JP2016120051A (ja) * | 2014-12-25 | 2016-07-07 | カシオ計算機株式会社 | 描画装置、描画装置の動作制御方法及び描画装置の動作制御プログラム |
JP2017512116A (ja) * | 2015-02-10 | 2017-05-18 | ビューティー プロモーションズ インコーポレイテッドBeauty promotions Inc. | ユーザーカスタマイズ形ネイル装飾付着物の提供方法 |
JP2017054254A (ja) * | 2015-09-08 | 2017-03-16 | 株式会社セガゲームス | 印刷シート作成プログラム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11409372B1 (en) * | 2021-09-10 | 2022-08-09 | Woongjin Thinkbig Co., Ltd. | Apparatus for supporting a reading and method for detecting a user input using the same |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110059685B (zh) | 文字区域检测方法、装置及存储介质 | |
WO2019109801A1 (zh) | 拍摄参数的调整方法、装置、存储介质及移动终端 | |
EP2753075A1 (en) | Display apparatus and method for video calling thereof | |
US20120242852A1 (en) | Gesture-Based Configuration of Image Processing Techniques | |
CN110650379B (zh) | 视频摘要生成方法、装置、电子设备及存储介质 | |
CN111476780A (zh) | 一种图像检测方法、装置、电子设备以及存储介质 | |
CN112749613B (zh) | 视频数据处理方法、装置、计算机设备及存储介质 | |
US9628706B2 (en) | Method for capturing and displaying preview image and electronic device thereof | |
CN111880888B (zh) | 预览封面生成方法、装置、电子设备及存储介质 | |
KR20130117303A (ko) | 증강 현실 이미지를 디스플레이하기 위한 방법 및 그 전자 장치 | |
JP2011119974A (ja) | パノラマ画像合成装置、パノラマ画像合成方法、及びプログラム | |
US11416974B2 (en) | Image processing method and electronic device supporting the same | |
CN110769313A (zh) | 视频处理方法及装置、存储介质 | |
CN111447389A (zh) | 视频生成方法、装置、终端及存储介质 | |
CN110503159B (zh) | 文字识别方法、装置、设备及介质 | |
CN112052897A (zh) | 多媒体数据拍摄方法、装置、终端、服务器及存储介质 | |
CN112135191A (zh) | 视频编辑方法、装置、终端及存储介质 | |
CN113822798B (zh) | 生成对抗网络训练方法及装置、电子设备和存储介质 | |
CN110991445A (zh) | 竖排文字识别方法、装置、设备及介质 | |
CN112508959B (zh) | 视频目标分割方法、装置、电子设备及存储介质 | |
JP2021061984A (ja) | 画像表示方法および情報処理装置 | |
CN111353946A (zh) | 图像修复方法、装置、设备及存储介质 | |
CN112235650A (zh) | 视频处理方法、装置、终端及存储介质 | |
CN112822544A (zh) | 视频素材文件生成方法、视频合成方法、设备及介质 | |
JP2009015720A (ja) | 認識装置および認識方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20210729 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220609 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231003 |