JP2017167793A - 画像処理装置、画像処理方法、プログラムおよび記録媒体 - Google Patents
画像処理装置、画像処理方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP2017167793A JP2017167793A JP2016052081A JP2016052081A JP2017167793A JP 2017167793 A JP2017167793 A JP 2017167793A JP 2016052081 A JP2016052081 A JP 2016052081A JP 2016052081 A JP2016052081 A JP 2016052081A JP 2017167793 A JP2017167793 A JP 2017167793A
- Authority
- JP
- Japan
- Prior art keywords
- image
- person
- photographer
- images
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 60
- 238000003672 processing method Methods 0.000 title claims abstract description 16
- 238000004364 calculation method Methods 0.000 claims abstract description 36
- 239000002131 composite material Substances 0.000 claims description 88
- 238000004458 analytical method Methods 0.000 claims description 34
- 238000000605 extraction Methods 0.000 claims description 23
- 230000015572 biosynthetic process Effects 0.000 claims description 17
- 238000003786 synthesis reaction Methods 0.000 claims description 17
- 230000008921 facial expression Effects 0.000 claims description 15
- 238000010191 image analysis Methods 0.000 claims description 15
- 239000000284 extract Substances 0.000 claims description 11
- 230000014509 gene expression Effects 0.000 claims description 6
- 239000000203 mixture Substances 0.000 claims description 5
- 238000011156 evaluation Methods 0.000 description 91
- 238000013461 design Methods 0.000 description 43
- 238000010586 diagram Methods 0.000 description 42
- 238000007726 management method Methods 0.000 description 17
- 238000000034 method Methods 0.000 description 14
- 238000003825 pressing Methods 0.000 description 9
- 230000008859 change Effects 0.000 description 7
- 238000007405 data analysis Methods 0.000 description 7
- 230000007935 neutral effect Effects 0.000 description 6
- 230000005484 gravity Effects 0.000 description 4
- 235000010724 Wisteria floribunda Nutrition 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 230000001815 facial effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000037303 wrinkles Effects 0.000 description 3
- 206010011469 Crying Diseases 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 230000000386 athletic effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 239000012612 commercial material Substances 0.000 description 1
- 230000006854 communication Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 210000001061 forehead Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000037308 hair color Effects 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000007115 recruitment Effects 0.000 description 1
- 238000007665 sagging Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】本発明の画像処理装置、画像処理方法、プログラムおよび記録媒体においては、人物特定部が、各々の画像に写っている人物を判別し、判別した人物の中から1以上の第1人物を特定し、親密度算出部が、各々の画像における第1人物の存在および各々の画像の撮影者情報に基づいて、第1人物と各々の撮影者との親密度を算出する。
【選択図】図6
Description
また、実際に、複数のユーザが所有する複数の画像と、当該複数のユーザが寄せたメッセージなどを用いて1つのフォトブックを作成するサービスも行われている(非特許文献1〜3参照)。
複数のユーザの端末装置から、ネットワークを介して、複数の画像の各々を撮影した撮影者情報を取得する撮影者情報取得部と、
各々の画像の内容を解析する画像解析部と、
各々の画像の解析結果に基づいて、各々の画像に写っている人物を判別し、判別した人物の中から1以上の第1人物を特定する人物特定部と、
各々の画像における第1人物の存在および各々の画像の撮影者情報に基づいて、第1人物と各々の撮影者との親密度を算出する親密度算出部とを備える画像処理装置を提供する。
各々の画像の解析結果に基づいて、各々の画像に写っている人物の年齢および性別を判定する年齢性別判定部と、
テーマ、人物の年齢、人物の性別、および、各々の撮影者によって撮影された画像に写っている人物のうちの少なくとも1つに基づいて、第1人物と各々の撮影者との人間関係を判定する人間関係判定部とを備え、
親密度算出部は、さらに、第1人物と各々の撮影者との人間関係に基づいて、第1人物と各々のユーザとの親密度を算出することが好ましい。
年齢性別判定部は、各々の画像の解析結果に基づいて、複数のグループの各々に含まれる画像に写っている人物の年齢および性別を判定することが好ましい。
テーマ判定部は、さらに、各々の人物が写っている画像の数に基づいて、複数の画像のテーマのサブテーマを判定し、
人間関係判定部は、少なくともサブテーマに基づいて、第1人物と各々の撮影者との人間関係を判定することが好ましい。
合成対象画像を用いて合成画像を作成する合成画像作成部とを備えることが好ましい。
画像抽出部は、モードの情報に基づいて、第1モードに設定された場合に、第1人物との親密度が低い撮影者によって撮影された画像よりも、第1人物との親密度が高い撮影者によって撮影された画像を優先して、複数の画像の中から合成対象画像を抽出し、第2モードに設定された場合に、第1人物との親密度が高い撮影者によって撮影された画像よりも、第1人物との親密度が低い撮影者によって撮影された画像を優先して、複数の画像の中から合成対象画像を抽出し、第3モードに設定された場合に、第1人物と各々の撮影者との親密度に関わらず、複数の画像の中から合成対象画像を抽出することが好ましい。
画像取得部は、さらに、各々のユーザの顔画像を取得し、
人物特定部は、さらに、各々のユーザの顔画像に基づいて、複数の人物の中から、各々のユーザを特定し、
画像特定部は、さらに、特定された各々のユーザに基づいて、複数の画像の中から、各々のユーザに対応する各々の撮影者が写っている画像を特定し、
画像抽出部は、さらに、複数の画像の中から、重要人物との親密度が低い撮影者が写っている画像よりも、重要人物との親密度が高い撮影者が写っている画像を優先して合成対象画像を抽出することが好ましい。
撮影者情報取得部が、複数のユーザの端末装置から、ネットワークを介して、複数の画像の各々を撮影した撮影者情報を取得するステップと、
画像解析部が、各々の画像の内容を解析するステップと、
人物特定部が、各々の画像の解析結果に基づいて、各々の画像に写っている人物を判別し、判別した人物の中から1以上の第1人物を特定するステップと、
親密度算出部が、各々の画像における第1人物の存在および各々の画像の撮影者情報に基づいて、第1人物と各々の撮影者との親密度を算出するステップとを含む画像処理方法を提供する。
年齢性別判定部が、各々の画像の解析結果に基づいて、各々の画像に写っている人物の年齢および性別を判定するステップと、
人間関係判定部が、テーマ、人物の年齢、人物の性別、および、各々の撮影者によって撮影された画像に写っている人物のうちの少なくとも1つに基づいて、第1人物と各々の撮影者との人間関係を判定するステップとを含み、
親密度を算出するステップは、さらに、第1人物と各々の撮影者との人間関係に基づいて、第1人物と各々のユーザとの親密度を算出することが好ましい。
合成画像作成部が、合成対象画像を用いて合成画像を作成するステップとを含むことが好ましい。
画像取得部が、各々のユーザの顔画像を取得するステップと、
人物特定部が、各々のユーザの顔画像に基づいて、複数の人物の中から、各々のユーザを特定するステップと、
画像特定部が、特定された各々のユーザに基づいて、複数の画像の中から、各々のユーザに対応する各々の撮影者が写っている画像を特定するステップとを含み、
画像を抽出するステップは、さらに、複数の画像の中から、重要人物との親密度が低い撮影者が写っている画像よりも、第1人物との親密度が高い撮影者が写っている画像を優先して合成対象画像を抽出することが好ましい。
ただし、別の実施態様において、写真店が幹事の代行を請け負う場合のように幹事自体は写真もメッセージも提供しないような場合は、参加ユーザの数には幹事ユーザの数は含まないものとする。
また、画像商材には、各々サイズおよびページ数のうちの少なくとも一方が異なる複数種類の画像商材が含まれる。画像商材のページ数は、本編ページおよび寄せ書きページを含むページ数である。画像商品には、紙媒体の画像商品および電子データの画像商品が含まれる。
本発明にいうページとは、画像配置および寄せ書き配置を行う単位をいう。本実施形態においては、見開きページのことを指す。しかし他の実施形態においては片面ページであってもよい。また、本実施形態内の画像処理装置の内部では見開きページを単位とし、かつユーザには片面ページを単位として画像商材のページ数を表示することとしてもよい。
また、寄せ書きメッセージに加えて、プロフィール画像を寄せ書きページに配置してもよい。プロフィール画像は、例えば、参加ユーザの顔画像であるが、その他の画像でもよい。
また、合成画像の作成期間は、幹事ユーザが、複数のユーザの端末装置14から取得された複数の画像を用いて合成画像を作成するための期間、言い換えると、画像商品を注文する期限を表し、画像商品の配送日は、画像商品を配送する日付を表す。
画像の総合評価値は、画像の解析結果に加えて、参加ユーザによって付与された高評価および低評価を表す評価情報に基づいて算出されるため、画像の良し悪しに加えて、参加ユーザの好みを判断するための基準となり、総合評価値が高いほど、画質の良い画像、または、参加ユーザの好みの画像であると言える。
パブリックモードは、第1人物との親密度が高い撮影者によって撮影された画像よりも、第1人物との親密度が低い撮影者によって撮影された画像を優先して、複数の画像の中から合成対象画像を抽出するモードである。
ニュートラルモードは、第1人物と各々の撮影者との親密度に関わらず、複数の画像の中から合成対象画像を抽出するモードである。
(1)各々の人物が占める領域を特定し、デジタルスチルカメラ等の撮影装置と各々の人物が占める領域とを結ぶ最短距離
(2)各々の人物の顔が占める領域を特定し、撮影装置と各々の人物の顔が占める領域とを結ぶ最短距離
(3)各々の人物が占める領域の重心点を特定し、撮影装置と各々の人物が占める領域の重心点とを結ぶ最短距離
(4)各々の人物の顔が占める領域の重心点を特定し、撮影装置と各々の人物の顔が占める領域の重心点とを結ぶ最短距離
また、距離は、次の(1)〜(3)に示す距離のうちのいずれを用いてもよい。
(1)画像におけるピクセル数
(2)画像における画像の短辺または長辺との比率
(3)人物の顔の大きさから推定した、実際の距離
続いて、画像分割部86により、複数の画像を、それぞれ、複数の画像に写っている複数の人物の各々が写っている画像を含む複数のグループに分割する。つまり、各々のグループには、各々異なる人物が写っている画像が含まれる。
続いて、年齢性別判定部80により、各々の画像の解析結果に基づいて、複数のグループの各々に含まれる画像に写っている人物の年齢および性別を判定する。
続いて、人間関係判定部82により、テーマ、人物の年齢、人物の性別、および、各々の撮影者によって撮影された画像に写っている人物のうちの少なくとも1つに基づいて、第1人物と各々の撮影者との人間関係を判定する。
続いて、親密度算出部76により、第1人物と各々の撮影者との人間関係に基づいて、第1人物と各々のユーザとの親密度を算出する。
続いて、テーマ判定部78により、各々のグループに含まれる各々の人物が写っている画像の数に基づいて、複数の画像のテーマのサブテーマを判定する。
続いて、人間関係判定部82により、サブテーマ、人物の年齢、人物の性別、および、各々の撮影者によって撮影された画像に写っている人物のうち、少なくともサブテーマに基づいて、第1人物と各々の撮影者との人間関係を判定する。
続いて、親密度算出部76により、第1人物と各々の撮影者との人間関係に基づいて、第1人物と各々のユーザとの親密度を算出する。
また、撮影期間が数時間、撮影日数が1日、画像内容が指輪、料理、ケーキ等、撮影場所の範囲が中〜小であれば、テーマ判定部78は、テーマが結婚である判定することができる。
撮影期間が1年、撮影日数が多数、画像内容が多数の人物、撮影場所の範囲が中〜大であれば、テーマ判定部78は、テーマが卒業アルバムまた卒園アルバムであると判定することができる。
また、第2グループに含まれる画像に写っている人物の年齢が30台、性別が女性であり、この人物によって撮影された画像に写っている人物が、第1グループおよび第3グループに含まれる画像に写っている二人の人物であれば、第2グループに含まれる画像に写っている人物が撮影者であり、この撮影者は子供の母親であると判定する。
また、第3グループに含まれる画像に写っている人物の年齢が30台、性別が男性であり、この人物によって撮影された画像に写っている人物が、第1グループおよび第2グループに含まれる画像に写っている二人の人物であれば、第3グループに含まれる画像に写っている人物が撮影者であり、この撮影者は子供の父親であると判定する。
この場合、画像抽出部88は、例えば、複数の画像の中から、第1人物である子供が写っている画像を最優先に抽出し、撮影者である母親および父親の各々が写っている画像を均等に抽出することができる。
この場合、画像抽出部88は、例えば、複数の画像の中から、各々の友人が写っている画像を均等に抽出することができる。
この場合、画像抽出部88は、例えば、新郎新婦と各々の撮影者との親密度に基づいて、複数の画像の中から、各々の撮影者によって撮影された画像を抽出することができる。
これにより、幹事ユーザは、デフォルトのモードを使用する場合に、モードを設定する手間を省くことができる。また、幹事ユーザは、デフォルトのモードから他の任意のモードに随時自由に変更することができる。
この場合、複数の画像の中から、第1人物との親密度がより高い撮影者によって撮影された画像をより多く抽出することができるため、プライベート感が高い合成画像を作成することができる。
この場合、複数の画像の中から、第1人物との親密度がより低い撮影者によって撮影された画像をより多く抽出することができるため、パブリック感が高い合成画像を作成することができる。
この場合、複数の画像の中から、第1人物と撮影者との親密度に関わらず画像を抽出することができるため、プライベート感およびパブリック感に拘らないニュートラル感の高い合成画像を作成することができる。
続いて、画像特定部74により、人物特定部72によって特定された各々のユーザに基づいて、複数の画像の中から、各々のユーザに対応する各々の撮影者が写っている画像を特定する。
続いて、画像抽出部88により、複数の画像の中から、重要人物取得部98によって取得された重要人物との親密度が低い撮影者が写っている画像よりも、重要人物との親密度が高い撮影者が写っている画像を優先して合成対象画像を抽出する。つまり、複数の画像の中から、重要人物との親密度がより高い撮影者が写っている画像を、より多くの枚数抽出する。
また、上記実施形態では、サーバ12が情報設定部18、情報管理部20、データ取得部22、データ解析部24および合成画像作成部26を備えているが、これらのうちの少なくとも1つをユーザの端末装置14が備えていてもよい。
本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
12 サーバ
14 端末装置(クライアント)
16 ネットワーク
18 情報設定部
20 情報管理部
22 データ取得部
24 データ解析部
26 合成画像作成部
28 予算設定部
30 商材取得部
32 表紙デザイン設定部
34 寄せ書きデザイン設定部
36 日程設定部
38 設定保存部
40 アカウント情報保存部
42 管理画面情報送付部
44 アップロード催促部
46 画像取得部
48 評価情報取得部
50 メッセージ取得部
52 画像数算出部
54 評価数算出部
56 メッセージ数算出部
58 画像解析部
60 評価値算出部
62 表紙作成部
64 本編作成部
66 寄せ書き作成部
68 画像表示部
70 指示入力部
72 人物特定部
74 画像特定部
76 親密度算出部
78 テーマ判定部
80 年齢性別判定部
82 人間関係判定部
84 モード設定部
86 画像分割部
88 画像抽出部
90 画像配置部
92 メッセージ分割部
94 メッセージ配置部
96 撮影者情報取得部
98 重要人物取得部
Claims (26)
- 複数のユーザの端末装置から、ネットワークを介して、複数の画像を取得する画像取得部と、
前記複数のユーザの端末装置から、前記ネットワークを介して、前記複数の画像の各々を撮影した撮影者情報を取得する撮影者情報取得部と、
前記各々の画像の内容を解析する画像解析部と、
前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物を判別し、前記判別した人物の中から1以上の第1人物を特定する人物特定部と、
前記各々の画像における前記第1人物の存在および前記各々の画像の撮影者情報に基づいて、前記第1人物と前記各々の撮影者との親密度を算出する親密度算出部とを備える画像処理装置。 - 前記親密度算出部は、画像を占める割合が第1閾値を超えるまたは撮影距離が第2閾値未満である前記第1人物が写っている画像を撮影した枚数が少ない撮影者よりも、前記割合が前記第1閾値を超えるまたは前記撮影距離が前記第2閾値未満である前記第1人物が写っている画像を撮影した枚数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1に記載の画像処理装置。
- 前記親密度算出部は、特定の表情を有している前記第1人物が写っている画像を撮影した枚数が少ない撮影者よりも、前記特定の表情を有している前記第1人物が写っている画像を撮影した枚数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1または2に記載の画像処理装置。
- 前記親密度算出部は、少ない種類の表情の前記第1人物が写っている画像を撮影した撮影者よりも、多くの種類の表情の前記第1人物が写っている画像を撮影した撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1ないし3のいずれか一項に記載の画像処理装置。
- 前記親密度算出部は、前記第1人物が写っている画像を撮影した枚数が少ない撮影者よりも、前記第1人物が写っている画像を撮影した枚数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1ないし4のいずれか一項に記載の画像処理装置。
- 前記親密度算出部は、前記第1人物が写っている画像を撮影した日数が少ない撮影者よりも、前記第1人物が写っている画像を撮影した日数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1ないし5のいずれか一項に記載の画像処理装置。
- 前記親密度算出部は、前記第1人物が写っている画像を撮影した場所の数が少ない撮影者よりも、前記第1人物が写っている画像を撮影した場所の数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1ないし6のいずれか一項に記載の画像処理装置。
- 前記親密度算出部は、前記第1人物が写っている画像を撮影した時間帯の数が少ない撮影者よりも、前記第1人物が写っている画像を撮影した時間帯の数が多い撮影者を、前記第1人物との親密度が高い撮影者であると算出する請求項1ないし7のいずれか一項に記載の画像処理装置。
- さらに、前記各々の画像の解析結果と、前記複数の画像の撮影期間、撮影日数、撮影枚数および撮影場所のうちの少なくとも1つとに基づいて、前記複数の画像のテーマを判定するテーマ判定部と、
前記各々の画像の解析結果に基づいて、前記前記各々の画像に写っている人物の年齢および性別を判定する年齢性別判定部と、
前記テーマ、前記人物の年齢、前記人物の性別、および、前記各々の撮影者によって撮影された画像に写っている人物のうちの少なくとも1つに基づいて、前記第1人物と前記各々の撮影者との人間関係を判定する人間関係判定部とを備え、
前記親密度算出部は、さらに、前記第1人物と前記各々の撮影者との人間関係に基づいて、前記第1人物と前記各々のユーザとの親密度を算出する請求項1ないし8のいずれか一項に記載の画像処理装置。 - さらに、前記複数の画像を、それぞれ、前記各々の人物が写っている画像を含む複数のグループに分割する画像分割部を備え、
前記年齢性別判定部は、前記各々の画像の解析結果に基づいて、前記複数のグループの各々に含まれる画像に写っている人物の年齢および性別を判定する請求項9に記載の画像処理装置。 - さらに、各々の前記人物が写っている画像の数を算出する画像数算出部を備え、
前記テーマ判定部は、さらに、前記各々の人物が写っている画像の数に基づいて、前記複数の画像のテーマのサブテーマを判定し、
前記人間関係判定部は、少なくとも前記サブテーマに基づいて、前記第1人物と前記各々の撮影者との人間関係を判定する請求項9または10に記載の画像処理装置。 - さらに、前記第1人物と前記各々の撮影者との親密度に基づいて、前記複数の画像の中から、合成画像において使用する画像を合成対象画像として抽出する画像抽出部と、
前記合成対象画像を用いて前記合成画像を作成する合成画像作成部とを備える請求項1ないし11のいずれか一項に記載の画像処理装置。 - 前記画像抽出部は、前記第1人物との親密度が低い撮影者によって撮影された画像よりも、前記第1人物との親密度が高い撮影者によって撮影された画像を優先して、前記複数の画像の中から前記合成対象画像を抽出する請求項12に記載の画像処理装置。
- 前記画像抽出部は、前記第1人物との親密度が高い撮影者によって撮影された画像よりも、前記第1人物との親密度が低い撮影者によって撮影された画像を優先して、前記複数の画像の中から前記合成対象画像を抽出する請求項12に記載の画像処理装置。
- さらに、第1モード、第2モードおよび第3モードの中から前記複数のユーザのうちの第1ユーザによって設定された1つのモードの情報を、前記ネットワークを介して、前記第1ユーザの端末装置から取得するモード設定部を備え、
前記画像抽出部は、前記モードの情報に基づいて、前記第1モードに設定された場合に、前記第1人物との親密度が低い撮影者によって撮影された画像よりも、前記第1人物との親密度が高い撮影者によって撮影された画像を優先して、前記複数の画像の中から前記合成対象画像を抽出し、前記第2モードに設定された場合に、前記第1人物との親密度が高い撮影者によって撮影された画像よりも、前記第1人物との親密度が低い撮影者によって撮影された画像を優先して、前記複数の画像の中から前記合成対象画像を抽出し、前記第3モードに設定された場合に、前記第1人物と前記各々の撮影者との親密度に関わらず、前記複数の画像の中から前記合成対象画像を抽出する請求項12に記載の画像処理装置。 - さらに、前記各々の画像の前記撮影者情報に基づいて、前記複数の画像の中から、前記複数のユーザの各々に対応する複数の撮影者の各々によって撮影された画像を特定する画像特定部を備える請求項12ないし15のいずれか一項に記載の画像処理装置。
- さらに、前記各々の画像の付帯情報に含まれる前記各々の画像の撮影者の情報に基づいて、前記複数の画像の中から、前記複数のユーザの各々に対応する複数の撮影者の各々によって撮影された画像を特定する画像特定部を備える請求項12ないし15のいずれか一項に記載の画像処理装置。
- さらに、前記画像取得部によって前記各々のユーザの端末装置から前記各々の画像が取得された場合に、前記各々の画像が取得された各々の端末装置のユーザが、前記取得された各々の画像を撮影した各々の撮影者であると判断し、前記複数の画像の中から、前記複数のユーザの各々に対応する複数の撮影者の各々によって撮影された画像を特定する画像特定部を備える請求項12ないし15のいずれか一項に記載の画像処理装置。
- さらに、前記第1人物の中から重要人物を取得する重要人物取得部を備え、
前記画像取得部は、さらに、前記各々のユーザの顔画像を取得し、
前記人物特定部は、さらに、前記各々のユーザの顔画像に基づいて、前記複数の人物の中から、前記各々のユーザを特定し、
前記画像特定部は、さらに、前記特定された各々のユーザに基づいて、前記複数の画像の中から、前記各々のユーザに対応する前記各々の撮影者が写っている画像を特定し、
前記画像抽出部は、さらに、前記複数の画像の中から、前記重要人物との親密度が低い撮影者が写っている画像よりも、前記重要人物との親密度が高い撮影者が写っている画像を優先して前記合成対象画像を抽出する請求項16ないし18のいずれか一項に記載の画像処理装置。 - 画像取得部が、複数のユーザの端末装置から、ネットワークを介して、複数の画像を取得するステップと、
撮影者情報取得部が、前記複数のユーザの端末装置から、前記ネットワークを介して、前記複数の画像の各々を撮影した撮影者情報を取得するステップと、
画像解析部が、前記各々の画像の内容を解析するステップと、
人物特定部が、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物を判別し、前記判別した人物の中から1以上の第1人物を特定するステップと、
親密度算出部が、前記各々の画像における前記第1人物の存在および前記各々の画像の撮影者情報に基づいて、前記第1人物と前記各々の撮影者との親密度を算出するステップとを含む画像処理方法。 - さらに、テーマ判定部が、前記各々の画像の解析結果と、前記複数の画像の撮影期間、撮影日数、撮影枚数および撮影場所のうちの少なくとも1つとに基づいて、前記複数の画像のテーマを判定するステップと、
年齢性別判定部が、前記各々の画像の解析結果に基づいて、前記各々の画像に写っている人物の年齢および性別を判定するステップと、
人間関係判定部が、前記テーマ、前記人物の年齢、前記人物の性別、および、前記各々の撮影者によって撮影された画像に写っている人物のうちの少なくとも1つに基づいて、前記第1人物と前記各々の撮影者との人間関係を判定するステップとを含み、
前記親密度を算出するステップは、さらに、前記第1人物と前記各々の撮影者との人間関係に基づいて、前記第1人物と前記各々のユーザとの親密度を算出する請求項20に記載の画像処理方法。 - さらに、画像抽出部が、前記第1人物と前記各々の撮影者との親密度に基づいて、前記複数の画像の中から、合成画像において使用する画像を合成対象画像として抽出するステップと、
合成画像作成部が、前記合成対象画像を用いて前記合成画像を作成するステップとを含む請求項20または21に記載の画像処理方法。 - さらに、画像特定部が、前記各々の画像の前記撮影者情報に基づいて、前記複数の画像の中から、前記複数のユーザの各々に対応する複数の撮影者の各々によって撮影された画像を特定するステップを含む請求項22に記載の画像処理方法。
- さらに、重要人物取得部が、前記第1人物の中から重要人物を取得するステップと、
前記画像取得部が、前記各々のユーザの顔画像を取得するステップと、
前記人物特定部が、前記各々のユーザの顔画像に基づいて、前記複数の人物の中から、前記各々のユーザを特定するステップと、
前記画像特定部が、前記特定された各々のユーザに基づいて、前記複数の画像の中から、前記各々のユーザに対応する前記各々の撮影者が写っている画像を特定するステップとを含み、
前記画像を抽出するステップは、さらに、前記複数の画像の中から、前記重要人物との親密度が低い撮影者が写っている画像よりも、前記第1人物との親密度が高い撮影者が写っている画像を優先して前記合成対象画像を抽出する請求項23に記載の画像処理方法。 - 請求項20ないし24のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラム。
- 請求項20ないし24のいずれか一項に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016052081A JP6533481B2 (ja) | 2016-03-16 | 2016-03-16 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
US15/439,971 US10262193B2 (en) | 2016-03-16 | 2017-02-23 | Image processing apparatus and method which determine an intimacy between a person in an image and a photographer of the image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016052081A JP6533481B2 (ja) | 2016-03-16 | 2016-03-16 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017167793A true JP2017167793A (ja) | 2017-09-21 |
JP6533481B2 JP6533481B2 (ja) | 2019-06-19 |
Family
ID=59855701
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016052081A Active JP6533481B2 (ja) | 2016-03-16 | 2016-03-16 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10262193B2 (ja) |
JP (1) | JP6533481B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019067067A (ja) * | 2017-09-29 | 2019-04-25 | Kddi株式会社 | 判定装置、判定方法及び情報提供システム |
JP2021099748A (ja) * | 2019-12-23 | 2021-07-01 | 株式会社ミクシィ | 情報処理装置、制御プログラム、及び制御方法 |
JP7193663B1 (ja) | 2022-01-18 | 2022-12-20 | 株式会社エクサウィザーズ | 情報処理装置、情報処理プログラム、及び情報処理方法 |
WO2023007955A1 (ja) * | 2021-07-28 | 2023-02-02 | 株式会社iUM | 生成システム、及び生成プログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6533481B2 (ja) * | 2016-03-16 | 2019-06-19 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
US11169661B2 (en) * | 2017-05-31 | 2021-11-09 | International Business Machines Corporation | Thumbnail generation for digital images |
US11163940B2 (en) * | 2019-05-25 | 2021-11-02 | Microsoft Technology Licensing Llc | Pipeline for identifying supplemental content items that are related to objects in images |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004127285A (ja) * | 2002-09-13 | 2004-04-22 | Sony Corp | 画像認識装置、画像認識処理方法および画像認識プログラム |
JP2011514575A (ja) * | 2008-01-25 | 2011-05-06 | イーストマン コダック カンパニー | 個人的写真集合からの社会的関係の割出し |
WO2013132557A1 (ja) * | 2012-03-05 | 2013-09-12 | パナソニック株式会社 | コンテンツ加工装置とその集積回路、方法、およびプログラム |
JP2014225206A (ja) * | 2013-05-17 | 2014-12-04 | 株式会社Nttドコモ | 情報処理装置及び情報処理方法 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4719335B2 (ja) | 2000-04-13 | 2011-07-06 | 楽天株式会社 | 寄せ書き管理装置及び寄せ書き管理方法 |
US7634106B2 (en) * | 2004-09-22 | 2009-12-15 | Fujifilm Corporation | Synthesized image generation method, synthesized image generation apparatus, and synthesized image generation program |
JP2006295890A (ja) * | 2005-03-15 | 2006-10-26 | Fuji Photo Film Co Ltd | アルバム作成装置、アルバム作成方法、及びプログラム |
WO2006127660A2 (en) * | 2005-05-23 | 2006-11-30 | Picateers, Inc. | System and method for collaborative image selection |
JP4762731B2 (ja) * | 2005-10-18 | 2011-08-31 | 富士フイルム株式会社 | アルバム作成装置、アルバム作成方法、およびアルバム作成プログラム |
JP2007166594A (ja) * | 2005-11-17 | 2007-06-28 | Fujifilm Corp | アルバム作成システム、アルバム作成方法、およびアルバム作成プログラム |
US8812582B2 (en) * | 2006-11-30 | 2014-08-19 | Red Hat, Inc. | Automated screen saver with shared media |
JP2008257308A (ja) | 2007-03-31 | 2008-10-23 | Fujifilm Graphic Systems Co Ltd | アルバム制作システムおよびサーバ装置 |
JP2009259238A (ja) * | 2008-03-26 | 2009-11-05 | Fujifilm Corp | 画像シェアリング用保存装置、画像シェアリングシステムおよび方法 |
JP5251547B2 (ja) * | 2008-06-06 | 2013-07-31 | ソニー株式会社 | 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム |
US8477207B2 (en) * | 2008-06-06 | 2013-07-02 | Sony Corporation | Image capturing apparatus, image capturing method, and computer program |
WO2010087818A1 (en) * | 2009-01-28 | 2010-08-05 | Hewlett-Packard Development Company, L.P. | Dynamic image collage |
US20110029860A1 (en) * | 2009-07-30 | 2011-02-03 | Ptucha Raymond W | Artistic digital template for image display |
US8988456B2 (en) * | 2010-03-25 | 2015-03-24 | Apple Inc. | Generating digital media presentation layouts dynamically based on image features |
JPWO2012070430A1 (ja) * | 2010-11-24 | 2014-05-19 | 日本電気株式会社 | 感性表現語処理装置、感性表現語処理方法および感性表現語処理プログラム |
US20130147933A1 (en) * | 2011-12-09 | 2013-06-13 | Charles J. Kulas | User image insertion into a text message |
US9256620B2 (en) * | 2011-12-20 | 2016-02-09 | Amazon Technologies, Inc. | Techniques for grouping images |
JP6012309B2 (ja) * | 2012-07-09 | 2016-10-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
US20140161356A1 (en) * | 2012-12-10 | 2014-06-12 | Rawllin International Inc. | Multimedia message from text based images including emoticons and acronyms |
JP5936658B2 (ja) * | 2013-09-24 | 2016-06-22 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
JP5931829B2 (ja) * | 2013-09-30 | 2016-06-08 | 富士フイルム株式会社 | 合成画像作成アシスト装置、合成画像作成アシスト方法、合成画像作成アシストプログラムおよびその記録媒体 |
WO2015102338A1 (ko) * | 2014-01-06 | 2015-07-09 | 엘지전자 주식회사 | 이동 단말기 및 그 제어 방법 |
JP6415817B2 (ja) | 2014-01-14 | 2018-10-31 | 株式会社yosetti | 寄せ書きシステム提供サーバ、寄せ書きシステム提供方法、および、寄せ書きシステム提供プログラム |
US9043196B1 (en) * | 2014-07-07 | 2015-05-26 | Machine Zone, Inc. | Systems and methods for identifying and suggesting emoticons |
US9779532B2 (en) * | 2014-07-31 | 2017-10-03 | Emonster, Inc. | Customizable animations for text messages |
US10334158B2 (en) * | 2014-11-03 | 2019-06-25 | Robert John Gove | Autonomous media capturing |
US20160180560A1 (en) * | 2014-12-17 | 2016-06-23 | Created To Love, Inc. | Image insertion in a message |
JP6533481B2 (ja) * | 2016-03-16 | 2019-06-19 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
KR20180057366A (ko) * | 2016-11-22 | 2018-05-30 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
-
2016
- 2016-03-16 JP JP2016052081A patent/JP6533481B2/ja active Active
-
2017
- 2017-02-23 US US15/439,971 patent/US10262193B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004127285A (ja) * | 2002-09-13 | 2004-04-22 | Sony Corp | 画像認識装置、画像認識処理方法および画像認識プログラム |
JP2011514575A (ja) * | 2008-01-25 | 2011-05-06 | イーストマン コダック カンパニー | 個人的写真集合からの社会的関係の割出し |
WO2013132557A1 (ja) * | 2012-03-05 | 2013-09-12 | パナソニック株式会社 | コンテンツ加工装置とその集積回路、方法、およびプログラム |
JP2014225206A (ja) * | 2013-05-17 | 2014-12-04 | 株式会社Nttドコモ | 情報処理装置及び情報処理方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019067067A (ja) * | 2017-09-29 | 2019-04-25 | Kddi株式会社 | 判定装置、判定方法及び情報提供システム |
JP2021099748A (ja) * | 2019-12-23 | 2021-07-01 | 株式会社ミクシィ | 情報処理装置、制御プログラム、及び制御方法 |
JP7485893B2 (ja) | 2019-12-23 | 2024-05-17 | 株式会社Mixi | 情報処理装置、制御プログラム、及び制御方法 |
WO2023007955A1 (ja) * | 2021-07-28 | 2023-02-02 | 株式会社iUM | 生成システム、及び生成プログラム |
JP7343202B2 (ja) | 2021-07-28 | 2023-09-12 | 株式会社iUM | 生成システム、及び生成プログラム |
JP7193663B1 (ja) | 2022-01-18 | 2022-12-20 | 株式会社エクサウィザーズ | 情報処理装置、情報処理プログラム、及び情報処理方法 |
JP2023104685A (ja) * | 2022-01-18 | 2023-07-28 | 株式会社エクサウィザーズ | 情報処理装置、情報処理プログラム、及び情報処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6533481B2 (ja) | 2019-06-19 |
US10262193B2 (en) | 2019-04-16 |
US20170270353A1 (en) | 2017-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6533481B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
JP5655112B2 (ja) | 合成画像作成システム、画像処理装置および画像処理方法 | |
JP5719406B2 (ja) | 合成画像作成システム、画像処理装置および画像処理方法 | |
JP6858865B2 (ja) | 画像を共有する自動提案 | |
TWI522821B (zh) | 相片管理系統 | |
US8190639B2 (en) | Ordering content in social networking applications | |
JP7111632B2 (ja) | 画像候補決定装置,画像候補決定方法,ならびに画像候補決定装置を制御するプログラムおよびそのプログラムを格納した記録媒体 | |
US20120265758A1 (en) | System and method for gathering, filtering, and displaying content captured at an event | |
JP6595956B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
US20120210200A1 (en) | System, method, and touch screen graphical user interface for managing photos and creating photo books | |
US10990824B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
JP2019185747A (ja) | メディアオブジェクトをグループ化するコンピュータ実装方法及びプログラム、並びに画像取り込み装置 | |
US20110099089A1 (en) | System and Methods for Event Networking, Media Sharing, and Product Creation | |
JP2013003630A (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
US10783355B2 (en) | Image processing system, image processing method, program, and recording medium | |
JP6674798B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
JP6502280B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
JP6502272B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
US10846771B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
KR101837030B1 (ko) | 인터렉티브한 디스플레이 장치를 이용한 방명록 서비스 제공 시스템 | |
WO2017169963A1 (ja) | 画像処理システム、画像処理方法、プログラムおよび記録媒体 | |
TWI621954B (zh) | 影像檔案分類方法及系統 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180207 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190131 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190401 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190524 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6533481 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |