JP2022094784A - コンテンツ提案装置、感情測定端末、コンテンツ提案システム、及びプログラム - Google Patents

Abstract

【課題】視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案するコンテンツ提案装置を提供する。【解決手段】コンテンツ提案システムにおいて、コンテンツ提案装置３は、コンテンツを視聴する視聴者情報を感情測定端末２（端末２）から受信する視聴者情報受信部３１１と、端末２コンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を視聴者情報に基づいて生成可能なコンテンツ提案情報生成部３１２と、端末２にコンテンツ提案情報を送信可能なコンテンツ提案情報送信部３１３と、を備える。視聴者情報は、少なくとも、視聴者の感情に関する感情指数情報と、端末２の表示部２５に設けられた画面表示領域のうち、視聴者が注視する領域に関する注視領域情報と、を含む。感情指数情報及び注視領域情報は、視聴者が視聴したコンテンツの視聴履歴と関連付けられている。【選択図】図１

Description

本発明は、コンテンツ提案装置、感情測定端末、コンテンツ提案システム、及びプログラムに関する。

動画、画像、文章、及びウェブサイト等によって例示されるコンテンツを視聴することが広く行われている。コンテンツを視聴する視聴者が視聴可能なコンテンツの数は、ますます増加している。コンテンツの数が増加するに伴い、視聴者の好みは、ますます多様化している。そのため、視聴者の好みを把握し、視聴者の好みに合うコンテンツを多くのコンテンツの中から探し出して視聴者に提供することは、ますます困難になっている。視聴者の感情を解析できれば、視聴者の感情に基づいて視聴者の好みを把握し得る。したがって、視聴者の感情に基づいて選択したコンテンツの視聴を視聴者に提案できれば、視聴者は、多くのコンテンツの中から好みに合うコンテンツを探し出す労力を費やすことなく、好みに合うコンテンツを視聴して楽しみ得る。

視聴者の感情に基づいて選択したコンテンツの視聴を提案することに関し、特許文献１は、ユーザの顔を認識する顔認識エンジン及び顔表現に関する情報を含む顔表現ライブラリ等を用いてデバイスの認識範囲内のユーザ及びユーザの感情的状態、気分、及び／又はコンテンツに対する注意深さ等を特定し、ユーザの感情的状態、気分、及び／又はコンテンツに対する注意深さ等に基づいてユーザにコンテンツを提供し得る方法を開示している。

特表２０１４－５０２４５４号公報

スマートフォン、タブレット端末、及びパーソナルコンピュータによって例示される端末の画面表示領域にコンテンツを表示する場合、画面表示領域には、領域ごとに異なる複数の視聴対象が表示され得る。例えば、画面表示領域の右側の領域にツッコミを担当する芸人が表示され、左側の領域にボケを担当する芸人が表示される場合があり得る。あるいは、画面表示領域の上側の領域に芸人たちがコントを行う動画が表示され、下側の領域に笑いを誘う文章が表示される場合があり得る。このような場合において、視聴者の注意及び／又は感情が複数ある視聴対象のいずれに向けられたものであるかを判別できれば、視聴者の注意及び／又は感情を向けられた視聴対象に類似した視聴対象等を含むコンテンツを選択して、該コンテンツの視聴を提案し得る。したがって、視聴者の注意及び／又は感情が複数ある視聴対象のいずれに向けられたものであるかを判別しない場合と比べて、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

しかしながら、特許文献１の方法は、ユーザの感情的状態、気分、及び／又はコンテンツに対する注意深さに基づいてコンテンツをユーザに提供し得るにとどまる。特許文献１の方法は、ユーザの顔を認識するものの、ユーザの識別と顔表現ライブラリを用いた感情的状態又は気分の特定とコンテンツに対する注意深さの確認とに認識された顔を利用するにとどまり、視聴者の注意及び／又は感情が画面表示領域の領域ごとに表示された複数の視聴対象のいずれに向けられたものであるかの判別を行わない。したがって、特許文献１の方法は、視聴者の注意及び／又は感情が画面表示領域の領域ごとに表示された複数の視聴対象のいずれに向けられたものであるかに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することにおいて、改善の余地がある。

また、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することに関し、処理リソースの課題もある。視聴者の感情を解析することや、解析された感情等に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することは、多大な処理リソースを要求し得る。したがって、視聴者が用いる端末がスマートフォン等によって例示される携帯端末である場合等の端末が提供可能な処理リソースが比較的少ない場合、該端末を用いて視聴者の感情等を解析することや、該端末を用いて解析された感情等に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することは、容易ではない。特許文献１の方法は、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合において、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することについても、なおいっそう改善の余地がある。

本発明は、このような事情に鑑みてなされたものであり、その目的は、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能なコンテンツ提案装置等を提供することである。

本発明者らは、上記課題を解決するために鋭意検討した結果、視聴者の視点の動きと視聴者の顔の動きとを用いて解析等された感情指数及び注視領域等を含む視聴者情報に基づいてコンテンツの視聴を提案することで、上記の目的を達成できることを見出し、本発明を完成させるに至った。具体的に、本発明は以下のものを提供する。

第１の特徴に係る発明は、コンテンツを視聴する視聴者に関する視聴者情報を外部端末から受信する視聴者情報受信部と、前記外部端末にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を前記視聴者情報に基づいて生成可能なコンテンツ提案情報生成部と、前記外部端末に前記コンテンツ提案情報を送信可能なコンテンツ提案情報送信部と、を備え、前記視聴者情報は、少なくとも、前記視聴者の感情に関する感情指数情報と、前記外部端末における画面表示領域のうち、前記視聴者が注視する領域に関する注視領域情報と、を含み、前記感情指数情報及び前記注視領域情報は、前記視聴者が視聴した前記コンテンツの視聴履歴と関連付けられている、コンテンツ提案装置を提供する。

視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することに関し、端末の画面表示領域にコンテンツを表示する場合、画面表示領域には、領域ごとに異なる複数の視聴対象が表示され得る。このような場合において、視聴者の注意及び／又は感情が複数の視聴対象のいずれに向けられたものであるかを判別できれば、視聴者の注意及び／又は感情を向けられた視聴対象に類似した視聴対象等を含むコンテンツを選択して、該コンテンツの視聴を提案し得る。したがって、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

第１の特徴によれば、外部端末から受信した視聴者情報に基づいて生成されたコンテンツ提案情報を介して、外部端末にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を生成する。このため、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを外部端末において必要とすることがない。したがって、外部端末がスマートフォン等によって例示される携帯端末である場合等の外部端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

視聴者情報は、視聴者の感情に関する感情指数情報と、外部端末における画面表示領域のうち、視聴者が注視する領域に関する注視領域情報とを含むため、視聴者の感情と、画面表示領域のうち視聴者が注視する領域と、に基づいてコンテンツ提案情報が生成され得る。そして、生成されたコンテンツ提案情報を介して、外部端末にコンテンツの視聴を提案する画面を表示させ得る。すなわち、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

第１の特徴によれば、感情指数情報及び注視領域情報は、視聴者が視聴したコンテンツの視聴履歴と関連付けられているため、単に視聴者の感情又は注視する領域に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案するにとどまらず、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案する、あるいは、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案する等し得る。

したがって、第１の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能なコンテンツ提案装置を提供できる。

第２の特徴に係る発明は、第１の特徴に係る発明であって、前記視聴者情報は、前記視聴者の生体情報をさらに含み、前記生体情報は、前記視聴履歴と関連付けられている、コンテンツ提案装置を提供する。

心拍数、血圧、及び体温等によって例示される生体情報は、感情に応じて変化することが知られている。第２の特徴に係る発明によれば、視聴履歴と関連付けられた生体情報を用いて、生体情報を用いない場合と比べて視聴者の感情を詳細に解析し得る。これにより、生体情報を用いない場合と比べて、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情をより詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

第２の特徴に係る発明によれば、受信した生体情報を含む視聴者情報に基づいてコンテンツ提案情報を生成するため、外部端末がスマートフォン等によって例示される携帯端末である場合等の外部端末が提供可能な処理リソースが比較的少なく、外部端末において生体情報を用いた感情の解析等を行えない場合であっても、生体情報を用いて視聴者の好みにより合ったコンテンツの視聴を提案し得る。

したがって、第２の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性が生体情報を用いない場合より高いコンテンツの視聴を提案可能なコンテンツ提案装置を提供できる。

第３の特徴に係る発明は、コンテンツを視聴する視聴者の顔に関する特徴点を取得する特徴点取得部と、前記特徴点を用いて前記視聴者の視点の動きを解析する視点動き解析部と、前記特徴点を用いて前記視聴者の顔の動きを解析する顔動き解析部と、前記視点の動きと前記顔の動きとを用いて前記視聴者の感情に関する感情指数情報を生成する感情指数情報生成部と、前記視点の動きと前記顔の動きとを用いて、画面表示領域のうち、前記視聴者が注視する領域に関する注視領域情報を解析する注視領域情報解析部と、前記視聴者が視聴した前記コンテンツの視聴履歴と関連付けられた前記感情指数情報と前記視聴履歴と関連付けられた前記注視領域とを含む視聴者情報を外部装置に送信する視聴者情報送信部と、前記視聴者情報に基づいて前記画面表示領域にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を前記外部装置から受信するコンテンツ提案情報受信部と、前記コンテンツ提案情報を用いて前記画面表示領域に前記コンテンツの視聴を提案する画面を表示するコンテンツ提案画面表示部と、を備える、感情測定端末を提供する。

表情による顔の動きは、感情を判断するための重要な判断材料である。顔の動きに加えて視点の動きを用いて感情を判断すれば、コンテンツに対する興味の度合いを含む視聴者の感情を判断し得る。すなわち、顔の動きと視点の動きとを用いれば、顔の動きのみを用いる場合より視聴者の感情を詳細に判断し得る。しかしながら、顔を映した映像等から顔の動きを解析する処理は、顔の動きの解析に用いる顔の特徴点を取得する処理等において多くの処理リソースを要求し得る。顔を映した映像等から視点の動きを解析する処理もまた、視点の動きの解析に用いる顔の特徴点を取得する処理等において多くの処理リソースを要求し得る。これらを同時に実行すると多大な処理リソースを必要とし得るため、視聴者が用いる端末が提供可能な処理リソースを上回り得る。したがって、視聴者が用いる端末において、限られた処理リソースを用いて顔の動きと視点の動きとを同時に解析することは、容易ではない。限られた処理リソースを用いて顔の動きと視点の動きとを同時に解析することに関し、解析に要する処理リソースを減らすために特徴点を取得する手順そのものを簡易な手順にすると、取得された特徴点の精度が下がり得る。したがって、特徴点に基づいて解析される視聴者の感情及び注視する領域が不正確になり得る。

第３の特徴に係る発明によれば、まず、視聴者の顔に関する特徴点を取得し、続いて、取得した特徴点を用いて顔の動き及び視点の動きを解析する一連の処理を実行するため、顔の動きの解析に用いる顔の特徴点を取得して顔の動きを解析し、視点の動きの解析に用いる顔の特徴点を取得して視点の動きを解析する一連の処理を実行する場合より、顔の特徴点を取得する処理の実行回数を減らし得る。これにより、顔の特徴点を取得する処理が要求する処理リソースを減らし得る一方で、特徴点を取得する手順そのものを簡易な手順にして特徴点の精度が下がることを防ぎ得る。すなわち、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、顔の動き及び視点の動きを正確に解析し得る。そして、解析された顔の動き及び視点の動きを用いて、視聴者の感情を顔の動きのみを用いる場合より詳細に判断し、感情に関する感情指数情報を生成し得る。さらに、視点の動きと顔の動きとを用いて、画面表示領域のうち、視聴者が注視する領域に関する注視領域情報を解析できる。

第３の特徴に係る発明によれば、視聴者の感情に関する感情指数情報と画面表示領域のうち視聴者が注視する注視領域情報とを外部装置に送信できる。そして、感情測定端末は、感情指数と注視領域とに基づいてコンテンツの視聴を提案する画面を表示可能な情報を外部装置から受信し、該情報を用いて視聴者の感情と注視する領域とに基づいてコンテンツの視聴を提案する画面を表示させ得る。コンテンツの視聴を提案する画面を表示可能な情報の生成を外部装置において行うため、感情指数情報と注視領域情報とに基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを感情測定端末において必要とすることがない。したがって、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

したがって、第３の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能な感情測定端末を提供できる。

第４の特徴に係る発明は、第３の特徴に係る発明であって、前記画面表示領域のうち、指定された画面上の基準領域を見るよう前記視聴者に指示する注視指示部と、前記基準領域を見る前記視聴者の視点である基準視点を解析する基準視点解析部と、をさらに備え前記注視領域解析部は、前記基準視点と前記視点の動きと前記顔の動きとを用いて前記視聴者が見ている画面上の領域である注視領域を解析する、感情測定端末を提供する。

第４の特徴に係る発明によれば、指定された画面上の基準領域を見る視聴者の視点である基準視点を用いて、注視領域を解析できる。基準視点と視点の動きとを比較して注視領域を解析できるため、基準視点を用いない場合よりも、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。これにより、視聴者の好みによりいっそう合う可能性が高いコンテンツの視聴を視聴者に提案し得る。基準視点と視点の動きとを比較する簡易な手法で注視領域を解析し得るため、基準視点を用いない場合と比べて、注視領域を解析するための処理リソースをよりいっそう減らし得る。したがって、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。

したがって、第４の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能な感情測定端末を提供できる。

第５の特徴に係る発明は、第３の特徴又は第４の特徴に係る発明であって、前記視聴者の生体情報を取得する生体情報取得部をさらに備え、前記視聴者情報は、前記視聴履歴と関連付けられた前記生体情報を含む、感情測定端末を提供する。

心拍数、血圧、及び体温等によって例示される生体情報は、感情に応じて変化することが知られている。第５の特徴に係る発明によれば、視聴履歴と関連付けられた生体情報を用いて、生体情報を用いない場合と比べて視聴者の感情をより詳細に解析し得る。これにより、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情を、生体情報を用いない場合と比べてより詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

第５の特徴に係る発明によれば、生体情報を含む視聴者情報を外部装置に送信するため、生体情報を用いた解析を外部装置において行い得る。したがって、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少なく、生体情報を用いた解析を実現できない場合であっても、生体情報を用いて感情をよりいっそう詳細かつ正確に解析し得る。

したがって、第５の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性が生体情報を用いない場合より高いコンテンツの視聴を提案可能な感情測定端末を提供できる。

第６の特徴に係る発明は、第３の特徴から第５の特徴のいずれかに係る発明であって、前記視聴者の表情が基準となる表情である場合における前記視聴者の顔に関する特徴点である基準表情特徴点を取得する基準表情特徴点取得部をさらに備え、前記感情指数情報生成部は、前記基準表情特徴点と前記特徴点との比較を用いて前記感情指数情報を生成可能である、感情測定端末を提供する。

顔の特徴点を用いて視聴者の感情を分析することに関し、視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いて分析すると、コンテンツを視聴したことによって生じた感情を反映した表情と、普段の表情との判別が難しい。視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いた分析では、例えば、視聴者の顔が、口角が上がった笑い顔である場合に、視聴者がコンテンツを視聴して笑ったために笑い顔であるのか、あるいは、普段の表情での顔が笑い顔であるのかの判別が難しい。

第６の特徴に係る発明によれば、視聴者の表情が普段の表情等によって例示される基準となる表情である場合における顔に関する特徴点である基準表情特徴点を取得するため、基準となる表情とコンテンツを視聴したことによって生じた感情を反映した表情とを判別し得る。したがって、判別された表情に基づいて視聴者の感情を、基準表情特徴点を用いない場合より詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。また、基準表情特徴点とコンテンツを視聴しているときの特徴点とを比較する簡易な処理を行い得るため、感情指数を解析するための処理リソースを、基準表情特徴点を用いない場合よりいっそう減らし得る。したがって、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、感情指数をよりいっそう詳細かつ正確に解析し得る。

したがって、第６の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性が基準表情特徴点を用いない場合より高いコンテンツの視聴を提案可能な感情測定端末を提供できる。

第７の特徴に係る発明は、第３の特徴から第６の特徴のいずれかに係る発明であって、前記感情測定端末は、手持ち可能に構成された端末であり、前記特徴点取得部は、前記感情測定端末が手持ちされている場合に、前記感情測定端末の移動及び／又は向きの変化による前記特徴点の移動を打ち消すように前記特徴点の位置を補正可能である、感情測定端末を提供する。

携帯端末等によって例示される手持ち可能に構成された端末では、視聴者が端末を手持ちしている場合に、視聴者の手の動きや身体の動き等によって端末が移動する、あるいは、端末の向きが変化する場合がある。感情測定端末が手持ち可能に構成された端末である場合、視聴者の顔の動きや視点の動きによって特徴点が移動するだけでなく、感情測定端末の移動及び／又は向きの変化によっても特徴点が移動し得る。したがって、感情測定端末の移動及び／又は向きの変化による特徴点の移動が視聴者の顔の動き及び／又は視点の動きの解析に悪影響を及ぼし得る。

第７の特徴に係る発明によれば、感情測定端末の移動及び／又は向きの変化による前記特徴点の移動を打ち消すように特徴点の位置を補正可能であるため、視聴者が感情測定端末を手持ちしている場合であっても、感情測定端末の移動及び／又は向きの変化による特徴点の移動が視聴者の顔の動き及び／又は視点の動きの解析に及ぼす悪影響を軽減し得る。これにより、顔の動き及び視点の動きを、補正を行わない場合より正確に解析し得る。したがって、視聴者の感情及び注視する領域を、補正を行わない場合より正確に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

複雑なデータや大量のデータについて移動に関する補正を行う場合、多大な処理リソースを必要とし得る。そのため、補正を行えないことや、補正を行えたとしても、時間を要してしまうことがあり得る。第７の特徴に係る発明によれば、補正の対象が視聴者の顔を写した映像等の複雑なデータ及び／又は大量のデータでなく、映像等より単純かつデータ量が小さい顔の特徴点の位置であるため、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、移動を打ち消すような補正を比較的短時間で実行し得る。

したがって、第７の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性が補正を行わない場合より高いコンテンツの視聴を提案可能な感情測定端末を提供できる。

第８の特徴に係る発明は、第７の特徴に係る発明であって前記感情測定端末がスマートフォンである、感情測定端末を提供する。

広く普及しているスマートフォンを用いて感情測定端末を構成し、視聴者の感情及び注視する領域を解析できれば、感情測定端末がスマートフォンでない場合より多くの視聴者に対して、視聴者の好みにより合ったコンテンツの視聴を提案し得る。しかし、スマートフォンは、通常、手持ちして用いるため、視聴者の手の動きや身体の動き等によって移動する、あるいは、向きが変化する場合がある。したがって、感情測定端末がスマートフォンである場合、スマートフォンの移動及び／又は向きの変化によって特徴点が移動し、視聴者の顔の動き及び／又は視点の動きの解析に悪影響を及ぼし得る。

また、携帯可能なサイズに構成されるスマートフォンは、比較的小型であるため、パーソナルコンピュータ等の比較的大型の端末と比較して提供可能な処理リソースが少ない傾向がある。したがって、視聴者の顔の動き及び／又は視点の動きの解析に要する処理リソースがスマートフォンにおいて提供可能な処理リソースを上回り得る。解析に要する処理リソースを減らすために特徴点を取得する手順そのものを簡易な手順にすると、取得された特徴点の精度が下がり得る。したがって、特徴点に基づいて解析される視聴者の感情及び注視する領域が不正確になり得る。

これらの事情により、視聴者の手の動きや身体の動き等によって移動する、あるいは、向きが変化する場合があり、なおかつ、提供可能な処理リソースが比較的少ないスマートフォンを用いて感情測定端末を構成し、視聴者の感情及び注視する領域を解析することは、容易ではない。

第８の特徴に係る発明によれば、感情測定端末の移動及び／又は向きの変化による前記特徴点の移動を打ち消すように特徴点の位置を補正可能であるため、感情測定端末がスマートフォンであるにもかかわらず、視聴者の感情及び注視する領域を、補正を行わない場合より詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

第８の特徴に係る発明によれば、まず、視聴者の顔に関する特徴点を取得し、続いて、取得した特徴点を用いて顔の動き及び視点の動きを解析する一連の処理を実行するため、顔の動きの解析に用いる顔の特徴点を取得して顔の動きを解析し、視点の動きの解析に用いる顔の特徴点を取得して視点の動きを解析する一連の処理を実行する場合より、顔の特徴点を取得する処理の実行回数を減らし得る。これにより、顔の特徴点を取得する処理が要求する処理リソースを減らし得る一方で、特徴点を取得する手順そのものを簡易な手順にして特徴点の精度が下がることを防ぎ得る。これにより、顔の動き及び視点の動きを解析するための処理リソースを減らし、提供可能な処理リソースが比較的少ないスマートフォンであっても顔の動き及び視点の動きを正確に解析し得る。

第８の特徴に係る発明によれば、コンテンツの視聴を提案する画面を表示可能な情報の生成を外部装置において行うため、感情指数情報と注視領域情報とに基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを感情測定端末において必要とすることがない。したがって、提供可能な処理リソースが比較的少ないスマートフォンであっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

したがって、第８の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ないスマートフォンを用いて構成された、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を、感情測定端末がスマートフォンでない場合より多くの視聴者に対して提案可能な感情測定端末を提供できる。

第９の特徴に係る発明は、前記外部装置としての第１の特徴又は第２の特徴に係るコンテンツ提案装置と、前記外部端末としての第３の特徴から第８の特徴のいずれかに係る感情測定端末と、を含んで構成される、コンテンツ提案システムを提供する。

第９の特徴に係る発明によれば、感情測定端末によって解析した感情指数及び注視領域等をコンテンツ提案装置に送信できる。コンテンツ提案装置は、感情測定端末から受信した感情指数及び注視領域等を用いて、コンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を感情測定端末に送信できる。感情測定端末は、コンテンツ提案情報を受信し、視聴者にコンテンツの視聴を提案できる。したがって、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案できる。

第９の特徴に係る発明によれば、感情測定端末からコンテンツ提案装置に送信される情報が感情指数及び注視領域等であるため、視聴者の顔を撮影した動画等を送信する場合よりも通信量を減らし得る。したがって、感情測定端末とコンテンツ提案装置との間の通信において利用可能な通信帯域が比較的小さい量に制限されている場合であっても、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案できる。

第９の特徴に係る発明によれば、コンテンツ提案装置が感情指数及び注視領域等を用いてコンテンツ提案情報を感情測定端末に送信するため、感情指数情報と注視領域情報とに基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを感情測定端末において必要とすることがない。したがって、感情測定端末がスマートフォン等によって例示される携帯端末である場合等の感情測定端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案できる。

したがって、第９の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能なコンテンツ提案システムを提供できる。

第１０の特徴に係る発明は、第３の特徴に係る発明のカテゴリ違いである。第１０の特徴によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能な感情測定端末を実現するプログラムを提供できる。

本発明によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能なコンテンツ提案装置、感情測定端末、コンテンツ提案システム、及びプログラムを提供できる。

図１は、本発明のコンテンツ提案システム１のハードウェア構成及びソフトウェア構成の一例を示すブロック図である。 図２は、基準表情特徴点テーブル２３１の一例を示す図である。 図３は、基準視点テーブル２３２の一例を示す図である。 図４は、感情指数テーブル２３３の一例を示す図である。 図５は、視聴者情報テーブル３２１の一例を示す図である。 図６は、コンテンツ提案情報テーブル３２２の一例を示す図である。 図７は、感情測定端末２で実行される感情測定処理の一例を示すメインフローチャートである。 図８は、基準点取得処理の一例を示すフローチャートである。 図９は、視聴者情報送信処理の一例を示すフローチャートである。 図１０は、コンテンツ提案装置３で実行されるコンテンツ提案処理の一例を示すメインフローチャートである。 図１１は、特徴点取得の一例を示す概略模式図である。 図１２は、注視領域情報解析の一例を示す概略模式図である。

以下、本発明を実施するための好適な形態の一例について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。

＜コンテンツ提案システム１＞
図１は、本実施形態に係るコンテンツ提案システム１におけるハードウェア構成及びソフトウェア構成の一例を示すブロック図である。コンテンツ提案システム１（以下、単にシステム１とも称する。）は、少なくとも、感情測定端末２と、コンテンツ提案装置３と、を含んで構成される。感情測定端末２（以下、単に端末２とも称する。）は、視聴者情報を外部装置（例えば、コンテンツ提案装置３）に送信する端末である。コンテンツ提案装置３（以下、単に装置３とも称する。）は、外部端末（例えば、感情測定端末２）から視聴者情報を受信し、視聴者情報を送信した外部端末にコンテンツ提案情報を送信する装置である。端末２と装置３とは、ネットワークＮ１を介して接続可能である。

必須の態様ではないが、システム１は、視聴者の生体情報を測定し、ネットワークＮ２を介して測定した生体情報を端末２に提供可能な生体情報センサＢをさらに含むことが好ましい。これにより、端末２は、生体情報センサＢ及びネットワークＮ２を介して視聴者の生体情報を取得し、装置３等に送信できる。

〔感情測定端末２〕
感情測定端末２は、視聴者情報を外部装置に送信し、外部装置からコンテンツ提案情報を受信し、コンテンツの視聴を提案する画面を画面表示領域に表示する端末である。

端末２の種類は、特に限定されず、従来から知られている各種の端末でよい。端末２の種類は、例えば、スマートフォン及びタブレット端末等によって例示される携帯端末でよい。端末２は、例えば、デスクトップパソコン及びノートパソコン等によって例示されるパーソナルコンピュータでもよい。

中でも、端末２の種類は、携帯端末であることが好ましい。端末２の種類が携帯端末であることにより、自宅等から離れた場所（例えば、電車内、屋外、又は飲食店。）であっても、端末２を用いて感情指数情報及び注視領域を解析し得る。そして、解析した情報に基づいてコンテンツの視聴を提案する画面を表示し得る。

端末２の種類は、スマートフォンであることがさらに好ましい。端末２がスマートフォンであることにより、視聴者は、広く普及し、多くの視聴者が携帯しているスマートフォン以外の端末をわざわざ携帯する労力を費やすことがない。これにより、視聴者が普段から携帯するスマートフォンを用いて感情指数情報及び注視領域を解析し得る。そして、解析した情報に基づいてコンテンツの視聴を提案する画面を表示し得る。端末２がスマートフォンであることにより、端末２がスマートフォンでない場合より多くの視聴者に対して、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。端末２がスマートフォンである場合、パーソナルコンピュータ等の比較的大型の端末と比較して提供可能な処理リソースが少ない傾向がある課題が生じ得る。スマートフォンは、通常、手持ちして用いるため、視聴者の手の動きや身体の動き等によって移動する課題が生じ得る。また、手持ちして用いることにより、視聴者の手の動きや身体の動き等によって向きが変化する課題が生じ得る。端末２がスマートフォンである場合に生じ得るこれらの課題を解決する手段については、後述する。

感情測定端末２は、制御部２１と、記憶部２３と、通信部２４と、表示部２５と、を含んで構成される。表示部２５には、１以上の画面表示領域が設けられている。また、感情測定端末２は、表示部２５に設けられた１以上の画面表示領域のいずれか１以上にコンテンツを表示可能に構成されている。

［制御部２１］
制御部２１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、及びＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等を備える。

制御部２１は、所定のプログラムを読み込み、必要に応じて記憶部２３及び／又は通信部２４と協働することで、端末２におけるソフトウェア構成の要素である基準表情特徴点取得部２１１、注視指示部２１２、基準視点解析部２１３、特徴点取得部２１４、視点動き解析部２１５、顔動き解析部２１６、生体情報取得部２１７、感情指数情報生成部２１８、注視領域情報解析部２１９、視聴者情報送信部２２０、コンテンツ提案情報受信部２２１、及びコンテンツ提案画面表示部２２２等を実現する。

［記憶部２３］
記憶部２３には、データやファイルが記憶される。記憶部２３は、半導体メモリ、記録媒体、及びメモリカード等によって例示されるデータやファイルを記憶可能な部材を含むデータのストレージ部を有する。記憶部２３は、ネットワークを介してＮＡＳ（Ｎｅｔｗｏｒｋ Ａｔｔａｃｈｅｄ Ｓｔｏｒａｇｅ）、ＳＡＮ（Ｓｔｏｒａｇｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、クラウドストレージ、ファイルサーバ及び／又は分散ファイルシステム等の記憶装置又は記憶システムとの接続を可能にする仕組みを有してもよい。

記憶部２３には、マイクロコンピューターで実行される制御プログラム、基準表情特徴点テーブル２３１、基準視点テーブル２３２、及び感情指数テーブル２３３等が記憶されている。

（基準表情特徴点テーブル２３１）
図２は、基準表情特徴点テーブル２３１の一例を示す図である。基準表情特徴点テーブル２３１は、基準表情特徴点を記憶するテーブルである。図２に示す基準表情特徴点テーブル２３１には、「基準表情特徴点ＩＤ」と「基準表情特徴点集合」とが互いに関連付けられて格納されている。基準表情特徴点ＩＤは、基準表情特徴点集合を識別可能なＩＤである。基準表情特徴点集合は、視聴者の表情が基準となる表情（例えば、普段の表情等。）である場合における顔に関する特徴点を複数含む集合である。基準表情特徴点ＩＤを格納することにより、基準表情特徴点の取得及び格納が容易になる。基準表情特徴点を格納することにより、コンテンツを視聴したことによって生じた感情を反映した表情と基準となる表情とを判別し得る。したがって、基準表情特徴点を用いない場合より視聴者の感情を詳細に解析し得る。そして、視聴者の好みにより合ったコンテンツの視聴を提案し得る。また、視点の動き及び／又は顔の動きの解析において、基準表情特徴点とコンテンツを視聴しているときの特徴点とを比較する簡易な処理を行い得る。

基準表情特徴点テーブル２３１に格納される基準表情特徴点集合のデータ形式は、特に限定されない。基準表情特徴点集合のデータ形式は、複数の特徴点を含む集合を格納する従来技術のデータ形式でよい。基準表情特徴点集合のデータ形式として、例えば、基準表情特徴点集合に含まれる複数の基準表情特徴点のそれぞれについて、その座標を格納するデータ形式が挙げられる。基準表情特徴点のデータ形式は、基準表情特徴点集合に含まれる複数の基準表情特徴点のそれぞれについて、関連する１又は複数の基準表情特徴点を識別可能な情報をさらに格納するデータ形式でもよい。基準表情特徴点テーブル２３１に格納される基準表情特徴点集合に含まれる基準表情特徴点は、後述する特徴点取得部２１４が取得する特徴点と同様の顔の特徴点に対応する基準表情特徴点を含むことが好ましい。これにより、基準表情特徴点とコンテンツを視聴しているときの特徴点とを比較する簡易な処理を行い得る。

図２の基準表情特徴点ＩＤ「ＢＣＰ０００１」によって識別される基準表情特徴点集合ＢＣＰ０００１には、基準表情特徴点集合ＢＣＰ０００１に含まれる複数の基準表情特徴点について、基準表情特徴点の座標及び基準表情特徴点と関連する１又は複数の基準表情特徴点を識別可能な情報が格納されている。基準表情特徴点ＩＤ「ＢＣＰ０００２」によって識別される基準表情特徴点集合ＢＣＰ０００２には、基準表情特徴点集合ＢＣＰ０００２に含まれる複数の基準表情特徴点について、基準表情特徴点の座標及び基準表情特徴点と関連する１又は複数の基準表情特徴点を識別可能な情報が格納されている。図２では、わかりやすさのために、格納された座標等に基づいた平面グラフを用いて、格納された基準表情特徴点を示している。この平面グラフでは、各基準表情特徴点の位置を黒丸で示し、互いに関連する基準表情特徴点に対応する黒丸を直線によって連結している。視聴者の顔と特徴点との関係及び視聴者の顔から特徴点を取得することに関しては、後に図１１を用いてより詳細に説明する。

図２の基準表情特徴点集合ＢＣＰ０００１に含まれる基準表情特徴点と基準表情特徴点集合ＢＣＰ０００２に含まれる基準表情特徴点とは、互いに異なる。すなわち、基準となる表情（例えば、普段の表情。）において互いに異なる視聴者の顔のそれぞれに対応する基準表情特徴点が含まれている。これにより、基準となる表情における視聴者の顔が違う場合であっても、基準となる表情とコンテンツを視聴したことによって生じた感情を反映した表情とを判別し得る。したがって、基準表情特徴点を用いない場合より視聴者の感情を詳細に解析し得る。そして、視聴者の好みにより合ったコンテンツの視聴を提案し得る。また、コンテンツを視聴しているときの特徴点と基準表情特徴点とを比較する簡易な処理を行い得る。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、感情指数情報をよりいっそう詳細かつ正確に生成し得る。

（基準視点テーブル２３２）
図３は、基準視点テーブル２３２の一例を示す図である。基準視点テーブル２３２は、基準領域を見る視聴者の視点である基準視点を記憶するテーブルである。図３に示す基準視点テーブル２３２には、「基準視点ＩＤ」と、基準領域を見る視聴者の視点に関する「基準表情特徴点ＩＤ」、「基準領域」、及び「基準視点」とが関連付けられて格納されている。

基準視点ＩＤは、基準視点を識別可能なＩＤである。基準表情特徴点ＩＤは、基準表情特徴点テーブル２３１に格納された基準表情特徴点集合を識別可能なＩＤである。基準領域は、視聴者が見る画面上の特定の領域である。基準視点は、基準領域を見る視聴者の視点に関する視点である。基準視点ＩＤを格納することにより、基準視点の取得及び格納が容易になる。基準表情特徴点ＩＤを格納することにより、基準表情特徴点テーブル２３１に格納された基準表情特徴点集合と基準視点とを関連付けられる。これにより、普段の表情における視聴者の顔が違う場合であっても、普段の表情における視聴者の顔に応じた基準視点を格納できる。基準視点を格納することにより、基準視点と視点の動きとを比較して注視領域を解析できる。

したがって、基準視点を用いない場合よりも、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。そして、視聴者の好みによりいっそう合う可能性が高いコンテンツの視聴を視聴者に提案し得る。また、基準視点と視点の動きとを比較する簡易な手法で注視領域を解析し得る。

基準視点テーブル２３２に格納する基準視点は、基準領域を見る視聴者の視点に関する情報であれば、特に限定されない。基準視点は、例えば、基準領域を見る視聴者の目の特徴点及び／又は顔の特徴点でよい。基準視点が基準領域を見る視聴者の目の特徴点であることにより、コンテンツを視聴する視聴者の視点の動き及び顔の動きに関する目の特徴点と基準視点とを比較する簡易な手法で注視領域を解析し得る。これにより、注視領域を解析するための処理リソースをよりいっそう減らし得る。

したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。また、顔の特徴点全てを基準視点として用いる場合より、注視領域を解析するための処理リソースを減らし得る。基準視点が基準領域を見る視聴者の顔の特徴点であることにより、コンテンツを視聴する視聴者の視点の動き及び顔の動きに関する顔の特徴点と基準視点とを比較する簡易な手法で注視領域を解析し得る。また、目の特徴点のみを基準視点として用いる場合より、注視領域をよりいっそう詳細かつ正確に解析し得る。

図３の基準視点ＩＤ「ＢＶＰ０００１」によって識別される基準視点には、基準表情特徴点ＢＣＰ０００１と対応する視聴者に関し、画面表示領域の「中央」に表示された基準領域を見る視聴者の基準視点に関する目の特徴点が格納されている。格納された目の特徴点は、この目の特徴点と関連する１又は複数の目の特徴点を識別可能な情報とこの目の特徴点の座標とを含む。図３では、わかりやすさのために、格納された座標等に基づいた平面グラフを用いて、格納された目の特徴点を示している。この平面グラフでは、目の特徴点の位置を黒丸で示し、互いに関連する目の特徴点に対応する黒丸を直線によって連結している。

図３の基準視点ＩＤ「ＢＶＰ０００２」によって識別される基準視点には、基準表情特徴点ＢＣＰ０００１と対応する視聴者に関し、画面表示領域の「左側」に表示された基準領域を見る視聴者の基準視点に関する目の特徴点が格納されている。この基準視点に関する目の特徴点は、基準視点ＩＤ「ＢＶＰ０００１」によって識別される画面表示領域の「中央」に表示された基準領域を見る視聴者の基準視点に関する目の特徴点と異なる。対応付けられた基準領域が異なる基準視点を複数格納することにより、例えば、コンテンツを視聴する視聴者の視点の動きがいずれの基準領域を見る視聴者の基準視点に近いかを判別する処理を行い得る。これにより、１つの基準領域を見る視聴者の基準視点を用いる場合より、注視領域を詳細に解析し得る。

（感情指数情報テーブル２３３）
図４は、感情指数情報テーブル２３３の一例を示す図である。感情指数情報テーブル２３３は、視点の動き及び顔の動きを含む特徴点移動量と関連付けられた感情指数を記憶するテーブルである。図４に示す感情指数情報テーブル２３３には、「感情指数情報ＩＤ」と、視聴者の感情に関する「動き情報」及び「感情指数情報」とが関連付けられて格納されている。

感情指数情報ＩＤは、感情指数情報を識別可能なＩＤである。動き情報は、視点の動き及び顔の動きに関する情報である。感情指数情報は、視聴者の感情に関する情報である。感情指数情報ＩＤを格納することにより、感情指数情報の取得及び格納が容易になる。動き情報と感情指数情報とを関連付けて格納することにより、視点の動き及び／又は顔の動きに基づいて感情指数情報を生成し得る。

表情による顔の動きは、感情を判断するための重要な判断材料である。顔の動きに加えて視点の動きを用いて感情を判断すれば、コンテンツに対する興味の度合いを含む視聴者の感情を判断し得る。すなわち、顔の動きと視点の動きとを用いれば、顔の動きのみを用いる場合より視聴者の感情を詳細に判断し得る。表情による顔の動きについて、例えば、眉尻が下がる、口角が上がる、目尻が下がる、及び／又は口が開く等の顔の動き（笑いの表情における顔の動き）がある。これによってコンテンツを視聴する視聴者が楽しさ及び／又は喜び等の快感（以下、笑いの表情に対応する感情を単に「笑い」とも称する）を感じたことを判別し得る。表情による視点の動きについて、例えば、視点が画面表示領域の特定の領域を注視する視点の動きである場合に、コンテンツを視聴する視聴者がコンテンツに集中していることを判別し得る。

感情指数情報テーブル２３３に格納する動き情報は、視聴者の感情を判別し得る視点の動き及び顔の動きに関する情報であれば特に限定されない。動き情報は、例えば、視聴者の感情を判別し得る視点の動き及び顔の動きに関する顔の特徴点のそれぞれについて、顔の特徴点の座標と、顔の特徴点と関連する１又は複数の特徴点を識別可能な情報と、顔の特徴点の移動量とを含む特徴点移動量情報を有する。

基準表情特徴点テーブル２３１に格納される基準表情特徴点とコンテンツを視聴する視聴者の顔の特徴点とを比較することにより、基準表情特徴点からの特徴点の移動量を解析し得る。動き情報が特徴点移動量情報を含むことにより、この移動量を特徴点移動量情報と比較する簡易な処理によって感情指数情報を生成し得る。

このような処理を行うことにより、基準表情特徴点が異なる視聴者であっても、基準表情特徴点からの移動量を用いて感情指数情報を容易に生成し得る。例えば、基準となる表情において口角が上がった顔の視聴者について、基準となる表情よりさらに口角が上がった場合にのみ笑いの感情に対応する感情指数情報を生成することができる。あるいは、基準となる表情と同様の口角の上がり方では笑いの感情に対応する感情指数情報を生成しないようにできる。

感情指数情報テーブル２３３に格納する感情指数情報は、視聴者が笑いの表情を浮かべた場合の顔の動きと関連付けられた感情指数情報を含むことが好ましい。視聴者が笑いの表情を浮かべた場合の顔の動きと関連付けられた感情指数情報を含むことにより、笑いの表情を判別し得る。

笑いの表情は、視聴者が楽しさを感じたときや喜びを感じたとき等の快感を覚えたときに浮かべる表情であることが知られている。視聴者は、視聴したときに快感を覚えるコンテンツを好ましいと感じ得る。したがって、笑いの表情を判別し得ることにより、視聴者が好ましいと感じるコンテンツを判別し得る。これにより、視聴者が好ましいと感じるコンテンツを提案し得る。

感情指数情報テーブル２３３に格納する感情指数情報は、各種の感情（例えば、笑い、悲しみ、及び怒り等。）のそれぞれについて、感情の程度に関する情報を含むことが好ましい。感情指数情報が感情の程度に関する情報を含むことにより、感情の種類を判別し得るだけでなく、感情の程度をも判別し得る。これにより、感情の種類だけでなく、感情の程度にも基づいてコンテンツの視聴を提案し得る。

図４の感情指数情報ＩＤ「ＥＩ０００１」には、眉尻が下がり、口角が上がった顔の動きによって判別される視聴者の表情（笑いの表情）に対応する動き情報と感情指数情報「笑い１」とが関連付けられて格納されている。感情指数情報「笑い１」は、笑いの感情の程度を１－３の３段階に分類した場合の一番低い程度１の笑いの感情に関する感情指数情報である。

また、図４の感情指数情報ＩＤ「ＥＩ０００２」には、眉尻が下がり、口角が上がった顔の動き及び目尻が下がる視点の動きによって判別される視聴者の表情（ＥＩ０００１より程度が高い笑いの表情）に対応する動き情報と「笑い２」とが関連付けられて格納されている。「笑い２」は、程度２の笑いの感情に関する感情指数情報である。

図４の感情指数情報ＩＤ「ＥＩ０００３」には、眉尻が下がり、口角が上がり、口が開かれた顔の動き及び目尻が下がる視点の動きによって判別される視聴者の表情（ＥＩ０００１及びＥＩ０００２よりさらに程度が高い笑いの表情）に対応する動き情報と「笑い３」とが関連付けられて格納されている。「笑い３」は、程度３の笑いの感情に関する感情指数情報である。

図４では、動き情報は、特徴点移動量情報を含む。図４では、わかりやすさのために、格納された特徴点移動量情報に基づいた平面グラフを用いて、格納された動き情報を示している。この平面グラフでは、特徴点の位置を黒丸で示し、互いに関連する目の特徴点に対応する黒丸を直線によって連結している。また、特徴点の移動量を矢印で示している。

感情指数情報テーブル２３３に、動き情報と関連付けられた感情指数情報を複数格納することにより、コンテンツを視聴する視聴者の感情をより詳細に解析し得る。これにより、コンテンツを視聴する視聴者の感情の種類だけでなく、感情の程度をも解析し得る。

［通信部２４］
図１に戻る。通信部２４は、端末２をネットワークＮ１に接続して装置３と通信可能にする通信部であれば特に限定されない。通信部２４として、例えば、携帯電話ネットワークに対応した無線装置、ＩＥＥＥ８０２．１１に準拠したＷｉ－Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）対応デバイス、及びイーサネット規格に対応したネットワークカード等が挙げられる。

システム１が生体情報センサＢを含む場合、通信部２４は、端末２をネットワークＮ２に接続して生体情報センサＢと通信可能であることが好ましい。これにより、生体情報センサＢ及びネットワークＮ２を介して視聴者の生体情報を取得し得る。

通信部２４が端末２をネットワークＮ２に接続して生体情報センサＢと通信可能である場合、通信部２４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）規格に準拠した通信デバイスを含むことが好ましい。Ｂｌｕｅｔｏｏｔｈ規格に準拠した通信では、指向性が少ない簡易な無線通信を行える。指向性が少ない無線通信では、無線通信を行う機器間の位置関係がもたらす無線通信への悪影響を指向性がある無線通信より軽減できる。生体情報センサＢが視聴者の身体に装着されている場合、視聴者の身体の動きによって生体情報センサＢが移動して生体情報センサＢと端末２との位置関係が変化し得る。通信部２４がＢｌｕｅｔｏｏｔｈ規格に準拠した通信デバイスを含むことにより、生体情報センサＢと端末２との位置関係が変化する場合でも、ネットワークＮ２を介して視聴者の生体情報を取得し得る。

［表示部２５］
表示部２５は、後述するコンテンツ提案画面を表示可能な画面表示領域（例えば、図１２の符号２５Ａ等。）を有する表示部であれば特に限定されない。表示部２５として、例えば、タッチパネル、有機ＥＬディスプレイ、液晶ディスプレイ、モニタ、プロジェクタ等を有する表示部が挙げられる。

［入力部］
必須の態様ではないが、端末２は、視聴者がコンテンツの再生を指令する入力を入力可能である入力部（図示せず）を備えることが好ましい。入力部の種類は、特に限定されず、例えば、タッチパネル、ソフトウェアキーボード、音声を認識するマイク、外部の装置から入力を受信する通信デバイス、キーボード、マウス等が挙げられる。端末２が入力部を備えることにより、視聴者は、入力部を介してコンテンツの再生を指令し得る。

入力部は、視聴者が視聴者に関する情報を入力可能であることが好ましい。これにより、視聴者は、入力部を介して視聴者に関する情報を入力し得る。したがって、視聴履歴、感情指数情報、及び注視領域情報だけでなく、入力部を介して入力された視聴者に関する情報をも含む視聴者情報を外部装置に送信し得る。

［動き検知部］
必須の態様ではないが、端末２は、端末２の向き及び／又は移動を検知可能な動き検知部（図示せず）を有することが好ましい。端末２が動き検知部を有することにより、動き検知部によって検知された動きを用いて特徴点の移動を補正し得る。動き検知部が動きを検知する手段は、特に限定されない。動きを検知する手段は、例えば、重力センサ、加速度センサ、ジャイロセンサ、及び回転ベクトルセンサ等によって例示される各種の動きを検知可能なセンサの１以上を含む従来技術の動きを検知する手段でよい。

〔コンテンツ提案装置３〕
コンテンツ提案装置３は、外部端末から受信した視聴者情報に基づいて、この外部端末にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を送信する装置である。コンテンツ提案装置３の種類は、特に限定されない。コンテンツ提案装置３の種類は、例えば、サーバ、ワークステーション、及びパーソナルコンピュータ等によって例示される従来技術の情報処理装置でよい。

コンテンツ提案装置３は、制御部３１と、記憶部３２と、通信部３３と、を含んで構成される。

［制御部３１］
制御部３１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、及びＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等を備える。

制御部３１は、所定のプログラムを読み込み、必要に応じて記憶部３２及び／又は通信部３３と協働することで、装置３におけるソフトウェア構成の要素である視聴者情報受信部３１１、コンテンツ提案情報生成部３１２、及びコンテンツ提案情報送信部３１３等を実現する。

［記憶部３２］
記憶部３２には、データやファイルが記憶される。記憶部３２は、ハードディスク、半導体メモリ、記録媒体、及びメモリカード等によって例示されるデータやファイルを記憶可能な部材を含むデータのストレージ部を有する。記憶部３２は、ネットワークを介してＮＡＳ（Ｎｅｔｗｏｒｋ Ａｔｔａｃｈｅｄ Ｓｔｏｒａｇｅ）、ＳＡＮ（Ｓｔｏｒａｇｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、クラウドストレージ、ファイルサーバ及び／又は分散ファイルシステム等の記憶装置又は記憶システムとの接続を可能にする仕組みを有してもよい。

記憶部３２には、マイクロコンピューターで実行される制御プログラム、視聴者情報テーブル３２１、及びコンテンツ提案情報テーブル３２２等が記憶されている。視聴者情報テーブル３２１は、視聴履歴と関連付けられた感情指数情報及び視聴履歴と関連付けられた注視領域情報を含む視聴者情報を格納するテーブルである。コンテンツ提案情報テーブル３２２は、視聴者情報に関する条件と関連付けられたコンテンツ提案情報を格納するテーブルである。

（視聴者情報テーブル３２１）
図５は、視聴者情報テーブル３２１の一例を示す図である。図５に示す視聴者情報テーブル３２１には、「視聴者情報ＩＤ」と、「視聴者情報」とが互いに関連付けられて格納されている。視聴者情報ＩＤは、視聴者情報を識別可能なＩＤである。視聴者情報ＩＤを格納することにより、視聴者情報の取得及び格納が容易になる。視聴者情報を格納することにより、格納された視聴者情報を外部装置に送信し得る。

視聴者情報は、コンテンツを視聴する視聴者に関する情報である。視聴者情報は、コンテンツを視聴する視聴者に関する「端末ＩＤ」、「視聴履歴」、「感情指数情報」、「注視領域情報」、及び「生体情報」を互いに関連付けた情報を含んでいる。端末ＩＤは、視聴者情報を送信した外部端末を識別可能なＩＤである。視聴履歴は、視聴者が視聴したコンテンツに関する履歴である。感情指数情報は、視聴者の感情に関する情報である。注視領域情報は、画面表示領域のうち視聴者が注視する領域に関する情報である。

端末ＩＤを含むことにより、外部端末が複数ある場合に、外部端末のそれぞれに応じたコンテンツの視聴を提案し得る。視聴者情報を格納することにより、視聴履歴と関連付けられた感情指数情報と、視聴履歴と関連付けられた注視領域情報と、視聴履歴と関連付けられた生体情報とに基づいてコンテンツの視聴を提案し得る。必須の態様ではないが、端末ＩＤは、外部端末を利用する視聴者を識別可能な情報を含むことが好ましい。これにより、複数の視聴者が外部端末を利用する場合でも、外部端末を利用する視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。

視聴履歴は、視聴者が視聴したコンテンツを識別可能な情報を含む。視聴履歴は、コンテンツの表題、再生時間、コンテンツに関するテキスト、コンテンツに関する画像等によって例示されるコンテンツに関する情報を含むことが好ましい。これにより、コンテンツに関する情報を用いて、外部端末を利用する視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。視聴履歴は、コンテンツの時系列情報を含むことが好ましい。これにより、コンテンツの時系列によって画面表示領域の各領域に表示される視聴対象が変化するコンテンツであっても、視聴者が注意及び／又は感情を向けた視聴対象を正確に判別し得る。そして、視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。

図５の視聴者情報ＩＤ「ＶＩ０００１」に格納された視聴者情報ＶＩ０００１は、端末ＩＤ「Ｔ０００１」によって識別される外部端末から送信された視聴者情報である。視聴者情報ＶＩ０００１は、「コントＡ号」の開始から０分０秒経過後を視聴することに関する視聴履歴、感情指数情報「笑い１」、画面表示領域の「左側」を見る視聴者に関する注視領域情報、及び視聴者の心拍数が６０であることに関する生体情報を関連付けた情報を含む。感情指数情報「笑い１」は、一番程度が低い笑いの感情に対応する。視聴者情報ＶＩ０００１が格納されていることにより、例えば、「コントＡ号」の開始から０分０秒経過後を視聴する視聴者が、一番程度が低い笑いの感情で、画面表示領域の左側を注視し、心拍数６０であったことを用いてコンテンツの視聴を提案し得る。

図５の視聴者情報ＩＤ「ＶＩ０００３」に格納された視聴者情報ＶＩ０００３は、端末ＩＤ「Ｔ０００１」によって識別される外部端末から送信された視聴者情報である。視聴者情報ＶＩ０００３は、コンテンツ「コントＡ号」の開始から０分１０秒経過後を視聴する視聴者の視聴履歴、感情指数情報「笑い３」、画面表示領域の「右側」を見る視聴者に関する注視領域情報、及び視聴者の心拍数が８０であることに関する生体情報を関連付けた情報を含む。視聴者情報ＶＩ０００３が格納されていることにより、例えば、「コントＡ号」の開始から０分１０秒経過後を視聴する視聴者が、高い程度の笑いの表情で画面表示領域の右側を注視し、心拍数８０と大いに興奮していたことを用いてコンテンツの視聴を提案し得る。これにより、例えば、「コントＡ号」の開始から０分１０秒経過後において画面表示領域の右側に表示されていた視聴対象と類似する視聴対象を含むコンテンツの視聴を提案し得る。

（コンテンツ提案情報テーブル３２２）
図６は、コンテンツ提案情報テーブル３２２の一例を示す図である。図６に示すコンテンツ提案情報テーブル３２２には、コンテンツ提案情報を識別可能な「コンテンツ提案情報ＩＤ」と、視聴者が視聴したコンテンツの「視聴履歴」、「感情指数条件」、「注視領域条件」、「生体情報条件」及び「コンテンツ提案情報」とが関連付けられて格納されている。視聴履歴は、視聴者が視聴したコンテンツを識別可能な情報を含む。感情指数条件は、感情指数情報に関する条件である。注視領域条件は、注視領域情報に関する条件である。生体情報条件は、生体情報に関する条件である。コンテンツ提案情報は、コンテンツの視聴を提案する情報であり、視聴を提案するコンテンツに関する「提案情報」を１以上含む。

コンテンツ提案情報ＩＤを格納することにより、コンテンツ提案情報の取得及び格納が容易になる。コンテンツ提案情報ＩＤと、視聴履歴、感情指数条件、注視領域条件、生体情報条件、及びコンテンツ提案情報とを関連付けて格納することにより、視聴履歴と関連付けられた感情指数条件、視聴履歴と関連付けられた注視領域条件、及び／又は視聴履歴と関連付けられた生体情報条件に基づいてコンテンツ提案情報を生成し得る。提案情報を１以上含むことにより、１又は複数のコンテンツの視聴を提案するコンテンツ提案情報を生成し得る。

視聴履歴は、コンテンツの時系列情報を含むことが好ましい。これにより、コンテンツの時系列によって画面表示領域の各領域に表示される視聴対象が変化するコンテンツであっても、視聴者が注意及び／又は感情を向けた視聴対象を正確に判別し得る。そして、視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。

図６のコンテンツ提案情報ＩＤ「ＣＰ０００１」には、コンテンツ提案情報ＩＤ「ＣＰ０００１」と、コンテンツ「コントＡ号」の０分１０秒を視聴することに関する視聴履歴、感情指数条件、注視領域条件、生体情報条件、及びコンテンツ提案情報とが関連付けられて格納されている。この感情指数条件は、感情指数情報が「笑い２」又は「笑い３」であることに関する条件である。この注視領域条件は、注視領域情報が「右側」であることに関する条件である。この生体情報条件は、視聴者の心拍数が７０以上であることに関する条件である。このコンテンツ提案情報は、コンテンツ「ワライドズ」及び「ミイ＆ツッ子」の視聴を提案する情報である。これにより、コンテンツ「コントＡ号」の０分１０秒を視聴する視聴者が「笑い２」又は「笑い３」の感情指数情報を有し、画面表示領域の「右側」を見ていて心拍数７０以上である場合に、コンテンツ「ワライドズ」及び「ミイ＆ツッ子」の視聴を提案するコンテンツ提案情報を生成し得る。

［通信部３３］
図１に戻る。通信部３３は、装置３をネットワークＮ１に接続して端末２と通信可能にする通信部であれば特に限定されない。通信部３３として、例えば、イーサネット規格に対応したネットワークカード、ＩＥＥＥ８０２．１１に準拠したＷｉ－Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）対応デバイス、及び携帯電話ネットワークに対応した無線装置等が挙げられる。

〔ネットワークＮ１〕
ネットワークＮ１は、端末２と装置３とを通信可能に接続するネットワークであれば特に限定されない。ネットワークＮ１として、例えば、パーソナルエリアネットワーク、ローカルエリアネットワーク、イントラネット、エクストラネット、インターネット、携帯電話ネットワーク、Ｗｉ－Ｆｉネットワーク、あるいはこれらを含むネットワークを複数組み合わせたネットワーク等が挙げられる。

ネットワークＮ１は、携帯電話ネットワーク及びＷｉ－Ｆｉネットワークによって例示される無線通信可能なネットワークを含むことが好ましい。これにより、有線通信の利用が困難な場所（例えば、電車内、屋外、又は飲食店。）でコンテンツを視聴する場合であっても、視聴者情報を端末２から装置３に送信し得る。また、コンテンツ提案情報を装置３から端末２に送信し得る。

〔生体情報センサＢ〕
生体情報センサＢは、視聴者の生体情報を取得し、端末２に提供可能なセンサであれば特に限定されない。生体情報センサＢとして、例えば、脈拍計、血圧計、及び体温計によって例示される生体情報を取得可能な従来から知られている各種のセンサが挙げられる。生体情報センサＢは、脈拍計を含むことが好ましい。これにより、視聴者の感情に応じた変化を体温等より迅速に反映する脈拍を用いて、視聴者の感情を解析し得る。

生体情報センサＢは、視聴者の身体に装着可能であることが好ましい。これにより、視聴者は、コンテンツを視聴するたびに生体情報センサを逐一身につけて使用する労力を費やすことなく、視聴者の生体情報を端末２に提供できる。生体情報センサＢは、スマートウォッチ及びスマートバンド等によって例示される視聴者の生体情報を取得するセンサを含んで構成されたウェアラブル端末であってもよい。これにより、視聴者が普段使っているウェアラブル端末以外の追加のセンサを用いることなく、視聴者の生体情報を端末２に提供できる。

生体情報センサＢは、Ｂｌｕｅｔｏｏｔｈ（登録商標）規格に準拠した通信デバイス及びＩＥＥＥ８０２．１１に準拠したＷｉ－Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）対応デバイス等によって例示されるネットワークＮ２に接続可能な通信デバイスを含む。生体情報センサＢは、中でも、Ｂｌｕｅｔｏｏｔｈ規格に準拠した通信デバイスを含むことが好ましい。

Ｂｌｕｅｔｏｏｔｈ規格に準拠した通信では、指向性が少ない簡易な無線通信を行える。指向性が少ない無線通信では、無線通信を行う機器間の位置関係がもたらす無線通信への悪影響を指向性がある無線通信より軽減し得る。生体情報センサＢが視聴者の身体に装着されている場合、視聴者の身体の動きによって生体情報センサＢが移動し得る。そして、生体情報センサＢと端末２との位置関係が変化し得る。生体情報センサＢがＢｌｕｅｔｏｏｔｈ規格に準拠した通信デバイスを含むことにより、生体情報センサＢと端末２との位置関係が変化し得る場合であっても、ネットワークＮ２を介して視聴者の生体情報を端末２に提供し得る。

〔ネットワークＮ２〕
ネットワークＮ２の種類は、生体情報センサＢと端末２とを通信可能に接続するネットワークであれば特に限定されない。ネットワークＮ２は、Ｂｌｕｅｔｏｏｔｈ規格に準拠した無線通信ネットワークを含むことが好ましい。これにより、生体情報センサＢと端末２との位置関係が変化する場合であっても、ネットワークＮ２を介して視聴者の生体情報を生体情報センサＢから端末２へ送信し得る。

〔感情測定処理のメインフローチャート〕
図７は、感情測定端末２で実行される感情測定処理の一例を示すメインフローチャートである。図８及び図９は、感情測定端末２で実行される感情測定処理に関する各種の処理について、手順の一例を示すフローチャートである。以下、図７～図９を用いて、感情測定端末２で実行される感情測定処理の好ましい態様の一例を説明する。

必須の態様ではないが、感情測定処理は、ステップＳ１及びステップＳ２で実行される、基準点取得処理を含むことが好ましい。基準点取得処理は、視聴者の表情が普段の表情等によって例示される基準となる表情である場合における顔に関する特徴点である基準表情特徴点と、指定された画面上の基準領域を見る視聴者の視点である基準視点とを取得する処理である。基準点取得処理を含むことにより、基準表情特徴点と基準視点とを取得できる。

［ステップＳ１：基準表情特徴点及び基準視点を含む全ての基準点を取得済であるか否かを判別］
制御部２１は、記憶部２３及び通信部２４と協働して基準表情特徴点取得部２１１を実行し、基準表情特徴点及び基準視点を含む全ての基準点を取得済であるか否かを判別する（ステップＳ１）。全ての基準点を取得済であるならば、制御部２１は、処理をステップＳ３に移す。いずれか１以上の基準点が取得済でない場合、制御部２１は、処理をステップＳ２に移す。ステップＳ１で実行される処理により、いずれか１以上の基準点が取得済でない場合に、取得済でない基準表情特徴点及び／又は取得済でない基準視点を取得する基準点取得処理を実行できる。

［ステップＳ２：基準点取得処理］
制御部２１は、記憶部２３及び通信部２４と協働して基準表情特徴点取得部２１１等を実行し、取得済でない基準表情特徴点及び／又は取得済でない基準視点を取得する基準点取得処理を行う（ステップＳ２）。ステップＳ２で実行される基準点取得処理については、後に図８を用いてより詳細に説明する。制御部２１は、処理をステップＳ３に移す。

基準点取得処理を行うことにより、指定された画面上の基準領域を見る視聴者の視点である基準視点を取得できる。そして、取得した基準視点を用いて、基準視点と視点の動きとを比較して注視領域を解析できる。したがって、基準視点を用いない場合よりも、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。これにより、視聴者の好みによりいっそう合う可能性が高いコンテンツの視聴を視聴者に提案し得る。

取得した基準視点を用いて、基準視点と視点の動きとを比較する簡易な手法で注視領域を解析し得る。これにより、基準視点を用いない場合と比べて、注視領域を解析するための処理リソースをよりいっそう減らし得る。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。

視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いた分析では、コンテンツを視聴したことによって生じた感情を反映した表情と、普段の表情との判別が難しい。視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いた分析では、例えば、視聴者の顔が、口角が上がった笑い顔である場合に、視聴者がコンテンツを視聴して笑ったために笑い顔であるのか、あるいは、普段の表情での顔が笑い顔であるのかの判別が難しい。

基準点取得処理を行うことにより、視聴者の表情が普段の表情等によって例示される基準となる表情である場合における顔に関する特徴点である基準表情特徴点を取得できる。これにより、基準となる表情とコンテンツを視聴したことによって生じた感情を反映した表情とを判別し得る。したがって、判別された表情に基づいて視聴者の感情を、基準点取得処理を行わない場合より詳細に解析し得る。そして、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

また、基準点取得処理を行うことにより、コンテンツを視聴しているときの特徴点と基準表情特徴点とを比較する簡易な処理を行い得る。これにより、感情指数を解析するための処理リソースを、基準点取得処理を行わない場合よりいっそう減らし得る。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、感情指数をよりいっそう詳細かつ正確に解析し得る。

［ステップＳ３：コンテンツを視聴しているか否かを判別］
制御部２１は、記憶部２３及び通信部２４と協働して特徴点取得部２１４を実行し、視聴者がコンテンツを視聴しているか否かを判別する（ステップＳ３）。視聴者がコンテンツを視聴しているならば、制御部２１は、処理をステップＳ４に移す。視聴者がコンテンツを視聴していないならば、制御部２１は、処理をステップＳ５に移す。視聴者がコンテンツを視聴しているか否かを判別することにより、視聴者がコンテンツを視聴している場合に、コンテンツを視聴する視聴者に関する感情指数情報及び注視領域情報を解析し、これらの情報を含む視聴者情報を外部装置に送信する視聴者情報送信処理を実行できる。

［ステップＳ４：視聴者情報送信処理］
制御部２１は、記憶部２３及び通信部２４と協働して特徴点取得部２１４、視点動き解析部２１５、顔動き解析部２１６、感情指数情報生成部２１８、注視領域情報解析部２１９、及び視聴者情報送信部２２０等を実行して、視聴者情報送信処理を行う（ステップＳ４）。

視聴者情報送信処理は、視聴者の顔の特徴点を取得し、取得した特徴点に基づいて顔の動き及び視点の動きを解析し、解析した顔の動き及び視点の動きを用いてコンテンツを視聴する視聴者に関する感情指数情報を生成し、解析した顔の動き及び視点の動きを用いて表示部２５に設けられた画面表示領域のうち視聴者が注視する領域に関する注視領域情報を解析し、視聴履歴と関連付けられた感情指数情報及び注視領域情報を含む視聴者情報を外部装置に送信する、一連の処理である。ステップＳ４で実行される視聴者情報送信処理については、後に図９を用いてより詳細に説明する。制御部２１は、処理をステップＳ５に移す。

表情による顔の動きは、感情を判断するための重要な判断材料である。顔の動きに加えて視点の動きを用いて感情を判断すれば、コンテンツに対する興味の度合いを含む視聴者の感情を判断し得る。すなわち、顔の動きと視点の動きとを用いれば、顔の動きのみを用いる場合より視聴者の感情を詳細に判断し得る。しかしながら、顔を映した映像等から顔の動きを解析する処理は、顔の動きの解析に用いる顔の特徴点を取得する処理等において多くの処理リソースを要求し得る。顔を映した映像等から視点の動きを解析する処理もまた、視点の動きの解析に用いる顔の特徴点を取得する処理等において多くの処理リソースを要求し得る。

これらの処理を同時に実行すると多大な処理リソースを必要とし得るため、視聴者が用いる端末が提供可能な処理リソースを上回り得る。したがって、視聴者が用いる端末において、限られた処理リソースを用いて顔の動きと視点の動きとを同時に解析することは、容易ではない。解析に要する処理リソースを減らすために特徴点を取得する手順そのものを簡易な手順にすると、取得された特徴点の精度が下がり得る。したがって、特徴点に基づいて解析される視聴者の感情及び注視する領域が不正確になり得る。

視聴者情報送信処理では、まず、視聴者の顔に関する特徴点を取得し、続いて、取得した特徴点を用いて顔の動き及び視点の動きを解析する一連の処理を実行する。したがって、顔の動きの解析に用いる顔の特徴点を取得して顔の動きを解析し、視点の動きの解析に用いる顔の特徴点を取得して視点の動きを解析する一連の処理を実行する場合より、顔の特徴点を取得する処理の実行回数を減らし得る。

これにより、顔の特徴点を取得する処理が要求する処理リソースを減らし得る一方で、特徴点を取得する手順そのものを簡易な手順にして特徴点の精度が下がることを防ぎ得る。すなわち、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、顔の動き及び視点の動きを正確に解析し得る。そして、解析された顔の動き及び視点の動きを用いて、視聴者の感情を顔の動きのみを用いる場合より詳細に判断し得る。したがって、感情に関するより詳細で正確な感情指数情報を生成し得る。さらに、視点の動きと顔の動きとを用いて、画面表示領域のうち、視聴者が注視する領域に関する注視領域情報を解析できる。

視聴者情報送信処理を行うことにより、視聴者の感情に関する感情指数情報と画面表示領域のうち視聴者が注視する注視領域情報とを外部装置に送信できる。そして、端末２は、感情指数と注視領域とに基づいてコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を外部装置から受信できる。端末２は、受信したコンテンツ提案情報を用いて視聴者の感情と注視する領域とに基づいてコンテンツの視聴を提案する画面を表示部２５に表示させ得る。

この一連の処理では、コンテンツの視聴を提案する画面を表示可能な情報の生成を外部装置において行う。したがって、感情指数情報と注視領域情報とに基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを端末２において必要とすることがない。これにより、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、視聴者の感情と表示部２５に設けられた画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

［ステップＳ５：コンテンツ提案情報を受信したか否かを判別］
制御部２１は、記憶部２３及び通信部２４と協働してコンテンツ提案情報受信部２２１を実行し、コンテンツ提案情報を外部装置から受信したか否かを判別する（ステップＳ５）。コンテンツ提案情報を外部装置から受信したならば、制御部２１は、処理をステップＳ６に移す。コンテンツ提案情報を外部装置から受信していないならば、制御部２１は、処理をステップＳ１に移し、ステップＳ１からステップＳ６の処理を繰り返す。コンテンツ提案情報を受信したか否かを判別することにより、コンテンツ提案情報を受信した場合に、コンテンツ提案情報を用いて表示部２５に設けられた画面表示領域にコンテンツの視聴を提案する画面を表示し得る。

［ステップＳ６：コンテンツ提案画面を表示］
制御部２１は、記憶部２３及び通信部２４と協働してコンテンツ提案画面表示部２２２を実行し、ステップＳ５で受信したコンテンツ視聴提案情報を用いて表示部２５に設けられた画面表示領域にコンテンツの視聴を提案する画面を表示する（ステップＳ６）。制御部２１は、処理をステップＳ１に移し、ステップＳ１からステップＳ６の処理を繰り返す。

表示部２５に設けられた画面表示領域に表示されるコンテンツの視聴を提案する画面は、コンテンツ提案情報を用いてコンテンツの視聴を提案する画面であれば特に限定されない。コンテンツの視聴を提案する画面は、例えば、コンテンツ提案情報に含まれるコンテンツの表題、再生時間、コンテンツに関するテキスト、コンテンツに関する画像等によって例示されるコンテンツに関する情報の１以上を表示する画面でよい。これにより、視聴者は、コンテンツに関する情報を用いて提案されたコンテンツを視聴するか否かを判断し得る。

コンテンツの視聴を提案する画面は、テキスト「おすすめ動画」等によって例示されるコンテンツの視聴を提案することを示すテキストを含むことが好ましい。これにより、視聴者は、該画面がコンテンツの視聴を提案する画面であると判断できる。コンテンツの視聴を提案する画面は、コンテンツの視聴を開始する手段（例えば、コンテンツの再生及び／又は表示を指示するボタン等。）を含むことが好ましい。これにより、視聴者は、提案されたコンテンツの視聴を開始する手段を探す労力を費やすことなく、コンテンツの視聴を開始できる。

ステップＳ５からステップＳ６において行われる処理により、ステップＳ５で受信したコンテンツ視聴提案情報を用いて表示部２５に設けられた画面表示領域にコンテンツの視聴を提案する画面を表示できる。この一連の処理では、コンテンツの視聴を提案する画面を表示可能な情報の生成を外部装置において行う。これにより、感情指数情報と注視領域情報とに基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを端末２において必要とすることがない。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

したがって、ステップＳ１からステップＳ６で実行される処理によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能な感情測定端末２を提供できる。

［基準点取得処理］
図８は、基準点取得処理の一例を示すフローチャートである。以下、図８を用いて、図７のステップＳ２で実行される基準点取得処理の好ましい手順の一例について説明する。

（ステップＳ１１：基準表情特徴点を取得済であるか否かを判別）
制御部２１は、記憶部２３と協働して基準表情特徴点取得部２１１を実行し、基準表情特徴点を取得済であるか否かを判別する（ステップＳ１１）。基準表情特徴点を取得済であるならば、制御部２１は、処理をステップＳ１３に移す。基準表情特徴点を取得済でないならば、制御部２１は、処理をステップＳ１２に移す。基準表情特徴点を取得済であるか否かを判別することにより、基準表情特徴点を取得済でない場合に基準表情特徴点を取得する処理を実行できる。

（ステップＳ１２：基準表情特徴点を取得）
制御部２１は、記憶部２３と協働して基準表情特徴点取得部２１１を実行し、視聴者の表情が基準となる表情である場合における視聴者の顔に関する特徴点である基準表情特徴点を取得する。そして、取得した基準表情特徴点と基準表情特徴点ＩＤとを関連付けて基準表情特徴点テーブル２３１に格納する（ステップＳ１２）。制御部２１は、処理をステップＳ１３に移す。ステップＳ１２で実行される処理により、基準表情特徴点を基準表情特徴点テーブル２３１に格納できる。

（ステップＳ１３：全ての基準領域について基準視点を取得済であるか否かを判別）
制御部２１は、記憶部２３と協働して注視指示部２１２を実行し、全ての基準領域について基準視点を取得済であるか否かを判別する（ステップＳ１３）。全ての基準領域について基準視点を取得済であるならば、制御部２１は、基準点取得処理を終了し、処理をステップＳ３に移す。いずれかの基準領域について基準視点を取得済でないならば、制御部２１は、処理をステップＳ１４に移す。ステップＳ１３で実行される処理により、いずれかの基準領域について基準視点を取得済でない場合に、基準視点を取得済でない基準領域について基準視点を取得する処理を実行できる。

（ステップＳ１４：未取得の基準領域を注視するよう指示）
制御部２１は、記憶部２３及び表示部２５と協働して注視指示部２１２を実行し、対応する基準視点を取得済でない基準領域を１つ選択する。そして、選択された基準領域を注視する指示を表示部２５に設けられた画面表示領域に表示する（ステップＳ１４）。制御部２１は、処理をステップＳ１５に移す。ステップＳ１４で実行される処理により、未取得の基準領域を注視するよう視聴者に指示できる。

（ステップＳ１５：基準視点を取得）
制御部２１は、記憶部２３と協働して基準視点解析部２１３を実行し、基準領域を見る視聴者の視点である基準視点を解析する。そして、解析した基準視点と基準表情特徴点ＩＤとを関連付けて基準視点テーブル２３２に格納する（ステップＳ１５）。制御部２１は、処理をステップＳ１３に移す。ステップＳ１５で実行される処理により、基準視点を基準視点テーブル２３２に格納できる。

［視聴者情報送信処理］
図９は、視聴者情報送信処理の一例を示すフローチャートである。以下、図９を用いて、図７のステップＳ４で実行される視聴者情報送信処理の好ましい手順の一例について説明する。

（ステップＳ２１：特徴点を取得）
制御部２１は、記憶部２３と協働して特徴点取得部２１４を実行し、コンテンツを視聴する視聴者について、顔の特徴点を取得する（ステップＳ２１）。制御部２１は、処理をステップＳ２２に移す。コンテンツを視聴する視聴者について、顔の特徴点を取得することにより、取得した特徴点を用いて顔の動き及び視点の動きを解析する一連の処理を実行できる。

顔の特徴点を取得する方法は、特に限定されない。顔の特徴点を取得する方法は、例えば、各種の画像認識技術を用いる従来から知られている顔の特徴点を取得する方法でよい。顔の特徴点を取得する方法は、ニューラルネットワーク技術等によって例示される人工知能技術（ＡＩ技術）を用いて顔の特徴点を取得する手順を含むことが好ましい。人工知能技術では、学習データを用いた学習を繰り返すことによってデータ認識における認識精度を高め得る。したがって、人工知能技術を用いて顔の特徴点を取得する手順を含むことにより、顔の特徴点を認識する処理における認識精度を高め得る。そして、顔の特徴点を高い精度で取得し得る。

必須の態様ではないが、顔の特徴点を取得する方法は、端末２が手持ちされている場合に、端末２の移動及び／又は向きの変化による特徴点の移動を打ち消すように特徴点の位置を補正する手順を含むことが好ましい。

携帯端末等によって例示される手持ち可能に構成された端末２では、視聴者が端末２を手持ちしている場合に、視聴者の手の動きや身体の動き等によって端末２が移動する場合がある。あるいは、視聴者の手の動きや身体の動き等によって端末２の向きが変化する場合がある。したがって、端末２が手持ち可能に構成された端末２である場合、視聴者の顔の動きや視点の動きによって特徴点が移動するだけでなく、端末２の移動及び／又は向きの変化によっても特徴点が移動し得る。端末２の移動及び／又は向きの変化による特徴点の移動は、視聴者の顔の動き及び／又は視点の動きの解析に悪影響を及ぼし得る。

顔の特徴点を取得する方法が、上述の特徴点の位置を補正する手順を含むことにより、視聴者が端末２を手持ちしている場合であっても、端末２の移動及び／又は向きの変化による特徴点の移動が視聴者の顔の動き及び／又は視点の動きの解析に及ぼす悪影響を軽減し得る。これにより、顔の動き及び視点の動きを、補正を行わない場合より正確に解析し得る。したがって、視聴者の感情及び注視する領域を、補正を行わない場合より正確に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

複雑なデータや大量のデータについて移動に関する補正を行う場合、多大な処理リソースを必要とし得る。そのため、補正を行えないことや、補正を行えたとしても、時間を要してしまうことがあり得る。端末２の移動及び／又は向きの変化による特徴点の移動を打ち消すように特徴点の位置を補正する手順では、補正の対象が視聴者の顔を写した映像等の複雑なデータ及び／又は大量のデータでなく、映像等より単純かつデータ量が小さい顔の特徴点の位置である。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、移動を打ち消すような補正を比較的短時間で実行し得る。

端末２の移動及び／又は向きの変化を検出する手段は、特に限定されない。端末２の移動及び／又は向きの変化を検出する手段は、従来から知られている端末２の移動及び／又は向きの変化を検出する手段でよい。端末２の移動及び／又は向きの変化を検出する手段は、例えば、複数の特徴点が同一方向に移動する動きを用いて端末２が移動したことを検出する方法、２以上の特徴点によって定められる向きが変化したことを用いて端末２の向きが変化したことを検出する方法、及び動き検知部によって検知された端末２の移動及び／又は向きの変化を用いて検出する方法等によって例示される。

端末２が動き検知部を含む場合、特徴点の位置を補正する手順は、動き検知部によって検知された端末２の移動及び／又は向きの変化を用いて特徴点の位置を補正する手順を含むことが好ましい。これにより、端末２の移動及び／又は向きの変化を正確に検出し得る。したがって、特徴点の位置をより高い精度で補正し得る。

（ステップＳ２２：視点動きを解析）
制御部２１は、記憶部２３と協働して視点動き解析部２１５を実行し、ステップＳ２１で取得した特徴点を用いて視聴者の視点の動きである視点動きを解析する（ステップＳ２２）。制御部２１は、処理をステップＳ２３に移す。ステップＳ２２で実行される処理により、後述する顔の動きと視点の動きとを用いて感情を判断し得る。視点動きを解析する方法は、特に限定されない。視点動きを解析する方法は、例えば、顔の特徴点を用いて視点動きを解析する従来技術の方法でよい。視点動きは、顔の特徴点のうち目に関する目の特徴点の動きを含むことが好ましい。これにより、視点と関連する目の特徴点の動きを用いて視聴者が注視する領域を解析し得る。

（ステップＳ２３：顔動きを解析）
制御部２１は、記憶部２３と協働して顔動き解析部２１６を実行し、ステップＳ２１で取得した特徴点を用いて視聴者の顔の動きである顔動きを解析する（ステップＳ２３）。制御部２１は、処理をステップＳ２４に移す。ステップＳ２３で実行される処理により、顔の動きとステップＳ２２で解析された視点の動きとを用いて感情を判断し得る。顔動きを解析する方法は、特に限定されない。顔動きを解析する方法は、例えば、顔の特徴点を用いて顔動きを解析する従来技術の方法でよい。

顔動きを解析する方法は、図２に示す基準表情特徴点テーブル２３１に格納された基準表情特徴点とステップＳ２１で取得された顔の特徴点との違いを用いて特徴点の移動量を算出する手順を含むことが好ましい。視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いて分析すると、コンテンツを視聴したことによって生じた感情を反映した表情と、普段の表情との判別が難しい。視聴者がコンテンツを視聴しているときの顔の特徴点だけを用いた分析では、例えば、視聴者の顔が、口角が上がった笑い顔である場合に、視聴者がコンテンツを視聴して笑ったために笑い顔であるのか、あるいは、普段の表情での顔が笑い顔であるのかの判別が難しい。

顔動きを解析する方法が基準表情特徴点とステップＳ２１で取得された顔の特徴点との違いを用いて特徴点の移動量を算出する手順を含むことにより、基準となる表情とコンテンツを視聴したことによって生じた感情を反映した表情とを判別し得る。したがって、判別された表情に基づいて視聴者の感情を、基準表情特徴点を用いない場合より詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

また、顔動きを解析する方法が基準表情特徴点とステップＳ２１で取得された顔の特徴点との違いを用いて特徴点の移動量を算出する手順を含むことにより、基準表情特徴点とコンテンツを視聴しているときの特徴点とを比較する簡易な処理を行い得る。これにより、感情指数を解析するための処理リソースを、基準表情特徴点を用いない場合よりいっそう減らし得る。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、感情指数をよりいっそう詳細かつ正確に解析し得る。

ところで、心拍数、血圧、及び体温等によって例示される生体情報は、感情に応じて変化することが知られている。システム１が生体情報センサＢを含む場合、視聴者情報送信処理は、ステップＳ２４で実行される生体情報を取得する処理を含むことが好ましい。これにより、感情に応じて変化する生体情報を用いて視聴者の感情をより詳細に解析し得る。

（ステップＳ２４：生体情報を取得）
制御部２１は、記憶部２３及び通信部２４と協働して生体情報取得部２１７を実行し、ネットワークＮ２を介して生体情報センサＢから視聴者の生体情報を取得する（ステップＳ２４）。制御部２１は、処理をステップＳ２５に移す。

ネットワークＮ２を介して生体情報センサＢから視聴者の生体情報を取得することにより、視聴履歴と生体情報とを関連付けることができる。そして、視聴履歴と関連付けられた生体情報を用いて、生体情報を用いない場合と比べて視聴者の感情をより詳細に解析し得る。したがって、表示部２５に設けられた画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情を、生体情報を用いない場合と比べてより詳細に解析し得る。これにより、視聴者の好みにより合ったコンテンツの視聴を提案し得る。また、視聴者の生体情報を取得することにより、生体情報を含む視聴者情報を外部装置に送信し得る。これにより、生体情報を用いた解析を外部装置において行い得る。

したがって、端末２が提供可能な処理リソースが比較的少なく、生体情報を用いた解析を実現できない場合（例えば、端末２がスマートフォンであって生体情報を用いた解析を実現できない場合。）であっても、生体情報を用いて感情をよりいっそう詳細かつ正確に解析し得る。

（ステップＳ２５：感情指数情報を生成）
制御部２１は、記憶部２３と協働して感情指数情報生成部２１８を実行し、ステップＳ２２で解析された視点動き及びステップＳ２３で解析された顔動きを用いてコンテンツを視聴する視聴者の感情に関する感情指数情報を生成する（ステップＳ２５）。制御部２１は、処理をステップＳ２６に移す。ステップＳ２５で実行される処理により、顔の動きのみを用いる場合より視聴者の感情を詳細に判断した感情指数情報を生成し得る。

視点動き及び顔動きを用いて感情指数情報を生成する方法は、特に限定されない。感情指数情報を生成する方法は、例えば、図４に示す感情指数情報テーブル２３３を参照し、視点動き及び顔動きに関する動き情報とステップＳ２２で解析された視点動き及びステップＳ２３で解析された顔動きとを比較して、解析された視点動き及び顔動きに最も類似した動き情報と関連付けられた感情指数情報を取得する方法でよい。これにより、動き情報と解析された視点動き及び顔動きとを比較する簡易な処理によって、感情指数情報を生成できる。

（ステップＳ２６：注視領域情報を解析）
制御部２１は、記憶部２３と協働して注視領域情報解析部２１９を実行し、ステップＳ２２で解析された視点動き及びステップＳ２３で解析された顔動きを用いて注視領域情報を解析する（ステップＳ２６）。制御部２１は、処理をステップＳ２７に移す。視点動き及び顔動き等を用いて注視領域情報を解析することにより、注視領域情報を含む視聴者情報を外部装置に送信できる。

視点動き及び顔動きを用いて注視領域情報を解析する方法は、特に限定されない。基準視点テーブル２３２に格納する基準視点が基準領域を見る視聴者の目の特徴点である場合、注視領域情報を解析する方法は、コンテンツを視聴する視聴者に関し、視点の動き及び顔の動きに関する目の特徴点と基準視点とを比較する手順を含むことが好ましい。これにより、注視領域を解析するための処理リソースをよりいっそう減らし得る。したがって、端末２が提供可能な処理リソースが比較的少ない場合（例えば、端末２がスマートフォンである場合。）であっても、視聴者が注視する領域をよりいっそう詳細かつ正確に解析し得る。また、顔の特徴点全てを基準視点として用いる場合より、注視領域を解析するための処理リソースを減らし得る。

注視領域情報を解析する方法が目の特徴点と基準視点とを比較する手順を含む場合、視点動き及び顔動きを用いて注視領域情報を解析する方法は、基準視点テーブル２３２に格納する基準視点それぞれと目の特徴点との類似度を用いて基準視点に関連付けられた基準領域に重み付けし、基準領域それぞれから注視領域までの距離とこの重み付けとを積算した値が略同一の値になるように注視領域を決定する手順を含んでも良い。これにより、複数の基準視点を用いて注視領域をより詳細に解析し得る。

基準視点テーブル２３２に格納する基準視点が基準領域を見る視聴者の顔の特徴点である場合、視点動き及び顔動きを用いて注視領域情報を解析する方法は、コンテンツを視聴する視聴者に関し、視点の動き及び顔の動きに関する顔の特徴点と基準視点とを比較する手順を含むことが好ましい。これにより、目の特徴点のみを基準視点として用いる場合より、注視領域を詳細に解析し得る。

（ステップＳ２７：視聴者情報を送信）
制御部２１は、記憶部２３及び通信部２４と協働して視聴者情報送信部２２０を実行し、視聴者が視聴したコンテンツの視聴履歴とステップＳ２５で生成された感情指数情報とステップＳ２６で解析された注視領域情報とを関連付けた情報を含む視聴者情報を外部装置に送信する（ステップＳ２７）。制御部２１は、視聴者情報送信処理を終了し、処理をステップＳ５に移す。ステップＳ２７で実行される処理により、感情指数と注視領域とに基づいてコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を外部装置から受信し得る。そして、受信したコンテンツ提案情報を用いて視聴者の感情と注視する領域とに基づいてコンテンツの視聴を提案する画面を表示部２５に設けられた画面表示領域に表示させ得る。

視聴者情報送信処理がステップＳ２４で実行される生体情報を取得する処理を含む場合、視聴者情報は、ステップＳ２４で取得された生体情報と視聴履歴とを関連付けた情報を含むことが好ましい。これにより、外部装置において、視聴履歴と関連付けられた生体情報を用いて、生体情報を用いない場合と比べて視聴者の感情をより詳細に解析し得る。したがって、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情を、生体情報を用いない場合と比べてより詳細に解析し、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

視聴者情報がステップＳ２４で取得された生体情報と視聴履歴とを関連付けた情報を含むことにより、生体情報を用いた解析を外部装置において行い得るため、端末２が提供可能な処理リソースが比較的少なく、生体情報を用いた解析を実現できない場合（例えば、端末２がスマートフォンであって生体情報を用いた解析を実現できない場合。）であっても、生体情報を用いて感情をよりいっそう詳細かつ正確に解析し得る。

視聴者情報に含まれる視聴履歴は、コンテンツの時系列情報を含むことが好ましい。これにより、コンテンツの時系列によって画面表示領域の各領域に表示される視聴対象が変化するコンテンツであっても、視聴者が注意及び／又は感情を向けた視聴対象を正確に判別し、視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。

〔コンテンツ提案処理のメインフローチャート〕
図１０は、コンテンツ提案装置３で実行されるコンテンツ提案処理の一例を示すメインフローチャートである。以下、図１０を用いて、コンテンツ提案装置３で実行されるコンテンツ提案処理の好ましい態様の一例を説明する。

［ステップＳ３１：視聴者情報を受信したか否かを判別］
制御部３１は、記憶部３２及び通信部３３と協働して視聴者情報受信部３１１を実行し、感情測定端末２等の外部端末から視聴者情報を受信したか否かを判別する（ステップＳ３１）。視聴者情報を受信したならば、制御部３１は、視聴者情報ＩＤと受信した視聴者情報とを関連付けた情報を視聴者情報テーブル３２１に格納し、処理をステップＳ３２に移す。視聴者情報を受信していないならば、制御部３１は、処理をステップＳ３１に移す。外部端末から視聴者情報を受信したか否かを判別ことにより、外部端末から視聴者情報を受信した場合に、コンテンツ提案情報を生成し、生成したコンテンツ提案情報を送信する一連の処理を実行できる。

視聴者情報は、少なくとも、コンテンツを視聴する視聴者の感情に関する感情指数情報と、外部端末における画面表示領域のうち、視聴者が注視する領域に関する注視領域情報と、を含む。また、感情指数情報及び注視領域情報は、視聴者が視聴したコンテンツの視聴履歴と関連付けられている。これにより、視聴履歴と関連付けられた感情指数情報及び視聴履歴と関連付けられた注視領域情報に基づいてコンテンツ提案情報を生成できる。視聴者情報ＩＤと受信した視聴者情報とを関連付けた情報を視聴者情報テーブル３２１に格納するため、視聴者情報テーブル３２１に格納された視聴者情報を用いてコンテンツ提案情報を生成できる。

視聴者情報は、外部端末を識別可能な端末ＩＤを含むことが好ましい。これにより、外部端末が複数ある場合に、外部端末のそれぞれに応じたコンテンツの視聴を提案し得る。必須の態様ではないが、端末ＩＤは、外部端末を利用する視聴者を識別可能な情報を含むことが好ましい。これにより、複数の視聴者が外部端末を利用する場合でも、外部端末を利用する視聴者それぞれの好みに合うコンテンツの視聴を提案し得る。

システム１が生体情報センサＢを含む場合、視聴者情報は、視聴履歴と関連付けられた視聴者の生体情報をさらに含むことが好ましい。これにより、視聴履歴と関連付けられた生体情報を用いて、生体情報を用いない場合と比べて視聴者の感情を詳細に解析し得る。また、これにより、生体情報を用いない場合と比べて、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情をより詳細に解析し得る。したがって、視聴者の好みにより合ったコンテンツの視聴を提案し得る。

また、受信した生体情報を含む視聴者情報に基づいて装置３がコンテンツ提案情報を生成するため、外部端末が提供可能な処理リソースが比較的少なく、外部端末において生体情報を用いた感情の解析等を行えない場合（例えば、外部端末がスマートフォンであって生体情報を用いた解析を実現できない場合。）であっても、生体情報を用いて視聴者の好みにより合ったコンテンツの視聴を提案し得る。

［ステップＳ３２：コンテンツ提案情報を生成］
制御部３１は、記憶部３２と協働してコンテンツ提案情報生成部３１２を実行し、ステップＳ３１で受信した視聴者情報に基づいてコンテンツ提案情報を生成する（ステップＳ３２）。制御部２１は、処理をステップＳ３３に移す。ステップＳ３２で実行される処理により、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを外部端末において必要とすることがない。したがって、外部端末が提供可能な処理リソースが比較的少ない場合（例えば、外部端末がスマートフォンである場合。）であっても、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

コンテンツ提案情報を生成する手段は、特に限定されない。コンテンツ提案情報を生成する手段は、例えば、ステップＳ３１で受信した視聴者情報と同じ端末ＩＤを含む１以上の視聴者情報を視聴者情報テーブル３２１から取得し、視聴者情報のそれぞれとコンテンツ提案情報テーブル３２２に格納された視聴履歴、感情指数条件、注視領域条件、及び／又は生体情報条件を比較して、視聴履歴と関連付けられたこれらの条件を１以上満たすコンテンツ提案情報を取得する方法を含む手段でよい。これにより、コンテンツ提案情報テーブル３２２に格納された各種の条件を用いてコンテンツ提案情報を生成できる。

コンテンツ提案情報を生成する手段がコンテンツ提案情報テーブル３２２に格納された各種の条件を１以上満たすコンテンツ提案情報を取得する方法を含む場合、コンテンツ提案情報を生成する手段は、条件を満たした数が多い所定数のコンテンツ提案情報を用いてコンテンツ提案情報を生成する方法をさらに含んでもよい。これにより、より多くの条件を満たしたコンテンツ提案情報、すなわち、視聴者の好みに合う可能性がより高いコンテンツ提案情報を所定数含むコンテンツ提案情報を生成し得る。

［ステップＳ３３：コンテンツ提案情報を送信］
制御部３１は、記憶部３２及び通信部３３と協働してコンテンツ提案情報送信部３１３を実行し、ステップＳ３１で視聴者情報を送信した外部端末にコンテンツ提案情報を送信する（ステップＳ３３）。制御部２１は、処理をステップＳ３１に移し、ステップＳ３１からステップＳ３３の処理を繰り返す。ステップＳ３３で実行される処理により、外部端末から受信した視聴者情報に基づいて生成されたコンテンツ提案情報を介して、外部端末にコンテンツの視聴を提案する画面を表示させ得る。

視聴者の好みに合う可能性がより高いコンテンツの視聴を提案することに関し、端末の画面表示領域にコンテンツを表示する場合、画面表示領域には、領域ごとに異なる複数の視聴対象が表示され得る。このような場合において、視聴者の注意及び／又は感情が視聴対象のいずれに向けられたものであるかを判別できれば、視聴者の注意及び／又は感情を向けられた視聴対象に類似した視聴対象等を含むコンテンツを選択し得る。そして、選択されたコンテンツの視聴を提案し得る。したがって、視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

ステップＳ３１からステップＳ３３で実行される処理によれば、外部端末から受信した視聴者情報に基づいてコンテンツ提案情報を生成する。そして、生成されたコンテンツ提案情報を介して、外部端末にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を表示させ得る。このため、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツを大量のコンテンツから探し出すための多大な処理リソースを外部端末において必要とすることがない。したがって、外部端末が提供可能な処理リソースが比較的少ない場合（例えば、外部端末がスマートフォンである場合。）であっても、視聴者情報に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を視聴者に提案し得る。

ステップＳ３１において受信する視聴者情報は、視聴者の感情に関する感情指数情報と、外部端末における画面表示領域のうち、視聴者が注視する領域に関する注視領域情報とを含む。これにより、装置３は、ステップＳ３２において、視聴者の感情と、画面表示領域のうち視聴者が注視する領域と、に基づいてコンテンツ提案情報を生成し得る。そして、ステップＳ３３において生成したコンテンツ提案情報を送信するため、コンテンツ提案情報を介して、外部端末にコンテンツの視聴を提案する画面を表示させ得る。すなわち、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

ステップＳ３１において受信する感情指数情報及び注視領域情報は、視聴者が視聴したコンテンツの視聴履歴と関連付けられている。これにより、装置３は、ステップＳ３２及びステップＳ３３の処理において、単に視聴者の感情又は注視する領域に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案するにとどまらず、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。あるいは、これにより、装置３は、画面表示領域のうち視聴者が注視する領域に表示された視聴対象に向けられた視聴者の感情に基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案し得る。

したがって、ステップＳ３１からステップＳ３３で実行される処理によれば、視聴者が用いる端末が提供可能な処理リソースが比較的少ない場合であっても、視聴者の感情と画面表示領域のうち視聴者が注視する領域とに基づいて視聴者の好みに合う可能性がより高いコンテンツの視聴を提案可能なコンテンツ提案装置３を提供できる。

＜システム１の使用例＞
図１１は、特徴点取得の一例を示す概略模式図である。図１２は、注視領域情報解析の一例を示す概略模式図である。以下、必要に応じて図１１及び図１２を参照しつつ、本実施形態におけるシステム１の使用例を説明する。

〔コンテンツの再生〕
視聴者は、感情測定端末２の表示部２５に設けられた画面表示領域２５Ａ（図１２参照）にコンテンツを表示させ、表示されたコンテンツを視聴する。図１２に示す例では、コンテンツ「コントＡ号」を画面表示領域２５Ａに表示している。

〔特徴点の取得〕
感情測定端末２は、コンテンツを視聴する視聴者に関し、顔の特徴点を取得する。図１１に示す例では、点線で示す視聴者の顔から、実線でつながれた黒丸で示す特徴点を取得している。図１１に示す例では、特徴点は、右眉の特徴に対応する右眉特徴点ＣＰ１Ｒ、左眉の特徴に対応する左眉特徴点ＣＰ１Ｌ、右目内側の特徴に対応する右目内側特徴点ＣＰ２Ｒ、左目外側の特徴に対応する左目外側特徴点ＣＰ３Ｌ、唇の特徴に対応する唇特徴点ＣＰ４、あごの特徴に対応するあご特徴点ＣＰ５等を含む。図１１に示す例の特徴点は、左目内側の特徴に対応する左目内側特徴点、右目外側の特徴に対応する右目外側特徴点、鼻の特徴に対応する鼻特徴点等も含むが、図の見やすさを向上させるためにこれらの特徴点に対応する符号の記載を省略している。なお、ここでいう顔の構成要素及び特徴点の左右は、コンテンツを視聴する視聴者から見た左右であり、図の左右と逆である。

右眉の特徴に対応する右眉特徴点ＣＰ１Ｒは、右眉尻の特徴に対応する第１右眉特徴点ＣＰ１Ｒａ、右眉中央の特徴に対応する第２右眉特徴点ＣＰ１Ｒｂ、及び右眉内側の特徴に対応する第３右眉特徴点ＣＰ１Ｒｃを含む。これにより、笑った表情における眉尻が下がる顔の動き、怒った表情における眉尻が上がる顔の動き、及び驚いた表情における眉全体が上がる顔の動き等によって例示される顔の動きを解析し得る。

左眉の特徴に対応する左眉特徴点ＣＰ１Ｌは、左眉尻の特徴に対応する第１左眉特徴点ＣＰ１Ｌａ、左眉中央の特徴に対応する第２左眉特徴点ＣＰ１Ｌｂ、及び左眉内側の特徴に対応する第３左眉特徴点ＣＰ１Ｌｃを含む。これにより、右眉の特徴に対応する特徴点を含むことによる顔の動きを解析し得ることに加えて、疑いの感情を示す表情における左右の眉が不均等に動く顔の動き等も解析し得る。

右目内側の特徴に対応する右目内側特徴点ＣＰ２Ｒは、右目の虹彩部分について、輪郭の特徴に対応する第１右目内側特徴点ＣＰ２Ｒａ、第２右目内側特徴点ＣＰ２Ｒｂ、第３右目内側特徴点ＣＰ２Ｒｃ、第４右目内側特徴点ＣＰ２Ｒｄを含む。これにより、右目の虹彩部分の動きによって示される視点の動きを解析し得る。

左目外側の特徴に対応する左目外側特徴点ＣＰ３Ｌは、左目外側について、輪郭上側の特徴に対応する第１左目外側特徴点ＣＰ３Ｌａ、目尻の特徴に対応する第２左目外側特徴点ＣＰ３Ｌｂ、輪郭下側の特徴に対応する第３左目外側特徴点ＣＰ３Ｌｃ、及び目頭の特徴に対応する第４左目外側特徴点ＣＰ３Ｌｄを含む。これにより、微笑んだ表情における左目を細める目の動き、驚いた表情における左目を見開く目の動き、笑う表情における左目尻を下げる目の動き等によって例示される目の動きを解析し得る。

唇の特徴に対応する唇特徴点ＣＰ４は、唇の輪郭の特徴に関し、第１唇特徴点ＣＰ４ａ、第２唇特徴点ＣＰ４ｂ、第３唇特徴点ＣＰ４ｃ、第４唇特徴点ＣＰ４ｄ、第５唇特徴点ＣＰ４ｅ、第６唇特徴点ＣＰ４ｆ、及び第７唇特徴点ＣＰ４ｇを含む。これにより、笑う表情における口角（第３唇特徴点ＣＰ４ｃ及び第６唇特徴点ＣＰ４ｆ）を上げる顔の動き及び驚いた表情における口を開ける顔の動き等によって例示される顔の動きを解析し得る。

あごの特徴に対応するあご特徴点ＣＰ５は、あごの輪郭の特徴に関し、第１あご特徴点ＣＰ５ａ、第２あご特徴点ＣＰ５ｂ、第３あご特徴点ＣＰ５ｃ等を含む。これにより、笑う表情におけるあごが下がる顔の動き等によって例示される顔の動きを解析し得る。

〔動きの解析〕
感情測定端末２は、取得した特徴点を用いて目の動き及び顔の動きを解析する。顔の特徴点が上述の各種の特徴点を含むため、感情指数情報の生成及び注視領域情報の解析に用いることが可能な目の動き及び顔の動きを解析できる。

〔感情指数情報の生成〕
感情測定端末２は、目の動き及び顔の動きを用いて感情指数情報を生成する。図１２（ａ）及び図１２（ｃ）に示す例では、「笑い１」の感情指数情報が生成されている。図１２（ｂ）に示す例では、「笑い３」の感情指数情報が生成されている。図１２（ｂ）に示す例では、図１２（ａ）及び図１２（ｃ）に示す例より程度が高い笑いの感情に対応する感情指数情報が生成されている。

〔注視領域情報の解析〕
感情測定端末２は、目の動き及び顔の動きを用いて注視領域情報を解析する。図１２（ａ）に示す例は、向かって左側に立つボケ担当の芸人と向かって右側に立つツッコミ担当の芸人との二人組が話芸を披露するコンテンツ「コントＡ号」を視聴する視聴者に関する例である。図１２（ａ）に示す例では、コンテンツの再生開始から０分０秒の時点において、画面表示領域２５Ａのうち、ボケ担当の芸人が表示されている左側の領域が第１注視領域ＶＰａであることが示されている。このときの感情指数情報は、「笑い１」であり、視聴者が笑いの感情を程度１で感じたことを示す感情指数情報が生成されている。

図１２（ｂ）に示す例では、コンテンツの再生開始から０分１０秒の時点において、画面表示領域２５Ａのうち、大仰な身振りを行っているツッコミ担当の芸人が表示されている右側の領域が第２注視領域ＶＰｂであることが示されている。このときの感情指数情報は、「笑い３」であり、視聴者が笑いの感情を程度３で感じたことを示す感情指数情報が生成されている。コンテンツの０分１０秒における笑いの感情の程度は、コンテンツの再生開始から０分０秒の時点における笑いの感情の程度より高い。第２注視領域ＶＰｂ及び対応する感情指数情報により、視聴者は、向かって左側に立つボケ担当の芸人よりも、向かって右側に立つツッコミ担当の芸人について程度が高い笑いを感じていると判断し得る。

図１２（ｃ）に示す例では、コンテンツの再生開始から０分２０秒の時点において、画面表示領域２５Ａのうち、手を合わせる身振りを行っているボケ担当の芸人が表示されている左側の領域が第３注視領域ＶＰｃであることが示されている。このときの感情指数情報は、「笑い１」であり、視聴者が笑いの感情を程度１で感じたことを示す感情指数情報が生成されている。コンテンツの再生開始から０分２０秒の時点における笑いの感情の程度は、コンテンツの再生開始から０分０秒の時点における笑いの感情の程度と同程度であり、コンテンツの再生開始から０分１０秒の時点における笑いの感情の程度より低い。

第１注視領域ＶＰａ、第２注視領域ＶＰｂ、及び第３注視領域ＶＰｃと、これらの注視領域に対応する感情指数情報とを用いることにより、視聴者が向かって左側に立つボケ担当の芸人について感じている笑いの感情の程度は、ツッコミ担当の芸人について感じている笑いの感情の程度ほど高くないことを判断し得る。

このように、コンテンツ「コントＡ号」を視聴する視聴者について感情指数情報を生成し、生成した注視領域情報を解析することにより、視聴者がボケ担当の芸人よりツッコミ担当の芸人についてより程度が高い笑いの感情を感じていることを判断し得る。したがって、コンテンツ提案装置３は、コンテンツ「コントＡ号」を視聴したことを示す視聴履歴と関連付けられた感情指数情報及び注視領域情報を用いて、画面表示領域２５Ａのうち、右側の領域に表示されているツッコミ担当の芸人に類似した視聴対象を含むコンテンツの視聴を提案し得る。

〔視聴者情報の送信〕
感情測定端末２は、視聴者が視聴したコンテンツの視聴履歴と感情指数情報と注視領域情報とを関連付けた情報を含む視聴者情報をコンテンツ提案装置３に送信する。コンテンツ提案装置３は、感情測定端末２から該視聴者情報を受信する。

〔コンテンツ提案情報の生成〕
コンテンツ提案装置３は、受信した視聴者情報に基づいてコンテンツ提案情報を生成する。受信した視聴者情報には、上述のコンテンツ「コントＡ号」に関する視聴履歴と、該コンテンツを視聴する視聴者がコンテンツの再生開始から０分１０秒の時点において、感情指数情報「笑い３」で画面表示領域２５Ａにおける右側の領域を注視していたことを示す情報が含まれている。

コンテンツ提案装置３は、図６に示すコンテンツ提案情報テーブル３２２に格納されたコンテンツ提案情報のそれぞれについて、受信した視聴者情報が該コンテンツ提案情報に含まれる条件を満たすか否かを判別する。受信した視聴者情報は、コンテンツ提案情報ＩＤ「ＣＰ０００１」に格納された、コンテンツ「コントＡ号」の再生開始から０分１０秒の時点に関する、感情指数情報が「笑い２」又は「笑い３」のいずれかであるという条件と、注視領域が画面表示領域２５Ａにおける右側の領域であるという条件とを満たす。コンテンツ提案装置３は、これらの条件を満たすことに基づいて、これらの条件と関連付けられたコンテンツ「ワライドズ」「ミイ＆ツッ子」の視聴を提案するコンテンツ提案情報を生成する。

〔コンテンツ提案情報の送信〕
コンテンツ提案装置３は、生成したコンテンツ提案情報を感情測定端末２に送信する。感情測定端末２は、該コンテンツ提案情報をコンテンツ提案装置３から受信する。

〔コンテンツ提案画面の表示〕
感情測定端末２は、受信したコンテンツ提案情報に基づいて、表示部２５に設けられた画面表示領域２５Ａにコンテンツ「ワライドズ」「ミイ＆ツッ子」の視聴を提案する画面を表示する。これにより、視聴者は、視聴者の好みに合う可能性がより高いコンテンツである「ワライドズ」及び／又は「ミイ＆ツッ子」を視聴し得る。

以上、本発明の実施形態について説明したが、本発明は上述の実施形態に限るものではない。また、上述の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したものに過ぎず、本発明による効果は、上述の実施形態に記載されたものに限定されるものではない。また、上述の実施形態は、本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。

１ コンテンツ提案システム
２ 感情測定端末
２１ 制御部
２１１ 基準表情特徴点取得部
２１２ 注視指示部
２１３ 基準視点解析部
２１４ 特徴点取得部
２１５ 視点動き解析部
２１６ 顔動き解析部
２１７ 生体情報取得部
２１８ 感情指数情報生成部
２１９ 注視領域情報解析部
２２０ 視聴者情報送信部
２２１ コンテンツ提案情報受信部
２２２ コンテンツ提案画面表示部
２３ 記憶部
２３１ 基準表情特徴点テーブル
２３２ 基準視点テーブル
２３３ 感情指数テーブル
２４ 通信部
２５ 表示部
２５Ａ 画面表示領域
３ コンテンツ提案装置
３１ 制御部
３１１ 視聴者情報受信部
３１２ コンテンツ提案情報生成部
３１３ コンテンツ提案情報送信部
３２ 記憶部
３２１ 視聴者情報テーブル
３２２ コンテンツ提案情報テーブル
３３ 通信部
Ｂ 生体情報センサ
Ｎ１ 第１ネットワーク
Ｎ２ 第２ネットワーク

Claims (10)

1. コンテンツを視聴する視聴者に関する視聴者情報を外部端末から受信する視聴者情報受信部と、
   前記外部端末にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を前記視聴者情報に基づいて生成可能なコンテンツ提案情報生成部と、
   前記外部端末に前記コンテンツ提案情報を送信可能なコンテンツ提案情報送信部と、
   を備え、
   前記視聴者情報は、少なくとも、
   前記視聴者の感情に関する感情指数情報と、
   前記外部端末における画面表示領域のうち、前記視聴者が注視する領域に関する注視領域情報と、
   を含み、
   前記感情指数情報及び前記注視領域情報は、前記視聴者が視聴した前記コンテンツの視聴履歴と関連付けられている、
   コンテンツ提案装置。
2. 前記視聴者情報は、前記視聴者の生体情報をさらに含み、
   前記生体情報は、前記視聴履歴と関連付けられている、請求項１に記載のコンテンツ提案装置。
3. コンテンツを視聴する視聴者の顔に関する特徴点を取得する特徴点取得部と、
   前記特徴点を用いて前記視聴者の視点の動きを解析する視点動き解析部と、
   前記特徴点を用いて前記視聴者の顔の動きを解析する顔動き解析部と、
   前記視点の動きと前記顔の動きとを用いて前記視聴者の感情に関する感情指数情報を生成する感情指数情報生成部と、
   前記視点の動きと前記顔の動きとを用いて、画面表示領域のうち、前記視聴者が注視する領域に関する注視領域情報を解析する注視領域情報解析部と、
   前記視聴者が視聴した前記コンテンツの視聴履歴と関連付けられた前記感情指数情報と前記視聴履歴と関連付けられた前記注視領域とを含む視聴者情報を外部装置に送信する視聴者情報送信部と、
   前記視聴者情報に基づいて前記画面表示領域にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を前記外部装置から受信するコンテンツ提案情報受信部と、
   前記コンテンツ提案情報を用いて前記画面表示領域に前記コンテンツの視聴を提案する画面を表示するコンテンツ提案画面表示部と、
   を備える、感情測定端末。
4. 前記画面表示領域のうち、指定された画面上の基準領域を見るよう前記視聴者に指示する注視指示部と、
   前記基準領域を見る前記視聴者の視点である基準視点を解析する基準視点解析部と、
   をさらに備え
   前記注視領域解析部は、前記基準視点と前記視点の動きと前記顔の動きとを用いて前記視聴者が見ている画面上の領域である注視領域を解析する、請求項３に記載の感情測定端末。
5. 前記視聴者の生体情報を取得する生体情報取得部をさらに備え、
   前記視聴者情報は、前記視聴履歴と関連付けられた前記生体情報を含む、
   請求項３又は４に記載の感情測定端末。
6. 前記視聴者の表情が基準となる表情である場合における前記視聴者の顔に関する特徴点である基準表情特徴点を取得する基準表情特徴点取得部をさらに備え、
   前記感情指数情報生成部は、前記基準表情特徴点と前記特徴点との比較を用いて前記感情指数情報を生成可能である、
   請求項３から５のいずれか１項に記載の感情測定端末。
7. 前記感情測定端末は、手持ち可能に構成された端末であり、
   前記特徴点取得部は、前記感情測定端末が手持ちされている場合に、前記感情測定端末の移動及び／又は向きの変化による前記特徴点の移動を打ち消すように前記特徴点の位置を補正可能である、
   請求項３から６のいずれか１項に記載の感情測定端末。
8. 前記感情測定端末がスマートフォンである、請求項７に記載の感情測定端末。
9. 前記外部装置としての請求項１又は２に記載のコンテンツ提案装置と、
   前記外部端末としての請求項３から８のいずれか１項に記載の感情測定端末と、
   を含んで構成される、コンテンツ提案システム。
10. 感情測定端末に、
    コンテンツを視聴する視聴者の顔に関する特徴点を取得する特徴点取得ステップと、
    前記特徴点を用いて前記視聴者の視点の動きを解析する視点動き解析ステップと、
    前記特徴点を用いて前記視聴者の顔の動きを解析する顔動き解析ステップと、
    前記視点の動きと前記顔の動きとを用いて前記視聴者の感情に関する感情指数情報を生成する感情指数情報生成ステップと、
    前記視点の動きと前記顔の動きとを用いて、画面表示領域のうち、前記視聴者が注視する領域に関する注視領域情報を解析する注視領域情報解析ステップと、
    前記視聴者が視聴した前記コンテンツの視聴履歴と関連付けられた前記感情指数情報と前記視聴履歴と関連付けられた前記注視領域とを含む視聴者情報を外部装置に送信する視聴者情報送信ステップと、
    前記視聴者情報に基づいて前記画面表示領域にコンテンツの視聴を提案する画面を表示可能なコンテンツ提案情報を前記外部装置から受信するコンテンツ提案情報受信ステップと、
    前記コンテンツ提案情報を用いて前記画面表示領域に前記コンテンツの視聴を提案する画面を表示するコンテンツ提案画面表示ステップと、
    を実行させるプログラム。
    
    

Images