JP2012169918A - Device, method and program for determining group behavior - Google Patents
Device, method and program for determining group behavior Download PDFInfo
- Publication number
- JP2012169918A JP2012169918A JP2011029954A JP2011029954A JP2012169918A JP 2012169918 A JP2012169918 A JP 2012169918A JP 2011029954 A JP2011029954 A JP 2011029954A JP 2011029954 A JP2011029954 A JP 2011029954A JP 2012169918 A JP2012169918 A JP 2012169918A
- Authority
- JP
- Japan
- Prior art keywords
- biological information
- determination
- user
- content
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Details Of Television Systems (AREA)
Abstract
Description
この発明は、例えばテレビジョン受信機により放送番組を視聴しているユーザが、集団で視聴しているか一人で視聴しているかを判定するための集団行動判定装置、方法及びプログラムに関する。 The present invention relates to a collective behavior determination apparatus, method, and program for determining whether a user who is watching a broadcast program with a television receiver, for example, is watching in a group or alone.
近年、視聴履歴や録画履歴を用いてユーザに適したテレビジョン番組を推薦するといった機能を搭載したテレビジョン番組レコーダなどが商品化されている。しかし、既存の機器では一人で視聴したのか集団(たとえば夫婦)で視聴したのかを区別していない。そのため、その機器を利用しているすべてのユーザの履歴が混在してしまい、個々人あるいは集団に適した番組の推薦精度が落ちてしまうという問題がある。 In recent years, television program recorders and the like equipped with a function of recommending a television program suitable for a user using a viewing history and a recording history have been commercialized. However, existing devices do not distinguish between viewing alone or as a group (for example, a couple). Therefore, there is a problem that the history of all users who use the device is mixed and the recommendation accuracy of a program suitable for an individual or a group is lowered.
そこで、テレビジョン番組を一人で視聴しているか集団で視聴しているかを推定する技術が提案されている。この技術は、例えばテレビジョン受信機もしくはその周辺にカメラを設置し、このカメラにより撮影された画像から人物を認識し、その認識結果から何人のユーザが視聴しているのかを推定するものとなっている(例えば特許文献1を参照)。 Therefore, a technique for estimating whether a television program is viewed alone or as a group has been proposed. In this technology, for example, a camera is installed in or around a television receiver, a person is recognized from an image captured by the camera, and the number of users who are viewing is estimated from the recognition result. (For example, refer to Patent Document 1).
ところが、カメラを使用する手段では、ユーザは常に撮影されているという意識が生じ、心理的不快感を覚える。また、カメラの撮影画像が漏洩した場合には、プライバシの流出といった問題にもつながる。
この発明は上記事情に着目してなされたもので、その目的とするところは、複数のユーザがコンテンツを集団で視聴しているか或いは一人で視聴しているかを、ユーザに心理的負担を与えることなく高精度に判定可能な集団行動判定装置、方法及びプログラムを提供することにある。
However, with the means using the camera, the user is always aware that the image is being taken, and feels psychological discomfort. In addition, when a photographed image of the camera leaks, it leads to a problem such as privacy leakage.
The present invention has been made paying attention to the above circumstances, and the purpose of this invention is to give a psychological burden to the user whether a plurality of users are viewing the contents as a group or alone. It is another object of the present invention to provide a collective action determination apparatus, method, and program that can be determined with high accuracy.
上記目的を達成するためにこの発明の1つの観点は、コンテンツを複数のユーザが同時に視聴可能に表示するコンテンツ表示装置と、上記複数のユーザの各々についてその生体情報を検出し送信する複数の生体情報検出装置とにそれぞれ接続される集団行動判定装置において上記複数のユーザの集団行動を判定する際に、
上記コンテンツ表示装置の動作状態をもとに当該コンテンツ表示装置がコンテンツを表示動作中であるか否かを判定すると共に、上記生体情報検出装置から送信された信号の受信品質から上記ユーザが上記コンテンツ表示装置に対しその視聴可能範囲に存在するか否かを判定し、さらに上記複数の生体情報検出装置から送信されるユーザの生体情報をそれぞれ受信してその変化特性を算出し、この算出された各生体情報の変化特性の類似性が予め設定された条件を満たしているか否かを判定する。
そして、上記コンテンツ表示装置がコンテンツを表示動作中であると判定され、上記ユーザが上記コンテンツ表示装置に対しその視聴可能範囲に存在すると判定され、かつ上記各生体情報の変化特性の類似性が予め設定された条件を満たしていると判定された場合に、上記複数のユーザが上記コンテンツを集団で視聴していると判定するようにしたものである。
In order to achieve the above object, one aspect of the present invention is a content display device that displays content so that a plurality of users can view the content simultaneously, and a plurality of living bodies that detect and transmit the biological information of each of the plurality of users. When determining the collective behavior of the plurality of users in the collective behavior determination device connected to each of the information detection devices,
Based on the operation state of the content display device, it is determined whether or not the content display device is displaying content, and the content is received by the user from the reception quality of the signal transmitted from the biological information detection device. It is determined whether or not the display device is within the viewable range, further receives the user's biological information transmitted from the plurality of biological information detection devices, calculates the change characteristics thereof, and calculates the calculated It is determined whether the similarity of the change characteristics of each biological information satisfies a preset condition.
Then, it is determined that the content display device is operating to display content, the user is determined to be present in the viewable range with respect to the content display device, and the similarity of the change characteristics of the biological information is determined in advance. When it is determined that the set condition is satisfied, it is determined that the plurality of users are viewing the content as a group.
したがって、先ずコンテンツ表示装置がコンテンツの表示動作中であり、かつユーザがコンテンツ表示装置で表示されるコンテンツを視聴可能な位置に存在することを前提条件とし、その上で複数のユーザの生体情報の変化特性が所定の範囲で類似している場合に、これらのユーザは集団でコンテンツを視聴していると判定される。このため、複数のユーザがコンテンツを集団で視聴しているか或いは一人で視聴しているかを、カメラ等を用いてユーザに心理的負担を与えることなく、高精度に判定することが可能となる。 Therefore, first, it is assumed that the content display device is in a content display operation and that the user is present at a position where the content displayed on the content display device can be viewed. If the change characteristics are similar within a predetermined range, it is determined that these users are viewing the content as a group. For this reason, it is possible to determine with high accuracy whether a plurality of users are viewing the contents in a group or alone by using a camera or the like without giving a psychological burden to the users.
また、この発明の第1の観点は以下のような実施態様を備えることも特徴とする。
第1の態様は、生体情報の変化特性を算出する際に、各生体情報の変化量を時系列上で算出してこの算出された変化量が予め設定した閾値以上となるタイミングを検出する。そして、この変化のタイミングの検出結果に基づいて、上記複数の生体情報の変化が同調しているシンクロ期間を特定するものである。
The first aspect of the present invention is characterized by comprising the following embodiments.
In the first aspect, when the change characteristic of the biological information is calculated, the change amount of each biological information is calculated in time series, and the timing at which the calculated change amount is equal to or greater than a preset threshold value is detected. And based on the detection result of the timing of this change, the synchro period in which the change of said some biometric information is synchronizing is specified.
第2の態様は、上記シンクロ期間を特定する際に、上記複数の生体情報の変化が予め設定した同一時間内に発生した時のそのタイミングを上記シンクロ期間の開始タイミングに設定し、上記複数の生体情報のいずれか一方が変化した時のそのタイミングを上記シンクロ期間の終了タイミングに設定するものである。 In the second aspect, when the synchronization period is specified, the timing when the changes in the plurality of biological information occur within the same preset time is set as the start timing of the synchronization period. The timing when any one of the biological information changes is set as the end timing of the synchronization period.
この第1及び第2の態様によれば、複数のユーザ間の生体情報の類似性が、生体情報の変化が同調して起きるシンクロ期間として検出されることになり、これにより比較的簡単にかつ正確に複数のユーザが一緒に同一のコンテンツを視聴しているか否かを判定することが可能となる。 According to the first and second aspects, the similarity of biometric information among a plurality of users is detected as a synchronization period in which changes in biometric information occur synchronously, which makes it relatively easy and It is possible to accurately determine whether or not a plurality of users are viewing the same content together.
第3の態様は、生体情報検査装置にユーザの脈拍を検出する脈拍センサを備え、上記変化特性算出手段は上記脈拍センサにより検出されたユーザの脈拍検出データからその変化特性を算出するものである。
一般に、恐怖や面白さ、興奮状態等の人の感情の変化は個人差を生じることなく脈拍に反映され、しかも脈拍は安価なセンサにより感度よく検出することが可能である。このため、生体情報として脈拍を用いることで、安価な構成でありながら、ユーザがコンテンツを集団で視聴しているか否かを比較的高精度に判定することが可能となる。
In a third aspect, the biological information inspection apparatus includes a pulse sensor that detects a user's pulse, and the change characteristic calculation unit calculates the change characteristic from the user's pulse detection data detected by the pulse sensor. .
In general, changes in human emotions such as fear, fun, and excitement are reflected in the pulse without causing individual differences, and the pulse can be detected with high sensitivity by an inexpensive sensor. For this reason, by using the pulse as the biometric information, it is possible to determine whether or not the user is viewing the content in a group with relatively high accuracy while having an inexpensive configuration.
第4の態様は、生体情報の変化量を算出する手法として、隣接する2つのタイミングで得られた各生体情報値の変化方向を余弦値で表すことにより当該各生体情報値のコサイン類似度を算出し、この算出されたコサイン類似度を上記隣接する2つのタイミング間における生体情報の変化量とする手法を用いるものである。 In the fourth aspect, as a method for calculating the amount of change in biological information, the change direction of each biological information value obtained at two adjacent timings is represented by a cosine value, whereby the cosine similarity of each biological information value is obtained. A method of calculating and using the calculated cosine similarity as a change amount of the biological information between the two adjacent timings is used.
このようにすると、各タイミング間における生体情報の変化をコサイン類似度という指標を用いて表すことができる。コサイン類似度を用いることにより、微細な変化はより小さい値に、大きな変化はより大きい値として検出することが可能となる。したがって、生体情報検出装置の検出精度や周辺環境によって生じるノイズの影響を軽減することができる。 If it does in this way, the change of the biometric information between each timing can be expressed using the parameter | index called cosine similarity. By using the cosine similarity, it is possible to detect a fine change as a smaller value and a large change as a larger value. Therefore, it is possible to reduce the influence of noise caused by the detection accuracy of the biological information detection device and the surrounding environment.
すなわちこの発明によれば、複数のユーザがコンテンツを集団で視聴しているか或いは一人で視聴しているかを、ユーザに心理的負担を与えることなく高精度に判定することができる集団行動判定装置、方法及びプログラムを提供することが可能となる。 That is, according to the present invention, a collective behavior determination device that can determine with high accuracy whether a plurality of users are viewing content in a group or whether they are viewing alone without giving a psychological burden to the user, It becomes possible to provide a method and a program.
[原理]
先ず、この発明の原理を説明する。
例えば、テレビジョン放送の番組を視聴している際に、怖いシーンや面白いシーンなどがあると、視聴者には脈拍の上昇や発汗量の増化といった生体情報の変化が現れる。もし集団、例えば夫婦などで同時にそのようなシーンを視聴していた場合、生体情報の変化のタイミング(時刻)が一致する可能性が高い。すなわち、集団の生体情報の変化は同調する。図1は、ユーザAとユーザBが同時に同一の番組を視聴していたときに、これらのユーザA、Bに起こる生体情報、例えば脈拍の変化の一例を示した図である。このように、複数のユーザが同時に同じ番組を視聴している場合には、その生体情報の変化に同調が起こると予想される。したがって、この生体情報の変化の同調に着目することにより、複数のユーザが同時に同じ番組を視聴していたか否かを判定することは可能である。
[principle]
First, the principle of the present invention will be described.
For example, while watching a television broadcast program, if there are scary scenes or interesting scenes, the viewer will see changes in biometric information such as an increase in pulse and an increase in sweating. If a group, such as a couple, is watching such a scene at the same time, there is a high possibility that the timing (time) of changes in biometric information matches. That is, the change in the biometric information of the group is synchronized. FIG. 1 is a diagram showing an example of changes in biometric information, for example, pulse, occurring in users A and B when user A and user B are watching the same program at the same time. As described above, when a plurality of users are watching the same program at the same time, it is expected that the change in the biological information is synchronized. Therefore, it is possible to determine whether or not a plurality of users were watching the same program at the same time by paying attention to the synchronization of changes in the biological information.
しかし、上記の生体情報の変化の同調だけでは不十分である。それは、複数のユーザの生体情報の変化は、テレビジョン放送番組の視聴動作以外の行動により一致することもあれば、偶然一致することもあるからである。そこで、テレビジョン受信機の電源がオンとなっているか否かと、テレビジョン受信機に対しユーザは視聴可能な距離な存在するか否かという2つの要素も判定規準とする。 However, it is not sufficient to synchronize the change in the biological information. This is because changes in biometric information of a plurality of users may coincide with each other by actions other than the viewing operation of the television broadcast program, or may coincide with each other by chance. Therefore, two factors, whether or not the power of the television receiver is turned on and whether or not there is a distance that can be viewed by the user with respect to the television receiver, are also used as criteria.
テレビジョン受信機の電源がオンとなっているか否かを表す情報を利用することにより、ユーザの生体情報の変化がテレビジョン放送番組の視聴によるものか否かを判別することが可能となる。すなわち、そもそもテレビジョン受信機の電源がオンになっていなければ、テレビジョン放送番組を視聴している状態ではないことが明らかなので、テレビジョン受信機の電源がオンになっていない時以外で同調している時間を除去することが可能となる。 By using information indicating whether or not the power of the television receiver is turned on, it is possible to determine whether or not the change in the biological information of the user is due to viewing of the television broadcast program. In other words, if the television receiver is not turned on in the first place, it is clear that the television broadcast program is not being watched, so it is tuned except when the television receiver is not turned on. It is possible to remove the time that is being used.
また、テレビジョン受信機とユーザとの間の距離が近いか否かを利用することで、ユーザがテレビジョン放送番組を視聴可能な位置にいるか否か、つまりテレビジョン受信機が設置されている部屋にユーザが存在するか否かを判定することが可能である。テレビジョン受信機の電源がオンになっていても、ユーザがテレビジョン放送番組を視聴可能な位置にいなければ視聴していないと同義である。したがって、このテレビジョン受信機とユーザとの間の距離の情報と、上述した電源のオンオフ状態の情報とを併用することで、テレビジョン放送番組を視聴していなかった時間をさらに除去することが可能となる。 Further, by using whether or not the distance between the television receiver and the user is short, whether or not the user is in a position where the user can view the television broadcast program, that is, the television receiver is installed. It is possible to determine whether a user exists in the room. Even if the power of the television receiver is turned on, it means that the user is not viewing unless the user is in a position where the user can view the television broadcast program. Therefore, by using the information on the distance between the television receiver and the user and the information on the power on / off state described above in combination, it is possible to further eliminate the time during which the television broadcast program was not viewed. It becomes possible.
さらに、以上の2つの要素だけでは、ユーザが二人ともテレビジョン受信機の近くにいても一人しか視聴していなく、もう一人は読書や家事をしているといった場合に対応できない。そこで、先に述べた生体情報の同調についての情報が必要となる。すなわち、ユーザの片方しかテレビジョン放送番組を視聴していない場合には、生体情報に同調は起き難い。そのため、生体情報の同調を用いることで精度の高い判定が可能となる。 Furthermore, the above two elements alone cannot cope with cases where only one user is watching even if both users are near the television receiver, and the other person is reading or doing housework. Therefore, information about the synchronization of the biological information described above is required. That is, when only one of the users is watching a television broadcast program, it is difficult for biometric information to be synchronized. Therefore, it is possible to make a highly accurate determination by using synchronization of biological information.
この発明は、以上の点に着目し、
(1) テレビジョン受信機の電源がオンになっている。
(2) 複数のユーザがいずれもテレビジョン放送番組を視聴可能な位置にいる。
(3) 複数のユーザ間で生体情報に同調が起きている。
の3つの条件をいずれも満たした場合に、複数のユーザがテレビジョン放送番組を同時に視聴しているか否か、つまり対象集団が同時にテレビジョン放送番組を視聴しているか否かを判定する。
This invention pays attention to the above points,
(1) The television receiver is turned on.
(2) A plurality of users are all in a position where a television broadcast program can be viewed.
(3) The biometric information is synchronized among multiple users.
When all of the three conditions are satisfied, it is determined whether or not a plurality of users are simultaneously watching the television broadcast program, that is, whether or not the target group is simultaneously watching the television broadcast program.
ところで、上記の生体情報の同調を判定するには、生体情報の変化量を算出する必要がある。変化量の算出には、例えばcosine similarityを応用した手法を用いる。cosine similarityとは、余弦値を利用して2つのデータの類似度を算出する手法である。cosine similarityは−1から1の範囲の値を取り、1に近いほどその2つのデータは類似しているとみなす。cosine similarity を用いることにより、微細な変化はより小さい値に、大きな変化はより大きい値にすることが可能となる。したがって、脈拍などの生体情報を検出するセンサの精度や周辺環境によって生じるノイズの影響を低減できるといった効果が得られる。 By the way, in order to determine the synchronization of the biological information, it is necessary to calculate the amount of change of the biological information. For example, a method applying cosine similarity is used to calculate the amount of change. The cosine similarity is a technique for calculating the similarity between two data using a cosine value. The cosine similarity takes a value ranging from −1 to 1, and the closer to 1, the two data are considered to be similar. By using cosine similarity, it is possible to make fine changes to smaller values and large changes to larger values. Therefore, it is possible to reduce the influence of noise caused by the accuracy of the sensor for detecting biological information such as a pulse and the surrounding environment.
いま、時刻t-1及びt における生体情報が図2に示すような値であるとする。このとき、時刻t-1における脈拍数と時刻t における脈拍数とで成す角をθt とすると、θt は図2に示したようになる。したがって、時刻t における脈拍数と時刻t-1 における脈拍数との類似度sim(t) は以下の式で表せる。
sim(t) = cos(θt)
Now, it is assumed that the biological information at the times t-1 and
sim (t) = cos (θt)
図2に示したような角θを取る場合、θの取りうる値の範囲は−π/2からπ/2となる。このため、類似度sim(t) の取りうる値の範囲は0から1となる。また、算出したい値は変化量であり、「類似している」ということは「変化がない」ということに等しい。以上2つのことより、1を類似度sim(t) で減算したものを変化量とすると、変化が少ないほど0に近づき、変化が大きいほど1に近づく値が得られる。よって、時刻t における変化量var (t) は以下の式で表せる。
var (t) =1− sim(t)
When the angle θ as shown in FIG. 2 is taken, the range of values that θ can take is from −π / 2 to π / 2. For this reason, the range of values that the similarity sim (t) can take is 0 to 1. The value to be calculated is a change amount, and “similar” is equivalent to “no change”. From the above two things, if the change amount is obtained by subtracting 1 from the similarity sim (t), a value closer to 0 is obtained as the change is smaller, and a value closer to 1 is obtained as the change is greater. Therefore, the amount of change var (t) at time t can be expressed by the following equation.
var (t) = 1-sim (t)
この変化量のうち、ある閾値未満のものを“0”、閾値以上のものを“1”とすると、図3で示したようなグラフになる。このようなグラフで対象集団(図3ではユーザAとユーザB)の生体情報を比較したときに、その変化のタイミングが一致したタイミングを生体情報の同期期間(シンクロ期間)の開始時刻とする。そして、このシンクロ期間は、いずれか一方のユーザの生体情報に変化が発生するまで続く。図3の例では、記載されている3つの区間が生体情報が同期しているシンクロ期間となる。このシンクロ期間の検出情報を利用すれば、対象集団が同時にテレビジョン番組を視聴しているか否かを判定可能である。 If this change amount is less than a certain threshold value is “0” and more than the threshold value is “1”, the graph shown in FIG. 3 is obtained. When biometric information of a target group (user A and user B in FIG. 3) is compared in such a graph, the timing at which the change timings coincide is set as the start time of the biometric information synchronization period (synchronization period). The synchronization period continues until any one of the user's biometric information changes. In the example of FIG. 3, the three described sections are synchronized periods in which biological information is synchronized. By using this synchronization period detection information, it is possible to determine whether or not the target group is simultaneously watching a television program.
なお、上記の例では時刻t とその1サンプル前のタイミングt-1 のデータのみを用いて生体情報の変化量を算出したが、さらにノイズに強くするためにn サンプルタイミンク前までの過去の複数のデータを用いて変化量を求めてもよい。例えば、n=5 とした場合は、var(t-4) 、var(t-3) 、var(t-2) 、var(t-1) 、var(t) の値を平均した値が時刻t における変化量とする。つまり、時刻t における変化量を以下の式を用いて算出する。
[生体情報の同調で効果が得られる根拠]
生体情報の同調に着目することでこの発明の効果の可能性に関する検証を行った。
いま、同居している夫婦それぞれに市販の脈拍センサを装着した状態で生活してもらった。図4は、同調が起きた時間と、一緒にテレビジョン番組を視聴していた時間と、一緒にいたが一人しかテレビジョン番組を視聴していなかった時間をそれぞれ示したものである。図4によれば、一緒にテレビジョン番組を視聴していた時間帯は他の時間帯に比べ同調が起きている頻度が多い。この結果より、生体情報(脈拍など)の同調は複数のユーザが一緒にテレビジョン番組を視聴しているか否かの判断規準に用いることが可能であることが分かる。
[Grounds for obtaining effects by synchronizing biological information]
The verification of the possibility of the effect of the present invention was performed by paying attention to the synchronization of biological information.
Now, each married couple living with us was able to live with a commercially available pulse sensor. FIG. 4 shows the time when the synchronization occurred, the time when the television program was watched together, and the time when only one person was watching the television program together. According to FIG. 4, the time zone in which the television program was watched together is more frequently synchronized than the other time zones. From this result, it can be seen that the synchronization of biometric information (such as pulse) can be used as a criterion for determining whether or not a plurality of users are watching a television program together.
[実施形態]
以下、図面を参照してこの発明に係わる実施形態を説明する。
(装置の構成)
図5は、この発明の一実施形態に係る集団行動判定装置を備えたテレビジョン受信システムの機能構成を示すブロック図である。
このテレビジョン受信システムは、テレビジョン受信機1と、リモートコントローラ2とから構成される。
[Embodiment]
Embodiments according to the present invention will be described below with reference to the drawings.
(Device configuration)
FIG. 5 is a block diagram showing a functional configuration of a television receiving system provided with a collective behavior determining apparatus according to an embodiment of the present invention.
This television receiving system includes a
リモートコントローラ2は、リモコン信号生成部(図示省略)と、入出力インタフェース部23を備える。リモコン信号生成部は、ユーザの操作に応じてテレビジョン受信機1に対するチャネル選択信号や音量制御信号等の各種リモコン信号を生成する。入出力インタフェース部23は、上記リモコン信号生成部により生成されたリモコン信号をテレビジョン受信機1へ例えば赤外線を用いて送信する機能を有する。
The
さらにリモートコントローラ2は、生体情報生成部21と、記憶部22と、タイマ24と、近接無線モジュール25を備え、これらは生体情報検出装置の主要部を構成する。
タイマ24は、生体情報生成部21に対し予め決められた周期で生体情報取得開始トリガ信号を与える。生体情報生成部21は、上記タイマ24から与えられる生体情報取得開始トリガにより起動し、例えばリモートコントローラ2を把持するユーザの手からユーザの脈拍を検出して単位時間当たりの脈拍数をカウントする。そして、この脈拍数のカウント値を、その計測時刻、ユーザID及び生体情報種別情報に対応付け、これを生体情報として記憶部22に記憶させる機能を有する。
Furthermore, the
The
記憶部22は、生体情報を送信可能な状態になると、蓄積された上記生体情報を読み出し、この読み出された生体情報を入出力インタフェース部23からテレビジョン受信機1へ送信する。そして、この送信完了後に送信済の生体情報を記憶部22から削除する機能を有する。近接無線モジュール25は、リモートコントローラ2が作動している期間に連続的又は間欠的に電波を送信する機能を有する。この送信電波は、テレビジョン受信機1がリモートコントローラ2からの受信強度を計測するために用いられる。
When the
テレビジョン受信機1は、テレビジョン受信機本体11と、入出力インタフェース部16を備える。
このテレビジョン受信機本体11は、放送局から送信されるテレビジョン放送信号を受信してその映像及び音声を出力する機能を有する。またテレビジョン受信機本体11は、テレビジョン受信機1の電源のオンオフを監視し、この電源のオンオフ状態を表す情報をその検出時刻と対応付けて、電源情報として後述する記憶部12に記憶させる機能も有する。
The
The television receiver body 11 has a function of receiving a television broadcast signal transmitted from a broadcasting station and outputting the video and audio. Further, the television receiver main body 11 monitors on / off of the power supply of the
入出力インタフェース部16は、上記リモートコントローラ2から送信されたリモコン信号を受信してテレビジョン受信機本体11に与える。また入出力インタフェース部16は、リモートコントローラ2から送信される生体情報を受信して、後述する記憶部12に記憶させる機能も有する。
The input /
さらにテレビジョン受信機1は、記憶部12と、集団視聴判定部13と、タイマ14と、近接無線モジュール15を備え、これらは集団行動判定装置の主要部を構成する。
近接無線モジュール15は、リモートコントローラ2から送信される電波を受信してその受信強度を検出し、この検出された電波強度を表す情報をその計測時刻と、送信元のリモートコントローラ2のユーザIDと対応付けて上記記憶部12に記憶させる機能を有する。
Furthermore, the
The
タイマ14は、予め決められた周期で判定開始トリガ信号を発生して集団視聴判定部13に与える。集団視聴判定部13は、上記タイマ14から発生される判定開始トリガ信号により起動される。そして、上記記憶部12に蓄積された電源情報、電波強度情報及び生体情報に基づいて、例えば家族や夫婦等の複数のユーザが同時に同一の番組を視聴している時間帯を判定し、この判定結果をもとに集団視聴情報を作成して記憶部12に記憶させる機能を有する。
The
図6は、以上述べた集団行動判定装置を備えたテレビジョン受信システムの機能を実現するための具体的な構成を示すブロック図である。
リモートコントローラ2は、中央処理部(CPU;Central Processing Unit)211を備え、このCPU211に対しバス212を介して、プログラムメモリ213と、データメモリ214と、タイマインタフェース215と、入出力インタフェース216と、脈拍センサ217と、先に述べた近接無線モジュール25を接続したものとなっている。
FIG. 6 is a block diagram showing a specific configuration for realizing the function of the television receiving system including the collective action determination device described above.
The
プログラムメモリ213には、入出力制御プログラム2131と、生体情報算出プログラム2132が格納されている。入出力制御プログラム2131は、入出力インタフェース216を制御することで、図5に示した入出力インタフェース部23の機能を実現する。
The
生体情報算出プログラム2132は、脈拍センサ217と共同して図5に示した生体情報生成部21の機能を実現するもので、タイマ24から発生された生体情報取得開始トリガがタイマインタフェース215を介した通知された場合に、脈拍センサ217からユーザの脈拍検出データを取り込んで単位時間当たりの脈拍数をカウントする。そして、この脈拍数のカウント値を、その計測時刻、ユーザID及び生体情報種別情報に対応付け、これを生体情報としてデータメモリ214内の生体情報記憶エリア2141に記憶させる処理を行う。
The biological information calculation program 2132 realizes the function of the biological
データメモリ214には、生体情報記憶エリア2141が設けられている。生体情報記憶エリア2141は、上記生体情報算出プログラム2132により算出された生体情報を記憶するために用いられる。
テレビジョン受信機1も、上記したリモートコントローラ2と同様に中央処理部(CPU;Control Processing Unit)111を備え、このCPU111に対しバス112を介して、プログラムメモリ113と、データメモリ114と、近接無線モジュール15と、タイマインタフェース115と、入出力インタフェース116を接続したものとなっている。
The
Similarly to the
データメモリ114には、この発明の実施形態を実施するために必要な記憶エリアとして、電源情報記憶エリア1141と、電波強度情報記憶エリア1142と、生体情報記憶エリア1143と、集団視聴情報記憶エリア1144が設けられている。電源情報記憶エリア1141は、先に述べた電源情報を蓄積するために使用される。電波強度情報記憶エリア1142は、先に述べた電波強度情報を蓄積するために使用される。生体情報記憶エリア1143は、先に述べた生体情報を蓄積するために使用される。集団視聴情報記憶エリア1144は、先に述べた集団視聴情報を記憶するために使用される。
The
プログラムメモリ113には、この発明の実施形態を実施するために必要なアプリケーションプログラムとして、入出力制御プログラム1131と、生体情報同調算出プログラム1132と、集団視聴判定プログラム1133が格納されている。このうち入出力制御プログラム1131は、入出力インタフェース116を制御することで、図5に示した入出力インタフェース部16の機能を実現する。生体情報同調算出プログラム1132及び集団視聴判定プログラム1133は、図5に示した集団視聴判定部13の機能を実現する。
The
生体情報同調算出プログラム1132は、タイマ14から発生された判定開始トリガ信号がタイマインタフェース115を介して通知された場合に起動して、以下の処理を実行する。
(1) ユーザIDごとに、上記データメモリ114の電源情報記憶エリア1141から判定対象時刻における電源情報を読み出して、テレビジョン受信機1の電源がオンになっているか否かを判定する処理。
(2) 上記判定対象時刻においてテレビジョン受信機1の電源がオンになっていると判定された場合に、当該判定対象時刻における電波強度情報を電波強度情報記憶エリア1142から読み出して、リモートコントローラ2からの受信電界強度が予め設定された閾値以上であるか否かを判定する処理。
(3) 上記判定対象時刻における受信電界強度が閾値以上と判定された場合に、当該判定対象時刻における生体情報を上記生体情報記憶エリア1143から読み出し、この読み出された生体情報の変化量を算出する処理。
(4) 上記算出された生体情報の変化量を複数のユーザA,B間で比較し、所定量以上の変化量が検出されたときのタイミングが一致した時刻(開始時刻)と、その後いずれか一方の生体情報が所定量以上変化したことが検出されたときの時刻(終了時刻)を検出する処理。
The biological information tuning
(1) A process of reading power information at a determination target time from the power
(2) When it is determined that the power of the
(3) When it is determined that the received electric field intensity at the determination target time is equal to or greater than the threshold value, the biological information at the determination target time is read from the biological
(4) The calculated amount of change in the biometric information is compared between a plurality of users A and B, and the time when the amount of change equal to or greater than the predetermined amount is detected (start time) and any one thereafter Processing for detecting a time (end time) when it is detected that one of the biological information has changed by a predetermined amount or more.
集団視聴判定プログラム1133は、上記生体情報同調算出プログラム1132により検出された開始時刻及び終了時刻を該当するユーザA,BのIDと対応付ける。そして、この情報をユーザA,Bが同一番組を同時に視聴している期間を表す集団視聴情報として、集団視聴情報記憶エリア1144に記憶させる処理を行う。
The group
(動作)
次に、以上のように構成されたシステムによる、集団でのテレビジョン番組視聴期間を判定するための動作を説明する。図7はその処理手順と処理内容を示すフローチャートである。
(Operation)
Next, an operation for determining a television program viewing period in a group by the system configured as described above will be described. FIG. 7 is a flowchart showing the processing procedure and processing contents.
(1)電源情報の検出
テレビジョン受信機本体11では、テレビジョン受信機1の電源のオンオフ動作が監視されている。そして、電源のオンオフが検出されると、この電源のオンオフ状態を表す情報がその検出時刻とともに電源情報としてデータメモリ114内の電源情報記憶エリア1141に記憶される。図9はその一例を示すものである。同図に示すように電源情報は、日時を表す情報と、テレビジョン受信機1の電源がオンであるかオフであるかを示す情報との集合が1データとなって記憶される。
(1) Detection of power supply information In the television receiver main body 11, the power supply on / off operation of the
(2)電波強度情報の検出
リモートコントローラ2では、近接無線モジュール25がリモートコントローラ2が動作している期間に連続的又は間欠的に電波を送信する。これに対しテレビジョン受信機1では、リモートコントローラ2から送信された電波の受信品質を近接無線モジュール15が周期的に監視している。そして、上記電波の受信強度の検出値を、その検出日時と、送信元となるリモートコントローラ2の識別情報(例えばユーザID)に対応付け、これを電波強度情報としてデータメモリ114内の電波強度情報記憶エリア1142に記憶させる。図10はその一例を示すものである。同図に示すように電波強度情報は、日時と、送信元となるリモートコントローラ2を所持するユーザIDと、電波強度の検出値との集合が1データとなって記憶される。
(2) Detection of radio wave intensity information In the
(3)生体情報の取得
リモートコントローラ2では、タイマ24から生体情報取得開始トリガが一定の周期で発生されるごとに、生体情報算出プログラム2132の制御の下で脈拍センサ217によりユーザの脈拍が検出され、その検出データをもとに単位時間当たりの脈拍数がカウントされる。そして、この脈拍数のカウント値が、その計測時刻、ユーザID及び生体情報種別情報と対応付けられたのち、生体情報としてデータメモリ214内の生体情報記憶エリア2141に記憶される。
(3) Acquisition of biometric information In the
またリモートコントローラ2では、生体情報を送信可能な状態になると、生体情報算出プログラム2132の制御の下で、上記生体情報記憶エリア2141から上記生体情報が読み出される。そして、この読み出された生体情報は入出力インタフェース部23からテレビジョン受信機1へ送信される。なお、この送信完了後に当該送信済の生体情報は生体情報記憶エリア2141から消去される。
In the
一方テレビジョン受信機1では、上記リモートコントローラ2から送信された生体情報が近接無線モジュール15で受信され、この受信された生体情報はデータメモリ114内の生体情報記憶エリア1143に記憶される。図11はその一例を示すものである。同図に示すように生体情報は、日時と、リモートコントローラ2を所持するユーザのIDと、生体情報の種別を表す情報(この実施形態では脈拍)と、脈拍数のカウント値とからなる集合が1データとなって記憶される。
On the other hand, in the
(4)集団視聴判定処理
集団視聴判定処理は、テレビジョン受信機1において生体情報同調算出プログラム1132及び集団視聴判定プログラム1133の制御の下で以下のように行われる。
すなわち、先ずステップS11において、判定対象時刻に対応する電源情報が電源情報記憶エリア1141から読み出され、この読み出された電源情報をもとに上記判定対象時刻においてテレビジョン受信機1の電源がオンだったかオフだったかが判定される。この判定の結果、オフであればステップS19に移行し、ここで未判定の時刻が残っているか否かが判定される。そして、残っていればステップS11に戻り、残っていなければそのまま処理を終了する。
(4) Group viewing determination process The group viewing determination process is performed in the
That is, first, in step S11, power supply information corresponding to the determination target time is read from the power supply
一方、上記電源のオンオフ判定の結果、テレビジョン受信機1の電源がオンだったとする。この場合、集団視聴判定プログラム1133はステップS12に移行する。このステップS12では、判定対象となる各ユーザに対応する電波強度情報のうち、上記判定対象時刻に対応する電源強度情報が電波強度情報記憶エリア1142から読み出される。そして、この読み出された電波強度情報をもとに、上記判定対象時刻において各判定対象ユーザがいずれもテレビジョン受信機1を視聴可能な範囲内に存在するか否かが判定される。この判定処理は、電波強度が予め設定された閾値以上であるか否かを判定することによりなされる。
On the other hand, it is assumed that the
なお、上記判定処理をさらに正確に行うために、判定対象ユーザが使用するリモートコントローラ2間で近接無線モジュール25が送信する電波の強度を測定し、その電波強度が閾値以上であるという条件を付け加えてもよい。このようにすると、複数のユーザが一緒にテレビジョンを視聴していることをより正確に判断可能となる。
In order to perform the determination process more accurately, the intensity of the radio wave transmitted by the
上記電波強度の判定の結果、各判定対象ユーザのうち少なくとも一人がテレビジョン受信機1を視聴可能な範囲内に存在しない場合にはステップS19に移行し、ここで未判定の時刻が残っているか否かが判定される。そして、残っていればステップS11に戻り、残っていなければそのまま処理を終了する。
As a result of the determination of the radio field intensity, if at least one of the determination target users does not exist within the range where the
これに対し、上記電波強度の判定の結果、各判定対象ユーザがいずれもテレビジョン受信機1を視聴可能な範囲内に存在したとする。この場合には、ステップS13に移行して上記判定対象ユーザごとにその生体情報の変化量を算出するための処理が実行される。この生体情報の変化量の算出処理はのちに詳しく説明する。
On the other hand, as a result of the determination of the radio wave intensity, it is assumed that each determination target user is within a range where the
各判定対象ユーザについてそれぞれ生体情報の変化量が算出されると、ステップS14に移行する。ステップS14では、上記ステップS13により算出された各判定対象ユーザの生体情報の変化量が“1”であるか“0”であるかが判定される。この“1”であるか“0”であるかの判定は、生体情報の変化量を予め設定された閾値をもとに二値化したデータに対し行われる。上記判定の結果、各判定対象ユーザの生体情報の変化量がともに“1”であればステップS15に移行する。 When the change amount of the biological information is calculated for each determination target user, the process proceeds to step S14. In step S14, it is determined whether the change amount of the biometric information of each determination target user calculated in step S13 is “1” or “0”. This determination of “1” or “0” is performed on data obtained by binarizing the amount of change in biological information based on a preset threshold value. As a result of the determination, if both the change amounts of the biometric information of the respective determination target users are “1”, the process proceeds to step S15.
ステップS15では、上記ともに“1”と判定された各判定対象ユーザの生体情報の変化のタイミングが同期しているか否かが判定される。なお、同期しているか否かは、今回の判定対象時刻以前に作成された集団視聴情報のうち最新の集団視聴情報を集団視聴情報記憶エリア1144から読み出し、この読み出した情報の終了時刻が空白であれば同期していると判定する。この判定の結果、各判定対象ユーザの生体情報の変化のタイミングが同期している場合にはステップS19に移行し、そうでなければステップS17に移行する。
In step S15, it is determined whether or not the timings of changes in the biometric information of the respective determination target users determined to be “1” are synchronized. Whether or not they are synchronized is determined by reading the latest group viewing information from the group viewing
ステップS17では、上記各判定対象ユーザについて今回の判定対象時刻における集団視聴情報が作成される。この場合、集団視聴開始時刻としては今回の判定対象時刻が挿入され、ユーザIDとしては判定対象ユーザのID(例えば図12に示すようにuser01,user02)が記憶される。なお、終了時刻は空白のままにする。 In step S17, group viewing information at the current determination target time is created for each determination target user. In this case, the current determination target time is inserted as the group viewing start time, and the ID of the determination target user (for example, user01 and user02 as shown in FIG. 12) is stored as the user ID. Note that the end time is left blank.
一方、上記ステップS14において、各判定対象ユーザの生体情報の変化量の少なくとも一方が“1”でなかったとする。この場合にはステップS16において、先にステップS13により算出された各判定対象ユーザの生体情報の変化量のうち片方のみが“1”で、かつ同期状態であるか否かが判定される。この判定の結果、片方のみが“1”でかつ同期状態であれば、各判定対象ユーザの一方が集団による視聴状態から離脱したと判断してステップS18に移行し、そうでなければステップS19に移行する。なお、同期状態であるか否かは、ステップS15における判定処理と同様に、今回の判定対象時刻以前に作成された集団視聴情報のうち最新の集団視聴情報を集団視聴情報記憶エリア1144から読み出し、この読み出した情報の終了時刻が空白であるか否かにより判定される。
On the other hand, in step S14, it is assumed that at least one of the change amounts of the biometric information of each determination target user is not “1”. In this case, in step S16, it is determined whether only one of the change amounts of the biometric information of each determination target user previously calculated in step S13 is “1” and is in a synchronized state. As a result of this determination, if only one is “1” and is in a synchronized state, it is determined that one of the determination target users has left the viewing state by the group, and the process proceeds to step S18. Otherwise, the process proceeds to step S19. Transition. Whether or not it is in a synchronized state is read out from the group viewing
ステップS18では、生体情報の同調が終了したことを示す情報を集団視聴情報に記載する処理が行われる。この処理は、例えば今回の判定対象時刻以前に作成された集団視聴情報のうち最新の集団視聴情報を集団視聴情報記憶エリア1144から読み出し、この読み出した情報の終了時刻に今回の判定対象時刻を挿入することによりなされる。
In step S18, a process for describing information indicating that the synchronization of the biological information has been completed in the group viewing information is performed. In this process, for example, the latest group viewing information of the group viewing information created before the current determination target time is read from the group viewing
(5)生体情報の変化量算出処理
ところで、上記ステップS13における生体情報の変化量の算出処理は、生体情報同調算出プログラム1132の制御の下で以下のように行われる。図8はその処理手順と処理内容を示すフローチャートである。
すなわち、先ずステップS131において、データメモリ114内の生体情報記憶エリア1143から、前記判定対象ユーザの判定対象時刻のn 秒前又はn 秒後、或いはその両方の生体情報が読み出される。なお、n の値は予め設定されており、この値に基づいて行われる。ただし、最低でも1サンプリング前のデータが含まれるような値に設定する必要がある。
(5) Biological Information Change Calculation Processing The biometric information change calculation processing in step S13 is performed as follows under the control of the biological information tuning
That is, first, in step S131, the biometric information is read from the biometric
続いてステップS132において、上記読み出された生体情報の中から最も古い時刻の生体情報が選択される。この選択された生体情報及び上記読み出された全生体情報は作業メモリに保持される。 Subsequently, in step S132, the biometric information with the oldest time is selected from the read biometric information. The selected biological information and the read whole biological information are held in the work memory.
次に、ステップS133において、上記読み出された全生体情報の中に、現在選択している生体情報より新しい時刻の生体情報が存在するか否かが判定され、存在する場合にはステップS134に移行し、存在しない場合にはステップS136へ移行する。
ステップS134では、現在選択している生体情報と、上記読み出された全生体情報の中で現在選択している生体情報より新しくかつ最も近い時刻の生体情報との変化量が算出される。例えば、時刻k における変化量var (k)の算出には以下の式が用いられる。
var (k) =1−cos (θk)
Next, in step S133, it is determined whether or not there is biometric information at a newer time than the currently selected biometric information in the read all biometric information. If it does not exist, the process proceeds to step S136.
In step S134, the amount of change between the currently selected biometric information and the biometric information at a time that is newer and closest to the biometric information currently selected from among all the read biometric information is calculated. For example, the following formula is used to calculate the amount of change var (k) at time k.
var (k) = 1-cos (θk)
ここで、θk は、現在選択している生体情報と、上記読み出された全生体情報の中で現在選択している生体情報より新しくかつ最も近い時刻の生体情報とからなる角度を示す。例えば、上記読み出された全生体情報が時刻t-4 からt までの生体情報であり、現在選択している生体情報が時刻t-4 の生体情報であるとすると、上記読み出された全生体情報の中で現在選択している生体情報より新しくかつ最も近い時刻の生体情報は時刻t-3 となる。また、これらの2つの生体情報がなす角度はθt-3となり、その余弦値が変化量となる。なお、角度を求める際には、横軸は1サンプリングレートを1、縦軸は脈拍であれば1拍/分を1として算出する。この算出された変化量は作業メモリに保持される。 Here, θk represents an angle made up of the currently selected biometric information and the biometric information at a time that is newer and closest to the biometric information currently selected from among all the read biometric information. For example, assuming that the read biometric information is biometric information from time t-4 to t, and the currently selected biometric information is biometric information at time t-4, The biometric information that is newer and closest to the biometric information currently selected in the biometric information is time t-3. The angle formed by these two pieces of biological information is θ t−3 , and the cosine value is the amount of change. When calculating the angle, the horizontal axis is calculated as 1 sampling rate, and the vertical axis is calculated as 1 beat / minute if the pulse is 1. This calculated change amount is held in the working memory.
次にステップS135において、上記読み出された全生体情報の中で現在選択している生体情報より新しくかつ最も近い時刻の生体情報が、新たな選択先として選択される。例えば、いま時刻t-4 の生体情報が選択されていれば、時刻t-3 の生体情報が新たな選択先となる。 Next, in step S135, the biometric information that is newer and closest to the currently selected biometric information is selected as a new selection destination from among the read biometric information. For example, if the biometric information at time t-4 is selected, the biometric information at time t-3 becomes a new selection destination.
上記ステップS133〜S135による繰り返し処理が終了すると、つまり読み出された全生体情報が時刻t-4 からt までの場合、上記ステップS133で新たな時刻t の生体情報が選択されると、続いてステップS136において、上記ステップS133〜S135により算出された各変化量を統合することにより、判定対象時刻における最終的な変化量が算出される。判定対象時刻t における変化量sumvar(t)の算出には、例えば以下の式が用いられる。
続いてステップS137において、上記ステップS136により算出された変化量が予め設定された閾値に基づいて二値化される。この結果、上記算出された変化量のうち閾値以上のものは“1”に変換され、閾値未満のものは“0”に変換される。そして、この二値化データに変換された、生体情報の変化量データが作業メモリに保存される。 Subsequently, in step S137, the amount of change calculated in step S136 is binarized based on a preset threshold value. As a result, among the calculated change amounts, those greater than or equal to the threshold value are converted to “1”, and those less than the threshold value are converted to “0”. Then, the biometric information change amount data converted into the binarized data is stored in the work memory.
最後にステップS138において、判定対象時刻における生体情報変化量をまだ算出していない判定対象ユーザが残っているか否かが判定される。この判定の結果、該当する判定対象ユーザが存在すれば当該ユーザが判定対象として選択され、ステップS131に戻って先に述べたステップS131〜S137による処理が実行される。これに対し、生体情報変化量をまだ算出していない判定対象ユーザが残っていなければ、生体情報の変化量算出処理を終了する。
かくして、cosine similarity を利用した生体情報の変化量の算出が行われる。
Finally, in step S138, it is determined whether there are any determination target users who have not yet calculated the biological information change amount at the determination target time. As a result of the determination, if there is a corresponding determination target user, the user is selected as a determination target, and the process returns to step S131 to execute the processes in steps S131 to S137 described above. On the other hand, if there is no determination target user who has not yet calculated the biological information change amount, the biometric information change amount calculation process ends.
Thus, the amount of change in biometric information using the cosine similarity is calculated.
以上詳述したようにこの実施形態では、テレビジョン受信機1の電源のオンオフ状態を検出すると共に、リモートコントローラ2から送信された電波の受信強度を判定し、さらに各ユーザのリモートコントローラ2から送信されるユーザの生体情報をそれぞれ受信し保存する。そして、電源がオン状態となっておりかつ上記リモートコントローラ2からの電波の受信強度が閾値以上の期間に検出された上記ユーザの生体情報を読み出してその変化量を算出し、この変化量の算出結果をもとに上記各ユーザの生体情報の変化タイミングが一致した時点から少なくとも一方のユーザの生体情報が変化するまでの期間を検出し、この期間を上記各ユーザが同時に同一のテレビジョン番組を視聴している期間、つまり集団視聴期間と判定するようにしている。
As described in detail above, in this embodiment, the power on / off state of the
したがって、テレビジョン受信機1がテレビジョン放送の受信動作中であり、かつユーザがテレビジョン受信機1に表示されているテレビジョン番組を視聴可能な位置に存在することを前提条件とし、その上で各ユーザの生体情報の閾値以上の変化のタイミングをもとに各ユーザが集団でテレビジョン番組を視聴しているか否かが判定される。このため、カメラ等を用いてユーザに心理的負担を与えることなく、高精度に集団視聴期間を判定することが可能となる。
Therefore, it is assumed that the
また、生体情報の変化量をcosine similarity を利用して算出している。すなわち、隣接する2つのタイミングで得られた各生体情報値の変化方向を余弦値で表すことにより当該各生体情報値のコサイン類似度を算出し、この算出されたコサイン類似度を上記隣接する2つのタイミング間における生体情報の変化量とするようにしている。このため、各タイミング間における生体情報の変化をコサイン類似度という指標を用いて表すことができ、これにより微細な変化はより小さい値に、大きな変化はより大きい値として検出することが可能となる。したがって、生体情報検出装置の検出精度や周辺環境によって生じるノイズの影響を軽減することができる。 In addition, the amount of change in biological information is calculated using cosine similarity. That is, the cosine similarity of each biometric information value is calculated by expressing the change direction of each biometric information value obtained at two adjacent timings by a cosine value, and the calculated cosine similarity is calculated as the adjacent 2 The amount of change in biological information between two timings is set. For this reason, changes in biometric information between timings can be expressed using an index called cosine similarity, which makes it possible to detect fine changes as smaller values and large changes as larger values. . Therefore, it is possible to reduce the influence of noise caused by the detection accuracy of the biological information detection device and the surrounding environment.
さらに、生体情報としてユーザの脈拍を検出し、その脈拍検出データから変化量を算出するようにしている。一般に、恐怖や面白さ、興奮状態等の人の感情の変化は個人差を生じることなく脈拍に反映され、しかも脈拍は安価なセンサにより感度よく検出することが可能である。このため、生体情報として脈拍を用いることで、安価な構成でありながら、各ユーザがテレビジョン番組を集団で視聴しているか否かを比較的高精度に判定することが可能となる。 Furthermore, the user's pulse is detected as biometric information, and the amount of change is calculated from the pulse detection data. In general, changes in human emotions such as fear, fun, and excitement are reflected in the pulse without causing individual differences, and the pulse can be detected with high sensitivity by an inexpensive sensor. For this reason, by using the pulse as the biometric information, it is possible to determine whether or not each user is watching the television program in a group with relatively high accuracy while having an inexpensive configuration.
なお、この発明は上記実施形態に限定されるものではない。例えば、前記実施形態では集団行動判定装置の機能をテレビジョン受信機1内の設けた場合を例にとって説明したが、集団行動判定装置をテレビジョン受信機1とは別に独立して設け、この集団行動判定装置とテレビジョン受信機1及びリモートコントローラ2との間を信号ケーブル又は無線回線で接続するようにしてもよい。また、集団行動判定装置を実現するための機能をフラッシュメモリやUSBメモリなどの記憶媒体に収容し、これらのメモリをテレビジョン受信機1又はリモートコントローラ2に装着するようにしてもよい。
The present invention is not limited to the above embodiment. For example, in the above-described embodiment, the case where the function of the collective behavior determination device is provided in the
また、前記実施形態ではコンテンツ表示装置としてテレビジョン受信機1を使用した場合を例にとって説明したが、他にWebサイトから配信されるか又は記憶媒体に記憶された映像コンテンツやゲームコンテンツを再生する装置や、映画館やホールで映像コンテンツをスクリーン又は表示装置に表示する装置であってもよい。
In the embodiment, the case where the
また、前記実施形態では生体情報検出装置をリモートコントローラ2に設けた場合を例にとって説明したが、他に携帯電話機やスマートホン、電子書籍端末等の携帯通信端末や、ゲーム機のコントローラに生体情報検出装置を内蔵させるようにしてもよい。また、生体情報検出装置をリモートコントローラ等に内蔵せずに、生体情報センサと無線インタフェース機能のみを備えた独立した装置として構成し、この装置をユーザの体の生体情報検出対象部位に取り付けるようにしてもよい。
Moreover, although the case where the biological information detection device is provided in the
その他、コンテンツ表示装置や生体情報検出装置の種類や構成、集団視聴期間の判定処理手順と処理内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施可能である。 In addition, the types and configurations of the content display device and the biological information detection device, the group viewing period determination processing procedure, the processing content, and the like can be implemented with various modifications without departing from the gist of the present invention.
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。 In short, the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. Further, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, you may combine suitably the component covering different embodiment.
1…テレビジョン受信機、2…リモートコントローラ、11…テレビジョン受信機本体、12,22…記憶部、13…集団視聴判定部、14,24…タイマ、15,25…近接無線モジュール、16,23…入出力インタフェース部、21…生体情報生成部、111,211…CPU、112,212…バス、113,213…プログラムメモリ、114,214…データメモリ、115,215…タイマインタフェース、116,216…入出力インタフェース、217…脈拍センサ、1131,2131…入出力制御プログラム、1132…生体情報同調算出プログラム、1133…集団視聴判定プログラム、1141…電源情報記憶エリア、1142…電波強度情報記憶エリア、1143…生体情報記憶エリア、1144…集団視聴情報記憶エリア、2132…生体情報算出プログラム、2141…生体情報記憶エリア。
DESCRIPTION OF
Claims (7)
前記コンテンツ表示装置の動作状態をもとに、当該コンテンツ表示装置がコンテンツを表示動作中であるか否かを判定する第1の判定手段と、
前記生体情報検出装置から送信された信号の受信品質から、前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在するか否かを判定する第2の判定手段と、
前記複数の生体情報検出装置から送信されるユーザの生体情報をそれぞれ受信し、この受信された各生体情報の変化特性をそれぞれ算出する変化特性算出手段と、
前記算出された各生体情報の変化特性の類似性を検出し、この検出された類似性が予め設定された条件を満たしているか否かを判定する第3の判定手段と、
前記第1の判定手段により前記コンテンツ表示装置がコンテンツを表示動作中であると判定され、前記第2の判定手段により前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在すると判定され、かつ前記第3の判定手段により前記各生体情報の変化特性の類似性が予め設定された条件を満たしていると判定された場合に、前記複数のユーザが前記コンテンツを集団で視聴していると判定する集団判定手段と
を具備することを特徴とする集団行動判定装置。 A collective behavior determination device connected to a content display device that displays content so that a plurality of users can view the content simultaneously, and a plurality of biological information detection devices that detect and transmit the biological information of each of the plurality of users. And
First determination means for determining whether or not the content display device is displaying content based on an operation state of the content display device;
Second determination means for determining whether or not the user is present in the viewable range with respect to the content display device from the reception quality of the signal transmitted from the biological information detection device;
Change characteristic calculation means for receiving user biometric information transmitted from the plurality of biometric information detection devices, respectively, and calculating change characteristics of each received biometric information;
Third determination means for detecting the similarity of the calculated change characteristics of each biological information and determining whether the detected similarity satisfies a preset condition;
It is determined by the first determination means that the content display device is displaying content, the second determination means determines that the user is within the viewable range for the content display device, and When it is determined by the third determination means that the similarity of the change characteristics of each biological information satisfies a preset condition, it is determined that the plurality of users are viewing the content in a group A group action judging device comprising: group judging means for performing
前記第3の判定手段は、前記タイミングの検出結果に基づいて前記複数の生体情報の変化が同調しているシンクロ期間を特定することを特徴とする請求項1記載の集団行動判定装置。 The change characteristic calculation means calculates a change amount of each received biological information on a time series, detects a timing at which the calculated change amount is equal to or greater than a preset threshold value,
The collective behavior determination device according to claim 1, wherein the third determination unit specifies a synchronization period in which changes in the plurality of pieces of biological information are synchronized based on the detection result of the timing.
前記コンテンツ表示装置の動作状態をもとに、当該コンテンツ表示装置がコンテンツを表示動作中であるか否かを判定する第1の判定過程と、
前記生体情報検出装置から送信された信号の受信品質から、前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在するか否かを判定する第2の判定過程と、
前記複数の生体情報検出装置から送信されるユーザの生体情報をそれぞれ受信し、この受信された各生体情報の変化特性をそれぞれ算出する過程手段と、
前記算出された各生体情報の変化特性の類似性を検出し、この検出された類似性が予め設定された条件を満たしているか否かを判定する第3の判定過程と、
前記第1の判定過程により前記コンテンツ表示装置がコンテンツを表示動作中であると判定され、前記第2の判定過程により前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在すると判定され、かつ前記第3の判定過程により前記各生体情報の変化特性の類似性が予め設定された条件を満たしていると判定された場合に、前記複数のユーザが前記コンテンツを集団で視聴していると判定する過程と
を具備することを特徴とする集団行動判定方法。 Collective behavior executed by devices connected to a content display device that displays content so that a plurality of users can view the content simultaneously, and a plurality of biological information detection devices that detect and transmit the biological information of each of the plurality of users A determination method comprising:
A first determination step of determining whether or not the content display device is in a content display operation based on an operation state of the content display device;
A second determination step of determining whether or not the user is present in the viewable range with respect to the content display device from the reception quality of the signal transmitted from the biological information detection device;
Process means for receiving user biometric information transmitted from the plurality of biometric information detection devices, respectively, and calculating change characteristics of each received biometric information,
A third determination step of detecting the similarity of the calculated change characteristics of each biological information and determining whether or not the detected similarity satisfies a preset condition;
It is determined in the first determination process that the content display device is in operation to display the content, and in the second determination process, it is determined that the user is within the viewable range for the content display device; and When it is determined by the third determination process that the similarity of the change characteristics of each biological information satisfies a preset condition, it is determined that the plurality of users are viewing the content in a group A collective action judging method comprising the steps of:
前記コンテンツ表示装置の動作状態をもとに、当該コンテンツ表示装置がコンテンツを表示動作中であるか否かを判定する第1の判定処理と、
前記生体情報検出装置から送信された信号の受信品質から、前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在するか否かを判定する第2の判定処理と、
前記複数の生体情報検出装置から送信されるユーザの生体情報をそれぞれ受信し、この受信された各生体情報の変化特性をそれぞれ算出する過程処理と、
前記算出された各生体情報の変化特性の類似性を検出し、この検出された類似性が予め設定された条件を満たしているか否かを判定する第3の判定処理と、
前記第1の判定過程により前記コンテンツ表示装置がコンテンツを表示動作中であると判定され、前記第2の判定過程により前記ユーザが前記コンテンツ表示装置に対しその視聴可能範囲に存在すると判定され、かつ前記第3の判定過程により前記各生体情報の変化特性の類似性が予め設定された条件を満たしていると判定された場合に、前記複数のユーザが前記コンテンツを集団で視聴していると判定する処理と
を実行させるプログラム。 Determination including a computer connected to a content display device that displays content so that a plurality of users can view the content simultaneously, and a plurality of biological information detection devices that detect and transmit the biological information of each of the plurality of users For equipment
A first determination process for determining whether or not the content display device is in a content display operation based on an operation state of the content display device;
A second determination process for determining whether or not the user is present in the viewable range with respect to the content display device from the reception quality of the signal transmitted from the biological information detection device;
Processes for receiving user biometric information transmitted from the plurality of biometric information detection devices, respectively, and calculating change characteristics of each received biometric information,
A third determination process for detecting the similarity of the calculated change characteristics of each biological information and determining whether the detected similarity satisfies a preset condition;
It is determined in the first determination process that the content display device is in operation to display the content, and in the second determination process, it is determined that the user is within the viewable range for the content display device; and When it is determined by the third determination process that the similarity of the change characteristics of each biological information satisfies a preset condition, it is determined that the plurality of users are viewing the content in a group A program that executes processing to be performed.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011029954A JP5470302B2 (en) | 2011-02-15 | 2011-02-15 | Group action determination apparatus, method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011029954A JP5470302B2 (en) | 2011-02-15 | 2011-02-15 | Group action determination apparatus, method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012169918A true JP2012169918A (en) | 2012-09-06 |
JP5470302B2 JP5470302B2 (en) | 2014-04-16 |
Family
ID=46973590
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011029954A Expired - Fee Related JP5470302B2 (en) | 2011-02-15 | 2011-02-15 | Group action determination apparatus, method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5470302B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015087782A (en) * | 2013-10-28 | 2015-05-07 | 日本放送協会 | Viewing state estimation device and program of the same |
CN107948749A (en) * | 2017-12-05 | 2018-04-20 | 李国强 | A kind of digital TV user management method and system |
JP2019186780A (en) * | 2018-04-12 | 2019-10-24 | 富士通株式会社 | User support program, user support apparatus, and user support method |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003111106A (en) * | 2001-09-28 | 2003-04-11 | Toshiba Corp | Apparatus for acquiring degree of concentration and apparatus and system utilizing degree of concentration |
JP2005032167A (en) * | 2003-07-11 | 2005-02-03 | Sony Corp | Apparatus, method, and system for information retrieval, client device, and server device |
JP2009140010A (en) * | 2007-12-03 | 2009-06-25 | Sony Corp | Information processing device, information processing terminal, information processing method, and program |
-
2011
- 2011-02-15 JP JP2011029954A patent/JP5470302B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003111106A (en) * | 2001-09-28 | 2003-04-11 | Toshiba Corp | Apparatus for acquiring degree of concentration and apparatus and system utilizing degree of concentration |
JP2005032167A (en) * | 2003-07-11 | 2005-02-03 | Sony Corp | Apparatus, method, and system for information retrieval, client device, and server device |
JP2009140010A (en) * | 2007-12-03 | 2009-06-25 | Sony Corp | Information processing device, information processing terminal, information processing method, and program |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015087782A (en) * | 2013-10-28 | 2015-05-07 | 日本放送協会 | Viewing state estimation device and program of the same |
CN107948749A (en) * | 2017-12-05 | 2018-04-20 | 李国强 | A kind of digital TV user management method and system |
JP2019186780A (en) * | 2018-04-12 | 2019-10-24 | 富士通株式会社 | User support program, user support apparatus, and user support method |
JP7056339B2 (en) | 2018-04-12 | 2022-04-19 | 富士通株式会社 | User support programs, user support devices and user support methods |
Also Published As
Publication number | Publication date |
---|---|
JP5470302B2 (en) | 2014-04-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6424357B2 (en) | Visual target efficiency measurement device | |
US8726304B2 (en) | Time varying evaluation of multimedia content | |
US20160057475A1 (en) | Methods and devices for providing a video | |
EP3182715A2 (en) | Method and apparatus for controlling electronic device | |
CN103916711A (en) | Method and device for playing video signals | |
CN106454277B (en) | A kind of image analysis method and device for video monitoring | |
CN109635673B (en) | Smoking behavior recognition method and device | |
CN112770186A (en) | Method for determining television viewing mode, television and storage medium | |
US20170064526A1 (en) | Method and device for analyzing social relationship | |
JP4621758B2 (en) | Content information reproducing apparatus, content information reproducing system, and information processing apparatus | |
CN109756788A (en) | Video caption automatic adjusting method and device, terminal and readable storage medium storing program for executing | |
KR20160049530A (en) | Information processing device and information processing method | |
CN108012026B (en) | Eyesight protection method and mobile terminal | |
JP5733658B2 (en) | Attention level detection system, attention level determination device, program for attention level determination device, and image distribution system | |
US20180242898A1 (en) | Viewing state detection device, viewing state detection system and viewing state detection method | |
JP5470302B2 (en) | Group action determination apparatus, method, and program | |
CN103024473A (en) | Audience rating survey system and method | |
JP5775837B2 (en) | Interest degree estimation apparatus, method and program | |
CN105828114A (en) | Information push method and device | |
JP2006020131A (en) | Device and method for measuring interest level | |
TWI384383B (en) | Apparatus and method for recognizing gaze | |
JP6133812B2 (en) | Viewing information acquisition device | |
US20130076621A1 (en) | Display apparatus and control method thereof | |
CN108605163A (en) | Method for broadcasting the multimedia content for measuring user's attention | |
JP2006254145A (en) | Audience concentration degree measuring method of tv program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20120627 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130118 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20130515 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130925 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131029 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5470302 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |