JP5430242B2 - Speaker position detection system and speaker position detection method - Google Patents

Speaker position detection system and speaker position detection method Download PDF

Info

Publication number
JP5430242B2
JP5430242B2 JP2009144523A JP2009144523A JP5430242B2 JP 5430242 B2 JP5430242 B2 JP 5430242B2 JP 2009144523 A JP2009144523 A JP 2009144523A JP 2009144523 A JP2009144523 A JP 2009144523A JP 5430242 B2 JP5430242 B2 JP 5430242B2
Authority
JP
Japan
Prior art keywords
light emitting
speaker
light
image
emitting units
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009144523A
Other languages
Japanese (ja)
Other versions
JP2011004077A (en
Inventor
純生 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2009144523A priority Critical patent/JP5430242B2/en
Publication of JP2011004077A publication Critical patent/JP2011004077A/en
Application granted granted Critical
Publication of JP5430242B2 publication Critical patent/JP5430242B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Stereophonic System (AREA)

Description

本発明は、複数のスピーカを備える音響システムにおいて各スピーカの相対位置を検出する技術に関し、より詳しくは、立体音響システムにおける各スピーカの相対位置を正確に検出するためのスピーカ位置検出システム及びスピーカ位置検出方法に関する。   The present invention relates to a technique for detecting a relative position of each speaker in an acoustic system including a plurality of speakers, and more specifically, a speaker position detection system and a speaker position for accurately detecting the relative position of each speaker in a stereophonic sound system. It relates to a detection method.

従来、音声を発生する音響システムとして、聴取者の周囲に複数のスピーカを設置し、各スピーカにチャンネルを割り当てて多チャンネルで音響を再生する多チャンネルの音響システムが利用されている。更に、多チャンネルの音響システムと映像を表示するディスプレイとを組み合わせ、映画等の映像をディスプレイで表示すると共に高品位の音声を発生する映像・音響システムが普及してきている。このような映像・音響システムはホームシアタ等と呼ばれている。現在普及が進んでいる5.1チャンネル又は7.1チャンネル等の音響システムでは、各スピーカの配置を定めた規格が決められている。例えば、5.1チャンネルについての規格としてはITU−R BS.775−1がある。このような規格においては、超低域用スピーカを除いた各スピーカの高さがほぼ一定となるように各スピーカの位置が定められている。   2. Description of the Related Art Conventionally, as a sound system that generates sound, a multi-channel sound system in which a plurality of speakers are installed around a listener and a channel is assigned to each speaker and sound is played back in multiple channels is used. Furthermore, video / audio systems that combine a multi-channel audio system and a display that displays video to display video such as movies on the display and generate high-quality audio have become widespread. Such a video / audio system is called a home theater. In an acoustic system such as 5.1 channel or 7.1 channel, which is currently in widespread use, a standard that determines the arrangement of each speaker is determined. For example, the standard for 5.1 channel is ITU-R BS. 775-1. In such a standard, the positions of the speakers are determined so that the heights of the speakers excluding the ultra low frequency speakers are substantially constant.

5.1チャンネル等の音響システムでは、スピーカ夫々の役割が大きく、いずれか一つのスピーカの位置が多少ずれただけでも、本来生成されるべき音場とは大きく異なる音場が生成されてしまう。従って、多チャンネルの音響システムを構築するためには、規格に従って各スピーカを正しい位置に配置する必要がある。映像・音響システムの場合は、各スピーカはディスプレイに対しても正しく配置される必要がある。また聴取者が音声を聴取する聴取位置は、理想的には各スピーカから等距離の位置であることが求められる。その理由は、例えば二つのスピーカから発する音声を合成した合成音像を作る場合、理想的な合成音場はその二つのスピーカから等距離の位置でのみ生成されるからである。従って、理想的な聴取位置から聴取者が少し移動しただけで、聴取者の位置には音像が正確に定位しなくなる。   In an acoustic system such as 5.1 channel, the role of each speaker is great, and even if the position of any one of the speakers is slightly shifted, a sound field that is significantly different from the sound field that should be originally generated is generated. Therefore, in order to construct a multi-channel sound system, it is necessary to arrange each speaker in the correct position according to the standard. In the case of a video / audio system, each speaker needs to be correctly arranged with respect to the display. In addition, the listening position where the listener listens to the sound is ideally located at an equal distance from each speaker. The reason is that, for example, when a synthesized sound image obtained by synthesizing sounds emitted from two speakers is created, an ideal synthesized sound field is generated only at a position equidistant from the two speakers. Therefore, even if the listener has moved a little from the ideal listening position, the sound image cannot be accurately localized at the position of the listener.

しかしながら、家庭内等に多チャンネルの音響システムを聴取者が構築する場合、実際には、規格に従って各スピーカを正しい位置に配置することは難しい。正しい配置を行うためには、聴取位置と各スピーカの相対位置とを正しく測定する必要がある。正しくスピーカを配置したとしても、聴取者が聴取位置を変更した場合は、正確な音像が定位することができなくなり、また音響システムを設置する部屋の形状又は他の配置物の制限によってスピーカを正しく配置できないことも多い。このような状況で正しく音声を聴取するには、聴取位置及び各スピーカの位置に応じて、各スピーカが出力する音声を補正することが考えられ、このためには聴取位置及び各スピーカの位置を測定する必要がある。このように、多チャンネルの音響システムを構築するためには、各スピーカの位置を正確に検出することが重要であり、従来、スピーカの位置を検出するための技術が提案されている。   However, when a listener constructs a multi-channel sound system in a home or the like, it is actually difficult to place each speaker in the correct position according to the standard. In order to perform correct placement, it is necessary to correctly measure the listening position and the relative position of each speaker. Even if the speaker is correctly placed, if the listener changes the listening position, the correct sound image cannot be localized, and the speaker cannot be correctly placed due to the shape of the room in which the sound system is installed or other arrangement restrictions. In many cases, it cannot be placed. In order to listen to the sound correctly in such a situation, it is conceivable to correct the sound output from each speaker according to the listening position and the position of each speaker. For this purpose, the listening position and the position of each speaker are set. It is necessary to measure. Thus, in order to construct a multi-channel acoustic system, it is important to accurately detect the position of each speaker, and conventionally, a technique for detecting the position of the speaker has been proposed.

特許文献1に記載された技術では、聴取者が発声した音声を各スピーカの位置に設けられたマイクで収音し、各マイクに音声が到達するまでの時間差を記録する。また、各スピーカからテスト用の音信号を出力し、他のスピーカの位置にある各マイクでその音信号を収音することにより、各スピーカ間の相対位置を計算する。計算した各スピーカ間の相対位置と、各スピーカの位置に聴取者の音声が到達するまでの時間差とに基づいて、聴取者と各スピーカとの相対位置を計算している。   In the technique described in Patent Document 1, a voice uttered by a listener is picked up by a microphone provided at each speaker position, and a time difference until the sound reaches each microphone is recorded. In addition, a test sound signal is output from each speaker, and the sound signal is collected by each microphone at the position of another speaker, thereby calculating the relative position between the speakers. The relative position between the listener and each speaker is calculated based on the calculated relative position between the speakers and the time difference until the sound of the listener reaches the position of each speaker.

特許文献2に記載された技術では、聴取者との相対位置が既知である基準スピーカから音信号を出力し、他のスピーカの付近に設けられた各マイクでその音信号を収音し、特許文献1の技術と同様に、基準スピーカに対する各スピーカの位置を計算している。特許文献3に記載された技術では、各スピーカから音信号を出力し、出力した音信号を特定の場所にかたまって設置された複数のマイクにより収音し、各マイクに入力された音信号の強度の差異から、音信号を発したスピーカの位置を検出する。特許文献4に記載された技術では、各スピーカから音信号を出力し、各スピーカに一体的に設けられたマイク又は各スピーカ自身によって音信号を収音し、各スピーカ間の距離を計算し、計算した各距離から特許文献1と同様にして各スピーカの相対位置を推定する。   In the technique described in Patent Document 2, a sound signal is output from a reference speaker whose relative position to a listener is known, and the sound signal is collected by each microphone provided in the vicinity of another speaker. Similar to the technique of Document 1, the position of each speaker relative to the reference speaker is calculated. In the technique described in Patent Document 3, a sound signal is output from each speaker, the output sound signal is collected by a plurality of microphones installed in a specific place, and the sound signal input to each microphone is collected. The position of the speaker that emitted the sound signal is detected from the difference in intensity. In the technique described in Patent Document 4, a sound signal is output from each speaker, the sound signal is collected by a microphone or each speaker itself provided integrally with each speaker, and a distance between the speakers is calculated. The relative position of each speaker is estimated from the calculated distances in the same manner as in Patent Document 1.

特許文献5に記載された技術では、各スピーカから音信号を出力し、出力した音信号を相対位置関係が既知である複数のマイクにより収音し、夫々のマイクに入力した音信号の遅延の差異から音信号を発したスピーカの位置を検出する。特許文献6に記載された技術では、超音波マイクをディスプレイ画面あるいはディスプレイ後方等に3個以上配置し、各スピーカから出力する超音波信号を各マイクで収音することによって位置を検出する。特許文献7に記載された技術では、聴取者が知覚可能でない音信号を通常の出力音声に埋め込み、埋め込んだ音信号を用いて二つのスピーカ間の距離を測定し、その後は、特許文献4と同様にして相対位置関係を推定する。   In the technique described in Patent Document 5, a sound signal is output from each speaker, the output sound signal is collected by a plurality of microphones whose relative positional relationships are known, and the delay of the sound signal input to each microphone is reduced. The position of the speaker that emitted the sound signal is detected from the difference. In the technique described in Patent Document 6, three or more ultrasonic microphones are arranged on the display screen or behind the display, and the position is detected by collecting the ultrasonic signals output from the speakers with the microphones. In the technique described in Patent Document 7, a sound signal that cannot be perceived by a listener is embedded in a normal output sound, and the distance between the two speakers is measured using the embedded sound signal. Similarly, the relative positional relationship is estimated.

特開2005−198249号公報JP 2005-198249 A 国際公開第2005/091679号パンフレットInternational Publication No. 2005/091679 Pamphlet 特開2006−33077号公報JP 2006-33077 A 特開2006−148880号公報JP 2006-148880 A 特開2006−174094号公報JP 2006-174094 A 特開2008−78938号公報JP 2008-78938 A 特表2008−546345号公報Special table 2008-546345 gazette

ところで、次世代の音響規格として、立体音響システムが提案されている。立体音響システムでは、スピーカの高さについて全て同じ高さで統一するのではなく、例えば上段、中段及び下段等のように、各スピーカの高さにグループを設けておき、夫々の高さ毎に聴取者の周囲にスピーカを配置することにより、音像の周囲の水平方向の制御だけでなく垂直方向も制御する。このような立体音響システムでは、従来の音響システムに比べてチャンネル数及びスピーカ数が多くなり、15〜30個のスピーカが必要とされている。   By the way, a three-dimensional acoustic system has been proposed as a next-generation acoustic standard. In a stereophonic sound system, the heights of the speakers are not unified at the same height. For example, a group is provided for each speaker height, such as the upper, middle, and lower levels, for each height. By arranging the speakers around the listener, not only the horizontal direction around the sound image but also the vertical direction is controlled. In such a stereophonic sound system, the number of channels and the number of speakers are increased as compared with the conventional sound system, and 15 to 30 speakers are required.

このような多数のチャンネルを用いる立体音響システムは、スピーカ数が多いという特徴がある分、これらのスピーカの位置及び聴取位置の変動に対してある程度の頑強性を有する。即ち、いくつかのスピーカの位置が定められた配置より少しずれていたとしても、生成される音場に対する影響は小さい。また聴取位置が理想的な位置から多少ずれたとしても、同様に音像定位に及ぼす影響は小さい。その一方で、立体音響システムでは、配置されるスピーカの高さが全て一定ではなく、スピーカ毎に配置するべき高さが決められているので、夫々のスピーカを正しい高さに配置する必要がある。例えば、上段、中段及び下段のスピーカの高さのグループがある場合、上段と下段とを入れ替えて設置したときには、生成される音場は本来のものとは全く異なるものとなってしまう。即ち、立体音響システムは、従来の音響システムに比べて、各スピーカの位置及び聴取者位置の多少のずれに対しては頑強であるものの、スピーカの配置の際には各スピーカの高さという要素を考慮に入れる必要があるという特徴がある。このような特徴から、立体音響システムでは、各スピーカの相対位置及び聴取位置については厳密な正確さが必要とされないものの、高さを含めた各スピーカの位置を検出する技術が必要となる。   Since such a stereophonic sound system using a large number of channels is characterized by a large number of speakers, it has a certain degree of robustness against fluctuations in the positions and listening positions of these speakers. That is, even if the positions of some speakers are slightly deviated from the predetermined arrangement, the influence on the generated sound field is small. Even if the listening position is slightly deviated from the ideal position, the influence on sound image localization is small. On the other hand, in the stereophonic sound system, the height of all the speakers to be arranged is not constant, and the height to be arranged for each speaker is determined, so that it is necessary to arrange each speaker at the correct height. . For example, when there are upper, middle and lower speaker height groups, when the upper and lower speakers are installed interchangeably, the generated sound field will be completely different from the original one. In other words, the stereophonic sound system is more robust to a slight shift in the position of each speaker and the listener's position than the conventional sound system, but the element of the height of each speaker when placing the speaker. It is necessary to take this into account. Because of these characteristics, the stereophonic sound system does not require strict accuracy with respect to the relative position and listening position of each speaker, but requires a technique for detecting the position of each speaker including the height.

以上の如き立体音響システムにおいて、特許文献1に記載の技術でスピーカ位置の検出を行った場合を考える。この技術では、各スピーカの相対位置を推定するために、各スピーカが発するテスト用の音信号を用いて各スピーカ間の距離を求め、求めた距離を用いて各スピーカの相対位置を算出するようになっている。しかし、音信号は反射及び回折を起こし易いので、実際の家庭環境において音信号から各スピーカ間の距離を精度良く求めることは難しい。また、仮に各スピーカ間の距離が正確に算出されたとしても、その距離から数学的に各スピーカの相対位置を一意に求めるには、多数の非線形連立方程式を解く必要があり、一般的に困難である。例えば、五つのスピーカが3次元ユークリッド空間上にあり、そのうち四つのスピーカが同一平面上にあり、五番目のスピーカがその平面から特定の距離だけ離れている場合、平面に対する五番目のスピーカ位置の対称点を考えると、四つのスピーカ夫々から対称点までの距離は、四つのスピーカ夫々から五番目のスピーカまでの距離と等しい。即ち、スピーカ間の距離関係だけでは、各スピーカの相対位置を一意に求めることはできない。超低域用スピーカを除いた各スピーカをほぼ同一平面上に配置する5.1チャンネル等の従来の音響システムではスピーカ位置の検出が可能ではあるものの、各スピーカの高さが異なる立体音響システムでは、特許文献1に記載の技術でスピーカ位置を検出することはできない。   Consider a case where the speaker position is detected by the technique described in Patent Document 1 in the above-described stereophonic sound system. In this technique, in order to estimate the relative position of each speaker, the distance between the speakers is obtained using a test sound signal emitted from each speaker, and the relative position of each speaker is calculated using the obtained distance. It has become. However, since the sound signal is likely to be reflected and diffracted, it is difficult to accurately obtain the distance between the speakers from the sound signal in an actual home environment. Even if the distance between each speaker is accurately calculated, it is generally difficult to mathematically determine the relative position of each speaker from the distance by solving a large number of nonlinear simultaneous equations. It is. For example, if five speakers are in a three-dimensional Euclidean space, four of them are on the same plane, and the fifth speaker is a specific distance away from that plane, Considering the symmetry point, the distance from each of the four speakers to the symmetry point is equal to the distance from each of the four speakers to the fifth speaker. That is, the relative position of each speaker cannot be uniquely determined only by the distance relationship between the speakers. In a conventional acoustic system such as 5.1 channel in which each speaker except for the ultra low frequency speaker is arranged on the same plane, the position of the speaker can be detected, but in a three-dimensional acoustic system in which each speaker has a different height. The speaker position cannot be detected by the technique described in Patent Document 1.

特許文献2に記載の技術では、特許文献1における聴取者の発声した音声の代わりに、聴取者との距離が既知である基準スピーカからの音信号を使用しているので、特許文献1と同様に、スピーカ位置を検出することは困難である。さらに、聴取者とスピーカとの距離が既知であるという前提が現実的ではない。特許文献3に記載の技術では、各スピーカからの音信号を各マイクで検出した強度の差によってスピーカの方向を判定するとしている。音信号の強度が単位時間当たりの音圧であると考えると、一般家庭のように反射音又は他の音が存在する環境では、立体音響システムに必要な多数のスピーカの方向を音圧だけで判定するのは困難である。特許文献4に記載の技術では,特許文献1と同様にしてスピーカ間の距離から各スピーカの相対位置を求めるとしているので、特許文献1と同様に、立体音響システムには適用できない。   In the technique described in Patent Document 2, since a sound signal from a reference speaker whose distance to the listener is known is used instead of the voice uttered by the listener in Patent Document 1, the same as in Patent Document 1 In addition, it is difficult to detect the speaker position. Furthermore, the assumption that the distance between the listener and the speaker is known is not realistic. In the technique described in Patent Literature 3, the direction of the speaker is determined based on a difference in intensity detected by each microphone with a sound signal from each speaker. Considering that the intensity of the sound signal is the sound pressure per unit time, in an environment where there is a reflected sound or other sound as in a general household, the direction of many speakers necessary for a stereophonic sound system can It is difficult to judge. In the technique described in Patent Document 4, since the relative position of each speaker is obtained from the distance between the speakers as in Patent Document 1, it cannot be applied to the stereophonic sound system, as in Patent Document 1.

特許文献5に記載の技術では、特許文献3と同様に複数のマイクで検出した音信号の到達時間差によってスピーカのマイクに対する相対位置を検出する。特許文献3と同様に、反射音又は他の音が存在する環境では、多数のスピーカの相対位置を到達時間差だけで判定するのは困難である。特許文献6に記載の技術は、音信号用の音として超音波を用いていること以外は、ほぼ特許文献と同様であるので、特許文献と同様に、立体音響システムへの適用は困難である。特許文献7に記載の技術は、聴取者が知覚可能でない音信号を用いること以外は、特許文献1、2及び4と同様であるので、同様に、立体音響システムへの適用は困難である。   In the technique described in Patent Document 5, as in Patent Document 3, the relative position of the speaker to the microphone is detected based on the arrival time differences of the sound signals detected by the plurality of microphones. Similar to Patent Document 3, it is difficult to determine the relative positions of a large number of speakers based only on arrival time differences in an environment where reflected sound or other sounds exist. Since the technique described in Patent Document 6 is almost the same as that of the patent document except that an ultrasonic wave is used as the sound for the sound signal, it is difficult to apply to the stereophonic sound system as in the case of the patent document. . Since the technique described in Patent Document 7 is the same as Patent Documents 1, 2, and 4 except that a sound signal that is not perceptible to the listener is used, similarly, it is difficult to apply the technique to a stereophonic sound system.

本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、音信号ではなく発光を用いることによって、多数のスピーカの位置を正確に検出することが可能なスピーカ位置検出システム及びスピーカ位置検出方法を提供することにある。   The present invention has been made in view of such circumstances, and an object of the present invention is to provide a speaker position capable of accurately detecting the positions of a large number of speakers by using light emission instead of a sound signal. A detection system and a speaker position detection method are provided.

本発明に係るスピーカ位置検出システムは、複数のスピーカを含む複数の機器で構成され、各機器の位置の基準となる基準機器と他のスピーカとの相対位置を検出するスピーカ位置検出システムにおいて、前記基準機器及び各スピーカは、少なくとも3箇所に発光部を設けてあり、該発光部からの発光を含む光を受光し、受光した光が分布した画像を生成する受光装置と、前記基準機器及び各スピーカ上での発光部間の位置関係を記憶する手段と、前記受光装置が生成した画像内における、前記基準機器に設けた少なくとも3箇所の発光部に対応する発光点、及び各スピーカに設けた少なくとも3箇所の発光部に対応する発光点を特定する特定手段と、前記基準機器について特定した発光点の画像内での位置、及び前記基準機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記基準機器の相対位置を計算し、各スピーカについて特定した発光点の画像内での位置、及び各スピーカ上での発光部間の位置関係に基づいて、前記受光装置に対する各スピーカの相対位置を計算する計算手段と、計算した前記受光装置に対する前記基準機器及び各スピーカの相対位置に基づいて、前記基準機器と各スピーカとの相対位置を計算する手段とを備え、前記基準機器及び複数のスピーカの内のいずれかの機器は、4箇所以上に発光部を設けてあり、前記特定手段は、前記受光装置が生成した画像から、前記機器に設けてある4箇所以上の発光部に対応する発光点を特定する手段を有し、前記計算手段は、前記特定手段で4箇所以上の発光部に対応する発光点が特定された場合に、4箇所以上の発光部に対応する発光点から、3箇所の発光部に対応する発光点を選択する手段と、3箇所の発光部に対応する発光点を選択する組み合わせの夫々について、選択した発光点の画像内での位置、及び前記機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記機器の相対位置を計算する手段と、前記組み合わせの夫々について計算した前記機器の相対位置を平均する手段とを有することを特徴とする。 The speaker position detection system according to the present invention includes a plurality of devices including a plurality of speakers, and the speaker position detection system detects a relative position between a reference device serving as a reference of the position of each device and another speaker. The reference device and each speaker are provided with light emitting units in at least three locations, receive light including light emitted from the light emitting unit, and generate an image in which the received light is distributed, the reference device and each of the speakers Means for storing the positional relationship between the light emitting units on the speaker, light emitting points corresponding to at least three light emitting units provided in the reference device in the image generated by the light receiving device , and each speaker specifying means for specifying a light emission point corresponding to the light emitting portion of the at least three, the position in the image of the specified emission point for the reference device, and a light emitting portion on the reference device Based on the positional relationship, the relative position of the reference device calculates the position in the image of the light emitting points identified for each speaker, and based on the positional relationship between the light emitting portion on each of the speakers relative to the light receiving device and calculating means for calculating the relative position of the speakers with respect to the light receiving device, based on the relative position of the reference device and the speaker for the receiving apparatus calculated, calculates the relative position of the reference device and the speakers The reference device and any one of the plurality of speakers are provided with light emitting units at four or more locations, and the specifying device is provided in the device from an image generated by the light receiving device. Means for specifying light emitting points corresponding to four or more light emitting parts, and the calculating means is configured to specify light emitting points corresponding to four or more light emitting parts by the specifying means. The selected light emission for each of the means for selecting the light emitting points corresponding to the three light emitting units and the combination for selecting the light emitting points corresponding to the three light emitting units from the light emitting points corresponding to the four or more light emitting units. Based on the position of the point in the image and the positional relationship between the light emitting units on the device, the means for calculating the relative position of the device with respect to the light receiving device, and the relative of the device calculated for each of the combinations position and wherein Rukoto to have a means for averaging.

本発明に係るスピーカ位置検出システムは、前記受光装置は、複数方向からの光を受光できるように、複数方向に向けた複数の受光部を有しており、受光部別に画像を生成するように構成してあることを特徴とする。   In the speaker position detection system according to the present invention, the light receiving device has a plurality of light receiving portions directed in a plurality of directions so as to receive light from a plurality of directions, and generates an image for each light receiving portion. It is configured.

本発明に係るスピーカ位置検出システムは、前記基準機器及び各スピーカに設けてある発光部を、機器毎に異なる方法で点滅させる手段を更に備えることを特徴とする。   The speaker position detection system according to the present invention further includes means for blinking the reference device and the light emitting unit provided in each speaker by a different method for each device.

本発明に係るスピーカ位置検出システムは、前記基準機器及び各スピーカに設けてある複数の発光部の内、いずれか一つの発光部は、他の発光部よりも発光強度を大きく構成してあることを特徴とする。   In the speaker position detection system according to the present invention, any one of the plurality of light emitting units provided in the reference device and each speaker is configured to have a larger emission intensity than the other light emitting units. It is characterized by.

本発明に係るスピーカ位置検出システムは、前記基準機器は映像表示装置であることを特徴とする。   In the speaker position detection system according to the present invention, the reference device is a video display device.

本発明に係るスピーカ位置検出方法は、複数のスピーカを含む複数の機器で構成された音響システムで、各機器の位置の基準となる基準機器と他のスピーカとの相対位置を検出する方法において、前記基準機器及び各スピーカは、少なくとも3箇所に発光部を設けてあり、前記基準機器及び複数のスピーカの内のいずれかの機器は、4箇所以上に発光部を設けてあり、該発光部からの発光を含む光を受光する受光装置で、受光した光が分布した画像を生成し、生成した画像内における、前記基準機器に設けた少なくとも3箇所の発光部に対応する発光点を特定し、特定した発光点の画像内での位置、及び前記基準機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記基準機器の相対位置を計算し、前記受光装置で生成した画像内における、各スピーカに設けた少なくとも3箇所の発光部に対応する発光点を特定し、特定した発光点の画像内での位置、及び各スピーカ上での発光部間の位置関係に基づいて、前記受光装置に対する各スピーカの相対位置を計算し、前記機器に設けた4箇所以上の発光部に対応する発光点が特定された場合に、4箇所以上の発光部に対応する発光点から、3箇所の発光部に対応する発光点を選択し、3箇所の発光部に対応する発光点を選択する組み合わせの夫々について、選択した発光点の画像内での位置、及び前記機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記機器の相対位置を計算し、前記組み合わせの夫々について計算した前記機器の相対位置を平均し、計算した前記受光装置に対する前記基準機器及び各スピーカの相対位置に基づいて、前記基準機器と各スピーカとの相対位置を計算することを特徴とする。 A speaker position detection method according to the present invention is a method for detecting a relative position between a reference device serving as a reference of the position of each device and another speaker in an acoustic system including a plurality of devices including a plurality of speakers. The reference device and each speaker are provided with light emitting portions in at least three locations, and any one of the reference device and the plurality of speakers is provided with light emitting portions at four or more locations. A light receiving device that receives the light including the light emission of the generated light, generates an image in which the received light is distributed, and identifies light emitting points corresponding to at least three light emitting portions provided in the reference device in the generated image, An image generated by the light receiving device is calculated by calculating a relative position of the reference device with respect to the light receiving device based on the position of the identified light emitting point in the image and the positional relationship between the light emitting units on the reference device. The light emitting points corresponding to at least three light emitting units provided in each speaker are identified, and based on the position of the identified light emitting points in the image and the positional relationship between the light emitting units on each speaker, When the relative positions of the respective speakers with respect to the light receiving device are calculated and the light emitting points corresponding to the four or more light emitting units provided in the device are specified, the light emitting points corresponding to the four or more light emitting units are determined as 3 The light emitting points corresponding to the three light emitting portions are selected, and for each combination of the light emitting points corresponding to the three light emitting portions, the position of the selected light emitting point in the image and the light emitting portion on the device based on the positional relationship between the relative positions of the device relative to the light receiving device calculates, by averaging the relative position of the devices calculated for each of said combinations, the reference device relative to calculated the photodetector and Based on the relative position of the speaker, and calculates the relative position of the reference device and the speakers.

本発明においては、基準機器及び複数のスピーカの夫々に少なくとも3箇所の発光部を設けておき、各発光部からの赤外線を受光装置で受光し、受光した光の発光点が分布した画像と予め定められている各発光部の位置関係とから、基準機器と各スピーカとの相対位置を計算する。少なくとも3箇所に設けた発光部からの光に基づいて相対位置を求めるので、3次元空間内での正確な相対位置を求めることが可能である。   In the present invention, at least three light emitting units are provided in each of the reference device and the plurality of speakers, infrared rays from each light emitting unit are received by the light receiving device, and an image in which the light emitting points of the received light are distributed The relative position between the reference device and each speaker is calculated from the determined positional relationship between the light emitting units. Since the relative position is obtained based on the light from the light emitting units provided in at least three places, it is possible to obtain an accurate relative position in the three-dimensional space.

また本発明においては、受光装置は、複数方向からの光を受光できるように複数の受光部を備えているので、立体音響システムにおけるスピーカ等、任意の配置のスピーカの相対位置を求めることが可能となる。   In the present invention, since the light receiving device includes a plurality of light receiving units so as to receive light from a plurality of directions, it is possible to obtain a relative position of an arbitrarily arranged speaker such as a speaker in a stereophonic sound system. It becomes.

また本発明においては、各機器に設けた発光部を機器毎に異なった方法で点滅させることにより、発光部を設けてある機器を容易に区別することが可能となる。   In the present invention, it is possible to easily distinguish the device provided with the light emitting unit by blinking the light emitting unit provided in each device in a different manner for each device.

また本発明においては、各機器に設けられた複数の発光部の内、所定の発光部での発光強度を他の発光部よりも大きくすることにより、発光部を容易に区別し、スピーカの相対位置を正確に求めることが可能となる。   Further, in the present invention, among the plurality of light emitting units provided in each device, the light emitting units are easily distinguished from each other by making the light emission intensity at a predetermined light emitting unit larger than other light emitting units. The position can be obtained accurately.

また本発明においては、基準機器を映像表示装置とすることにより、映像・音響システムにおける映像表示装置に対する各スピーカの相対位置を正確に求めることが可能となる。   In the present invention, the relative position of each speaker relative to the video display device in the video / audio system can be accurately obtained by using the reference device as the video display device.

また本発明においては、各機器に4箇所以上の発光部を設けてスピーカ位置の検出を行った場合は、3箇所の発光部を選択する組み合わせ毎にスピーカの相対位置を計算し、各組み合わせについて計算した相対位置を平均することにより、相対位置の検出精度が向上される。   Further, in the present invention, when the position of the speaker is detected by providing four or more light emitting units in each device, the relative position of the speaker is calculated for each combination of selecting the three light emitting units, and for each combination By averaging the calculated relative positions, the relative position detection accuracy is improved.

本発明にあっては、複数のスピーカを備える音響システムにおいて、基準機器に対する各スピーカの3次元空間内での正確な相対位置を求めることが可能であるので、各スピーカの高さが異なる立体音響システムにおいても、各スピーカの相対位置を正確に求めることが可能となり、優れた音響を得るためのスピーカ配置、及び各スピーカの配置に応じた適切な音響補正が可能となる等、本発明は優れた効果を奏する。   In the present invention, in an acoustic system including a plurality of speakers, it is possible to obtain an accurate relative position of each speaker in a three-dimensional space with respect to a reference device, so that three-dimensional sound with different heights of each speaker. Even in the system, the relative position of each speaker can be accurately obtained, the speaker arrangement for obtaining excellent sound, and the appropriate sound correction according to the arrangement of each speaker can be performed. Has an effect.

本発明のスピーカ位置検出システムの構成例を示す模式的斜視図である。It is a typical perspective view which shows the structural example of the speaker position detection system of this invention. 映像表示装置の正面図である。It is a front view of a video display device. スピーカの正面図である。It is a front view of a speaker. リモコンの外観を示す模式図である。It is a schematic diagram which shows the external appearance of a remote control. リモコンの内部構成を示すブロック図である。It is a block diagram which shows the internal structure of a remote control. AVプレーヤ、映像表示装置及びスピーカの内部構成例を示すブロック図である。It is a block diagram which shows the internal structural example of AV player, an image display apparatus, and a speaker. 本発明のスピーカ位置検出システムがスピーカ位置を検出する処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of the process which the speaker position detection system of this invention detects a speaker position. ステップS3の発光点特定処理のサブルーチンの処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the subroutine of the light emission point specific process of step S3. Q、q、Pの関係を示す模式図である。It is a schematic diagram which shows the relationship between Q, q, and P. 4個以上の発光点から映像表示装置の相対位置を計算するステップS4のサブルーチンの処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the subroutine of step S4 which calculates the relative position of a video display apparatus from four or more light emission points.

以下本発明をその実施の形態を示す図面に基づき具体的に説明する。
図1は、本発明のスピーカ位置検出システムの構成例を示す模式的斜視図である。本発明のスピーカ位置検出システムは、使用者が映像及び音声を視聴するための映像・音響システムである。映像・音響システムは、DVD(Digital Versatile Disk)等の記録媒体に記録されたデータ、又は放送信号等に基づいて映像及び音声を再生するためのAV(Audio Visual)プレーヤ3と、映像表示装置2と、複数のスピーカ4,4,…と、使用者がAVプレーヤ3を制御するためのリモコン(リモートコントローラ)1とを備えている。映像表示装置2は、液晶ディスプレイ、プラズマディスプレイ又はプロジェクタ等を用いて構成されている。映像表示装置2及びスピーカ4,4,…は、図示しない通信ケーブルを介して夫々にAVプレーヤ3に接続されている。AVプレーヤ3は、映像表示装置2及びスピーカ4,4,…の夫々に対して信号を送信し、映像表示装置2は信号に基づいた映像を表示し、スピーカ4,4,…は信号に基づいた音声を出力する。リモコン1は、ブルートゥース等の無線通信を用いてAVプレーヤ3と双方向通信を行う構成となっている。リモコン1は、使用者からの操作を受け付け、動作開始の指示等の各種の指示をAVプレーヤ3へ送信し、AVプレーヤ3は、リモコン1から受信した指示に従って各種の処理を実行する。以上の如き構成の映像・音響システムは、リモコン1で所定の指示を受け付けることにより、本発明のスピーカ位置検出システムとしての動作を実行する。
Hereinafter, the present invention will be specifically described with reference to the drawings showing embodiments thereof.
FIG. 1 is a schematic perspective view showing a configuration example of a speaker position detection system of the present invention. The speaker position detection system of the present invention is a video / audio system for a user to view video and audio. The video / audio system includes an AV (Audio Visual) player 3 for reproducing video and audio on the basis of data recorded on a recording medium such as a DVD (Digital Versatile Disk) or a broadcast signal, and a video display device 2. And a plurality of speakers 4, 4,..., And a remote controller (remote controller) 1 for the user to control the AV player 3. The video display device 2 is configured using a liquid crystal display, a plasma display, a projector, or the like. The video display device 2 and the speakers 4, 4,... Are respectively connected to the AV player 3 via a communication cable (not shown). The AV player 3 transmits a signal to each of the video display device 2 and the speakers 4, 4,..., The video display device 2 displays a video based on the signal, and the speakers 4, 4,. Output the sound. The remote controller 1 is configured to perform bidirectional communication with the AV player 3 using wireless communication such as Bluetooth. The remote controller 1 receives an operation from the user and transmits various instructions such as an operation start instruction to the AV player 3, and the AV player 3 executes various processes according to the instructions received from the remote controller 1. The video / audio system having the above configuration executes the operation as the speaker position detection system of the present invention by receiving a predetermined instruction with the remote controller 1.

図2は、映像表示装置2の正面図である。映像・音響システムは、映像表示装置2に表示される映像を観る使用者に対して音声を提供するために、スピーカ4,4,…は映像表示装置2の位置を基準として配置される。従って、映像表示装置2は本発明における基準機器に対応する。映像表示装置2には、正面に設けられた表示画面の周囲四隅に、発光部21、22、23、24が設けられている。各発光部は、赤外線発光素子を用いて構成されており、赤外線を発光する。発光部21、22、23、24は、映像表示装置2の表示画面の中心に対して対称な位置に配置されていることが望ましい。また発光部21は、映像表示装置2に設けられた他の発光部よりも発光強度が大きく構成されている。例えば、発光部21は、他の発光部で用いている赤外線発光素子よりも発光強度が大きい赤外線発光素子を用いて構成されているか、又は他の発光部よりも多数の赤外線発光素子を用いて構成されている。なお、図2には、映像表示装置2の4箇所に発光部を設けた例を示したが、本発明は少なくとも3箇所に発光部を設けていれば実現可能であるので、映像表示装置2は3箇所に発光部を備えた形態であってもよく、また5箇所以上に発光部を備えた形態であってもよい。   FIG. 2 is a front view of the video display device 2. In the video / audio system, the speakers 4, 4,... Are arranged with reference to the position of the video display device 2 in order to provide audio to the user who watches the video displayed on the video display device 2. Therefore, the video display device 2 corresponds to the reference device in the present invention. In the video display device 2, light emitting units 21, 22, 23, and 24 are provided at the four corners around the display screen provided on the front. Each light emitting unit is configured using an infrared light emitting element and emits infrared light. It is desirable that the light emitting units 21, 22, 23, and 24 are arranged at positions symmetrical with respect to the center of the display screen of the video display device 2. In addition, the light emitting unit 21 is configured to have a higher light emission intensity than other light emitting units provided in the video display device 2. For example, the light emitting unit 21 is configured using an infrared light emitting element having a higher emission intensity than the infrared light emitting elements used in other light emitting units, or using a larger number of infrared light emitting elements than other light emitting units. It is configured. FIG. 2 shows an example in which light emitting units are provided at four locations of the video display device 2, but the present invention can be realized if the light emitting units are provided at least at three locations. May have a configuration in which light emitting portions are provided at three locations, or may have a configuration in which light emitting portions are provided at five or more locations.

図3は、スピーカ4の正面図である。スピーカ4には、正面に設けられた振動板の周囲四隅に、発光部41、42、43、44が設けられている。各発光部は、赤外線発光素子を用いて構成されており、赤外線を発光する。発光部41、42、43、44は、スピーカ4の振動板の中心軸に対して対称な位置に配置されていることが望ましい。また発光部41は、スピーカ4に設けられた他の発光部よりも発光強度が大きく構成されている。なお、スピーカ4は3個の発光部を備えた形態であってもよく、また5個以上の発光部を備えた形態であってもよい。スピーカ4,4,…の夫々について、同様に複数の発光部が設けられている。   FIG. 3 is a front view of the speaker 4. The speaker 4 is provided with light emitting portions 41, 42, 43, 44 at the four corners around the diaphragm provided on the front surface. Each light emitting unit is configured using an infrared light emitting element and emits infrared light. It is desirable that the light emitting units 41, 42, 43, 44 are arranged at positions symmetrical with respect to the central axis of the diaphragm of the speaker 4. In addition, the light emitting unit 41 is configured to have a higher emission intensity than other light emitting units provided in the speaker 4. The speaker 4 may have a configuration including three light emitting units, or may have a configuration including five or more light emitting units. A plurality of light emitting units are similarly provided for each of the speakers 4, 4.

図4は、リモコン1の外観を示す模式図である。リモコン1は、本発明における受光装置に対応する。リモコン1は直方体形状に形成されており、表面の各面に、映像表示装置2及びスピーカ4,4,…の発光部から発光された赤外線を受光する受光部11が設けられている。即ち、リモコン1は、複数方向に受光方向を向けた複数の受光部11,11,…を備えており、複数方向からの赤外光を夫々に受光することが可能である。受光部11は、赤外線受光素子を用いて構成されている。なお、リモコン1は、複数方向からの赤外光を受光することができる形態であれば、直方体形状以外の形状であってもよい。   FIG. 4 is a schematic diagram showing an external appearance of the remote controller 1. The remote controller 1 corresponds to the light receiving device in the present invention. The remote controller 1 is formed in a rectangular parallelepiped shape, and a light receiving portion 11 that receives infrared rays emitted from the light emitting portions of the video display device 2 and the speakers 4, 4,. That is, the remote controller 1 includes a plurality of light receiving portions 11, 11,... That have light receiving directions in a plurality of directions, and can receive infrared light from the plurality of directions, respectively. The light receiving unit 11 is configured using an infrared light receiving element. The remote controller 1 may have a shape other than a rectangular parallelepiped shape as long as it can receive infrared light from a plurality of directions.

図5は、リモコン1の内部構成を示すブロック図である。リモコン1は、使用者からの操作を受け付けるための各種のキー又はタッチパネル等の操作部16と、無線通信を用いてAVプレーヤ3との間で各種の信号を送受信する送受信部15とを備え、操作部16は送受信部15送受信部15に接続されている。受光部11,11,…の夫々は、各受光部11の動作を制御する受光制御部12,12,…に接続されている。受光制御部12,12,…は、送受信部15に接続されており、送受信部15で受信した信号に従って受光部11,11,…の動作を制御する。受光制御部12は、毎秒30フレーム等の所定のフレームレートで、受光部11が受光した赤外線の発光点が分布した赤外線画像を表す画像信号を生成する構成となっている。赤外線画像は、赤外線の発光点の空間分布を2次元に射影した写像である。写像のモデルは透視カメラモデルであり、その焦点距離は予め定められている。   FIG. 5 is a block diagram showing the internal configuration of the remote controller 1. The remote controller 1 includes an operation unit 16 such as various keys or a touch panel for receiving an operation from a user, and a transmission / reception unit 15 that transmits and receives various signals to and from the AV player 3 using wireless communication. The operation unit 16 is connected to the transmission / reception unit 15 and the transmission / reception unit 15. Each of the light receiving units 11, 11,... Is connected to a light receiving control unit 12, 12,. The light reception control units 12, 12,... Are connected to the transmission / reception unit 15 and control the operations of the light reception units 11, 11,. The light reception control unit 12 is configured to generate an image signal representing an infrared image in which infrared emission points received by the light reception unit 11 are distributed at a predetermined frame rate such as 30 frames per second. The infrared image is a mapping obtained by two-dimensionally projecting the spatial distribution of infrared emission points. The mapping model is a fluoroscopic camera model, and its focal length is predetermined.

また受光制御部12には、入力画像プレ処理部13が接続されている。受光部11,11,…は、赤外線を受光し、受光制御部12,12,…は、画像信号を生成して入力画像プレ処理部13へ入力し、入力画像プレ処理部13は、入力された画像信号に対して画像処理を行う。入力画像プレ処理部13には、映像表示装置2及びスピーカ4,4,…の位置検出を行う位置検出処理部14が接続されており、入力画像プレ処理部13は、画像処理を行った後の画像信号を位置検出処理部14へ入力する。位置検出処理部14には、不揮発性メモリで構成された記憶部17が接続されており、記憶部17は、映像表示装置2及びスピーカ4,4,…が備える発光部間の距離、並びに透視カメラモデルの焦点距離を予め記憶している。位置検出処理部14は、入力画像プレ処理部13から入力された画像信号と記憶部17が記憶するデータに基づいて、映像表示装置2とスピーカ4,4,…夫々との相対位置を検出する処理を行う。   An input image pre-processing unit 13 is connected to the light reception control unit 12. The light receiving units 11, 11,... Receive infrared rays, the light reception control units 12, 12,... Generate image signals and input them to the input image preprocessing unit 13, and the input image preprocessing unit 13 receives the input. Image processing is performed on the received image signal. The input image preprocessing unit 13 is connected to a position detection processing unit 14 that detects the positions of the video display device 2 and the speakers 4, 4,..., And the input image preprocessing unit 13 performs image processing. Are input to the position detection processing unit 14. A storage unit 17 composed of a non-volatile memory is connected to the position detection processing unit 14, and the storage unit 17 includes a distance between light emitting units included in the video display device 2 and the speakers 4, 4,. The focal length of the camera model is stored in advance. The position detection processing unit 14 detects the relative positions of the video display device 2 and the speakers 4, 4,... Based on the image signal input from the input image preprocessing unit 13 and the data stored in the storage unit 17. Process.

図6は、AVプレーヤ3、映像表示装置2及びスピーカ4の内部構成例を示すブロック図である。AVプレーヤ3は、演算を行う演算部、演算に伴う情報を記憶するRAM、演算に必要なプログラムを記憶するROM等からなる制御部31を備え、制御部31は、本発明のスピーカ位置検出方法の処理を制御する。制御部31には、スピーカ位置検出方法の処理に必要なデータを記憶する記憶部34と、無線通信を用いてリモコン3との間で各種の信号を送受信する送受信部32とが接続されている。また制御部31には、映像表示装置2及びスピーカ4,4,…に対して制御信号を送信するためのインタフェース部33が接続されている。映像表示装置2は、発光部21,22,23,24の夫々が接続された発光制御部251,252,253,254と、インタフェース部26とを備えている。インタフェース部26は、AVプレーヤ3のインタフェース部33と通信ケーブルを介して接続されている。同様に、スピーカ4は、発光部41,42,43,44が接続された発光制御部451,452,453,454と、インタフェース部46とを備えており、インタフェース部46はAVプレーヤ3のインタフェース部33と通信ケーブルを介して接続されている。スピーカ4,4,…は夫々同様の構成となっている。   FIG. 6 is a block diagram illustrating an internal configuration example of the AV player 3, the video display device 2, and the speaker 4. The AV player 3 includes a control unit 31 including a calculation unit that performs a calculation, a RAM that stores information associated with the calculation, a ROM that stores a program necessary for the calculation, and the control unit 31 includes the speaker position detection method of the present invention. Control the processing. Connected to the control unit 31 are a storage unit 34 for storing data necessary for processing of the speaker position detection method, and a transmission / reception unit 32 for transmitting and receiving various signals to and from the remote control 3 using wireless communication. . The control unit 31 is connected to an interface unit 33 for transmitting a control signal to the video display device 2 and the speakers 4, 4,. The video display device 2 includes light emission control units 251, 252, 253, and 254 to which the light emitting units 21, 22, 23, and 24 are connected, and an interface unit 26. The interface unit 26 is connected to the interface unit 33 of the AV player 3 via a communication cable. Similarly, the speaker 4 includes light emission control units 451, 452, 453, 454 to which light emitting units 41, 42, 43, 44 are connected, and an interface unit 46, and the interface unit 46 is an interface of the AV player 3. It is connected to the unit 33 via a communication cable. The speakers 4, 4,... Have the same configuration.

各インタフェース部は、USB(Universal Serial Bus)又はUPnP(Universal Plug and Play )等の通信プロトコルに対応した通信インタフェースであり、インタフェース部間は通信プロトコルに対応した通信ケーブルで接続されている。制御部31は、インタフェース部33から映像表示装置2及びスピーカ4,4,…へ制御信号を送信し、インタフェース部26,46は、制御信号を受信し、各発光制御部は、制御信号に従って各発光部を制御する。なお、図6は、本発明のスピーカ位置検出システムとして必要な内部構成を示しており、AVプレーヤ3、映像表示装置2及びスピーカ4は、図6に示した構成以外に、映像・音響システムとして必要な構成物を備えている。また、スピーカ位置検出システムは、スピーカ位置検出を行うための制御信号と、映像及び音声を出力するための映像信号及び音声信号とを、同一の通信ケーブルを介して送受信する形態であってもよい。またスピーカ位置検出システムは、各種の信号を無線通信により送受信する形態であってもよい。   Each interface unit is a communication interface corresponding to a communication protocol such as USB (Universal Serial Bus) or UPnP (Universal Plug and Play), and the interface units are connected by a communication cable corresponding to the communication protocol. The control unit 31 transmits a control signal from the interface unit 33 to the video display device 2 and the speakers 4, 4,..., The interface units 26 and 46 receive the control signal, and each light emission control unit receives each control signal according to the control signal. Control the light emitting section. FIG. 6 shows an internal configuration necessary for the speaker position detection system of the present invention. The AV player 3, the video display device 2, and the speaker 4 have a video / audio system other than the configuration shown in FIG. It has the necessary components. The speaker position detection system may be configured to transmit and receive a control signal for detecting the speaker position and a video signal and an audio signal for outputting video and audio via the same communication cable. . The speaker position detection system may be configured to transmit and receive various signals by wireless communication.

映像表示装置2及びスピーカ4,4,…が備える各発光制御部には、夫々に固有IDが割り当てられており、記憶部34は、固有IDのリストを記憶している。制御部31は、例えば、インタフェース部33を介して各発光制御部を自動的に検出し、検出した各発光制御部に固有IDを割り振り、割り振った固有IDのリストを記憶部34に記憶させる処理を行う。   Each light emission control unit included in the video display device 2 and the speakers 4, 4,... Is assigned a unique ID, and the storage unit 34 stores a list of unique IDs. For example, the control unit 31 automatically detects each light emission control unit via the interface unit 33, assigns a unique ID to each detected light emission control unit, and stores a list of the assigned unique IDs in the storage unit 34. I do.

次に、以上の構成でなるスピーカ位置検出システムが実行するスピーカ位置検出方法を説明する。図7は、本発明のスピーカ位置検出システムがスピーカ位置を検出する処理の手順を示すフローチャートである。映像表示装置2の表示画面にメニューを表示し、使用者がリモコン1の操作部16に対して所定の操作を行うことにより、リモコン1は、スピーカ位置検出の開始指示を使用者から受け付ける(S1)。送受信部15は、スピーカ位置検出の開始を指示する信号をAVプレーヤ3へ送信し、AVプレーヤ3は、リモコン1から送信された信号を送受信部32で受信する。制御部31は、映像表示装置2と、スピーカ4,4,…の内の一のスピーカ4とに、発光部を発光させる処理を行う(S2)。   Next, a speaker position detection method executed by the speaker position detection system having the above configuration will be described. FIG. 7 is a flowchart showing a procedure of processing for detecting the speaker position by the speaker position detection system of the present invention. When the menu is displayed on the display screen of the video display device 2 and the user performs a predetermined operation on the operation unit 16 of the remote controller 1, the remote controller 1 receives an instruction to start speaker position detection from the user (S1). ). The transmission / reception unit 15 transmits a signal instructing the start of speaker position detection to the AV player 3, and the AV player 3 receives the signal transmitted from the remote controller 1 by the transmission / reception unit 32. The control unit 31 performs a process of causing the light emitting unit to emit light to the video display device 2 and one speaker 4 among the speakers 4, 4,... (S2).

ステップS2では、制御部31は、記憶部34が記憶する固有IDのリストの中から、映像表示装置2が備える発光制御部と、一のスピーカ4が備える発光制御部との固有IDを読み出し、読み出した固有IDが示す発光制御部に対して、発光を命令する制御信号をインタフェース部33から送信する。映像表示装置2及びスピーカ4では、インタフェース部で制御信号を受信し、各発光制御部は、制御信号に従って発光部を発光させる。これにより、映像表示装置2の発光部21,22,23,24と、一のスピーカ4の発光部41,42,43,44とがほぼ同時に発光する。   In step S <b> 2, the control unit 31 reads out the unique IDs of the light emission control unit included in the video display device 2 and the light emission control unit included in the one speaker 4 from the list of unique IDs stored in the storage unit 34. A control signal instructing light emission is transmitted from the interface unit 33 to the light emission control unit indicated by the read unique ID. In the video display device 2 and the speaker 4, the interface unit receives the control signal, and each light emission control unit causes the light emitting unit to emit light according to the control signal. Accordingly, the light emitting units 21, 22, 23, and 24 of the video display device 2 and the light emitting units 41, 42, 43, and 44 of one speaker 4 emit light almost simultaneously.

発光部を発光させる際には、映像表示装置2とスピーカ4とで発光のさせ方を異ならせることにより、映像表示装置2からの赤外線とスピーカ4からの赤外線とを区別できるようにする。例えば、映像表示装置2の発光部は点滅発光させ、スピーカ4の発光部は連続発光させる。点滅発光と連続発光とは逆でもよい。また各発光部を点滅発光させ、映像表示装置2とスピーカ4とで点滅間隔を異ならせてもよい。或いは、映像表示装置2又はスピーカ4であることを示す発光信号を発するように発光部の点滅間隔を制御してもよい。各発光部の発光のさせ方は、制御部31が制御信号で制御してもよく、各発光制御部が予め定めてあってもよい。各発光部の点滅間隔は、点滅周波数の最大値が、リモコン1の受光部11及び受光制御部12でのフレームレートの1/2以下となるように設定する。   When the light emitting unit emits light, the image display device 2 and the speaker 4 are made to emit light differently so that infrared rays from the image display device 2 and infrared rays from the speaker 4 can be distinguished. For example, the light emitting unit of the video display device 2 emits blinking light, and the light emitting unit of the speaker 4 continuously emits light. The flashing light emission and the continuous light emission may be reversed. Further, each light emitting unit may be caused to blink and the blinking interval may be different between the video display device 2 and the speaker 4. Or you may control the blink interval of a light emission part so that the light emission signal which shows that it is the video display apparatus 2 or the speaker 4 may be emitted. The light emission of each light emitting unit may be controlled by the control unit 31 with a control signal, or each light emission control unit may be determined in advance. The blinking interval of each light emitting unit is set so that the maximum value of the blinking frequency is ½ or less of the frame rate in the light receiving unit 11 and the light receiving control unit 12 of the remote controller 1.

映像表示装置2の発光部21,22,23,24と、一のスピーカ4の発光部41,42,43,44とが発光することにより、リモコン1の受光部11,11,…のいずれかに赤外線が入射する。受光部11,11,…は、赤外線を受光し、受光制御部12,12,…は画像信号を生成して入力画像プレ処理部13へ順次入力する。入力画像プレ処理部13は、ローパスフィルタ等を用いて画像信号からノイズを除去することにより、赤外線に起因する信号以外の信号を可及的に除去した画像信号を位置検出処理部14へ入力する。位置検出処理部14は、入力された画像信号を記憶し、画像信号が表す赤外線画像から映像表示装置2及びスピーカ4上の発光部に対応する発光点を特定する発光点特定処理を行う(S3)。   Any one of the light receiving units 11, 11,... Of the remote controller 1 by the light emitting units 21, 22, 23, 24 of the video display device 2 and the light emitting units 41, 42, 43, 44 of one speaker 4 emitting light. Infrared rays are incident on. The light receiving units 11, 11,... Receive infrared rays, and the light reception control units 12, 12,... Generate image signals and sequentially input them to the input image preprocessing unit 13. The input image pre-processing unit 13 inputs, to the position detection processing unit 14, an image signal from which signals other than signals caused by infrared rays are removed as much as possible by removing noise from the image signal using a low-pass filter or the like. . The position detection processing unit 14 stores the input image signal, and performs a light emission point specifying process for specifying a light emission point corresponding to the light emitting unit on the video display device 2 and the speaker 4 from the infrared image represented by the image signal (S3). ).

図8は、ステップS3の発光点特定処理のサブルーチンの処理手順を示すフローチャートである。位置検出処理部14は、受光制御部12,12,…が生成した複数の画像信号が表す複数の赤外線画像から、所定以上の輝度で発光する高輝度の発光点を抽出する(S31)。各赤外線画像は、所定のフレームレートで生成された時間的に連続した画像となっている。ステップS31では、位置検出処理部14は、時刻tにおける赤外線画像上の座標(x,y)での輝度をBt (x,y)として、特定の時刻t0において下記の(1)式の条件を満たす座標(x,y)上の発光点を赤外線画像から抽出する。 FIG. 8 is a flowchart showing a processing procedure of a subroutine of the light emission point specifying process in step S3. The position detection processing unit 14 extracts a high-luminance light emitting point that emits light at a predetermined luminance or higher from a plurality of infrared images represented by a plurality of image signals generated by the light reception control units 12, 12,... (S31). Each infrared image is a temporally continuous image generated at a predetermined frame rate. In step S31, the position detection processing unit 14 sets the luminance at the coordinates (x, y) on the infrared image at time t as B t (x, y), and satisfies the condition of the following expression (1) at a specific time t0. A light emitting point on coordinates (x, y) that satisfies the above is extracted from the infrared image.

Figure 0005430242
Figure 0005430242

(1)式において、Lは分析時間長であり、nは赤外線画像上での発光点を中心とする分析範囲であり、c1 は閾値である。この内、nは自然数である。L,n,c1 の具体的な値は、受光部11,11,…の感度及び解像度等の特性に応じて適切な値に予め定めてあり、記憶部17が記憶している。位置検出処理部14は、ステップS31で、(1)式を満たす発光点を全て抽出してもよく、(1)式で計算したQt0(x,y)の値が大きい順に所定数の発光点を抽出してもよい。 In the formula (1), L is an analysis time length, n is an analysis range centering on a light emitting point on an infrared image, and c 1 is a threshold value. Of these, n is a natural number. Specific values of L, n, and c 1 are determined in advance according to characteristics such as sensitivity and resolution of the light receiving units 11, 11,..., And are stored in the storage unit 17. In step S31, the position detection processing unit 14 may extract all the light emission points satisfying the expression (1), and a predetermined number of light emission in descending order of the value of Q t0 (x, y) calculated by the expression (1). Points may be extracted.

位置検出処理部14は、次に、抽出した各発光点について、時刻t0−Lからt0までの各時刻における発光の有無を示すビット値を計算する処理を行う(S32)。ステップS32では、位置検出処理部14は、抽出した発光点の座標を(xu ,yu )(uは自然数)とすると、抽出した各発光点について、下記の(2)式で定義されるビット値mu tを、時刻t0−Lからt0までの時間内に生成した赤外線画像のフレーム毎に計算する。 Next, the position detection processing unit 14 performs a process of calculating a bit value indicating the presence or absence of light emission at each time from time t0-L to t0 for each extracted light emission point (S32). In step S32, the position detection processing unit 14 is defined by the following expression (2) for each extracted light emitting point, where the coordinates of the extracted light emitting point are (x u , yu ) (u is a natural number). The bit value m u t is calculated for each frame of the infrared image generated within the time from time t0-L to t0.

Figure 0005430242
Figure 0005430242

(2)式において、c2 は所定の閾値であり、記憶部17が記憶している。また式(2)における時刻tは、各フレームを生成したときの時刻である。これにより、フレーム間の時間をdtとすると、各発光点について、赤外線の点滅ビット列(mu t0-L ,mu t0-L+dt,…,mu t0 )が生成される。点滅ビット列が全て1の場合は、発光点が連続発光していることを示し、点滅ビット列に1と0とが混合している場合は、発光点が点滅していることを示している。各発光点の点滅ビット列と、映像表示装置2及びスピーカ4の発光部の発光のさせ方とを比較することにより、各発光点が映像表示装置2の発光部に対応するか、スピーカ4の発光部に対応するか、又はいずれの発光部にも対応しないかを判定することが可能である。映像表示装置2及びスピーカ4の発光部の発光のさせ方は、記憶部17が記憶している。 In the equation (2), c 2 is a predetermined threshold value and is stored in the storage unit 17. The time t in the equation (2) is the time when each frame is generated. As a result, if the time between frames is dt, an infrared flashing bit string ( mu t0-L , mu t0-L + dt ,..., Mu t0 ) is generated for each light emitting point. When the flashing bit string is all 1, it indicates that the light emitting point is continuously emitting light, and when 1 and 0 are mixed in the flashing bit string, it indicates that the light emitting point is flashing. By comparing the flashing bit string of each light emitting point with the light emitting part of the video display device 2 and the speaker 4, whether each light emitting point corresponds to the light emitting part of the video display device 2 or the light emission of the speaker 4. It is possible to determine whether it corresponds to a light emitting part or not to correspond to any light emitting part. The storage unit 17 stores how the light emitting units of the video display device 2 and the speaker 4 emit light.

位置検出処理部14は、次に、各発光点の点滅ビット列と、映像表示装置2の発光部の発光のさせ方とを比較することにより、受光制御部12,12,…が生成した複数の画像信号が表す複数の赤外線画像の内のいずれか一つに、映像表示装置2上の発光部に対応する3又は4個の発光点が含まれているか否かを判定する(S33)。なお、映像表示装置2に3個の発光部を備えた形態の場合は、3個の発光点が含まれているかを判定し、5個以上のa個の発光部を備えた形態の場合は、3〜a個の発光点が含まれているかを判定する。何れかの赤外線画像に映像表示装置2上の発光部に対応する3又は4個の発光点が含まれている場合は(S33:YES)、位置検出処理部14は、映像表示装置2上の各発光部に対応する発光点を特定する(S34)。ステップS34では、発光点の内、輝度が最大である発光点を、他の発光部よりも発光強度が大きい発光部21に対応する発光点であると特定する。更に、位置検出処理部14は、赤外線画像中における発光部21に対応する発光点に対する他の発光点の位置関係と、映像表示装置2上の発光部21に対する他の発光部の位置関係とを比較することにより、発光部22,23,24の夫々に対応する発光部を特定する。なお、このとき、発光部22,23,24の全てに対応する発光部を特定する必要はなく、発光部22,23,24の内の少なくとも2個の発光部に対応する発光部を特定すればよい。発光部22,23,24の内の少なくとも2個の発光部に対応する発光部を特定すれば、映像表示装置2上の少なくとも3個の発光部に対応する発光部を得ることができ、本発明を実行することは可能である。   Next, the position detection processing unit 14 compares the blinking bit string of each light emitting point with the light emission method of the light emitting unit of the video display device 2, thereby generating a plurality of light reception control units 12, 12,. It is determined whether any one of the plurality of infrared images represented by the image signal includes 3 or 4 light emitting points corresponding to the light emitting unit on the video display device 2 (S33). In the case where the video display device 2 is provided with three light emitting units, it is determined whether or not three light emitting points are included, and in the case where five or more a light emitting units are provided. , It is determined whether 3 to a light emitting points are included. If any infrared image includes three or four light emitting points corresponding to the light emitting unit on the video display device 2 (S33: YES), the position detection processing unit 14 is displayed on the video display device 2. The light emission point corresponding to each light emission part is specified (S34). In step S34, the light emitting point having the maximum luminance among the light emitting points is identified as the light emitting point corresponding to the light emitting unit 21 having a higher light emission intensity than the other light emitting units. Further, the position detection processing unit 14 determines the positional relationship of the other light emitting points with respect to the light emitting point corresponding to the light emitting unit 21 in the infrared image and the positional relationship of the other light emitting units with respect to the light emitting unit 21 on the video display device 2. By comparing, the light emission part corresponding to each of the light emission parts 22, 23, and 24 is specified. At this time, it is not necessary to specify light emitting units corresponding to all of the light emitting units 22, 23, 24, and light emitting units corresponding to at least two of the light emitting units 22, 23, 24 are specified. That's fine. If light emitting parts corresponding to at least two light emitting parts among the light emitting parts 22, 23, and 24 are specified, light emitting parts corresponding to at least three light emitting parts on the video display device 2 can be obtained. It is possible to carry out the invention.

位置検出処理部14は、次に、各発光点の点滅ビット列と、スピーカ4の発光部の発光のさせ方とを比較することにより、受光制御部12,12,…が生成した複数の画像信号が表す複数の赤外線画像の内のいずれか一つに、スピーカ4上の発光部に対応する3又は4個の発光点が含まれているか否かを判定する(S35)。何れかの赤外線画像にスピーカ4上の発光部に対応する3又は4個の発光点が含まれている場合は(S35:YES)、位置検出処理部14は、スピーカ4上の各発光部に対応する発光点を特定する(S36)。ステップS36では、位置検出処理部14は、ステップS34と同様の方法を用いて発光点を特定する。ステップS36が終了した後は、位置検出処理部14は、ステップS3のサブルーチンを終了して処理をメインへ戻す。   Next, the position detection processing unit 14 compares the blinking bit string of each light emitting point with the method of causing the light emitting unit of the speaker 4 to emit light, thereby generating a plurality of image signals generated by the light receiving control units 12, 12,. It is determined whether or not any one of the plurality of infrared images represented by includes three or four light emitting points corresponding to the light emitting unit on the speaker 4 (S35). If any infrared image includes three or four light emitting points corresponding to the light emitting part on the speaker 4 (S35: YES), the position detection processing part 14 is connected to each light emitting part on the speaker 4. The corresponding light emission point is specified (S36). In step S36, the position detection processing unit 14 specifies a light emitting point using the same method as in step S34. After step S36 ends, the position detection processing unit 14 ends the subroutine of step S3 and returns the process to the main.

ステップS33で、いずれの赤外線画像においても映像表示装置2上の発光部に対応する発光点が2個以下若しくは5個以上である場合(S33:NO)、又はステップS35で、いずれの赤外線画像においてもスピーカ4上の発光部に対応する発光点が2個以下若しくは5個以上である場合は(S35:NO)、位置検出処理部14は、ステップS3の処理を開始してから所定時間が経過したか否かを判定する(S37)。まだ所定時間が経過していない場合は(S37:NO)、位置検出処理部14は、処理をステップS31へ戻し、赤外線の受光からステップS3の処理をやり直す。ステップS3の処理を開始してから所定時間が経過している場合は(S37:YES)、位置検出処理部14は、スピーカ位置検出の処理を終了する。この際、送受信部15は、エラー信号をAVプレーヤ3へ送信し、AVプレーヤ3は、スピーカ位置の検出ができなかったことを示すエラー表示を映像表示装置2に表示させる処理を行う。   In step S33, in any infrared image, the number of light emitting points corresponding to the light emitting unit on the video display device 2 is 2 or less or 5 or more (S33: NO), or in any infrared image in step S35. In the case where the number of light emitting points corresponding to the light emitting unit on the speaker 4 is two or less or five or more (S35: NO), the position detection processing unit 14 has elapsed a predetermined time from the start of the process of step S3. It is determined whether or not (S37). If the predetermined time has not yet elapsed (S37: NO), the position detection processing unit 14 returns the process to step S31, and repeats the process of step S3 from the reception of infrared rays. If the predetermined time has elapsed since the start of the process of step S3 (S37: YES), the position detection processing unit 14 ends the speaker position detection process. At this time, the transmission / reception unit 15 transmits an error signal to the AV player 3, and the AV player 3 performs processing for causing the video display device 2 to display an error display indicating that the speaker position cannot be detected.

ステップS3の処理により、映像表示装置2からの赤外線とスピーカ4からの赤外線とが同一の受光部11に入射する場合でも、互いに異なる受光部11に入射する場合でも、同様に各発光部に対応する発光点を特定することが可能である。なお、映像表示装置2又はスピーカ4が3個の発光部又は5個以上の発光部を備えた形態である場合は、ステップS33及びS35では、発光部の数に応じた処理を行う。   Whether the infrared rays from the video display device 2 and the infrared rays from the speaker 4 are incident on the same light receiving unit 11 or different light receiving units 11 by the processing in step S3, the light emitting units are similarly handled. It is possible to specify the light emitting point to be performed. Note that when the video display device 2 or the speaker 4 has three light emitting units or five or more light emitting units, processing according to the number of light emitting units is performed in steps S33 and S35.

ステップS3が終了した後は、位置検出処理部14は、リモコン1に対する映像表示装置2の相対位置を計算する処理を行う(S4)。ステップS3で、映像表示装置3上の発光部に対応する3個の発光点を特定したとし、特定した各発光点の赤外線画像上での位置をQ1 ,Q2 ,Q3 とする。また3次元空間上のベクトルq1 ,q2 ,q3 を、Q1 ,Q2 ,Q3 夫々の単位ベクトルとする。更に、Q1 ,Q2 ,Q3 に対応する3次元空間上の各点をP1 ,P2 ,P3 とする。図9は、Q、q、Pの関係を示す模式図である。図中のGは、赤外線画像に対応する透視カメラモデルの写像平面である。P1 ,P2 ,P3 は、映像表示装置2上の発光部の位置となり、P1 ,P2 ,P3 を求めることにより、映像表示装置2上の発光部のリモコン1に対する相対位置が求まり、更には、リモコン1に対する映像表示装置2の相対位置を求めることができる。Q1 ,Q2 ,Q3 がいずれの発光部に対応するかはステップS3で特定されているので、P1 ,P2 ,P3 がいずれの発光部の位置を示しているかは明らかとなっている。図9の例では、P1 ,P2 ,P3 は、夫々発光部21,22,24の位置である。αi (i=1,2,3)をスカラー量とすれば、Pi は下記の(3)式で表すことができる
i =αii …(3)
After step S3 is completed, the position detection processing unit 14 performs a process of calculating the relative position of the video display device 2 with respect to the remote controller 1 (S4). In step S3, three light emitting points corresponding to the light emitting units on the video display device 3 are identified, and the positions of the identified light emitting points on the infrared image are Q 1 , Q 2 , and Q 3 . Further, vectors q 1 , q 2 , and q 3 on the three-dimensional space are set as unit vectors of Q 1 , Q 2 , and Q 3 , respectively. Further, the points on the three-dimensional space corresponding to Q 1 , Q 2 , and Q 3 are P 1 , P 2 , and P 3 . FIG. 9 is a schematic diagram showing the relationship between Q, q, and P. G in the figure is a mapping plane of the perspective camera model corresponding to the infrared image. P 1 , P 2 , and P 3 are the positions of the light emitting units on the video display device 2, and the relative positions of the light emitting units on the video display device 2 with respect to the remote controller 1 are obtained by obtaining P 1 , P 2 , and P 3. Further, the relative position of the video display device 2 with respect to the remote controller 1 can be obtained. Since which light emitting part Q 1 , Q 2 , Q 3 corresponds to is identified in step S 3 , it is clear which light emitting part positions P 1 , P 2 , P 3 indicate. ing. In the example of FIG. 9, P 1 , P 2 , and P 3 are the positions of the light emitting units 21, 22, and 24, respectively. If α i (i = 1, 2, 3) is a scalar quantity, P i can be expressed by the following equation (3): P i = α i q i (3)

前述したように、映像表示装置2上の発光部間の距離は既知であり、記憶部17に記憶されているので、P1 ,P2 ,P3 の互いの距離も明らかである。Pm とPn との距離をdmnとすると、dmnは下記の(4)式で定義される。 As described above, since the distance between the light emitting units on the video display device 2 is known and stored in the storage unit 17, the distances between P 1 , P 2 and P 3 are also clear. When the distance between P m and P n and d mn, d mn is defined by the following formula (4).

Figure 0005430242
Figure 0005430242

(4)式に(3)式を代入すると、下記の(5)式を求めることができる。   By substituting the expression (3) into the expression (4), the following expression (5) can be obtained.

Figure 0005430242
Figure 0005430242

演算子・は、内積を表し、qi ・qi =1である。qi はQi の座標及び既知の焦点距離から求めることができる。例えば、3次元空間上のxy平面を写像平面と平行な平面とし、写像平面に直交する方向をz軸の方向とし、Qi の赤外線画像上での座標を(xi ,yi )とし、焦点距離をDとすると、3次元空間上でのQi の座標は(xi ,yi ,D)となり、この座標からqi が得られる。得られたqi からqm ・qn を計算することができる。P1 ,P2 ,P3 を求めるためには、α1 ,α2 ,α3 を求めればよい。関数f,g,hとを下記の(6)式,(7)式,(8)式のように定義する。 The operator · represents an inner product, and q i · q i = 1. q i can be obtained from the coordinates of Q i and a known focal length. For example, the xy plane in the three-dimensional space is a plane parallel to the mapping plane, the direction orthogonal to the mapping plane is the z-axis direction, and the coordinates on the infrared image of Q i are (x i , y i ), If the focal length is D, the coordinates of Q i in the three-dimensional space are (x i , y i , D), and q i is obtained from these coordinates. Q m · q n can be calculated from the obtained q i . In order to obtain P 1 , P 2 , and P 3 , α 1 , α 2 , and α 3 may be obtained. The functions f, g, and h are defined as the following expressions (6), (7), and (8).

Figure 0005430242
Figure 0005430242

ここで、(Δ1 ,Δ2 ,Δ3 )を摂動として、理想的にf(α1 +Δ1 ,α2 +Δ2 ,α3 +Δ3 )=0を満たすような(Δ1 ,Δ2 ,Δ3 )を計算することとする。関数fは、下記の(9)式のようにテイラー展開することができる。 Here, (Δ 1, Δ 2, Δ 3) as a perturbation of, ideally f (α 1 + Δ 1, α 2 + Δ 2, α 3 + Δ 3) that satisfies = 0 (Δ 1, Δ 2 , Let Δ 3 ) be calculated. The function f can be Taylor-expanded as in the following equation (9).

Figure 0005430242
Figure 0005430242

(9)式において2次以上の高次項を無視すれば、(Δ1 ,Δ2 ,Δ3 )に関する方程式を得ることができる。関数g,hについても同様にして方程式を求めることにより、下記の(10)式に示す連立方程式を得ることができる。 If the second and higher order terms are ignored in the equation (9), an equation relating to (Δ 1 , Δ 2 , Δ 3 ) can be obtained. By obtaining equations for the functions g and h in the same manner, simultaneous equations shown in the following equation (10) can be obtained.

Figure 0005430242
Figure 0005430242

(10)式における右辺第2項の正方行列はヤコビ行列である。このヤコビ行列をJ(α1 ,α2 ,α3 )とすると、(10)式は下記の(11)式のように変形することができる。 The square matrix of the second term on the right side in equation (10) is a Jacobian matrix. When this Jacobian matrix is J (α 1 , α 2 , α 3 ), the equation (10) can be transformed into the following equation (11).

Figure 0005430242
Figure 0005430242

(11)式で得られる(Δ1 ,Δ2 ,Δ3 )を(α1 ,α2 ,α3 )の暫定値に加算することを繰り返し、収束した(α1 ,α2 ,α3 )を得ることを考える。kを計算の繰り返し回数とし、k番目の(α1 ,α2 ,α3 )を(α1 k,α2 k,α3 k)とすると、下記の(12)式のような漸化式が成り立つ。 11 is obtained by the equation (Δ 1, Δ 2, Δ 3) to (α 1, α 2, α 3) repeatedly adding the provisional value of converged (α 1, α 2, α 3) Think of getting. If k is the number of repetitions of calculation and the k-th (α 1 , α 2 , α 3 ) is (α 1 k , α 2 k , α 3 k ), a recurrence formula such as the following equation (12) Holds.

Figure 0005430242
Figure 0005430242

位置検出処理部14は、ステップS4で、Qi の座標からqi を計算し、(12)式の漸化式に従った計算を(α1 k+1,α2 k+1,α3 k+1)が収束するまで繰り返し、収束した(α1 k+1,α2 k+1,α3 k+1)を最終的な(α1 ,α2 ,α3 )とし、得られた(α1 ,α2 ,α3 )を(3)式に代入することにより、P1 ,P2 ,P3 を計算する。P1 ,P2 ,P3 を得ることにより、リモコン1に対する映像表示装置2の相対位置が得られる。 In step S4, the position detection processing unit 14 calculates q i from the coordinates of Q i , and calculates (α 1 k + 1 , α 2 k + 1 , α 3 ) according to the recurrence formula of the expression (12). k + 1 ) until it converges, and the converged (α 1 k + 1 , α 2 k + 1 , α 3 k + 1 ) is taken as the final (α 1 , α 2 , α 3 ) By substituting (α 1 , α 2 , α 3 ) into the equation (3), P 1 , P 2 , and P 3 are calculated. By obtaining P 1 , P 2 , and P 3 , the relative position of the video display device 2 with respect to the remote controller 1 can be obtained.

ステップS3で映像表示装置3上の発光部に対応する4個以上の発光点を特定した場合は、位置検出処理部14は、ステップS4で、4個以上の発光点から映像表示装置2の相対位置を計算する処理を行う。図10は、4個以上の発光点から映像表示装置2の相対位置を計算するステップS4のサブルーチンの処理手順を示すフローチャートである。位置検出処理部14は、特定した発光点から3個の発光点を選択し(S41)、選択した3個の発光点について、前述した方法で相対位置を計算する(S42)。位置検出処理部14は、次に、4個以上の発光点から3個の発光点を選択できる組み合わせの内、未だ相対位置を計算していない組み合わせがあるか否かを判定する(S43)。3個の発光点を選択できる組み合わせは、4個以上の発光点から3個の発光点を選択する全ての組み合わせとするか、特定の発光点を必ず含む組み合わせとするか、又は組み合わせの数に上限を設ける等、任意に設定すればよい。未だ相対位置を計算していない組み合わせがある場合は(S43:YES)、位置検出処理部14は、処理をステップS41へ戻し、まだ相対位置を計算していない組み合わせで3個の発光点を選択する。未だ相対位置を計算していない組み合わせがない場合は(S43:NO)、位置検出処理部14は、各発光点について2回以上計算した相対位置を平均する(S44)。このようにして、映像表示装置2の相対位置の検出精度を高めることができる。ステップS44が終了した後は、位置検出処理部14は、ステップS4のサブルーチンを終了して処理をメインへ戻す。   When four or more light emitting points corresponding to the light emitting units on the video display device 3 are specified in step S3, the position detection processing unit 14 determines the relative position of the video display device 2 from the four or more light emitting points in step S4. Perform processing to calculate the position. FIG. 10 is a flowchart showing the processing procedure of the subroutine of step S4 for calculating the relative position of the video display device 2 from four or more light emitting points. The position detection processing unit 14 selects three light emitting points from the identified light emitting points (S41), and calculates the relative positions of the selected three light emitting points by the method described above (S42). Next, the position detection processing unit 14 determines whether there is a combination that has not yet calculated a relative position among combinations that can select three light emitting points from four or more light emitting points (S43). The combinations that can select three light emitting points are all combinations that select three light emitting points from four or more light emitting points, a combination that always includes a specific light emitting point, or the number of combinations. What is necessary is just to set arbitrarily, such as providing an upper limit. If there is a combination for which the relative position has not yet been calculated (S43: YES), the position detection processing unit 14 returns the process to step S41, and selects three light emitting points with a combination for which the relative position has not yet been calculated. To do. When there is no combination for which the relative position has not yet been calculated (S43: NO), the position detection processing unit 14 averages the relative positions calculated twice or more for each light emitting point (S44). In this way, the relative position detection accuracy of the video display device 2 can be increased. After step S44 ends, the position detection processing unit 14 ends the subroutine of step S4 and returns the process to the main.

ステップS4が終了した後は、位置検出処理部14は、ステップS3で特定したスピーカ4上の発光部に対応する発光点の座標に基づき、ステップS4と同様の方法で、リモコン1に対するスピーカ4の相対位置を計算する(S5)。リモコン1の受光部11,11,…の内、映像表示装置2からの赤外線とスピーカ4からの赤外線とが互いに異なる受光部11に入射した場合、ステップS4で計算した映像表紙装置2の相対位置とステップS5で計算したスピーカ4の相対位置とは、夫々異なる受光部11に入射した赤外線から計算したものであるので、座標系が互いに異なる。ステップS5が終了した後、位置検出処理部14は、映像表紙装置2の相対位置とスピーカ4の相対位置との座標径を同一にするための座標変換を行う(S6)。ここでは、スピーカ4の相対位置の座標を、映像表紙装置2の相対位置と同じ座標系上の座標へ変換するとする。座標変換前のスピーカ4上の発光部の座標をPi sp (i=1,2,…)とし、座標変換後のスピーカ4上の発光部の座標をPi sp ′とすると、Pi sp ′は下記の(13)式で計算できる。
i sp ′=RPi sp +T (i=1,2,…) …(13)
After step S4 is completed, the position detection processing unit 14 uses the coordinates of the light emitting point corresponding to the light emitting unit on the speaker 4 specified in step S3, in the same manner as in step S4, to detect the position of the speaker 4 relative to the remote controller 1. The relative position is calculated (S5). When the infrared rays from the image display device 2 and the infrared rays from the speaker 4 are incident on different light receiving portions 11 among the light receiving portions 11, 11,... Of the remote controller 1, the relative positions of the image cover device 2 calculated in step S4. Since the relative position of the speaker 4 calculated in step S5 is calculated from infrared rays incident on different light receiving portions 11, the coordinate systems are different from each other. After step S5 is completed, the position detection processing unit 14 performs coordinate conversion so that the coordinate diameters of the relative position of the video cover device 2 and the relative position of the speaker 4 are the same (S6). Here, it is assumed that the coordinates of the relative position of the speaker 4 are converted into coordinates on the same coordinate system as the relative position of the video cover device 2. Coordinates P i sp of the light emitting portion of the speaker 4 before coordinate transformation (i = 1,2, ...) and to, when the light emitting portion of the coordinates on the speaker 4 after coordinate transformation and P i sp ', P i sp 'Can be calculated by the following equation (13).
P i sp ′ = RP i sp + T (i = 1, 2,...) (13)

(13)式において、Rは3次元の回転行列であり、下記の(14)式で表される。またTは並進行列であり、下記の(15)式で表される。   In the equation (13), R is a three-dimensional rotation matrix and is represented by the following equation (14). T is a parallel progression and is represented by the following equation (15).

Figure 0005430242
Figure 0005430242

Figure 0005430242
Figure 0005430242

θx ,θy ,θz は夫々3次元空間のx軸周り、y軸周り、z軸周りの回転角であり、Tx ,Ty ,Tz は夫々3次元空間のx軸方向、y軸方向、z軸方向の並進の大きさである。各パラメータは、スピーカ4からの赤外線が入射する受光部11を、映像表示装置2からの赤外線が入射する受光部11の位置にまで移動させるためのパラメータであり、各受光部11の配置関係によって予め定まっている。映像表示装置2からの赤外線が入射する受光部11とスピーカ4からの赤外線が入射する受光部11とが受光部11,11,…の内のいずれであるかの組み合わせの夫々について、記憶部17は回転行列R及び並進行列Tを記憶している。ステップS6では、位置検出処理部14は、映像表示装置2からの赤外線が入射した受光部11とスピーカ4からの赤外線が入射した受光部11とを特定し、特定した受光部に係る回転行列R及び並進行列Tを記憶部17から読み出し、(13)式に従って、座標変換後のスピーカ4上の発光部の座標を計算する。 θ x , θ y , and θ z are rotation angles around the x-axis, y-axis, and z-axis in the three-dimensional space, respectively, and T x , T y , and T z are the x-axis directions in the three-dimensional space, y It is the magnitude of translation in the axial direction and the z-axis direction. Each parameter is a parameter for moving the light receiving unit 11 on which the infrared rays from the speaker 4 are incident to the position of the light receiving unit 11 on which the infrared rays from the video display device 2 are incident. It is determined in advance. For each combination of the light receiving unit 11 to which the infrared light from the video display device 2 is incident and the light receiving unit 11 to which the infrared light from the speaker 4 is incident is one of the light receiving units 11, 11,. Stores a rotation matrix R and a translation sequence T. In step S <b> 6, the position detection processing unit 14 identifies the light receiving unit 11 to which the infrared light from the video display device 2 is incident and the light receiving unit 11 to which the infrared light from the speaker 4 is incident, and the rotation matrix R related to the identified light receiving unit. The parallel progression T is read from the storage unit 17, and the coordinates of the light emitting unit on the speaker 4 after coordinate conversion are calculated according to the equation (13).

ステップS6の処理により、リモコン1に対する映像表示装置2及びスピーカ4の相対位置が同一の座標系上で得られる。なお、映像表示装置2からの赤外線とスピーカ4からの赤外線とが同一の受光部11に入射している場合は、位置検出処理部14は、ステップS6の処理を省略してもよい。   By the process of step S6, the relative positions of the video display device 2 and the speaker 4 with respect to the remote controller 1 are obtained on the same coordinate system. When the infrared light from the video display device 2 and the infrared light from the speaker 4 are incident on the same light receiving unit 11, the position detection processing unit 14 may omit the process of step S6.

位置検出処理部14は、次に、ステップS6で得られた映像表示装置2及びスピーカ4のリモコン1に対する相対位置から、映像表示装置2とスピーカ4との相対位置を計算する処理を行う(S7)。ステップS7では、映像表示装置2に対するスピーカ4の相対位置を計算する。より具体的には、映像表示装置2上の一点を原点とする座標系上でのスピーカ4の位置を計算する。ステップS4で映像表示装置2上の発光部21,22,24の座標が得られているとし、発光部21の座標をP1 TV 、発光部22の座標をP2 TV 、発光部24の座標をP4 TV とする。更に、発光部21を原点、発光部21から発光部22へ向かう直線をx軸、発光部21から発光部24へ向かう直線をy軸、x軸及びy軸と直交する左手系の軸をz軸とする座標系を考え、この座標系にスピーカ4上の発光部の座標Pi sp ′を座標変換することとする。この座標変換に必要な回転行列をR′、並進行列をT′とする。まず、並進行列T′は、ベクトルP1 TV の逆方向のベクトルとなることは明らかであるので、並進行列T′は下記の(16)式で表される。
T′=−P1 TV …(16)
Next, the position detection processing unit 14 performs a process of calculating the relative position between the video display device 2 and the speaker 4 from the relative positions of the video display device 2 and the speaker 4 with respect to the remote controller 1 obtained in step S6 (S7). ). In step S7, the relative position of the speaker 4 with respect to the video display device 2 is calculated. More specifically, the position of the speaker 4 on the coordinate system with one point on the video display device 2 as the origin is calculated. In step S4, the coordinates of the light emitting units 21, 22, and 24 on the video display device 2 are obtained. The coordinates of the light emitting unit 21 are P 1 TV , the coordinates of the light emitting unit 22 are P 2 TV , and the coordinates of the light emitting unit 24. Is P 4 TV . Further, the light emitting unit 21 is the origin, the straight line from the light emitting unit 21 to the light emitting unit 22 is the x axis, the straight line from the light emitting unit 21 to the light emitting unit 24 is the y axis, and the left-handed axis orthogonal to the x axis and the y axis is z. Considering a coordinate system as an axis, the coordinate P i sp ′ of the light emitting unit on the speaker 4 is coordinate-transformed into this coordinate system. The rotation matrix necessary for this coordinate transformation is R ′, and the parallel progression is T ′. First, since it is clear that the translation sequence T ′ is a vector in the reverse direction of the vector P 1 TV , the translation sequence T ′ is expressed by the following equation (16).
T ′ = − P 1 TV (16)

また、発光部21から発光部22へ単位ベクトルがx軸の単位ベクトルとなり、発光部21から発光部24へ単位ベクトルがy軸の単位ベクトルとなり、P1 TV ,P2 TV ,P4 TV を含む平面の法線ベクトルがz軸の単位ベクトルになるという関係から、下記の(17)、(18)及び(19)式が成り立つ。 Further, the unit vector from the light emitting unit 21 to the light emitting unit 22 becomes an x-axis unit vector, and the unit vector from the light emitting unit 21 to the light emitting unit 24 becomes a y-axis unit vector, and P 1 TV , P 2 TV , P 4 TV The following equations (17), (18), and (19) hold from the relationship that the normal vector of the plane to be included becomes the unit vector of the z axis.

Figure 0005430242
Figure 0005430242

Figure 0005430242
Figure 0005430242

Figure 0005430242
Figure 0005430242

(17)〜(19)式を解くことにより、回転行列R′が求まる。リモコン1に対するスピーカ4の座標をPsp、映像表示装置2に対するスピーカ4の座標をSとすると、スピーカ4の座標Sは、下記の(20)式で計算することができる。
S=R′Psp+T′ …(20)
The rotation matrix R ′ is obtained by solving the equations (17) to (19). If the coordinate of the speaker 4 with respect to the remote control 1 is P sp and the coordinate of the speaker 4 with respect to the video display device 2 is S, the coordinate S of the speaker 4 can be calculated by the following equation (20).
S = R′P sp + T ′ (20)

リモコン1に対するスピーカ4の座標Pspとしては、Pi sp ′のいずれを用いてもよい。また、Pi sp ′から求めることができるスピーカ4の代表点の座標を用いてもよい。例えば、発光部41の座標P1 sp ′と発光部43の座標P3 sp ′との平均値は、スピーカ4の振動板の中心軸の座標となり、この座標を座標Pspとして用いてもよい。通常、スピーカの振動板は円形であり、円形の振動板の中心軸を中心にスピーカをどう回転させて配置したとしても、その出力特性は変化しない。従って、振動板の中心軸の座標をスピーカ4の座標として用いることにより得られるスピーカ4の相対位置は、映像・音響システムにおける音響特性を調整するために有用である。 Any of P i sp ′ may be used as the coordinates P sp of the speaker 4 with respect to the remote controller 1. Further, the coordinates of the representative point of the speaker 4 that can be obtained from P i sp ′ may be used. For example, the average value of the 'coordinate P 3 sp between the light emitting portion 43' coordinates P 1 sp emitting portion 41 becomes the coordinates of the center axis of the diaphragm of the speaker 4, it may be used the coordinates as the coordinates P sp . Usually, the diaphragm of the speaker is circular, and its output characteristics do not change no matter how the speaker is rotated about the central axis of the circular diaphragm. Therefore, the relative position of the speaker 4 obtained by using the coordinate of the central axis of the diaphragm as the coordinate of the speaker 4 is useful for adjusting the acoustic characteristics in the video / audio system.

ステップS7では、位置検出処理部14は、映像表示装置2上の発光部の座標に基づき、(16)〜(19)式を用いて並進行列T′及び回転行列R′を計算し、(20)式を用いて、映像表示装置2に対するスピーカ4の座標Sを計算する。計算した座標Sは、映像表示装置2とスピーカ4との相対位置を示す。なお、発光部21,22,23の座標が得られている場合等、座標間を結んだ直線が直交していない場合は、位置検出処理部14は、座標間を結んだ直線の方向ベクトルの演算により、互いに直交するx軸の単位ベクトル及びy軸の単位ベクトルを計算する処理を行い、計算した単位ベクトルを用いて前述のように映像表示装置2に対するスピーカ4の座標Sを計算する処理を行う。   In step S7, the position detection processing unit 14 calculates the parallel progression T ′ and the rotation matrix R ′ using the equations (16) to (19) based on the coordinates of the light emitting unit on the video display device 2, and (20 ) Is used to calculate the coordinates S of the speaker 4 with respect to the video display device 2. The calculated coordinate S indicates a relative position between the video display device 2 and the speaker 4. When the coordinates of the light emitting units 21, 22, and 23 are obtained, and when the straight line connecting the coordinates is not orthogonal, the position detection processing unit 14 determines the direction vector of the straight line connecting the coordinates. A process of calculating an x-axis unit vector and a y-axis unit vector orthogonal to each other by calculation, and a process of calculating the coordinate S of the speaker 4 with respect to the video display device 2 as described above using the calculated unit vector. Do.

ステップS7が終了した後は、位置検出処理部14は、計算したスピーカ4の座標Sを記憶し、スピーカ位置検出システムに含まれる全てのスピーカ4,4,…の相対位置を計算したか否かを判定する(S8)。まだ相対位置を計算していないスピーカ4がある場合は(S8:NO)、スピーカ位置検出システムは、処理をステップS2へ戻し、映像表示装置2とまだ相対位置を計算していない一のスピーカ4との発光部を発光させる処理を行う。具体的には、位置検出処理部14は、スピーカ位置を検出する処理を続行するための信号を送受信部15からAVプレーヤ3へ送信させ、AVプレーヤ3は信号を送受信部32で受信し、制御部31は、次のスピーカ4に発光させる処理を行う。ステップS8で全てのスピーカ4,4,…の相対位置を計算している場合は(S8:YES)、スピーカ位置検出システムは、スピーカ位置を検出する処理を終了する。   After step S7 is completed, the position detection processing unit 14 stores the calculated coordinates S of the speakers 4 and whether or not the relative positions of all the speakers 4, 4,... Included in the speaker position detection system have been calculated. Is determined (S8). If there is a speaker 4 that has not yet calculated the relative position (S8: NO), the speaker position detection system returns the process to step S2, and the one speaker 4 that has not yet calculated the relative position with the video display device 2. The process which makes the light emission part emit light is performed. Specifically, the position detection processing unit 14 transmits a signal for continuing the process of detecting the speaker position from the transmission / reception unit 15 to the AV player 3, and the AV player 3 receives the signal by the transmission / reception unit 32 and performs control. The unit 31 performs processing for causing the next speaker 4 to emit light. If the relative positions of all the speakers 4, 4,... Are calculated in step S8 (S8: YES), the speaker position detection system ends the process of detecting the speaker positions.

スピーカ位置を検出する処理が終了した後は、リモコン1は、計算したスピーカ4,4,…の相対位置をAVプレーヤ3へ送信する。AVプレーヤ3は、各スピーカ4の相対位置に基づいて各スピーカ4に出力させる音声を補正する処理、又は現在の各スピーカ4の相対位置を映像表示装置2に表示させて使用者に各スピーカ4の位置の調整を指示する処理等、各スピーカ4の位置に応じた処理を実行する。   After the processing for detecting the speaker position is completed, the remote controller 1 transmits the calculated relative positions of the speakers 4, 4,... To the AV player 3. The AV player 3 corrects the sound to be output to each speaker 4 based on the relative position of each speaker 4 or displays the current relative position of each speaker 4 on the video display device 2 to allow the user to display each speaker 4. A process according to the position of each speaker 4 is executed, such as a process for instructing the adjustment of the position of the speaker 4.

以上詳述した如く、本発明においては、映像表示装置2及びスピーカ4,4,…の夫々に少なくとも3箇所の発光部を設けておき、各発光部からの赤外線をリモコン1で受光し、受光した赤外線の発光点が分布した赤外線画像と各発光部の位置関係とから、映像表示装置2と各スピーカ4との相対位置を計算する。少なくとも3箇所に設けた発光部からの赤外線に基づいて相対位置を求めるので、3次元空間内での正確な相対位置を求めることが可能である。従って、各スピーカの高さが異なる立体音響システムにおいても、各スピーカの相対位置を正確に求めることが可能となり、優れた音響を得るためのスピーカ配置、及び各スピーカの配置に応じた適切な音響補正が可能となる。   As described above in detail, in the present invention, at least three light emitting portions are provided in each of the video display device 2 and the speakers 4, 4..., And infrared rays from each light emitting portion are received by the remote controller 1. The relative position between the video display device 2 and each speaker 4 is calculated from the infrared image in which the infrared emission points are distributed and the positional relationship between the light emitting units. Since the relative position is obtained based on the infrared rays from the light emitting units provided in at least three places, it is possible to obtain an accurate relative position in the three-dimensional space. Therefore, even in a stereophonic sound system in which the heights of the speakers are different, it is possible to accurately obtain the relative positions of the speakers, the speaker arrangement for obtaining excellent sound, and an appropriate sound according to the arrangement of the speakers. Correction is possible.

また本発明においては、発光部の点滅間隔を映像表示装置2及びスピーカ4,4,…の夫々で異ならせることによって、発光部を設けてある機器を容易に区別することができる。これにより、互いに区別することが困難である音信号を用いた従来技術に比べて、各スピーカ4の相対位置をより短時間で正確に求めることが可能となる。また本発明においては、各機器に設けられた複数の発光部の内の一の発光部で発光強度を他の発光部よりも大きくすることにより、発光部を容易に区別し、スピーカの相対位置を正確に求めることが可能となる。   In the present invention, by changing the blinking interval of the light emitting unit between the video display device 2 and the speakers 4, 4,..., It is possible to easily distinguish the device provided with the light emitting unit. As a result, the relative position of each speaker 4 can be accurately determined in a shorter time than in the prior art using sound signals that are difficult to distinguish from each other. Further, in the present invention, the light emitting part is easily distinguished by increasing the light emission intensity in one light emitting part among the plurality of light emitting parts provided in each device, and the relative position of the speaker. Can be obtained accurately.

なお、本実施の形態においては、スピーカ位置を検出するための情報処理を主にリモコン1の位置検出処理部14で行う形態を示したが、これに限るものではなく、赤外線画像を表す画像信号をリモコン1からAVプレーヤ3へ送信し、AVプレーヤ3でスピーカ位置を検出するための情報処理を実行する形態であってもよい。また、各スピーカ4の相対位置を順次計算するのではなく、スピーカ4,4,…の発光部を一斉に発光させて各スピーカ4の相対位置を計算してもよい。また赤外線画像と各発光部の位置関係とから相対位置を計算するアルゴリズムは、本実施の形態で説明したもの以外のアルゴリズムを用いても構わない。   In the present embodiment, the information processing for detecting the speaker position is mainly performed by the position detection processing unit 14 of the remote controller 1. However, the present invention is not limited to this, and an image signal representing an infrared image is shown. May be transmitted from the remote controller 1 to the AV player 3 and information processing for detecting the speaker position by the AV player 3 may be executed. Instead of calculating the relative positions of the speakers 4 sequentially, the relative positions of the speakers 4 may be calculated by causing the light emitting portions of the speakers 4, 4,. An algorithm other than the algorithm described in this embodiment may be used as an algorithm for calculating the relative position from the infrared image and the positional relationship between the light emitting units.

また本実施の形態においては、本発明における受光装置はリモコン1であるとしたが、これに限るものではなく、受光装置はその他の形態であってもよい。例えば、リモコン1以外に、AVプレーヤ3と通信を行う専用の受光装置を備えた形態であってもよい。またAVプレーヤ3又は特定のスピーカ4に受光部を設けることで受光装置とした形態であってもよい。また映像表示装置2の替わりにスクリーンを備え、スクリーンに映像を投影するプロジェクタを備え、プロジェクタに受光部を設けることで受光装置とした形態であってもよい。また複数の受光装置を用いる形態であってもよい。   In the present embodiment, the light receiving device in the present invention is the remote controller 1, but the present invention is not limited to this, and the light receiving device may have other forms. For example, in addition to the remote controller 1, a form provided with a dedicated light receiving device that communicates with the AV player 3 may be used. Alternatively, the light receiving device may be provided by providing a light receiving unit in the AV player 3 or the specific speaker 4. Further, instead of the video display device 2, a screen may be provided, a projector for projecting video on the screen may be provided, and a light receiving unit may be provided in the projector to form a light receiving device. Moreover, the form using a some light-receiving device may be sufficient.

また本実施の形態においては、本発明における基準機器は映像表示装置2であるとしたが、これに限るものではなく、本発明はAVプレーヤ3又は特定のスピーカ4を基準機器とした形態であってもよい。また本実施の形態においては、発光部は赤外線を発光する形態を示したが、これに限るものではなく、発光部は可視光を発光し、受光部は可視光を受光する形態であってもよい。またAVプレーヤ3は、映像表示装置2又は何れかのスピーカ4と一体に構成された形態であってもよい。   In the present embodiment, the reference device in the present invention is the video display device 2. However, the present invention is not limited to this, and the present invention is an embodiment in which the AV player 3 or a specific speaker 4 is used as the reference device. May be. In the present embodiment, the light emitting unit is configured to emit infrared light. However, the present invention is not limited to this, and the light emitting unit may emit visible light and the light receiving unit may receive visible light. Good. The AV player 3 may be configured to be integrated with the video display device 2 or any one of the speakers 4.

1 リモコン(受光装置)
11 受光部
14 位置検出処理部
2 映像表示装置(基準機器)
21、22、23、24 発光部
3 AVプレーヤ
31 制御部
4 スピーカ
41、42、43、44 発光部
1 Remote control (light receiving device)
DESCRIPTION OF SYMBOLS 11 Light-receiving part 14 Position detection process part 2 Video display apparatus (reference equipment)
21, 22, 23, 24 Light emitting unit 3 AV player 31 Control unit 4 Speaker 41, 42, 43, 44 Light emitting unit

Claims (6)

複数のスピーカを含む複数の機器で構成され、各機器の位置の基準となる基準機器と他のスピーカとの相対位置を検出するスピーカ位置検出システムにおいて、
前記基準機器及び各スピーカは、少なくとも3箇所に発光部を設けてあり、
該発光部からの発光を含む光を受光し、受光した光が分布した画像を生成する受光装置と、
前記基準機器及び各スピーカ上での発光部間の位置関係を記憶する手段と、
前記受光装置が生成した画像内における、前記基準機器に設けた少なくとも3箇所の発光部に対応する発光点、及び各スピーカに設けた少なくとも3箇所の発光部に対応する発光点を特定する特定手段と、
前記基準機器について特定した発光点の画像内での位置、及び前記基準機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記基準機器の相対位置を計算し、各スピーカについて特定した発光点の画像内での位置、及び各スピーカ上での発光部間の位置関係に基づいて、前記受光装置に対する各スピーカの相対位置を計算する計算手段と
算した前記受光装置に対する前記基準機器及び各スピーカの相対位置に基づいて、前記基準機器と各スピーカとの相対位置を計算する手段とを備え
前記基準機器及び複数のスピーカの内のいずれかの機器は、4箇所以上に発光部を設けてあり、
前記特定手段は、
前記受光装置が生成した画像から、前記機器に設けてある4箇所以上の発光部に対応する発光点を特定する手段を有し、
前記計算手段は、
前記特定手段で4箇所以上の発光部に対応する発光点が特定された場合に、4箇所以上の発光部に対応する発光点から、3箇所の発光部に対応する発光点を選択する手段と、
3箇所の発光部に対応する発光点を選択する組み合わせの夫々について、選択した発光点の画像内での位置、及び前記機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記機器の相対位置を計算する手段と、
前記組み合わせの夫々について計算した前記機器の相対位置を平均する手段と
を有することを特徴とするスピーカ位置検出システム。
In a speaker position detection system configured by a plurality of devices including a plurality of speakers and detecting a relative position between a reference device serving as a reference of the position of each device and other speakers,
The reference device and each speaker are provided with light emitting portions in at least three places,
A light receiving device that receives light including light emitted from the light emitting unit and generates an image in which the received light is distributed;
Means for storing the positional relationship between the light emitting units on the reference device and each speaker;
Identification means for identifying light emitting points corresponding to at least three light emitting units provided in the reference device and light emitting points corresponding to at least three light emitting units provided in each speaker in an image generated by the light receiving device. When,
Based on the position of the light emitting point specified for the reference device in the image and the positional relationship between the light emitting units on the reference device, the relative position of the reference device with respect to the light receiving device is calculated and specified for each speaker. Calculating means for calculating the relative position of each speaker with respect to the light receiving device based on the position of the light emitting point in the image and the positional relationship between the light emitting units on each speaker ;
Based on the relative position of the reference device and the speaker for the receiving apparatus calculated, and means for calculating the relative position of the reference device and the speakers,
Any one of the reference device and the plurality of speakers is provided with light emitting portions at four or more locations.
The specifying means is:
Means for identifying light emitting points corresponding to four or more light emitting units provided in the device from an image generated by the light receiving device;
The calculating means includes
Means for selecting light emitting points corresponding to three light emitting parts from light emitting points corresponding to four or more light emitting parts when light emitting points corresponding to four or more light emitting parts are specified by the specifying means; ,
For each of the combinations for selecting the light emitting points corresponding to the three light emitting units, the position of the selected light emitting point in the image and the positional relationship between the light emitting units on the device is set to the light receiving device. Means for calculating the relative position of the device;
Means for averaging the relative positions of the devices calculated for each of the combinations;
Speaker position detection system characterized Rukoto to have a.
前記受光装置は、複数方向からの光を受光できるように、複数方向に向けた複数の受光部を有しており、受光部別に画像を生成するように構成してあることを特徴とする請求項1に記載のスピーカ位置検出システム。   The light receiving device includes a plurality of light receiving units directed in a plurality of directions so as to receive light from a plurality of directions, and is configured to generate an image for each light receiving unit. Item 2. The speaker position detection system according to Item 1. 前記基準機器及び各スピーカに設けてある発光部を、機器毎に異なる方法で点滅させる手段を更に備えることを特徴とする請求項1又は2に記載のスピーカ位置検出システム。   The speaker position detection system according to claim 1, further comprising means for causing the light emitting unit provided in the reference device and each speaker to blink in a different manner for each device. 前記基準機器及び各スピーカに設けてある複数の発光部の内、いずれか一つの発光部は、他の発光部よりも発光強度を大きく構成してあることを特徴とする請求項1から3記載のスピーカ位置検出システム。 4. The light emitting unit according to any one of claims 1 to 3 , wherein one of the plurality of light emitting units provided in the reference device and each speaker has a light emission intensity greater than that of the other light emitting units. The speaker position detection system described. 前記基準機器は映像表示装置であることを特徴とする請求項1から4までのいずれか一つに記載のスピーカ位置検出システム。   The speaker position detection system according to any one of claims 1 to 4, wherein the reference device is a video display device. 複数のスピーカを含む複数の機器で構成された音響システムで、各機器の位置の基準となる基準機器と他のスピーカとの相対位置を検出する方法において、
前記基準機器及び各スピーカは、少なくとも3箇所に発光部を設けてあり、前記基準機器及び複数のスピーカの内のいずれかの機器は、4箇所以上に発光部を設けてあり、
該発光部からの発光を含む光を受光する受光装置で、受光した光が分布した画像を生成し、
生成した画像内における、前記基準機器に設けた少なくとも3箇所の発光部に対応する発光点を特定し、
特定した発光点の画像内での位置、及び前記基準機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記基準機器の相対位置を計算し、
前記受光装置で生成した画像内における、各スピーカに設けた少なくとも3箇所の発光部に対応する発光点を特定し、
特定した発光点の画像内での位置、及び各スピーカ上での発光部間の位置関係に基づいて、前記受光装置に対する各スピーカの相対位置を計算し、
前記機器に設けた4箇所以上の発光部に対応する発光点が特定された場合に、4箇所以上の発光部に対応する発光点から、3箇所の発光部に対応する発光点を選択し、
3箇所の発光部に対応する発光点を選択する組み合わせの夫々について、選択した発光点の画像内での位置、及び前記機器上での発光部間の位置関係に基づいて、前記受光装置に対する前記機器の相対位置を計算し、
前記組み合わせの夫々について計算した前記機器の相対位置を平均し、
計算した前記受光装置に対する前記基準機器及び各スピーカの相対位置に基づいて、前記基準機器と各スピーカとの相対位置を計算すること
を特徴とするスピーカ位置検出方法。
In a method of detecting a relative position between a reference device serving as a reference of the position of each device and another speaker in an acoustic system including a plurality of devices including a plurality of speakers,
The reference device and each speaker are provided with light emitting portions at at least three locations, and any one of the reference device and the plurality of speakers is provided with light emitting portions at four or more locations,
In a light receiving device that receives light including light emitted from the light emitting unit, an image in which the received light is distributed is generated,
In the generated image, identify light emitting points corresponding to at least three light emitting units provided in the reference device,
Based on the position of the identified light emitting point in the image and the positional relationship between the light emitting units on the reference device, the relative position of the reference device with respect to the light receiving device is calculated,
In the image generated by the light receiving device, identify light emitting points corresponding to at least three light emitting units provided on each speaker,
Based on the position of the identified light emitting point in the image and the positional relationship between the light emitting units on each speaker, the relative position of each speaker with respect to the light receiving device is calculated,
When the light emitting points corresponding to the four or more light emitting units provided in the device are specified, the light emitting points corresponding to the three light emitting units are selected from the light emitting points corresponding to the four or more light emitting units,
For each of the combinations for selecting the light emitting points corresponding to the three light emitting units, the position of the selected light emitting point in the image and the positional relationship between the light emitting units on the device is set to the light receiving device. Calculate the relative position of the instrument,
Average the relative positions of the devices calculated for each of the combinations,
A speaker position detection method, comprising: calculating a relative position between the reference device and each speaker based on the calculated relative position of the reference device and each speaker with respect to the light receiving device.
JP2009144523A 2009-06-17 2009-06-17 Speaker position detection system and speaker position detection method Expired - Fee Related JP5430242B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009144523A JP5430242B2 (en) 2009-06-17 2009-06-17 Speaker position detection system and speaker position detection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009144523A JP5430242B2 (en) 2009-06-17 2009-06-17 Speaker position detection system and speaker position detection method

Publications (2)

Publication Number Publication Date
JP2011004077A JP2011004077A (en) 2011-01-06
JP5430242B2 true JP5430242B2 (en) 2014-02-26

Family

ID=43561685

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009144523A Expired - Fee Related JP5430242B2 (en) 2009-06-17 2009-06-17 Speaker position detection system and speaker position detection method

Country Status (1)

Country Link
JP (1) JP5430242B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160135587A (en) * 2015-05-18 2016-11-28 삼성전자주식회사 An audio device and a method for recognizing the position of the audio device

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140099122A (en) * 2013-02-01 2014-08-11 삼성전자주식회사 Electronic device, position detecting device, system and method for setting of speakers
US9560449B2 (en) 2014-01-17 2017-01-31 Sony Corporation Distributed wireless speaker system
US9426551B2 (en) 2014-01-24 2016-08-23 Sony Corporation Distributed wireless speaker system with light show
US9402145B2 (en) 2014-01-24 2016-07-26 Sony Corporation Wireless speaker system with distributed low (bass) frequency
US9866986B2 (en) * 2014-01-24 2018-01-09 Sony Corporation Audio speaker system with virtual music performance
US9369801B2 (en) 2014-01-24 2016-06-14 Sony Corporation Wireless speaker system with noise cancelation
US9232335B2 (en) 2014-03-06 2016-01-05 Sony Corporation Networked speaker system with follow me
US9693168B1 (en) 2016-02-08 2017-06-27 Sony Corporation Ultrasonic speaker assembly for audio spatial effect
US9826332B2 (en) 2016-02-09 2017-11-21 Sony Corporation Centralized wireless speaker system
US9826330B2 (en) 2016-03-14 2017-11-21 Sony Corporation Gimbal-mounted linear ultrasonic speaker assembly
US9693169B1 (en) 2016-03-16 2017-06-27 Sony Corporation Ultrasonic speaker assembly with ultrasonic room mapping
US9794724B1 (en) 2016-07-20 2017-10-17 Sony Corporation Ultrasonic speaker assembly using variable carrier frequency to establish third dimension sound locating
US9924286B1 (en) 2016-10-20 2018-03-20 Sony Corporation Networked speaker system with LED-based wireless communication and personal identifier
US10075791B2 (en) 2016-10-20 2018-09-11 Sony Corporation Networked speaker system with LED-based wireless communication and room mapping
US9854362B1 (en) 2016-10-20 2017-12-26 Sony Corporation Networked speaker system with LED-based wireless communication and object detection
KR102533698B1 (en) 2016-12-13 2023-05-18 삼성전자주식회사 Electronic apparatus and audio output apparatus consisting audio output system, and control method thereof
CN110419229B (en) 2017-03-23 2021-12-07 索尼公司 Speaker device and audio data reproduction system
US10623859B1 (en) 2018-10-23 2020-04-14 Sony Corporation Networked speaker system with combined power over Ethernet and audio delivery
CN114205716B (en) * 2020-09-18 2023-03-24 华为技术有限公司 Method, system, electronic device and storage medium for determining sound channel role of sound box

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH085719A (en) * 1994-06-16 1996-01-12 Suzuki Motor Corp Device for detecting position of a plurality of traveling objects
US6741273B1 (en) * 1999-08-04 2004-05-25 Mitsubishi Electric Research Laboratories Inc Video camera controlled surround sound
JP2001203924A (en) * 2000-01-20 2001-07-27 Sony Corp Circumference camera
JP2003254716A (en) * 2002-03-04 2003-09-10 Sony Corp Instrument and method for measuring three-dimensional position and posture, storage medium, and computer program
JP2004061334A (en) * 2002-07-30 2004-02-26 Olympus Corp Confocal scanning microscope, height measuring method, program, and storage medium
JP2007060253A (en) * 2005-08-24 2007-03-08 Sharp Corp Determination system of speaker arrangement

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160135587A (en) * 2015-05-18 2016-11-28 삼성전자주식회사 An audio device and a method for recognizing the position of the audio device
KR102260947B1 (en) 2015-05-18 2021-06-04 삼성전자주식회사 An audio device and a method for recognizing the position of the audio device

Also Published As

Publication number Publication date
JP2011004077A (en) 2011-01-06

Similar Documents

Publication Publication Date Title
JP5430242B2 (en) Speaker position detection system and speaker position detection method
JP6455686B2 (en) Distributed wireless speaker system
US10075791B2 (en) Networked speaker system with LED-based wireless communication and room mapping
US9854362B1 (en) Networked speaker system with LED-based wireless communication and object detection
US11812235B2 (en) Distributed audio capture and mixing controlling
US9560449B2 (en) Distributed wireless speaker system
US9288597B2 (en) Distributed wireless speaker system with automatic configuration determination when new speakers are added
EP3391671A1 (en) Apparatus and method for detecting loudspeaker connection or positioning errors during calibration of a multi channel audio system
TWI596954B (en) System, audio output device, and method for automatically modifying firing direction of upward firing speaker
CN110036655A (en) HRTF measurement method, HRTF measuring device and program
EP1651007A2 (en) Multichannel sound reproduction apparatus and multichannel sound adjustment method
US9826332B2 (en) Centralized wireless speaker system
US20170238114A1 (en) Wireless speaker system
US8311400B2 (en) Content reproduction apparatus and content reproduction method
JP2007060253A (en) Determination system of speaker arrangement
US9924286B1 (en) Networked speaker system with LED-based wireless communication and personal identifier
US20170123037A1 (en) Method for calculating angular position of peripheral device with respect to electronic apparatus, and peripheral device with function of the same
US10701508B2 (en) Information processing apparatus, information processing method, and program
JP2006148880A (en) Multichannel sound reproduction apparatus, and multichannel sound adjustment method
JP2011188248A (en) Audio amplifier
US10623859B1 (en) Networked speaker system with combined power over Ethernet and audio delivery
US11190895B2 (en) Signal processing apparatus, signal processing system, signal processing method, and recording medium for characteristics in sound localization processing preferred by listener
CN112119646B (en) Information processing apparatus, information processing method, and computer-readable storage medium
WO2023013154A1 (en) Acoustic processing device, acoustic processing method, acoustic processing program and acoustic processing system
US11277706B2 (en) Angular sensing for optimizing speaker listening experience

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110824

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130312

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131203

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5430242

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees