JP2010045604A - Receiving device, receiving method, program, and transmitting and receiving system - Google Patents

Receiving device, receiving method, program, and transmitting and receiving system Download PDF

Info

Publication number
JP2010045604A
JP2010045604A JP2008208343A JP2008208343A JP2010045604A JP 2010045604 A JP2010045604 A JP 2010045604A JP 2008208343 A JP2008208343 A JP 2008208343A JP 2008208343 A JP2008208343 A JP 2008208343A JP 2010045604 A JP2010045604 A JP 2010045604A
Authority
JP
Japan
Prior art keywords
transmitting
transmission
image sensor
image
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008208343A
Other languages
Japanese (ja)
Inventor
孔司 ▲桜▼田
Koji Sakurada
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2008208343A priority Critical patent/JP2010045604A/en
Publication of JP2010045604A publication Critical patent/JP2010045604A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To materialize a services function based on positional information of a user. <P>SOLUTION: A receiving device 100 for detecting the positional information between a transmitting device which transmits an electromagnetic wave signal and the receiving device includes: an image sensor 104 for imaging an image containing a transmitting element of electromagnetic waves transmitted from a transmitting device 200; a specifying part for specifying a position of the transmitting element of the transmitting device 200 from the image imaged by the image sensor 104; a detecting part 108 for detecting an existing direction of the transmitting device based on the position of the transmitting element of the transmitting device predetermined by the specifying part; and a transmitting part for transmitting information indicating the existing direction of the transmitting device detected by the detecting part 108 to an external instrument connected to the receiving device 100. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、受信装置、受信方法、プログラムおよび送受信システムに関し、特に、電磁波信号を発信する送信装置の位置を検出可能な受信装置、受信方法、プログラムおよび送受信システムに関する。   The present invention relates to a receiving device, a receiving method, a program, and a transmission / reception system, and more particularly, to a receiving device, a receiving method, a program, and a transmitting / receiving system capable of detecting the position of a transmitting device that transmits an electromagnetic wave signal.

従来、テレビ受像機(以下、ＴＶと称する。)、セットトップボックス(以下、ＳＴＢと称する。)、空気調和機（以下、エアコンと称する。）、無線操縦式の玩具、証明器具などを操作する手段として、リモートコントローラ（以下、リモコンと称する。）が挙げられる。リモコンの一例として、例えば、特許文献１に開示されているリモコンが例示できる。特許文献１に開示されているリモコンには、操作用のボタンやタッチパネルが設けられ、これらを手で操作することにより、当該操作に対応して赤外線が送信される。リモコンの赤外線を受信する受信装置は、当該赤外線を受信することにより、操作内容に対応した処理を実行する。   Conventionally, a television receiver (hereinafter referred to as a TV), a set top box (hereinafter referred to as an STB), an air conditioner (hereinafter referred to as an air conditioner), a radio-operated toy, a verification instrument, and the like are operated. As a means, a remote controller (hereinafter referred to as a remote controller) can be cited. As an example of the remote controller, for example, the remote controller disclosed in Patent Document 1 can be exemplified. The remote control disclosed in Patent Document 1 is provided with operation buttons and a touch panel, and infrared rays are transmitted corresponding to the operation by operating these buttons by hand. A receiving device that receives infrared rays from the remote controller executes processing corresponding to the operation content by receiving the infrared rays.

特開２００６−２２２５０４号公報JP 2006-222504 A 特開２００１−１９７５７７号公報JP 2001-197577 A

しかし、従来のリモコンは、ユーザがコマンドを受信装置に伝達するだけの機器であり、ユーザ自身の位置情報等の属性情報を伝達する機能は有していない。そのため、ユーザの正確な位置情報に基づいて、ＴＶ画面の向きや画像の大きさを変えたり、エアコンの送風の向きや強度を変えたりといったサービスを実現することができないという問題があった。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、ユーザの位置情報に基づいたサービス機能を実現することが可能な、新規かつ改良された受信装置、受信方法、プログラムおよび送受信システムを提供することにある。 However, the conventional remote controller is a device in which the user only transmits a command to the receiving device, and does not have a function of transmitting attribute information such as the user's own position information. For this reason, there has been a problem that services such as changing the direction of the TV screen and the size of the image and changing the direction and intensity of the air-conditioning of the air conditioner cannot be realized based on the accurate position information of the user.
Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to provide a new and improved receiving apparatus capable of realizing a service function based on user location information. And a receiving method, a program, and a transmission / reception system.

上記課題を解決するために、本発明のある観点によれば、電磁波信号を発信する送信装置と受信装置との位置関係を検出する受信装置が提供される。   In order to solve the above-described problems, according to an aspect of the present invention, a receiving device that detects a positional relationship between a transmitting device that transmits an electromagnetic wave signal and a receiving device is provided.

上記受信装置は、送信装置から発信される電磁波の発信素子を含む画像を撮像するイメージセンサと、イメージセンサにより撮像された画像から、送信装置の発信素子の位置を特定する特定部と、特定部により特定された送信装置の発信素子の位置に基づいて、送信装置の存在方向を検出する検出部と、検出部により検出された送信装置の存在方向を示す情報を受信装置に接続された外部機器に送信する送信部と、を備える。   The receiving device includes an image sensor that captures an image including an electromagnetic wave transmitting element transmitted from the transmitting device, a specifying unit that specifies a position of the transmitting element of the transmitting device from the image captured by the image sensor, and a specifying unit. A detection unit that detects the direction of presence of the transmission device based on the position of the transmitting element specified by the transmitter, and an external device connected to the reception device that indicates the direction of presence of the transmission device detected by the detection unit And a transmission unit for transmitting to.

また、イメージセンサは、送信装置から発信される２の電磁波の発信素子を含む画像を撮像し、特定部は、イメージセンサにより撮像された画像から、送信装置の２の発信素子の位置を特定し、検出部は、特定部により特定された２の発信素子の位置に基づいて、イメージセンサから送信装置までの距離を検出し、送信部は、検出部により検出されたイメージセンサから送信装置までの距離を示す情報を外部機器に送信してもよい。   The image sensor captures an image including two electromagnetic wave transmitting elements transmitted from the transmitting device, and the specifying unit specifies the position of the two transmitting elements of the transmitting device from the image captured by the image sensor. The detection unit detects the distance from the image sensor to the transmission device based on the position of the two transmission elements specified by the specification unit, and the transmission unit detects the distance from the image sensor detected by the detection unit to the transmission device. Information indicating the distance may be transmitted to an external device.

かかる構成によれば、受信装置は、送信装置から発信される電磁波の発信素子を含む画像を撮像し、当該撮像された画像から送信装置の発信素子の位置を特定する。そして、特定された送信装置の発信素子の位置に基づいて、送信装置の存在方向を検出し、検出された送信装置の存在方向を示す情報を受信装置に接続された外部機器に送信する。   According to this configuration, the receiving device captures an image including an electromagnetic wave transmitting element transmitted from the transmitting device, and specifies the position of the transmitting element of the transmitting device from the captured image. Then, based on the position of the transmission element of the specified transmission device, the direction of presence of the transmission device is detected, and information indicating the detected direction of the transmission device is transmitted to an external device connected to the reception device.

また、送信装置から２つの電磁波の発信素子が発信されている場合には、当該２つの電磁波の発信素子を含む画像を撮像する。そして、当該撮像された画像から２つの発信素子の位置を特定し、特定された２つの発信素子の位置に基づいて、イメージセンサから送信装置までの距離を検出する。その後、位置検出部により検出された送信装置までの距離を示す情報を受信装置に接続された外部機器に送信する。   When two electromagnetic wave transmitting elements are transmitted from the transmission device, an image including the two electromagnetic wave transmitting elements is captured. Then, the positions of the two transmitting elements are specified from the captured image, and the distance from the image sensor to the transmitting device is detected based on the specified positions of the two transmitting elements. Thereafter, information indicating the distance to the transmission device detected by the position detection unit is transmitted to an external device connected to the reception device.

これにより、送信装置の位置を特定することができるため、ユーザの位置に最適化されたカメラ制御等を行うことが可能となる。その結果、ユーザの正確な位置情報に基づいたサービス機能を実現することができる。   As a result, the position of the transmission device can be specified, so that camera control optimized for the user's position can be performed. As a result, a service function based on accurate position information of the user can be realized.

また、検出部は、特定部に特定された発信素子の位置およびイメージセンサのパン角度、チルト角度、ズームパラメータに基づいて送信装置の存在方向を検出してもよい。   The detection unit may detect the direction in which the transmission device exists based on the position of the transmitting element specified by the specifying unit, the pan angle, tilt angle, and zoom parameter of the image sensor.

また、特定部は、イメージセンサにより撮像された、少なくとも２以上の画像を比較して、送信装置の発信素子の位置を特定してもよい。   The identifying unit may identify the position of the transmitting element of the transmitting device by comparing at least two or more images captured by the image sensor.

また、検出部により、送信装置の発信素子の位置に基づいて送信装置の存在方向が検出された後に、イメージセンサは、検出部により検出された送信装置の存在方向の画像を高精細に撮像し、特定部は、高精細に撮像された画像に含まれる送信装置の発信素子の位置を特定し、検出部は、特定部により特定された送信装置の発信素子の位置に基づいて、イメージセンサから送信装置までの距離を算出してもよい。   In addition, after the detection unit detects the direction of presence of the transmission device based on the position of the transmission element of the transmission device, the image sensor captures the image of the direction of presence of the transmission device detected by the detection unit with high definition. The specifying unit specifies the position of the transmitting element of the transmitting device included in the image captured with high definition, and the detecting unit detects from the image sensor based on the position of the transmitting element of the transmitting device specified by the specifying unit. You may calculate the distance to a transmitter.

また、ユーザ操作に応じてリモコンから発信される少なくとも１の電磁波信号を受信する電磁波センサを備え、検出部は、電磁波センサにより特定の電磁波信号が受信された場合に、特定部がイメージセンサにより撮像された画像から特定された送信装置の発信素子の位置に基づいて、送信装置の存在方向およびイメージセンサから送信装置までの距離を検出してもよい。   In addition, an electromagnetic wave sensor that receives at least one electromagnetic wave signal transmitted from the remote controller in response to a user operation is provided, and the detection unit captures the specific part by the image sensor when the specific electromagnetic wave signal is received by the electromagnetic wave sensor. On the basis of the position of the transmitting element of the transmitting device specified from the obtained image, the direction in which the transmitting device exists and the distance from the image sensor to the transmitting device may be detected.

また、上記課題を解決するために、本発明の別の観点によれば、電磁波信号を発信する送信装置と受信装置との位置関係を検出する受信装置において実行される受信方法であって、送信装置から発信される電磁波の発信素子を含む画像を撮像するステップと、撮像された画像から、送信装置の発信素子の位置を特定するステップと、特定された送信装置の発信素子の位置に基づいて、送信装置の存在方向を検出するステップと、検出部により検出された送信装置の存在方向を示す情報を受信装置に接続された外部機器に送信するステップと、を含む受信方法が提供される。   In order to solve the above-described problem, according to another aspect of the present invention, there is provided a reception method executed in a reception device that detects a positional relationship between a transmission device that transmits an electromagnetic wave signal and a reception device, wherein transmission Based on the step of capturing an image including an electromagnetic wave transmitting element transmitted from the device, the step of specifying the position of the transmitting element of the transmitting device from the captured image, and the position of the transmitting element of the specified transmitting device There is provided a reception method including a step of detecting a direction of presence of the transmission device, and a step of transmitting information indicating the direction of presence of the transmission device detected by the detection unit to an external device connected to the reception device.

また、送信装置から発信される２の電磁波の発信素子を含む画像を撮像するステップと、イメージセンサにより撮像された画像から、送信装置の２の発信素子の位置を特定するステップと、特定された２の発信素子の位置に基づいて、イメージセンサから送信装置までの距離を検出するステップと、検出されたイメージセンサから送信装置までの距離を示す情報を外部機器に送信するステップと、を含んでもよい。   A step of capturing an image including two electromagnetic wave transmission elements transmitted from the transmission device; a step of identifying a position of the two transmission elements of the transmission device from the image captured by the image sensor; A step of detecting a distance from the image sensor to the transmission device based on a position of the two transmission elements, and a step of transmitting information indicating the detected distance from the image sensor to the transmission device to an external device. Good.

また、上記課題を解決するために、本発明の別の観点によれば、電磁波信号を発信する送信装置から発信される電磁波信号を受信する受信装置が、受信装置に接続された外部機器を制御する送受信システムが提供される。   In order to solve the above problems, according to another aspect of the present invention, a receiving device that receives an electromagnetic wave signal transmitted from a transmitting device that transmits an electromagnetic wave signal controls an external device connected to the receiving device. A transmission / reception system is provided.

上記送信装置は、ユーザ操作に応じて入力される操作信号を出力する操作信号出力部と、操作信号出力部により出力された操作信号を電磁波信号に変換して発信する電磁波信号発信部と、を備える。   The transmission device includes an operation signal output unit that outputs an operation signal input in response to a user operation, and an electromagnetic wave signal transmission unit that converts the operation signal output by the operation signal output unit into an electromagnetic wave signal and transmits the electromagnetic wave signal. Prepare.

上記受信装置は、送信装置に備わる電磁波信号発信部により発信された発信素子を含む画像を撮像するイメージセンサと、イメージセンサにより撮像された画像から、送信装置の発信素子の位置を特定する特定部と、特定部により特定された送信装置の発信素子の位置に基づいて、送信装置の存在方向を検出する検出部と、検出部により検出された送信装置の存在方向を示す情報を含む位置情報を外部機器に送信する送信部と、を備える。   The receiving device includes an image sensor that captures an image including a transmitting element transmitted by an electromagnetic wave signal transmitting unit included in the transmitting device, and a specifying unit that identifies the position of the transmitting element of the transmitting device from the image captured by the image sensor. And position information including information indicating the direction of presence of the transmission device detected by the detection unit, and a detection unit that detects the direction of presence of the transmission device based on the position of the transmission element of the transmission device specified by the specification unit A transmission unit for transmitting to an external device.

また、受信装置に備わる、イメージセンサは、送信装置から発信される２の電磁波の発信素子を含む画像を撮像し、特定部は、イメージセンサにより撮像された画像から、送信装置の２の発信素子の位置を特定し、検出部は、特定部により特定された２の発信素子の位置に基づいて、イメージセンサから送信装置までの距離を検出し、送信部は、検出部により検出されたイメージセンサから送信装置までの距離を示す情報を含む位置情報を外部機器に送信してもよい。   In addition, the image sensor included in the reception device captures an image including two electromagnetic wave transmission elements transmitted from the transmission device, and the specifying unit uses the two transmission elements of the transmission device from the image captured by the image sensor. The detecting unit detects the distance from the image sensor to the transmitting device based on the position of the two transmitting elements specified by the specifying unit, and the transmitting unit detects the image sensor detected by the detecting unit. Position information including information indicating the distance from the transmission device to the transmission device may be transmitted to the external device.

以上説明したように本発明によれば、ユーザの位置情報に基づいたサービス機能を実現することができる。   As described above, according to the present invention, it is possible to realize a service function based on user location information.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In addition, in this specification and drawing, about the component which has the substantially same function structure, duplication description is abbreviate | omitted by attaching | subjecting the same code | symbol.

また、以下に示す順序に従って当該「発明を実施するための最良の形態」を説明する。
〔１〕本実施形態の目的
〔２〕送受信システムの全体構成および各装置の概要
〔３〕送信装置の動作の詳細
〔４〕受信装置の動作の詳細
〔５〕機器制御部の動作の詳細 Further, the “best mode for carrying out the invention” will be described in the order shown below.
[1] Purpose of this embodiment [2] Overall configuration of transmission / reception system and overview of each device [3] Details of operation of transmission device [4] Details of operation of reception device [5] Details of operation of device control unit

〔１〕本実施形態の目的
まず、本実施形態の目的について説明する。従来、テレビ受像機(以下、ＴＶと称する。)、セットトップボックス(以下、ＳＴＢと称する。)、空気調和機（以下、エアコンと称する。）、無線操縦式の玩具、証明器具などを操作する手段として、リモートコントローラ（以下、リモコンと称する。）が挙げられる。従来のリモコンには、操作用のボタンやタッチパネルが設けられ、これらを手で操作することにより、当該操作に対応して赤外線が送信される。リモコンの赤外線を受信する受信装置は、当該赤外線を受信することにより、操作内容に対応した処理を実行する。 [1] Purpose of this Embodiment First, the purpose of this embodiment will be described. Conventionally, a television receiver (hereinafter referred to as a TV), a set top box (hereinafter referred to as an STB), an air conditioner (hereinafter referred to as an air conditioner), a radio-operated toy, a verification instrument, and the like are operated. As a means, a remote controller (hereinafter referred to as a remote controller) can be cited. A conventional remote control is provided with operation buttons and a touch panel, and infrared rays are transmitted corresponding to the operation by operating these buttons by hand. A receiving device that receives infrared rays from the remote controller executes processing corresponding to the operation content by receiving the infrared rays.

しかし、従来のリモコンは、ユーザがコマンドを受信装置に伝達するだけの機器であり、ユーザ自身の位置情報等の属性情報を伝達する機能は有していない。そのため、ユーザの正確な位置情報に基づいたサービス機能を実現できないという問題があった。当該サービス機能の例として、例えば、ＴＶやホームシアターシステムにおいて、ユーザの位置情報に応じて、ＴＶ画面の向き、画像の大きさ、音量のバランス等を効果的に制御したりすることなどが挙げられる。また、例えば、エアコンにおいては、ユーザの位置情報に応じて、送風の向きや強度を効果的に制御することなどが挙げられる。   However, the conventional remote controller is a device in which the user only transmits a command to the receiving device, and does not have a function of transmitting attribute information such as the user's own position information. Therefore, there has been a problem that a service function based on accurate user location information cannot be realized. As an example of the service function, for example, in a TV or home theater system, the direction of the TV screen, the size of the image, the balance of the volume, and the like can be effectively controlled according to the position information of the user. . Further, for example, in an air conditioner, it is possible to effectively control the direction and intensity of blowing according to the position information of the user.

そこで、上記のような事情を一着眼点として、本発明の実施形態にかかる送受信システム１が提供されるに至った。本実施形態にかかる送受信システム１によれば、ユーザの位置情報に基づいたサービス機能を実現することが可能となる。   Accordingly, the transmission / reception system 1 according to the embodiment of the present invention has been provided with the above circumstances as a focus. According to the transmission / reception system 1 according to the present embodiment, a service function based on the user's location information can be realized.

〔２〕送受信システムの全体構成および各装置の概要
次に、図１に基づいて、本実施形態にかかる送受信システム１の全体構成について説明する。図１は、本実施形態にかかる送受信システム１の構成例を示した説明図である。図１に示したように、送受信システム１は、受信装置１００と、送信装置２００と、外部機器３００などを含んで構成される。 [2] Overall Configuration of Transmission / Reception System and Overview of Each Device Next, the overall configuration of the transmission / reception system 1 according to the present embodiment will be described based on FIG. FIG. 1 is an explanatory diagram showing a configuration example of a transmission / reception system 1 according to the present embodiment. As shown in FIG. 1, the transmission / reception system 1 includes a reception device 100, a transmission device 200, an external device 300, and the like.

送信装置２００は、例えば、電磁波信号を発信することができるリモートコントローラ（以下、リモコンと称する。）などを例示できる。また、本実施形態では、受信装置１００と外部機器３００とは別体の装置として構成したが、かかる例に限定されず、受信装置１００と外部機器３００とは一体の装置であってもよい。例えば、受信装置１００と外部機器３００とが一体となったテレビ受像機（ＴＶ）や、ＴＶ電話装置などを例示できる。   The transmission device 200 can be exemplified by a remote controller (hereinafter referred to as a remote controller) that can transmit an electromagnetic wave signal, for example. In the present embodiment, the receiving device 100 and the external device 300 are configured as separate devices. However, the present invention is not limited to this example, and the receiving device 100 and the external device 300 may be integrated. For example, a television receiver (TV) in which the receiving device 100 and the external device 300 are integrated, a TV phone device, and the like can be exemplified.

送信装置２００は、操作部２０２、制御部２０４、赤外線発信部２０６などを備える。ここで、赤外線発信部２０６は、本発明の電磁波信号発信部の一例であり、電磁波の一例として赤外線を発信する機能を有する。   The transmission apparatus 200 includes an operation unit 202, a control unit 204, an infrared transmission unit 206, and the like. Here, the infrared transmission unit 206 is an example of the electromagnetic wave signal transmission unit of the present invention, and has a function of transmitting infrared rays as an example of the electromagnetic wave.

操作部２０２は、ユーザ操作に応じて入力される操作信号を制御部２０４に出力する機能を有する。制御部２０４は、操作部２０２から出力された操作信号を赤外線駆動信号に変換して赤外線発信部２０６に提供する。操作部２０２により変換される赤外線駆動信号は、本発明の電磁波信号の一例である。赤外線発信部２０６は、制御部２０４から提供された赤外線駆動信号を入力し、受信装置１００に２つの赤外線信号を出力する。   The operation unit 202 has a function of outputting an operation signal input in response to a user operation to the control unit 204. The control unit 204 converts the operation signal output from the operation unit 202 into an infrared drive signal and provides it to the infrared transmission unit 206. The infrared drive signal converted by the operation unit 202 is an example of the electromagnetic wave signal of the present invention. The infrared transmission unit 206 receives the infrared drive signal provided from the control unit 204 and outputs two infrared signals to the receiving device 100.

ここで、図２を参照して、送信装置２００の外観について説明する。図２は、送信装置２００の外観を示す斜視図である。図２では、送信装置２００の一例であるリモコンの外観について説明している。図２に示したように、リモコン２００の上部には、ユーザにより押下される各種の操作ボタン２０が配置されている。当該操作ボタン２０は、上記した操作部２０２に該当し、操作ボタン２０がユーザにより押下されることにより、操作ボタン２０に対応する操作信号が出力される。   Here, with reference to FIG. 2, the external appearance of the transmission apparatus 200 will be described. FIG. 2 is a perspective view showing an external appearance of the transmission device 200. FIG. 2 illustrates an appearance of a remote controller that is an example of the transmission apparatus 200. As shown in FIG. 2, various operation buttons 20 that are pressed by the user are arranged on the upper portion of the remote controller 200. The operation button 20 corresponds to the operation unit 202 described above, and an operation signal corresponding to the operation button 20 is output when the operation button 20 is pressed by the user.

また、リモコン２００の前面の送信パネル２１には、２つの発信素子２２が配置されている。２つの発信素子２２は、上記した赤外線発信部２０６から発信されるものである。本実施形態においては、赤外線発信部２０６から発信される赤外線信号の波長を９５０ｎｍ、変調周波数を３８ｋＨｚとしている。また、赤外線発信部２０６から発信される赤外線信号のオン／オフパタンは、押下する操作ボタン２０に応じて予め設定されているものとする。以上、送信装置２００の外観について説明した。   In addition, two transmission elements 22 are arranged on the transmission panel 21 on the front surface of the remote controller 200. The two transmitter elements 22 are transmitted from the infrared transmitter 206 described above. In the present embodiment, the wavelength of the infrared signal transmitted from the infrared transmitter 206 is 950 nm, and the modulation frequency is 38 kHz. Further, it is assumed that the on / off pattern of the infrared signal transmitted from the infrared transmission unit 206 is set in advance according to the operation button 20 to be pressed. The external appearance of the transmission device 200 has been described above.

図１に戻り、受信装置１００の機能構成について説明する。受信装置１００は、赤外線センサ１０２、イメージセンサ１０４、コマンド処理部１０６、位置検出部１０８などを備える。   Returning to FIG. 1, the functional configuration of the receiving apparatus 100 will be described. The receiving apparatus 100 includes an infrared sensor 102, an image sensor 104, a command processing unit 106, a position detection unit 108, and the like.

赤外線センサ１０２は、ユーザ操作に応じて送信装置２００から発信される少なくとも１の赤外線信号を受信する機能を有する。上記したように、当該赤外線信号は電磁波信号の一例であり、赤外線センサ１０２は、本発明の電磁波センサの一例である。また、本実施形態では、送信装置２００から２つの赤外線信号が発信される場合について説明する。赤外線センサ１０２は、送信装置２００から発信された２つの赤外線信号を、コマンド処理部１０６に赤外線センサ信号として出力する。   The infrared sensor 102 has a function of receiving at least one infrared signal transmitted from the transmission device 200 in response to a user operation. As described above, the infrared signal is an example of an electromagnetic wave signal, and the infrared sensor 102 is an example of the electromagnetic wave sensor of the present invention. In the present embodiment, a case where two infrared signals are transmitted from the transmission device 200 will be described. The infrared sensor 102 outputs two infrared signals transmitted from the transmission device 200 to the command processing unit 106 as infrared sensor signals.

イメージセンサ１０４は、送信装置２００から発信される電磁波の発信素子を含む画像を撮像する機能を有する。上記したように、送信装置２００から２つの赤外線信号を発信されている場合には、２つの赤外線信号を入力して、位置検出部１０８に画像信号として提供する。また、位置検出部１０８から出力されるセンサ制御信号を入力した後に、当該センサ制御信号に応じて撮像した画像を位置検出部１０８および機器制御部３００に出力する。   The image sensor 104 has a function of capturing an image including an electromagnetic wave transmitting element transmitted from the transmission device 200. As described above, when two infrared signals are transmitted from the transmission device 200, the two infrared signals are input and provided to the position detection unit 108 as image signals. In addition, after inputting the sensor control signal output from the position detection unit 108, an image captured in accordance with the sensor control signal is output to the position detection unit 108 and the device control unit 300.

コマンド処理部１０６は、赤外線センサ１０２より出力された赤外線センサ信号を入力した後に、位置検出部１０８に指示信号を出力する。また、機器制御部３００に、赤外線センサ信号に含まれるコマンド信号を出力する。   The command processing unit 106 outputs an instruction signal to the position detection unit 108 after inputting the infrared sensor signal output from the infrared sensor 102. In addition, a command signal included in the infrared sensor signal is output to the device control unit 300.

位置検出部１０８は、コマンド処理部１０６より出力された指示信号を入力し、イメージセンサ１０４より出力された画像信号を入力する。そして、入力された画像信号に基づいて送信装置２００の発信素子の位置を特定し、さらに、送信装置２００の存在方向を検出する。さらに、検出された存在方向を示す情報を含むセンサ制御信号をイメージセンサ１０４に出力する。位置検出部１０８は、本発明の特定部および検出部の一例である。   The position detection unit 108 receives the instruction signal output from the command processing unit 106 and the image signal output from the image sensor 104. Then, the position of the transmitting element of the transmission apparatus 200 is specified based on the input image signal, and further, the direction in which the transmission apparatus 200 exists is detected. Further, a sensor control signal including information indicating the detected presence direction is output to the image sensor 104. The position detection unit 108 is an example of a specifying unit and a detection unit of the present invention.

また、イメージセンサ１０４により出力される画像に送信装置２００から発信される２つの電磁波の発信素子が含まれている場合には、２つの発信素子の位置に基づいて、イメージセンサ１０４から送信装置２００の距離を検出する。そして、位置検出部１０８は、当該検出された距離を含むリモコン位置検出データを、機器制御部３００に出力する。   When the image output from the image sensor 104 includes two electromagnetic wave transmission elements transmitted from the transmission apparatus 200, the image sensor 104 transmits to the transmission apparatus 200 based on the positions of the two transmission elements. Detect the distance. Then, the position detection unit 108 outputs remote control position detection data including the detected distance to the device control unit 300.

ここで、図３を参照して、受信装置１００の外観について説明する。図３は、受信装置１００の外観を示す斜視図である。図３に示したように、受信装置の前面には、赤外線センサ１０２およびイメージセンサ１０４が配置されている。   Here, with reference to FIG. 3, the external appearance of the receiving apparatus 100 will be described. FIG. 3 is a perspective view illustrating an appearance of the receiving device 100. As shown in FIG. 3, an infrared sensor 102 and an image sensor 104 are arranged on the front surface of the receiving apparatus.

本実施形態では、イメージセンサ１０４は、パン（水平角度動作）、チルト(垂直角度動作)、ズーム（拡大／縮小動作）の機構を持つものとする。また、イメージセンサ１０４は、赤外線に対する感度が高く、画像フレーム上、高輝度な値に変化されるものとする。受信装置１００は、機器制御部３００に含まれるＴＶモニタの上に固定設置されるようにしてもよい。以上、受信装置１００の外観について説明した。   In the present embodiment, the image sensor 104 has a pan (horizontal angle operation), tilt (vertical angle operation), and zoom (enlargement / reduction operation) mechanism. The image sensor 104 has high sensitivity to infrared rays and is changed to a high luminance value on the image frame. The receiving device 100 may be fixedly installed on a TV monitor included in the device control unit 300. The external appearance of the receiving device 100 has been described above.

次に、図４および図５を参照して、送信装置２００の存在方向の検出および送信装置２００までの距離の検出について説明する。図４は、イメージセンサ１０４により撮像される画像である。図５は、位置検出部１０８による検出結果を説明する説明図である。   Next, with reference to FIG. 4 and FIG. 5, detection of the presence direction of the transmission device 200 and detection of the distance to the transmission device 200 will be described. FIG. 4 is an image captured by the image sensor 104. FIG. 5 is an explanatory diagram for explaining a detection result by the position detection unit 108.

図４の画像４０１は、ユーザが送信装置２００を操作する前に、イメージセンサ１０４により取得された画像フレームである。そして、図４の画像４０２は、ユーザが送信装置２００を操作した直後のイメージセンサ１０４により取得された画像フレームである。画像４０２に示したように、ユーザがリモコンを操作した直後には、イメージセンサ１０４により取得された画像フレーム上で、送信装置２００の発信素子４０２１は高輝度な値となる。   An image 401 in FIG. 4 is an image frame acquired by the image sensor 104 before the user operates the transmission device 200. An image 402 in FIG. 4 is an image frame acquired by the image sensor 104 immediately after the user operates the transmission device 200. As shown in the image 402, immediately after the user operates the remote controller, the transmitting element 4021 of the transmitting device 200 has a high luminance value on the image frame acquired by the image sensor 104.

画像４０２にでは、送信装置２００が、受信装置１００のイメージセンサ１０４から離れた位置に存在しているため、送信装置２００に配置されている２つの発信素子がひとつの高輝度な塊４０２１として撮像されている。   In the image 402, since the transmission device 200 exists at a position away from the image sensor 104 of the reception device 100, two transmission elements arranged in the transmission device 200 are captured as one high-luminance lump 4021. Has been.

ユーザ操作により、送信装置２００に配置された操作用のボタンが押下されると、当該ユーザ操作をトリガとして、位置検出部１０８は、図４の画像４０１と画像４０２との輝度、明度等の差分を計測する。位置検出部１０８は、該差分値の大きな領域を検出することにより、画像フレーム上の発信素子の位置を特定する。   When an operation button arranged on the transmission apparatus 200 is pressed by a user operation, the position detection unit 108 uses the user operation as a trigger to cause the position detection unit 108 to make a difference in brightness, brightness, and the like between the image 401 and the image 402 in FIG. Measure. The position detection unit 108 specifies the position of the transmitting element on the image frame by detecting a region having a large difference value.

図５のグラフ５０１では、位置検出部１０８により特定された発信素子の位置を点Ｒで示している。位置検出部１０８は、点Ｒの位置（Ｘ、Ｙ）、および、現在のイメージセンサ１０４のパン角度（Ｐｉ）、チルト角度（Ｔｉ）、ズームパラメータ（Ｚｉ）に基づいて、リモコンの存在方向を示すパン角度（Ｐ）、チルト角度（）を次式により求める。   In the graph 501 in FIG. 5, the position of the transmitting element specified by the position detection unit 108 is indicated by a point R. Based on the position (X, Y) of the point R and the current pan angle (Pi), tilt angle (Ti), and zoom parameter (Zi) of the position R, the position detection unit 108 determines the direction of presence of the remote control. The pan angle (P) and tilt angle () shown are obtained by the following equations.

Ｐ＝Ｐｉ＋Ａ（Ｘ，Ｙ，Ｚｉ）・・・（数式１）
Ｔ＝Ｔｉ＋Ｂ（Ｘ，Ｙ，Ｚｉ）・・・（数式２）
ただし、Ａ（）およびＢ（）はイメージセンサ１０４の特性に応じた関数である。当該関数は、イメージセンサ１０４の特性に応じてあらかじめ実験的に求めてもよいし、イメージセンサ１０４の設計地に応じて設定するようにしてもよい。 P = Pi + A (X, Y, Zi) (Formula 1)
T = Ti + B (X, Y, Zi) (Formula 2)
However, A () and B () are functions corresponding to the characteristics of the image sensor 104. The function may be obtained experimentally in advance according to the characteristics of the image sensor 104, or may be set according to the design location of the image sensor 104.

以上、送信装置２００の存在方向の検出について説明した。次に、送信装置２００までの距離の検出について説明する。位置検出部１０８は、上記の如く検出された送信装置２００の存在方向に基づいて、イメージセンサ１０４のパン角度とチルト角度を送信装置２００の存在方向にあわせるよう、イメージセンサ１０４にセンサ制御信号を出力する。そして、イメージセンサ１０４により撮像された画像の画像信号を取り込み、高輝度な画素を検出することにより、送信装置２００の発信素子を検出する。   The detection of the presence direction of the transmission device 200 has been described above. Next, detection of the distance to the transmission device 200 will be described. The position detection unit 108 sends a sensor control signal to the image sensor 104 so that the pan angle and tilt angle of the image sensor 104 are matched with the direction of presence of the transmission device 200 based on the direction of presence of the transmission device 200 detected as described above. Output. And the image signal of the image imaged with the image sensor 104 is taken in, and the transmitting element of the transmitter 200 is detected by detecting a high-intensity pixel.

その後、位置検出部１０８は、画像フレームをズームするよう、イメージセンサ１０４にセンサ制御信号を出力する。そして、位置検出部１０８は、イメージセンサ１０４からズームされた画像信号を入力する。その結果、画像フレーム上に高輝度な点が２箇所検出された場合には、当該画像に基づいて送信装置２００までの距離を検出する。   Thereafter, the position detection unit 108 outputs a sensor control signal to the image sensor 104 so as to zoom the image frame. The position detection unit 108 receives the zoomed image signal from the image sensor 104. As a result, when two high-luminance points are detected on the image frame, the distance to the transmission device 200 is detected based on the image.

また、画像フレーム上に高輝度な点が１箇所しか検出されなかった場合には、画像フレームをズームするよう、イメージセンサ１０４に制御信号を出力する。位置検出部１０８は、画像フレーム上に高輝度な点が２箇所検出されるまで、イメージセンサ１０４へのズーム指示および画像フレーム上の高輝度な点の検出処理を繰り返し実行する。   When only one high-luminance point is detected on the image frame, a control signal is output to the image sensor 104 so as to zoom the image frame. The position detection unit 108 repeatedly executes the zoom instruction to the image sensor 104 and the detection process of the high luminance point on the image frame until two high luminance points are detected on the image frame.

図４の画像４０３は、イメージセンサ１０４のズーム機能により撮影画像がズームされて、画像フレーム上に高輝度な２つの点４０３１が検出された場合の画像フレームを示している。画像４０３に示したように、送信装置２００の発信素子が高輝度になるため、位置検出部１０８は、画像フレーム上の高輝度な値となっている位置を検出する。   An image 403 in FIG. 4 shows an image frame when the captured image is zoomed by the zoom function of the image sensor 104 and two high-intensity points 4031 are detected on the image frame. As shown in the image 403, since the transmitting element of the transmission device 200 has high luminance, the position detection unit 108 detects a position having a high luminance value on the image frame.

図５のグラフ５０２は、位置検出部１０８により検出された画像フレーム上の高輝度な値となる位置を点Ｒ１および点Ｒ２として検出する。点Ｒ１と点Ｒ２との距離は、イメージセンサ１０４から送信装置２００までの距離と一定の関係にあるので、位置検出部１０８は、イメージセンサ１０４のズームパラメータ（Ｚｉ）に基づいて、次式を用いてイメージセンサ１０４から送信装置２００までの距離（Ｌ）を求めることができる。   A graph 502 in FIG. 5 detects a position having a high luminance value on the image frame detected by the position detection unit 108 as a point R1 and a point R2. Since the distance between the point R1 and the point R2 is in a fixed relationship with the distance from the image sensor 104 to the transmission device 200, the position detection unit 108 calculates the following equation based on the zoom parameter (Zi) of the image sensor 104. The distance (L) from the image sensor 104 to the transmission device 200 can be obtained by using this.

Ｌ＝Ｃ（Δ，Ｚｉ）・・・（数式３）
ただし、Δは点Ｒ１と点Ｒ２の距離、Ｃ（）はイメージセンサ１０４の特性に応じた関数である。当該関数は、イメージセンサ１０４の特性に応じてあらかじめ実験的に求めてもよいし、イメージセンサ１０４の設定値に応じて設定するようにしてもよい。以上、送信装置２００の存在方向の検出および送信装置２００までの距離の検出について説明した。 L = C (Δ, Zi) (Formula 3)
However, Δ is a distance between the points R 1 and R 2, and C () is a function corresponding to the characteristics of the image sensor 104. The function may be obtained experimentally in advance according to the characteristics of the image sensor 104, or may be set according to the set value of the image sensor 104. The detection of the direction of presence of the transmission device 200 and the detection of the distance to the transmission device 200 have been described above.

図１に戻り、機器制御部３００は、本発明の外部機器の一例であり、受信装置１００により出力されるコマンド信号とリモコン位置検出データと、画像信号を入力する機能を有する。なお、上記したように、機器制御部３００には、ＴＶモニタが含まれていてもよい。機器制御部３００としては、例えば、ＴＶ電話装置などを例示できる。以上、送受信システム１の全体成および各部の機能について説明した。   Returning to FIG. 1, the device control unit 300 is an example of an external device of the present invention, and has a function of inputting a command signal, remote control position detection data, and an image signal output from the receiving device 100. Note that, as described above, the device control unit 300 may include a TV monitor. Examples of the device control unit 300 include a TV phone device. The overall configuration of the transmission / reception system 1 and the function of each unit have been described above.

〔３〕送信装置の動作の詳細
次に、図６を参照して、送信装置２００の動作の詳細について説明する。上記したように、送信装置２００としては、リモコンを例示できる。まず、ユーザにより送信装置（リモコン）２００が操作される（Ｓ１０２）。ステップＳ１０２において、ユーザによりリモコン操作がなされると、送信装置２００の操作部２０２より操作内容を識別する操作信号が出力される（Ｓ１０４）。 [3] Details of Operation of Transmission Device Next, details of the operation of the transmission device 200 will be described with reference to FIG. As described above, the transmitter 200 can be exemplified by a remote controller. First, the transmission apparatus (remote control) 200 is operated by the user (S102). In step S102, when the user performs a remote control operation, an operation signal for identifying the operation content is output from the operation unit 202 of the transmission apparatus 200 (S104).

そして、送信装置２００の制御部２０４が、ステップＳ１０４において出力された操作信号から赤外線駆動信号を生成する（Ｓ１０６）。その後、送信装置２００の赤外線発信部２０６が、ステップＳ１０６において生成された赤外線駆動信号を赤外線信号に変換する（Ｓ１０８）。赤外線発信部２０６は、ステップＳ１０８において変換された赤外線信号を２つの発信素子より同時に発信する（Ｓ１１０）。以上、送信装置２００の動作の詳細について説明した。
〔４〕受信装置の動作の詳細
次に、図７を参照して、受信装置１００の動作の詳細を説明する。図７は、受信装置１００の動作の詳細を説明するフローチャートである。図７に示したように、まず、赤外線センサ１０２は、送信装置２００から発信された赤外線信号を受信する（Ｓ２０２）。コマンド処理部１０６は、ステップＳ２０２において受信された赤外線信号から、ユーザの操作内容を検知する（Ｓ２０４）。 And the control part 204 of the transmitter 200 produces | generates an infrared drive signal from the operation signal output in step S104 (S106). Thereafter, the infrared ray transmitting unit 206 of the transmission device 200 converts the infrared driving signal generated in step S106 into an infrared signal (S108). The infrared transmitter 206 transmits the infrared signal converted in step S108 simultaneously from the two transmitter elements (S110). The details of the operation of the transmission apparatus 200 have been described above.
[4] Details of Operation of Receiving Device Next, details of the operation of the receiving device 100 will be described with reference to FIG. FIG. 7 is a flowchart for explaining details of the operation of the receiving apparatus 100. As shown in FIG. 7, first, the infrared sensor 102 receives an infrared signal transmitted from the transmission device 200 (S202). The command processing unit 106 detects the user's operation content from the infrared signal received in step S202 (S204).

そして、コマンド処理部１０６は、位置検出部１０８にコマンド入力を示す指示信号を入力する（Ｓ２０４）。コマンド入力を示す指示信号とは、位置検出部１０８に送信装置２００の位置検出等の処理を実行させるための指示信号である。ステップＳ２０４において、コマンド処理部１０６は、機器制御部３００にユーザ操作の内容を示すコマンド信号を送信してもよい。   Then, the command processing unit 106 inputs an instruction signal indicating command input to the position detection unit 108 (S204). The instruction signal indicating the command input is an instruction signal for causing the position detection unit 108 to execute processing such as position detection of the transmission device 200. In step S204, the command processing unit 106 may transmit a command signal indicating the content of the user operation to the device control unit 300.

そして、ステップＳ２０６において、コマンド処理部１０６により指示信号を入力された位置検出部１０８は、イメージセンサ１０４から画像信号を入力する（Ｓ２０８）。イメージセンサ１０４は、受信装置１００の起動時にあらかじめ設定されたパン、チルト、ズームのパラメータで初期化され、一定の時間周期(例えば、７．５フレーム／秒)にて画像を入力し、対応する画像信号を位置検出部１０８および機器制御部３００に出力している。   In step S206, the position detection unit 108, to which the instruction signal is input by the command processing unit 106, inputs an image signal from the image sensor 104 (S208). The image sensor 104 is initialized with pan, tilt, and zoom parameters set in advance when the receiving apparatus 100 is activated, and inputs an image at a constant time period (for example, 7.5 frames / second), and corresponds. The image signal is output to the position detection unit 108 and the device control unit 300.

ステップＳ２０８において画像信号を入力した位置検出部１０８は、画像フレーム間の差分を計測する（Ｓ２１０）。位置検出部１０８は、ステップＳ２１０において計測した画像フレーム間の差分に基づいて、送信装置２００の存在方向を検出する（Ｓ２１２）。位置検出部１０８は、検出された送信装置の存在方向にイメージセンサ１０４のパン角度、チルト角度に合うように、イメージセンサ１０４にセンサ制御信号を出力する。   The position detection unit 108 that has input the image signal in step S208 measures the difference between the image frames (S210). The position detection unit 108 detects the presence direction of the transmission apparatus 200 based on the difference between the image frames measured in step S210 (S212). The position detection unit 108 outputs a sensor control signal to the image sensor 104 so as to match the pan angle and tilt angle of the image sensor 104 in the detected direction of the transmitting apparatus.

そして、位置検出部１０８は、入力された画像フレーム上の高輝度画素を検出する（Ｓ２１４）。その後、位置検出部１０８は、画像フレームをズームするようイメージセンサ１０４にセンサ制御信号を出力し、画像フレームがズームされる（Ｓ２１６）。位置検出部１０８は、ステップＳ２１６においてズームされた画像フレーム上に高輝度な点が２箇所検出されたか否かを判定する（Ｓ２１８）。ステップＳ２１８において、高輝度な点が２ヶ所検出されたと判定された場合には、検出された２ヶ所の高輝度な点に基づいて、送信装置２００までの距離を検出する（Ｓ２２０）。   Then, the position detection unit 108 detects high luminance pixels on the input image frame (S214). Thereafter, the position detection unit 108 outputs a sensor control signal to the image sensor 104 so as to zoom the image frame, and the image frame is zoomed (S216). The position detection unit 108 determines whether two high-intensity points have been detected on the image frame zoomed in step S216 (S218). If it is determined in step S218 that two high-luminance points have been detected, the distance to the transmission device 200 is detected based on the two high-luminance points detected (S220).

以上の受信装置１００の動作により、ユーザによるリモコン操作の後に、受信装置１００において送信装置２００の３次元位置が検出される。すなわち、パン角度と、チルト角度と、距離が検出される。受信装置１００により検出された検出データは、機器制御部３００に出力される。機器制御部３００に出力される検出データは、受信装置１００に備わる送信部（図示せず）により送信される。位置検出部１０８が、本発明の送信部としての機能を有するようにしてもよい。   With the operation of the receiving device 100 described above, the three-dimensional position of the transmitting device 200 is detected in the receiving device 100 after a remote control operation by the user. That is, the pan angle, the tilt angle, and the distance are detected. Detection data detected by the receiving apparatus 100 is output to the device control unit 300. The detection data output to the device control unit 300 is transmitted by a transmission unit (not shown) provided in the reception device 100. The position detection unit 108 may have a function as a transmission unit of the present invention.

〔５〕機器制御部の動作の詳細
次に、機器制御部３００をＴＶ電話装置に適用して、機器制御部の動作の詳細を説明する。受信装置１００のコマンド処理部１０６からコマンド信号を入力された機器制御部３００は、当該コマンド信号に応じてＴＶ電話機能を制御する。ユーザがＴＶ電話で通話中は、受信装置１００のイメージセンサ１０４から入力された画像信号をネットワーク(図示せず)経由で送信するとともに、ネットワーク経由で受信した画像信号をＴＶモニタに表示する。 [5] Details of Operation of Device Control Unit Next, details of the operation of the device control unit will be described by applying the device control unit 300 to a TV phone device. Device control unit 300 that receives a command signal from command processing unit 106 of receiving apparatus 100 controls the TV telephone function in accordance with the command signal. While the user is talking on the TV phone, the image signal input from the image sensor 104 of the receiving apparatus 100 is transmitted via a network (not shown), and the image signal received via the network is displayed on the TV monitor.

さらに、機器制御部３００は、位置検出部１０８から出力された位置検出データを入力すると、該位置検出データに基づいて、イメージセンサのパン角度、チルト角度、ズームパラメータを、送信装置２００の位置を基準とした所定の領域が撮像されるよう制御する。これにより、機器制御部３００は、図４の画像４０４に示すように、適正な大きさのユーザの顔を含む画像信号をネットワーク経由で送信することができる。   Furthermore, when the position detection data output from the position detection unit 108 is input, the device control unit 300 determines the pan angle, tilt angle, and zoom parameters of the image sensor based on the position detection data, and the position of the transmission device 200. Control is performed so that a predetermined area as a reference is imaged. As a result, the device control unit 300 can transmit an image signal including the user's face of an appropriate size via the network, as shown in an image 404 in FIG.

本実施形態によれば、受信装置１００は、送信装置２００から発信される電磁波の発信素子を含む画像を撮像し、当該撮像された画像から送信装置２００の発信素子の位置を特定する。そして、特定された送信装置２００の発信素子の位置に基づいて、送信装置２００の存在方向を検出し、検出された送信装置２００の存在方向を示す情報を受信装置１００に接続された機器制御部３００に送信する。   According to the present embodiment, the receiving apparatus 100 captures an image including an electromagnetic wave transmitting element transmitted from the transmitting apparatus 200, and specifies the position of the transmitting element of the transmitting apparatus 200 from the captured image. Then, based on the position of the transmitting element of the specified transmitting device 200, the direction of presence of the transmitting device 200 is detected, and information indicating the detected direction of the transmitting device 200 is connected to the receiving device 100. To 300.

また、送信装置２００から２つの電磁波の発信素子が発信されている場合には、当該２つの電磁波の発信素子を含む画像を撮像する。そして、当該撮像された画像から２つの発信素子の位置を特定し、特定された２つの発信素子の位置に基づいて、イメージセンサ１０４から送信装置２００までの距離を検出する。その後、位置検出部１０８により検出された送信装置２００までの距離を示す情報を受信装置１００に接続された機器制御部３００に送信する。   When two transmitting elements for electromagnetic waves are transmitted from the transmitting device 200, an image including the two transmitting elements for electromagnetic waves is captured. Then, the positions of the two transmitting elements are specified from the captured image, and the distance from the image sensor 104 to the transmission device 200 is detected based on the specified positions of the two transmitting elements. Thereafter, information indicating the distance to the transmission device 200 detected by the position detection unit 108 is transmitted to the device control unit 300 connected to the reception device 100.

例えば、ユーザによりリモコン操作があった場合に、送信装置２００からの赤外線信号をイメージセンサで捕捉し、その画像位置からパン角度とチルト角度を検出することができる。さらに、２つの赤外線信号をイメージセンサで捕捉し、両者の画像距離を計測することにより、受信装置１００から送信装置までの距離を検出することが可能となる。   For example, when the user performs a remote control operation, an infrared signal from the transmission device 200 is captured by an image sensor, and a pan angle and a tilt angle can be detected from the image position. Furthermore, it is possible to detect the distance from the receiving device 100 to the transmitting device by capturing two infrared signals with an image sensor and measuring the image distance between them.

これにより、送信装置２００の３次元空間上の位置を特定することができるため、ユーザの位置に最適化されたカメラ制御を行うことが可能となる。その結果、ユーザの正確な位置情報に基づいたサービス機能を実現することができる。   Thereby, since the position of the transmission apparatus 200 in the three-dimensional space can be specified, it is possible to perform camera control optimized for the position of the user. As a result, a service function based on accurate position information of the user can be realized.

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。   The preferred embodiments of the present invention have been described in detail above with reference to the accompanying drawings, but the present invention is not limited to such examples. It is obvious that a person having ordinary knowledge in the technical field to which the present invention pertains can come up with various changes or modifications within the scope of the technical idea described in the claims. Of course, it is understood that these also belong to the technical scope of the present invention.

例えば、上記実施形態では、送信装置２００が２個の赤外線信号を発信する場合について説明したが、本発明はかかる例に限定されない。例えば、送信装置２００に搭載される赤外線発信部の数は３個以上であってもよい。例えば、赤外線発信部の数を３個とした場合には、任意の２個の赤外線発信部の組み合わせから検出される送信装置２００までの距離を平均化等することにより、送信装置２００までの距離の検出精度を高めることができる。   For example, in the above embodiment, the case where the transmission device 200 transmits two infrared signals has been described, but the present invention is not limited to such an example. For example, the number of infrared transmitters mounted on the transmission device 200 may be three or more. For example, when the number of infrared transmitters is three, the distance to the transmitter 200 is obtained by averaging the distance to the transmitter 200 detected from a combination of any two infrared transmitters. Detection accuracy can be increased.

また、赤外線発信部の数を１個とした場合には送信装置２００までの距離を検出することができなくなるが、上記実施形態と同様に、送信装置２００の存在方向を検出することができる。この場合には、送信装置２００の存在方向の情報に基づいたサービス機能を実現することができる。   Further, when the number of infrared transmission units is one, the distance to the transmission device 200 cannot be detected, but the presence direction of the transmission device 200 can be detected as in the above embodiment. In this case, a service function based on the information on the direction of presence of the transmission apparatus 200 can be realized.

また、本実施形態の送信装置２００では、ユーザが送信装置２００を操作した場合にのみ赤外線信号が発信される場合について説明したが、本発明はかかる例に限定されない。例えば、一定の時間間隔ごとに２つの赤外線信号が発信されるようにしてもよい。この場合には、送信装置２００を持ったユーザが移動した場合においても、それを追随してリモコン位置を検出することが可能となる。   Moreover, although the transmission apparatus 200 of this embodiment demonstrated the case where an infrared signal was transmitted only when a user operated the transmission apparatus 200, this invention is not limited to this example. For example, two infrared signals may be transmitted at regular time intervals. In this case, even when the user who has the transmission device 200 moves, it is possible to follow it and detect the remote control position.

本実施形態では、赤外線信号の波長を９５０ｎｍｍ、変調周波数を３８ＫＨｚとして説明したが、かかる例に限定されない。例えば、用途に合わせて、他の波長および変調周波数を適用してもよい。   In the present embodiment, the wavelength of the infrared signal is 950 nm and the modulation frequency is 38 KHz. However, the present invention is not limited to this example. For example, other wavelengths and modulation frequencies may be applied depending on the application.

また、本実施形態では、イメージセンサ１０４がパン、チルト、ズームの機能を有する場合について説明したが、かかる例に限定されない。例えば、イメージセンサ１０４が上記機能を有していなくとも、例えば、イメージセンサ１０４が低解像度と高解像度の両方のイメージ出力が可能であれば、パン、チルト、ズーム機能と同等の機能を実現することが可能となる。   In the present embodiment, the case where the image sensor 104 has pan, tilt, and zoom functions has been described. However, the present invention is not limited to this example. For example, even if the image sensor 104 does not have the above function, for example, if the image sensor 104 can output both low resolution and high resolution, functions equivalent to the pan, tilt, and zoom functions are realized. It becomes possible.

さらに、本実施形態では、送信装置２００の位置検出結果に基づいて、ＴＶ電話における撮像領域を制御しているが、かかる例に限定されない。例えば、送受信システム１をホームシアターシステム、エアコン、無線操縦式玩具、個人認証装置などに適用するようにしてもよい。   Furthermore, in this embodiment, the imaging area in the TV phone is controlled based on the position detection result of the transmission device 200, but the present invention is not limited to this example. For example, the transmission / reception system 1 may be applied to a home theater system, an air conditioner, a radio-controlled toy, a personal authentication device, or the like.

送受信システム１をホームシアターシステムに適用した場合には、送信装置２００の位置検出結果に基づいて、複数あるスピーカの音量を微調整する制御をして、ユーザの位置に最適化した臨場感ある音場をつくることが可能である。また、ユーザの位置情報に基づいて設定された情報を、ユーザ自信に提示するようにしてもよい。   When the transmission / reception system 1 is applied to a home theater system, based on the position detection result of the transmission device 200, a sound field with a sense of presence that is optimized for the position of the user is controlled by finely adjusting the volume of a plurality of speakers. Can be made. Further, information set based on the user's position information may be presented to the user himself / herself.

送受信システム１をエアコンに適用した場合には、送信装置２００の位置検出結果に基づいて、ユーザの位置に最適化したエアコンから出力される送風の方向と強さを制御することができる。   When the transmission / reception system 1 is applied to an air conditioner, it is possible to control the direction and intensity of air blown from the air conditioner optimized for the user's position based on the position detection result of the transmission device 200.

また、送受信システム１を無線操縦式玩具に適用した場合には、送信装置２００の位置検出結果に基づいて、ユーザと玩具の相対的な位置関係を把握することが可能となる。これにより、玩具をユーザの近くに移動させるなどの制御操作において、ユーザの視点に立った玩具の動作制御を容易に実現することが可能となる。   In addition, when the transmission / reception system 1 is applied to a radio-controlled toy, it is possible to grasp the relative positional relationship between the user and the toy based on the position detection result of the transmission device 200. Thereby, in the control operation such as moving the toy close to the user, it is possible to easily realize the operation control of the toy from the viewpoint of the user.

また、送受信システム１を個人認証装置に適用した場合には、送信装置２００の位置検出結果に基づいて、ユーザの顔を検出し、その画像の特徴に基づいて、ユーザを認証することができる。   When the transmission / reception system 1 is applied to a personal authentication device, the user's face can be detected based on the position detection result of the transmission device 200, and the user can be authenticated based on the characteristics of the image.

本発明の一実施形態にかかる送受信システムの構成例を示した説明図である。It is explanatory drawing which showed the structural example of the transmission / reception system concerning one Embodiment of this invention. 同実施形態にかかる送信装置の外観を示す斜視図である。It is a perspective view which shows the external appearance of the transmission apparatus concerning the embodiment. 同実施形態にかかる受信装置の外観を示す斜視図である。It is a perspective view which shows the external appearance of the receiver concerning the embodiment. 同実施形態にかかるイメージセンサにより撮像される画像である。It is an image imaged with the image sensor concerning the embodiment. 同実施形態にかかる位置検出部による検出結果を説明する説明図である。It is explanatory drawing explaining the detection result by the position detection part concerning the embodiment. 同実施形態にかかる送信装置の動作の詳細を示すフローチャートである。It is a flowchart which shows the detail of operation | movement of the transmission apparatus concerning the embodiment. 同実施形態にかかる受信装置の動作の詳細を示すフローチャートである。It is a flowchart which shows the detail of operation | movement of the receiver concerning the embodiment.

符号の説明Explanation of symbols

１００ 受信装置
１０２ 赤外線センサ
１０４ イメージセンサ
１０６ コマンド処理部
１０８ 位置検出部
２００ 送信装置
２０２ 操作部
２０４ 制御部
２０６ 赤外線発信部
３００ 機器制御部 DESCRIPTION OF SYMBOLS 100 Receiving apparatus 102 Infrared sensor 104 Image sensor 106 Command processing part 108 Position detection part 200 Transmission apparatus 202 Operation part 204 Control part 206 Infrared transmission part 300 Equipment control part

Claims (10)

電磁波信号を発信する送信装置と受信装置との位置関係を検出する受信装置であって、
前記送信装置から発信される電磁波の発信素子を含む画像を撮像するイメージセンサと、
前記イメージセンサにより撮像された画像から、前記送信装置の発信素子の位置を特定する特定部と、
前記特定部により特定された前記送信装置の発信素子の位置に基づいて、前記送信装置の存在方向を検出する検出部と、
前記検出部により検出された前記送信装置の存在方向を示す情報を前記受信装置に接続された外部機器に送信する送信部と、
を備える、受信装置。 A receiving device that detects a positional relationship between a transmitting device that transmits an electromagnetic wave signal and a receiving device,
An image sensor that captures an image including a transmitting element of an electromagnetic wave transmitted from the transmitting device;
From the image captured by the image sensor, a specifying unit that specifies the position of the transmitting element of the transmitting device;
Based on the position of the transmitting element of the transmission device identified by the identification unit, a detection unit that detects the direction of presence of the transmission device;
A transmission unit that transmits information indicating the presence direction of the transmission device detected by the detection unit to an external device connected to the reception device;
A receiving device. 前記イメージセンサは、前記送信装置から発信される２の電磁波の発信素子を含む画像を撮像し、
前記特定部は、前記イメージセンサにより撮像された画像から、前記送信装置の２の発信素子の位置を特定し、
前記検出部は、前記特定部により特定された前記２の発信素子の位置に基づいて、前記イメージセンサから前記送信装置までの距離を検出し、
前記送信部は、前記検出部により検出された前記イメージセンサから前記送信装置までの距離を示す情報を前記外部機器に送信する、請求項１に記載の受信装置。 The image sensor captures an image including two electromagnetic wave transmitting elements transmitted from the transmission device;
The specifying unit specifies the position of the two transmitting elements of the transmitting device from the image captured by the image sensor,
The detection unit detects a distance from the image sensor to the transmission device based on the position of the two transmission elements specified by the specification unit,
The receiving device according to claim 1, wherein the transmitting unit transmits information indicating a distance from the image sensor detected by the detecting unit to the transmitting device to the external device. 前記検出部は、前記特定部に特定された発信素子の位置および前記イメージセンサのパン角度、チルト角度、ズームパラメータに基づいて前記送信装置の存在方向を検出する、請求項１に記載の受信装置。   2. The receiving device according to claim 1, wherein the detection unit detects an existing direction of the transmission device based on a position of a transmitting element specified by the specifying unit and a pan angle, a tilt angle, and a zoom parameter of the image sensor. . 前記特定部は、
前記イメージセンサにより撮像された、少なくとも２以上の画像を比較して、前記送信装置の発信素子の位置を特定する、請求項１に記載の受信装置。 The specific part is:
The receiving apparatus according to claim 1, wherein the position of a transmitting element of the transmitting apparatus is specified by comparing at least two images captured by the image sensor. 前記検出部により、前記送信装置の発信素子の位置に基づいて前記送信装置の存在方向が検出された後に、前記イメージセンサは、前記検出部により検出された前記送信装置の存在方向の画像を高精細に撮像し、
前記特定部は、前記高精細に撮像された画像に含まれる前記送信装置の発信素子の位置を特定し、
前記検出部は、前記特定部により特定された前記送信装置の発信素子の位置に基づいて、前記イメージセンサから前記送信装置までの距離を算出する、請求項１または２のいずれかに記載の受信装置。 After the detection unit detects the direction of presence of the transmission device based on the position of the transmission element of the transmission device, the image sensor increases an image of the direction of presence of the transmission device detected by the detection unit. Take a fine picture,
The specifying unit specifies a position of a transmitting element of the transmitting device included in the high-definition image,
The reception according to claim 1, wherein the detection unit calculates a distance from the image sensor to the transmission device based on a position of a transmission element of the transmission device specified by the specification unit. apparatus. ユーザ操作に応じて前記リモコンから発信される少なくとも１の電磁波信号を受信する電磁波センサを備え、
前記検出部は、前記電磁波センサにより特定の電磁波信号が受信された場合に、前記特定部が前記イメージセンサにより撮像された画像から特定された前記送信装置の発信素子の位置に基づいて、前記送信装置の存在方向および前記イメージセンサから前記送信装置までの距離を検出する、請求項１または２のいずれかに記載の受信装置。 An electromagnetic wave sensor that receives at least one electromagnetic wave signal transmitted from the remote controller in response to a user operation;
When the specific electromagnetic wave signal is received by the electromagnetic wave sensor, the detection unit transmits the transmission based on the position of the transmitting element of the transmission device specified by the specific unit from the image captured by the image sensor. The receiving apparatus according to claim 1, wherein a receiving direction of the apparatus and a distance from the image sensor to the transmitting apparatus are detected. 電磁波信号を発信する送信装置と受信装置との位置関係を検出する受信装置において実行される受信方法であって、
前記送信装置から発信される電磁波の発信素子を含む画像を撮像するステップと、
前記撮像された画像から、前記送信装置の発信素子の位置を特定するステップと、
前記特定された前記送信装置の発信素子の位置に基づいて、前記送信装置の存在方向を検出するステップと、
前記検出部により検出された前記送信装置の存在方向を示す情報を前記受信装置に接続された外部機器に送信するステップと、
を含む、受信方法。 A receiving method executed in a receiving device that detects a positional relationship between a transmitting device that transmits an electromagnetic wave signal and a receiving device,
Capturing an image including an electromagnetic wave transmitting element transmitted from the transmitting device;
Identifying the position of the transmitting element of the transmitting device from the captured image;
Detecting the direction of presence of the transmitting device based on the identified position of the transmitting element of the transmitting device;
Transmitting information indicating the direction of presence of the transmission device detected by the detection unit to an external device connected to the reception device;
Including a receiving method. 前記前記送信装置から発信される２の電磁波の発信素子を含む画像を撮像するステップと、
前記イメージセンサにより撮像された画像から、前記送信装置の２の発信素子の位置を特定するステップと、
前記特定された前記２の発信素子の位置に基づいて、前記イメージセンサから前記送信装置までの距離を検出するステップと、
前記検出された前記イメージセンサから前記送信装置までの距離を示す情報を前記外部機器に送信するステップと、
を含む、請求項７に記載の受信方法。 Capturing an image including two electromagnetic wave transmitting elements transmitted from the transmitting device;
Identifying the position of two transmitting elements of the transmitting device from an image captured by the image sensor;
Detecting a distance from the image sensor to the transmitting device based on the identified position of the two transmitting elements;
Transmitting information indicating a distance from the detected image sensor to the transmission device to the external device;
The reception method according to claim 7, comprising: 電磁波信号を発信する送信装置から発信される電磁波信号を受信する受信装置が、受信装置に接続された外部機器を制御する送受信システムであって、
前記送信装置は、
ユーザ操作に応じて入力される操作信号を出力する操作信号出力部と、
前記操作信号出力部により出力された操作信号を電磁波信号に変換して発信する電磁波信号発信部と、
を備え、
前記受信装置は、
前記送信装置に備わる電磁波信号発信部により発信された発信素子を含む画像を撮像するイメージセンサと、
前記イメージセンサにより撮像された画像から、前記送信装置の発信素子の位置を特定する特定部と、
前記特定部により特定された前記送信装置の発信素子の位置に基づいて、前記送信装置の存在方向を検出する検出部と、
前記検出部により検出された前記送信装置の存在方向を示す情報を含む位置情報を前記外部機器に送信する送信部と、
を備える、送受信システム。 A receiver that receives an electromagnetic wave signal transmitted from a transmitter that transmits an electromagnetic wave signal is a transmission / reception system that controls an external device connected to the receiver,
The transmitter is
An operation signal output unit for outputting an operation signal input in response to a user operation;
An electromagnetic wave signal transmission unit that converts the operation signal output by the operation signal output unit into an electromagnetic wave signal and transmits the electromagnetic wave signal;
With
The receiving device is:
An image sensor that captures an image including a transmission element transmitted by an electromagnetic wave signal transmission unit provided in the transmission device;
From the image captured by the image sensor, a specifying unit that specifies the position of the transmitting element of the transmitting device;
Based on the position of the transmitting element of the transmission device identified by the identification unit, a detection unit that detects the direction of presence of the transmission device;
A transmission unit that transmits position information including information indicating the direction of presence of the transmission device detected by the detection unit to the external device;
A transmission / reception system comprising: 前記受信装置に備わる、
前記イメージセンサは、前記送信装置から発信される２の電磁波の発信素子を含む画像を撮像し、
前記特定部は、前記イメージセンサにより撮像された画像から、前記送信装置の２の発信素子の位置を特定し、
前記検出部は、前記特定部により特定された前記２の発信素子の位置に基づいて、前記イメージセンサから前記送信装置までの距離を検出し、
前記送信部は、前記検出部により検出された前記イメージセンサから前記送信装置までの距離を示す情報を含む位置情報を前記外部機器に送信する、請求項９に記載の送受信システム。
Provided in the receiving device,
The image sensor captures an image including two electromagnetic wave transmitting elements transmitted from the transmission device;
The specifying unit specifies the position of the two transmitting elements of the transmitting device from the image captured by the image sensor,
The detection unit detects a distance from the image sensor to the transmission device based on the position of the two transmission elements specified by the specification unit,
The transmission / reception system according to claim 9, wherein the transmission unit transmits position information including information indicating a distance from the image sensor detected by the detection unit to the transmission device to the external device.
JP2008208343A 2008-08-13 2008-08-13 Receiving device, receiving method, program, and transmitting and receiving system Pending JP2010045604A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008208343A JP2010045604A (en) 2008-08-13 2008-08-13 Receiving device, receiving method, program, and transmitting and receiving system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008208343A JP2010045604A (en) 2008-08-13 2008-08-13 Receiving device, receiving method, program, and transmitting and receiving system

Publications (1)

Publication Number Publication Date
JP2010045604A true JP2010045604A (en) 2010-02-25

Family

ID=42016609

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008208343A Pending JP2010045604A (en) 2008-08-13 2008-08-13 Receiving device, receiving method, program, and transmitting and receiving system

Country Status (1)

Country Link
JP (1) JP2010045604A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5343156B1 (en) * 2012-06-29 2013-11-13 株式会社東芝 DETECTING DEVICE, DETECTING METHOD, AND VIDEO DISPLAY DEVICE

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06334944A (en) * 1993-05-26 1994-12-02 Mitsubishi Electric Corp Wireless remote control device
WO2003036829A1 (en) * 2001-10-23 2003-05-01 Sony Corporation Data communication system, data transmitter and data receiver

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06334944A (en) * 1993-05-26 1994-12-02 Mitsubishi Electric Corp Wireless remote control device
WO2003036829A1 (en) * 2001-10-23 2003-05-01 Sony Corporation Data communication system, data transmitter and data receiver

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5343156B1 (en) * 2012-06-29 2013-11-13 株式会社東芝 DETECTING DEVICE, DETECTING METHOD, AND VIDEO DISPLAY DEVICE
US9204078B2 (en) 2012-06-29 2015-12-01 Kabushiki Kaisha Toshiba Detector, detection method and video display apparatus

Similar Documents

Publication Publication Date Title
US9538115B2 (en) Operation controlling apparatus
KR101731346B1 (en) Method for providing display image in multimedia device and thereof
JP4243248B2 (en) User interface system based on pointing device
JP5645444B2 (en) Image display system and control method thereof
JP2007257639A (en) Pointing input device, method and system using image pattern
JP2010068385A (en) Image display device and detection method
KR101758271B1 (en) Method for recognizing user gesture in multimedia device and multimedia device thereof
JP2009194447A (en) Remote controller position detection device, remote controller position detection system, remote controller position detection method, and program
CN104064022A (en) Remote control method and system
KR20160024848A (en) Remote control programming using images
JP4960270B2 (en) Intercom device
US20110043598A1 (en) Remote communication apparatus and method of estimating a distance between an imaging device and a user image-captured
JP2010045604A (en) Receiving device, receiving method, program, and transmitting and receiving system
JP5233768B2 (en) COMMUNICATION SUPPORT SYSTEM, DISPLAY CONTROL DEVICE, AND DISPLAY CONTROL METHOD
US10674060B2 (en) Method for controlling a monitoring camera
JP5790229B2 (en) Information processing apparatus and information processing method
JP2015159460A (en) Projection system, projection device, photographing device, method for generating guide frame, and program
JP2002135683A (en) Power on/off detector of television receiver
CN103902028B (en) Input equipment, interactive system and input method
KR20120051213A (en) Method for image photographing of multimedia device and multimedia device thereof
JP2007251307A (en) Voice output device and television receiver
US20180205912A1 (en) Image Display System and Image Display Method
JP2013195726A (en) Projector and projection system
KR20100122790A (en) A remote controller for iptv
JP2003095561A (en) Elevator door remote adjustment device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110322

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120803

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120911

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130122