JP2013034085A - Image display device and method, image processing device and method, program, and image display system - Google Patents

Image display device and method, image processing device and method, program, and image display system Download PDF

Info

Publication number
JP2013034085A
JP2013034085A JP2011168945A JP2011168945A JP2013034085A JP 2013034085 A JP2013034085 A JP 2013034085A JP 2011168945 A JP2011168945 A JP 2011168945A JP 2011168945 A JP2011168945 A JP 2011168945A JP 2013034085 A JP2013034085 A JP 2013034085A
Authority
JP
Japan
Prior art keywords
image
detection information
unit
image data
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011168945A
Other languages
Japanese (ja)
Inventor
Norihisa Ito
功久 井藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2011168945A priority Critical patent/JP2013034085A/en
Publication of JP2013034085A publication Critical patent/JP2013034085A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

PROBLEM TO BE SOLVED: To enable realization of various image expressions.SOLUTION: An entire-circumferential three-dimensional image display device detects a motion of a user viewing a displayed three-dimensional image, generates detection information on the detected motion, transmits it to an image processing device, receives image data transmitted from the image processing device and generated based on the detection information, and displays any three-dimensional image corresponding to the received image data and depending on the detected motion. The present technique can be applied to, for example, a three-dimensional image display system composed of the entire-circumferential three-dimensional image display device and the image processing device.

Description

本技術は、画像表示装置及び方法、画像処理装置及び方法、プログラム、並びに画像表示システムに関し、特に、多様な画像表現を実現することができるようにした画像表示装置及び方法、画像処理装置及び方法、プログラム、並びに画像表示システムに関する。   The present technology relates to an image display device and method, an image processing device and method, a program, and an image display system, and in particular, an image display device and method, an image processing device and a method capable of realizing various image representations. , A program, and an image display system.

本出願人は、被写体に関する視点の異なる複数の画像を用いて、全周囲の任意の方向から見ても被写体を立体的に視認可能に表示を行う全周囲立体画像表示装置を先に提案している(例えば、特許文献1参照)。   The present applicant has previously proposed an omnidirectional stereoscopic image display device that uses a plurality of images with different viewpoints regarding the subject to display the subject in a three-dimensionally visible manner even when viewed from any direction around the entire circumference. (For example, refer to Patent Document 1).

この全周囲立体画像表示装置は、その筐体が円筒形状をなしており、筐体内部には複数の発光素子等が配設された発光面を有する表示部が設けられ、表示部の画像がスリット越しに筐体の外部から視認できるようになされている。そして、筐体がモータにより高速回転されることにより、円筒形状の筐体側面を任意の方向から見ているユーザに対して、表示面の画像が立体的に視認できるようになされている。   The omnidirectional stereoscopic image display device has a cylindrical casing, and a display unit having a light emitting surface in which a plurality of light emitting elements and the like are arranged is provided inside the casing. It is made visible from the outside of the housing through the slit. Then, by rotating the housing at a high speed by a motor, the image on the display surface can be viewed three-dimensionally for a user who is viewing the side surface of the cylindrical housing from an arbitrary direction.

特開2011−107665号公報JP 2011-107665 A

ところで、全周囲立体画像表示装置では、ユーザの手の位置などを検出するためのセンサを設けることで、ユーザの動作に応じた任意の立体画像を表示させることができる。しかしながら、センサからの情報が、全周囲立体画像表示装置の内部でのみ利用されていたため、その内部処理により生成される立体画像の表現には限度があり、より多様な画像表現を実現したいという要求があった。   By the way, in the omnidirectional stereoscopic image display device, an arbitrary stereoscopic image corresponding to the user's operation can be displayed by providing a sensor for detecting the position of the user's hand and the like. However, since the information from the sensor is used only inside the omnidirectional stereoscopic image display device, there is a limit to the representation of the stereoscopic image generated by the internal processing, and there is a demand for realizing more various image representations. was there.

本技術はこのような状況に鑑みてなされたものであり、全周囲立体画像表示装置において、多様な画像表現を実現することができるようにするものである。   The present technology has been made in view of such a situation, and enables various image representations to be realized in an omnidirectional stereoscopic image display device.

本技術の第1の側面の画像表示装置は、内部に回転軸を有する円筒形状の回転部と、任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信する画像受信部と、前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、表示された前記画像を視認しているユーザの動作を検出する検出部と、検出された前記動作に関する検出情報を生成する検出情報生成部と、生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部とを備え、前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる。   The image display device according to the first aspect of the present technology includes the image data transmitted from a cylindrical rotating unit having a rotation axis inside and an image processing device that generates image data for displaying an arbitrary image. An image receiving unit for receiving, an image display unit provided inside the rotating unit, and displaying an arbitrary image corresponding to the received image data by emitting light according to the rotation of the rotating unit, and a display A detection unit that detects a motion of a user who is viewing the generated image, a detection information generation unit that generates detection information related to the detected motion, and transmits the generated detection information to the image processing device. A detection information transmission unit configured to receive the image data generated based on the detection information transmitted from the image processing device, and the image display unit configured to receive the received image data. Corresponding to, and displays an arbitrary image according to said detected operation.

前記検出情報生成部は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む前記検出情報を生成する。   The detection information generation unit generates the detection information including information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.

前記画像受信部は、前記画像処理装置から送信される、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを受信し、前記画像表示部は、受信された前記画像データに対応する、検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示させる。   The image receiving unit receives image data transmitted from the image processing device for displaying an image in which only a display state of a portion corresponding to a detection position of the motion detected at each predetermined rotation angle is changed. The image display unit displays an image in which only the display state of the portion corresponding to the detected position of the detected motion corresponding to the received image data is changed.

前記検出情報送信部は、前記検出情報を、あらかじめ設定される送信間隔で前記画像処理装置に送信する。   The detection information transmission unit transmits the detection information to the image processing apparatus at a preset transmission interval.

前記検出部は、1又は複数設けられ、前記検出情報生成部は、前記検出部ごとの前記検出情報を生成する。   One or more detection units are provided, and the detection information generation unit generates the detection information for each detection unit.

本技術の第1の側面の画像表示方法又は第1のプログラムは、前述した第1の側面の画像表示装置に対応する画像表示方法又は第1のプログラムである。   The image display method or first program according to the first aspect of the present technology is an image display method or first program corresponding to the image display device according to the first aspect described above.

本技術の第1の側面の画像表示装置及び方法、並びに第1のプログラムにおいては、任意の画像を表示するための画像データを生成する画像処理装置から送信される画像データが受信され、回転部の回転に応じて発光することで、受信された画像データに対応する任意の画像が表示され、表示された画像を視認しているユーザの動作が検出され、検出された動作に関する検出情報が生成され、生成された検出情報が、画像処理装置に送信され、画像処理装置から送信される、検出情報に基づき生成された画像データが受信され、受信された画像データに対応する、検出された動作に応じた任意の画像が表示される。   In the image display device and method according to the first aspect of the present technology, and the first program, image data transmitted from an image processing device that generates image data for displaying an arbitrary image is received, and a rotation unit By emitting light in response to the rotation of the image, an arbitrary image corresponding to the received image data is displayed, the action of the user viewing the displayed image is detected, and detection information regarding the detected action is generated The generated detection information is transmitted to the image processing apparatus, the image data generated based on the detection information transmitted from the image processing apparatus is received, and the detected operation corresponding to the received image data is received. An arbitrary image corresponding to the is displayed.

本技術の第2の側面の画像処理装置は、任意の画像に対応する画像データを生成する画像生成部と、生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信する画像送信部と、前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信する検出情報受信部とを備え、前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する。   An image processing apparatus according to a second aspect of the present technology corresponds to an image generation unit that generates image data corresponding to an arbitrary image, and the generated image data corresponding to the image data according to rotation of the rotation unit. An image transmission unit that transmits an arbitrary image to an image display device, and a detection information reception unit that receives detection information transmitted from the image display device and related to an action of a user viewing the image, The image generation unit generates image data corresponding to an arbitrary image based on the received detection information, and the image transmission unit displays the image data generated based on the detection information as the image display Send to device.

前記検出情報は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む。   The detection information includes information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.

前記画像生成部は、受信された前記検出情報に基づいて、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを生成する。   The image generation unit displays image data for displaying an image in which only a display state of a portion corresponding to the detection position of the motion detected at each predetermined rotation angle is changed based on the received detection information. Generate.

前記検出情報受信部は、あらかじめ設定される送信間隔で前記画像表示装置から送信される前記検出情報を受信する。   The detection information receiving unit receives the detection information transmitted from the image display device at a transmission interval set in advance.

本技術の第2の側面の画像処理方法又は第2のプログラムは、前述した第2の側面の画像処理装置に対応する画像処理方法又は第2のプログラムである。   The image processing method or second program of the second aspect of the present technology is an image processing method or second program corresponding to the image processing apparatus of the second aspect described above.

本技術の第2の側面の画像処理装置及び方法、並びに第2のプログラムにおいては、任意の画像に対応する画像データが生成され、生成された画像データが、回転部の回転に応じて画像データに対応する任意の画像を表示する画像表示装置に送信され、画像表示装置から送信される、画像を視認しているユーザの動作に関する検出情報が受信され、受信された検出情報に基づいて、任意の画像に対応する画像データが生成され、検出情報に基づき生成された画像データが、画像表示装置に送信される。   In the image processing apparatus and method and the second program according to the second aspect of the present technology, image data corresponding to an arbitrary image is generated, and the generated image data is image data according to the rotation of the rotation unit. Detection information relating to the action of the user viewing the image is received and transmitted from the image display device to display any image corresponding to the image, and based on the received detection information, any The image data corresponding to the image is generated, and the image data generated based on the detection information is transmitted to the image display device.

本技術の第3の側面の画像表示システムは、画像表示装置と、画像処理装置からなる画像表示システムであって、前記画像表示装置は、内部に回転軸を有する円筒形状の回転部と、前記画像処理装置から送信される前記画像データを受信する画像受信部と、前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、表示された前記画像を視認しているユーザの動作を検出する検出部と、検出された前記動作に関する検出情報を生成する検出情報生成部と、生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部とを備え、前記画像処理装置は、任意の画像に対応する画像データを生成する画像生成部と、生成された前記画像データを、前記画像表示装置に送信する画像送信部と、前記画像表示装置から送信される、前記検出情報を受信する検出情報受信部とを備え、前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信し、前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる。   An image display system according to a third aspect of the present technology is an image display system including an image display device and an image processing device, and the image display device includes a cylindrical rotation unit having a rotation axis therein, An image receiving unit that receives the image data transmitted from the image processing device, and an arbitrary unit corresponding to the received image data by emitting light according to the rotation of the rotating unit, provided inside the rotating unit. An image display unit that displays an image of the image, a detection unit that detects an operation of a user who is viewing the displayed image, a detection information generation unit that generates detection information related to the detected operation, and A detection information transmission unit configured to transmit the detection information to the image processing device, the image processing device configured to generate image data corresponding to an arbitrary image, and the generated image data. Is transmitted to the image display device, and a detection information reception unit that is transmitted from the image display device and receives the detection information. The image generation unit includes the received detection information. Based on this, image data corresponding to an arbitrary image is generated, the image transmission unit transmits the image data generated based on the detection information to the image display device, and the image reception unit The image data generated based on the detection information transmitted from the processing device is received, and the image display unit displays an arbitrary image corresponding to the detected operation corresponding to the received image data. Let

画像表示装置及び画像処理装置のいずれか一方又は双方は、独立した装置であってもよいし、1つの装置を構成している内部ブロックであってもよい。   Either one or both of the image display device and the image processing device may be an independent device, or may be an internal block constituting one device.

本技術の第3の側面の画像表示システムにおいては、画像表示装置によって、画像処理装置から送信される画像データが受信され、回転部の内部に設けられ、回転部の回転に応じて発光することで、受信された画像データに対応する任意の画像が表示され、表示された画像を視認しているユーザの動作が検出され、検出された動作に関する検出情報が生成され、生成された検出情報が、画像処理装置に送信され、画像処理装置から送信される、検出情報に基づき生成された画像データが受信され、受信された画像データに対応する、検出された動作に応じた任意の画像が表示され、画像処理装置によって、任意の画像に対応する画像データが生成され、生成された画像データが、画像表示装置に送信され、画像表示装置から送信される、検出情報が受信され、受信された検出情報に基づいて、任意の画像に対応する画像データが生成され、検出情報に基づき生成された画像データが、画像表示装置に送信される。   In the image display system according to the third aspect of the present technology, the image display device receives image data transmitted from the image processing device, is provided inside the rotation unit, and emits light according to the rotation of the rotation unit. Thus, an arbitrary image corresponding to the received image data is displayed, the action of the user viewing the displayed image is detected, detection information relating to the detected action is generated, and the generated detection information is The image data generated based on the detection information transmitted from the image processing device and transmitted from the image processing device is received, and an arbitrary image corresponding to the detected operation corresponding to the received image data is displayed. The image processing apparatus generates image data corresponding to an arbitrary image, and the generated image data is transmitted to the image display apparatus and transmitted from the image display apparatus. Broadcast is received, based on the received detection information, the image data corresponding to an arbitrary image is generated, the image data generated based on the detection information is transmitted to the image display device.

本技術によれば、多様な画像表現を実現することができる。   According to the present technology, various image representations can be realized.

立体画像表示システムの構成例を示す図である。It is a figure which shows the structural example of a stereo image display system. 全周囲立体画像表示装置の構成例を示す図である。It is a figure which shows the structural example of an all-around stereoscopic image display apparatus. 画像処理装置の構成例を示す図である。It is a figure which shows the structural example of an image processing apparatus. 検出情報の送信処理を説明するシーケンス図である。It is a sequence diagram explaining the transmission process of detection information. 全周囲立体画像表示装置による立体画像表示処理について説明するフローチャートである。It is a flowchart explaining the stereo image display process by an omnidirectional stereo image display apparatus. 画像処理装置による立体画像表示処理について説明するフローチャートである。It is a flowchart explaining the stereo image display process by an image processing apparatus. 立体画像の表示状態の変化の例を示す図である。It is a figure which shows the example of the change of the display state of a stereo image. 立体画像の表示状態の変化の例を示す図である。It is a figure which shows the example of the change of the display state of a stereo image. コンピュータの構成例を示す図である。It is a figure which shows the structural example of a computer.

以下、図面を参照しながら本技術の実施の形態について説明する。   Hereinafter, embodiments of the present technology will be described with reference to the drawings.

[立体画像表示システムの構成例]
図1は、立体画像表示システム1の構成例を示す図である。
[Configuration example of stereoscopic image display system]
FIG. 1 is a diagram illustrating a configuration example of a stereoscopic image display system 1.

立体画像表示システム1は、全周囲立体画像表示装置11及び画像処理装置12から構成される。   The stereoscopic image display system 1 includes an omnidirectional stereoscopic image display device 11 and an image processing device 12.

全周囲立体画像表示装置11は、ケーブル24を介して入力される画像処理装置12により生成された立体画像表示用の2次元画像情報等(以下、単に、画像データという)に基づいて、被写体の全周囲に渡る立体画像を再生する。全周囲立体画像表示装置11は、固定部21及び回転部22から構成される。   The omnidirectional stereoscopic image display device 11 is based on two-dimensional image information for stereoscopic image display generated by the image processing device 12 input via the cable 24 (hereinafter simply referred to as image data). Play a 3D image over the entire circumference. The omnidirectional stereoscopic image display device 11 includes a fixed unit 21 and a rotating unit 22.

固定部21は、画像処理装置12から入力される画像データを、内蔵された中空モータ(不図示)により高速回転する回転部22に供給する。固定部21はまた、回転部22に対して駆動電力を供給する。   The fixing unit 21 supplies the image data input from the image processing device 12 to a rotating unit 22 that rotates at high speed by a built-in hollow motor (not shown). The fixing unit 21 also supplies driving power to the rotating unit 22.

回転部22は、円筒状の形状を有するとともに、その側面には複数のスリット23が設けられており、その内部には、固定部21と共通の回転軸を有する中空モータが固定されている。また、回転部22には、表示部が内蔵されており、回転部22の回転に応じて発光することで、固定部21から供給される画像データに対応する、全周囲にわたる任意の立体画像を表示させる。   The rotating part 22 has a cylindrical shape and is provided with a plurality of slits 23 on its side surface. A hollow motor having a rotating shaft common to the fixing part 21 is fixed therein. In addition, the rotation unit 22 has a built-in display unit, which emits light according to the rotation of the rotation unit 22 so that an arbitrary three-dimensional image over the entire circumference corresponding to the image data supplied from the fixed unit 21 can be obtained. Display.

また、回転部22には、表示された立体画像を視認しているユーザの動作(例えばジェスチャなど)を検出するためのセンサが設けられており、検出されたユーザの動作に関する情報(以下、検出情報という)を固定部21に供給して、ケーブル25を介して画像処理装置12に出力する。   In addition, the rotation unit 22 is provided with a sensor for detecting the operation (for example, gesture) of the user who is viewing the displayed stereoscopic image, and information related to the detected user operation (hereinafter, detection). Information) is supplied to the fixing unit 21 and output to the image processing device 12 via the cable 25.

画像処理装置12は、例えばパーソナルコンピュータなどの機器であって、全周囲立体画像表示装置11からの検出情報に基づいて、任意の立体画像に対応する画像データを生成し、ケーブル24を介して全周囲立体画像表示装置11に出力する。そして、全周囲立体画像表示装置11においては、画像処理装置12からの画像データに対応する、検出されたユーザの動作に応じた任意の立体画像が表示される。   The image processing device 12 is a device such as a personal computer, for example, generates image data corresponding to an arbitrary stereoscopic image based on detection information from the omnidirectional stereoscopic image display device 11, and transmits all data via the cable 24. The image is output to the surrounding stereoscopic image display device 11. In the omnidirectional stereoscopic image display device 11, an arbitrary stereoscopic image corresponding to the detected user action corresponding to the image data from the image processing device 12 is displayed.

立体画像表示システム1は、以上のように構成される。   The stereoscopic image display system 1 is configured as described above.

[全周囲立体画像表示装置の構成例]
図2は、図1の全周囲立体画像表示装置11の構成例を示す図である。
[Example of configuration of omnidirectional stereoscopic image display device]
FIG. 2 is a diagram illustrating a configuration example of the omnidirectional stereoscopic image display device 11 of FIG.

全周囲立体画像表示装置11は、前述したように、固定部21及び回転部22から構成される。   The all-around stereoscopic image display device 11 includes the fixed unit 21 and the rotating unit 22 as described above.

固定部21は、通信I/F31、画像処理部32、送信部33、ロータリエンコーダ34、検出情報処理部35、固定部制御部36、及び通信I/F37から構成される。また、回転部22は、受信部51、画像処理部52、画像表示部53、センサ54−1及び54−2、検出情報処理部55、並びに回転部制御部56から構成される。   The fixed unit 21 includes a communication I / F 31, an image processing unit 32, a transmission unit 33, a rotary encoder 34, a detection information processing unit 35, a fixed unit control unit 36, and a communication I / F 37. The rotation unit 22 includes a reception unit 51, an image processing unit 52, an image display unit 53, sensors 54-1 and 54-2, a detection information processing unit 55, and a rotation unit control unit 56.

通信I/F31は、例えば、HDMI(High Definition Multimedia Interface)の入力端子であって、HDMI規格に準拠した通信によって、画像処理装置12からHDMI用のケーブル24を介して送信される画像データを受信して、画像処理部32に供給する。   The communication I / F 31 is, for example, an HDMI (High Definition Multimedia Interface) input terminal, and receives image data transmitted from the image processing apparatus 12 via the HDMI cable 24 by communication conforming to the HDMI standard. Then, it is supplied to the image processing unit 32.

画像処理部32は、通信I/F31から供給される画像データに対して、所定のデータ処理を施して、その結果得られる送信データを、送信部33に供給する。   The image processing unit 32 performs predetermined data processing on the image data supplied from the communication I / F 31 and supplies the transmission data obtained as a result to the transmission unit 33.

送信部33は、画像処理部32から供給される送信データを、例えば、ミリ波帯の無線通信により、回転部22の受信部51に送信する。ここで、ミリ波とは、周波数が30〜300GHz程度、つまり、波長が、1〜10mm程度の電波である。ミリ波帯の電波によれば、周波数が高いことから、高速のデータレートでのデータ伝送が可能であり、小さなアンテナで、無線通信を行うことができる。   The transmission unit 33 transmits the transmission data supplied from the image processing unit 32 to the reception unit 51 of the rotation unit 22 by, for example, wireless communication in the millimeter wave band. Here, the millimeter wave is a radio wave having a frequency of about 30 to 300 GHz, that is, a wavelength of about 1 to 10 mm. Since the millimeter wave radio wave has a high frequency, data transmission at a high data rate is possible, and wireless communication can be performed with a small antenna.

具体的には、送信部33は、送信データと、例えば56GHz等のミリ波帯のキャリアとをミキシングすることにより、キャリアを、送信データに従って変調し、その結果得られる変調信号を、アンテナ(不図示)に供給する。これにより、アンテナは、送信部33からの変調信号を、電波として出力する。   Specifically, the transmitter 33 modulates the carrier according to the transmission data by mixing the transmission data and a carrier in a millimeter wave band such as 56 GHz, and transmits the modulation signal obtained as a result to the antenna (invalid). Supplied). Thereby, the antenna outputs the modulated signal from the transmission unit 33 as a radio wave.

回転部22では、アンテナ(不図示)により送信部33から送信される電波としての変調信号が受信され、受信部51に供給される。   In the rotation unit 22, a modulation signal as a radio wave transmitted from the transmission unit 33 is received by an antenna (not shown) and supplied to the reception unit 51.

受信部51は、アンテナからの変調信号と、例えば56GHz等のミリ波帯のキャリアとをミキシングすることにより、キャリアを、変調信号に従って復調する。受信部51は、変調信号を復調することで得られる受信データを、画像処理部52に供給する。   The receiving unit 51 demodulates the carrier according to the modulation signal by mixing the modulation signal from the antenna with a carrier in a millimeter wave band such as 56 GHz. The reception unit 51 supplies reception data obtained by demodulating the modulation signal to the image processing unit 52.

画像処理部52は、受信部51から供給される受信データに対して、所定のデータ処理を施して、その結果得られる画像データを、画像表示部53に供給する。   The image processing unit 52 performs predetermined data processing on the reception data supplied from the reception unit 51, and supplies image data obtained as a result to the image display unit 53.

画像表示部53は、例えば、m行×n列個の発光素子がマトリックス状に配列された2次元発光素子アレイから構成される。発光素子としては、例えば、発光ダイオードやレーザダイオード、有機ELなどが用いられる。この2次元発光素子アレイは、回転部22の回転に応じて複数の発光素子が発光し、かつ、画像処理部52から供給される立体画像用の画像データに基づいて発光制御されるようになされている。そして、発光面からの光が、スリット23を介して、回転部22の外部に放射されることにより、ユーザは、立体画像を視認することができる。   The image display unit 53 includes, for example, a two-dimensional light emitting element array in which m rows × n columns of light emitting elements are arranged in a matrix. As the light emitting element, for example, a light emitting diode, a laser diode, an organic EL, or the like is used. In the two-dimensional light emitting element array, a plurality of light emitting elements emit light according to the rotation of the rotating unit 22, and the light emission is controlled based on stereoscopic image data supplied from the image processing unit 52. ing. Then, the light from the light emitting surface is radiated to the outside of the rotating unit 22 through the slit 23, so that the user can visually recognize the stereoscopic image.

センサ54−1は、回転部22の周面の上側に設けられ、主に、回転部22の上側で行われるユーザの手の動きや、立体画像を覗き込むユーザの顔の動きなどのユーザの動作を検出する。センサ54−1は、発光部61−1及び受光部62−1から構成される。   The sensor 54-1 is provided on the upper side of the peripheral surface of the rotating unit 22, and is mainly used by the user such as the movement of the user's hand performed on the upper side of the rotating unit 22 and the movement of the user's face looking into the stereoscopic image. Detect motion. The sensor 54-1 includes a light emitting unit 61-1 and a light receiving unit 62-1.

発光部61−1は、検出情報処理部55のタイミング生成部71から供給される発光タイミング信号に従って、赤外線を発光する。例えば、発光された赤外線が、ユーザの手により反射されて戻ってきた場合、その反射の戻り光が、受光部62−1により受光される。受光部62−1は、反射光の強度に応じた受光信号を、回転部制御部56のサンプリングフィルタ処理部81に供給する。   The light emitting unit 61-1 emits infrared light in accordance with the light emission timing signal supplied from the timing generation unit 71 of the detection information processing unit 55. For example, when the emitted infrared light is reflected and returned by the user's hand, the reflected return light is received by the light receiving unit 62-1. The light receiving unit 62-1 supplies a light reception signal corresponding to the intensity of the reflected light to the sampling filter processing unit 81 of the rotation unit control unit 56.

センサ54−2は、回転部22の周面の下側に設けられ、主に、回転部22の下側で行われるユーザの動作を検出する。センサ54−2は、センサ54−1と同様に構成され、発光部61−2から発光された赤外線の戻り光が、受光部62−2により受光され、その反射光の強度に応じた受光信号が、回転部制御部56のサンプリングフィルタ処理部81に供給される。   The sensor 54-2 is provided on the lower side of the peripheral surface of the rotating unit 22, and mainly detects the user's operation performed on the lower side of the rotating unit 22. The sensor 54-2 is configured in the same manner as the sensor 54-1, and the infrared return light emitted from the light emitting unit 61-2 is received by the light receiving unit 62-2, and a light reception signal corresponding to the intensity of the reflected light. Is supplied to the sampling filter processing unit 81 of the rotation unit control unit 56.

なお、以下の説明において、センサ54−1と、センサ54−2を区別する必要がない場合、単に、センサ54と称して説明する。また、発光部61−1と、発光部61−2を区別する必要がない場合、発光部61と称し、受光部62−1と、受光部62−2を区別する必要がない場合、受光部62と称する。さらに、図2の例では、2つのセンサが設けられた例を図示しているが、ユーザの動作を検出するための1以上のセンサが設けられていればよく、センサの数は任意である。   In the following description, when it is not necessary to distinguish between the sensor 54-1 and the sensor 54-2, the sensor 54-1 will be simply referred to as the sensor 54. Moreover, when it is not necessary to distinguish the light emission part 61-1 and the light emission part 61-2, it calls the light emission part 61, and when it is not necessary to distinguish the light reception part 62-1 and the light reception part 62-2, a light reception part 62. Furthermore, in the example of FIG. 2, an example in which two sensors are provided is illustrated, but one or more sensors for detecting the user's operation may be provided, and the number of sensors is arbitrary. .

回転部22側の検出情報処理部55は、タイミング生成部71、無線通信部72、角度情報処理部73、及びレジスタ74から構成される。また、固定部21側の検出情報処理部35は、角度情報処理部41、無線通信部42、レジスタ43から構成される。   The detection information processing unit 55 on the rotating unit 22 side includes a timing generation unit 71, a wireless communication unit 72, an angle information processing unit 73, and a register 74. The detection information processing unit 35 on the fixed unit 21 side includes an angle information processing unit 41, a wireless communication unit 42, and a register 43.

タイミング生成部71は、タイミング信号を生成して、各部に供給する。タイミング生成部71は、発光タイミング信号を発光部61−1及び61−2に供給するとともに、A/D変換タイミング信号を回転部制御部56に供給することで、発光側と受光側のタイミングを調整する。   The timing generation unit 71 generates a timing signal and supplies it to each unit. The timing generation unit 71 supplies the light emission timing signal to the light emission units 61-1 and 61-2 and also supplies the A / D conversion timing signal to the rotation unit control unit 56, so that the timing on the light emission side and the light reception side is set. adjust.

無線通信部72は、赤外線などの無線通信により、検出情報処理部35の無線通信部42と通信する。検出情報処理部35において、角度情報処理部41は、ロータリエンコーダ34により検出された中空モータ(不図示)の回転角度(回転部22の回転角度)に関する情報(以下、角度情報という)を取得して、無線通信部42に供給する。そして、無線通信部42は、赤外線などの無線通信により、角度情報処理部41から供給される角度情報を、無線通信部72に送信する。   The wireless communication unit 72 communicates with the wireless communication unit 42 of the detection information processing unit 35 by wireless communication such as infrared rays. In the detection information processing unit 35, the angle information processing unit 41 acquires information (hereinafter referred to as angle information) regarding the rotation angle (rotation angle of the rotation unit 22) of the hollow motor (not shown) detected by the rotary encoder 34. To the wireless communication unit 42. Then, the wireless communication unit 42 transmits the angle information supplied from the angle information processing unit 41 to the wireless communication unit 72 by wireless communication such as infrared rays.

無線通信部72は、無線通信部42から送信される角度情報を受信し、角度情報処理部73に供給する。   The wireless communication unit 72 receives angle information transmitted from the wireless communication unit 42 and supplies the angle information to the angle information processing unit 73.

角度情報処理部73は、無線通信部72から供給される角度情報を取得して、所定のタイミングで、回転部制御部56のサンプリングフィルタ処理部81に供給する。   The angle information processing unit 73 acquires the angle information supplied from the wireless communication unit 72 and supplies it to the sampling filter processing unit 81 of the rotation unit control unit 56 at a predetermined timing.

回転部制御部56は、回転部22の各部を制御する。また、回転部制御部56は、サンプリングフィルタ処理部81を有している。   The rotation unit control unit 56 controls each unit of the rotation unit 22. Further, the rotation unit control unit 56 includes a sampling filter processing unit 81.

サンプリングフィルタ処理部81は、受光部62−1及び受光部62−2のそれぞれから供給される受光信号に対してフィルタ処理を施して不要な周波数成分を除去した後、A/D変換タイミング信号に従って、サンプリングを行い、受光信号のA/D(Analog/Digital)変換を行う。サンプリングフィルタ処理部81は、A/D変換により得られたセンサ検出値を、角度情報処理部73から供給される角度情報に対応付けて、レジスタ74に記憶させる。これにより、レジスタ74には、センサ54ごとの検出情報として、回転部22の回転角度ごとのセンサ検出値が順次記憶される。   The sampling filter processing unit 81 performs filter processing on the light reception signals supplied from the light receiving unit 62-1 and the light receiving unit 62-2 to remove unnecessary frequency components, and then according to the A / D conversion timing signal. , Perform sampling, and perform A / D (Analog / Digital) conversion of the received light signal. The sampling filter processing unit 81 stores the sensor detection value obtained by the A / D conversion in the register 74 in association with the angle information supplied from the angle information processing unit 73. As a result, the sensor 74 sequentially stores sensor detection values for each rotation angle of the rotating unit 22 as detection information for each sensor 54.

レジスタ74は、例えば、センサ54ごとに360ビット(8ビット×45)の容量を有しており、回転部22の全周囲を45分割した場合の各角度(1つの角度が8°)のセンサ検出値として、8ビットが割り当てられる。すなわち、8ビット値であると、0〜255の256通りを表すことができる。なお、図2では、センサ54−1、54−2の2つのセンサ54が設けられているため、実際には、レジスタ74には、720ビット(360ビット×2)分の容量が必要となる。   The register 74 has a capacity of 360 bits (8 bits × 45) for each sensor 54, for example, and each angle (one angle is 8 °) when the entire circumference of the rotating unit 22 is divided into 45. 8 bits are assigned as a detection value. That is, if the value is 8-bit, 256 patterns from 0 to 255 can be represented. In FIG. 2, since two sensors 54-1, 54-2 are provided, the register 74 actually requires a capacity of 720 bits (360 bits × 2). .

レジスタ74に記憶された検出情報は、例えば、回転部22の全周囲分の検出情報が記憶された段階で、無線通信部72に供給され、無線通信によって、検出情報処理部35の無線通信部42に送信される。   The detection information stored in the register 74 is supplied to the wireless communication unit 72, for example, at the stage where the detection information for the entire periphery of the rotating unit 22 is stored, and the wireless communication unit of the detection information processing unit 35 is wirelessly communicated. 42.

無線通信部42は、無線通信により無線通信部72から送信される、検出情報を受信して、レジスタ43に記憶させる。レジスタ43は、レジスタ74と同様に、センサ54ごとの検出情報としてのセンサ検出値を記憶するために、例えば720ビットの容量を有しており、回転部22の全周囲分の検出情報を記憶することができる。   The wireless communication unit 42 receives the detection information transmitted from the wireless communication unit 72 by wireless communication and stores it in the register 43. Similarly to the register 74, the register 43 has a capacity of, for example, 720 bits in order to store sensor detection values as detection information for each sensor 54, and stores detection information for the entire circumference of the rotating unit 22. can do.

固定部制御部36は、固定部21の各部を制御する。また、固定部制御部36は、センサ検出値を距離情報に変換するための変換テーブル45を有している。すなわち、前述したように、センサ検出値には8ビット値が割り当てられており、0〜255の256通りを表すことができるので、変換テーブル45を用いて、例えば、回転部22の回転角度ごとのセンサ検出値を、0〜255mmの範囲内の距離情報に変換することができる。換言すれば、距離情報によって、回転部22の回転角度ごとに検出されるユーザの動作の検出位置を、例えば0〜255mmの範囲内の値で表すことができる。   The fixed unit control unit 36 controls each unit of the fixed unit 21. Moreover, the fixed part control part 36 has the conversion table 45 for converting a sensor detection value into distance information. That is, as described above, an 8-bit value is assigned to the sensor detection value and can represent 256 patterns from 0 to 255. For example, using the conversion table 45, for example, for each rotation angle of the rotation unit 22 Can be converted into distance information in the range of 0 to 255 mm. In other words, the detection position of the user's motion detected for each rotation angle of the rotation unit 22 can be represented by a value in the range of 0 to 255 mm, for example, by the distance information.

変換テーブル45によって距離情報に変換された検出情報は、通信I/F37に供給される。   The detection information converted into distance information by the conversion table 45 is supplied to the communication I / F 37.

通信I/F37は、例えば、USB(Universal Serial Bus)などのシリアル通信に対応したI/F(Interface)であって、USB規格に準拠した通信によって、固定部制御部36から供給される検出情報を、USB用のケーブル25を介して画像処理装置12に送信する。   The communication I / F 37 is, for example, an I / F (Interface) compatible with serial communication such as USB (Universal Serial Bus), and detection information supplied from the fixed unit control unit 36 by communication conforming to the USB standard. Is transmitted to the image processing apparatus 12 via the USB cable 25.

また、通信I/F37は、画像処理装置12からケーブル25を介して送信される、送信開始要求又は送信停止要求を受信して、固定部制御部36に供給する。   Further, the communication I / F 37 receives a transmission start request or a transmission stop request transmitted from the image processing apparatus 12 via the cable 25 and supplies the request to the fixed unit control unit 36.

固定部制御部36は、通信I/F37から供給される送信開始要求に応じて、レジスタ43から検出情報の読み出しを開始して、変換テーブル45により変換後、通信I/F37に供給する。また、固定部制御部36は、通信I/F37から供給される送信停止要求に応じて、レジスタ43からの検出情報の読み出しを停止する。   In response to the transmission start request supplied from the communication I / F 37, the fixed unit control unit 36 starts reading the detection information from the register 43, converts the conversion information by the conversion table 45, and supplies the detection information to the communication I / F 37. Further, the fixed unit control unit 36 stops reading the detection information from the register 43 in response to the transmission stop request supplied from the communication I / F 37.

なお、固定部制御部36からの制御に従い、回転部制御部56がセンサ54を制御することで、送信開始要求が受信された場合にはセンサ54による検出が開始され、送信停止要求が受信された場合にはセンサ54による検出が停止されるようにしてもよい。すなわち、全周囲立体画像表示装置11においては、送信開始要求が受信された場合、検出情報が画像処理装置12に送信され、送信停止要求が受信された場合、検出情報の送信が停止されるようにすればよく、その実現方法は任意である。   Note that, when the transmission start request is received by the rotation unit control unit 56 controlling the sensor 54 according to the control from the fixed unit control unit 36, detection by the sensor 54 is started, and the transmission stop request is received. In such a case, the detection by the sensor 54 may be stopped. That is, in the omnidirectional stereoscopic image display device 11, detection information is transmitted to the image processing device 12 when a transmission start request is received, and transmission of detection information is stopped when a transmission stop request is received. The realization method is arbitrary.

全周囲立体画像表示装置11は、以上のように構成される。   The omnidirectional stereoscopic image display device 11 is configured as described above.

[画像処理装置の構成例]
図3は、図1の画像処理装置12の構成例を示す図である。
[Configuration example of image processing apparatus]
FIG. 3 is a diagram illustrating a configuration example of the image processing apparatus 12 of FIG.

画像処理装置12は、制御部101、操作部102、画像取得部103、画像処理部104、通信I/F105、及び通信I/F106から構成される。   The image processing apparatus 12 includes a control unit 101, an operation unit 102, an image acquisition unit 103, an image processing unit 104, a communication I / F 105, and a communication I / F 106.

制御部101は、画像処理装置12の各部の動作を制御する。   The control unit 101 controls the operation of each unit of the image processing apparatus 12.

操作部102は、ユーザ操作に応じて、操作信号を制御部101に供給する。制御部101は、操作部102から供給される操作信号に基づいて、各部の動作を制御する。   The operation unit 102 supplies an operation signal to the control unit 101 in response to a user operation. The control unit 101 controls the operation of each unit based on the operation signal supplied from the operation unit 102.

画像取得部103は、制御部101からの制御に従い、被写体に関する視点の異なる複数の画像に対応する立体画像用の画像データを取得して、画像処理部104に供給する。   The image acquisition unit 103 acquires stereoscopic image image data corresponding to a plurality of images with different viewpoints related to the subject in accordance with control from the control unit 101, and supplies them to the image processing unit 104.

画像処理部104は、画像取得部103から供給される画像データに対して、所定の画像処理を施し、任意の立体画像に対応する画像データを生成する。生成された画像データは、通信I/F105に供給される。   The image processing unit 104 performs predetermined image processing on the image data supplied from the image acquisition unit 103 to generate image data corresponding to an arbitrary stereoscopic image. The generated image data is supplied to the communication I / F 105.

通信I/F105は、例えば、HDMIの出力端子であって、HDMI規格に準拠した通信によって、画像処理部104から供給される画像データを、HDMI用のケーブル24を介して全周囲立体画像表示装置11に送信する。   The communication I / F 105 is, for example, an HDMI output terminal, and the image data supplied from the image processing unit 104 by the communication conforming to the HDMI standard is transferred to the omnidirectional stereoscopic image display device via the HDMI cable 24. 11 to send.

通信I/F106は、例えば、USBなどのシリアル通信に対応したI/F(Interface)であって、全周囲立体画像表示装置11からUSB用のケーブル25を介して送信される検出情報を、制御部101に供給する。   The communication I / F 106 is, for example, an I / F (Interface) that supports serial communication such as USB, and controls detection information transmitted from the omnidirectional stereoscopic image display device 11 via the USB cable 25. Supplied to the unit 101.

制御部101は、通信I/F106から供給される検出情報に基づいて、画像処理部104で行われる画像処理を制御する。画像処理部104は、制御部101からの制御に従い、検出情報に基づいた任意の立体画像に対応する画像データを生成し、通信I/F105に供給する。通信I/F105は、画像処理部104から供給される、検出情報に基づき生成された画像データを、ケーブル24を介して全周囲立体画像表示装置11に送信する。   The control unit 101 controls image processing performed by the image processing unit 104 based on detection information supplied from the communication I / F 106. The image processing unit 104 generates image data corresponding to an arbitrary stereoscopic image based on the detection information in accordance with control from the control unit 101, and supplies the image data to the communication I / F 105. The communication I / F 105 transmits the image data generated based on the detection information supplied from the image processing unit 104 to the omnidirectional stereoscopic image display device 11 via the cable 24.

また、制御部101は、操作部102から供給される操作信号に基づいて、送信開始要求又は送信停止要求を、通信I/F106に供給する。通信I/F106は、制御部101から供給される送信開始要求又は送信停止要求を、ケーブル25を介して全周囲立体画像表示装置11に出力する。   Further, the control unit 101 supplies a transmission start request or a transmission stop request to the communication I / F 106 based on the operation signal supplied from the operation unit 102. The communication I / F 106 outputs a transmission start request or a transmission stop request supplied from the control unit 101 to the omnidirectional stereoscopic image display device 11 via the cable 25.

画像処理装置12は、以上のように構成される。   The image processing device 12 is configured as described above.

[検出情報の送受信処理]
次に、図4を参照して、検出情報の送受信処理の詳細について説明する。
[Detection information transmission / reception processing]
Next, details of the detection information transmission / reception process will be described with reference to FIG.

前述したように、全周囲立体画像表示装置11と画像処理装置12においては、例えばUSB規格に準拠した通信によって、検出情報の送受信が行われる。画像処理装置12は、検出情報の受信を開始する場合、送信開始要求を、全周囲立体画像表示装置11に送信する。この送信開始要求には、任意のパラメータが含まれており、例えば、検出情報の送信対象となるセンサ54や、検出情報の送信間隔を指定したりすることができる。   As described above, in the omnidirectional stereoscopic image display device 11 and the image processing device 12, detection information is transmitted and received by communication conforming to the USB standard, for example. When starting reception of the detection information, the image processing device 12 transmits a transmission start request to the omnidirectional stereoscopic image display device 11. This transmission start request includes arbitrary parameters. For example, it is possible to specify a sensor 54 that is a transmission target of detection information and a transmission interval of detection information.

全周囲立体画像表示装置11は、画像処理装置12から送信開始要求を受信すると、その送信開始要求に含まれるパラメータに応じて、該当するセンサ54の検出情報の送信を開始する。例えば、パラメータとして、センサ54−1であるセンサ名と、1/30秒である送信間隔が指定された場合、全周囲立体画像表示装置11は、センサ54−1の検出情報を、送信間隔1/30秒で送信し続けることになる。この場合、センサ54−1の検出情報として、360ビット(8ビット×45)のデータが、1/30秒ごとに送信される。また、センサ名として、例えば、センサ54−1及び54−2が指定された場合には、720ビット(8ビット×45×2)のデータが、所定の送信間隔で送信されることになる。   When the omnidirectional stereoscopic image display device 11 receives the transmission start request from the image processing device 12, the omnidirectional stereoscopic image display device 11 starts transmitting the detection information of the corresponding sensor 54 in accordance with the parameter included in the transmission start request. For example, when the sensor name that is the sensor 54-1 and the transmission interval of 1/30 seconds are designated as parameters, the omnidirectional stereoscopic image display device 11 displays the detection information of the sensor 54-1 as the transmission interval 1 It will continue to transmit in / 30 seconds. In this case, 360-bit (8 bits × 45) data is transmitted every 1/30 seconds as detection information of the sensor 54-1. For example, when sensors 54-1 and 54-2 are designated as sensor names, data of 720 bits (8 bits × 45 × 2) is transmitted at a predetermined transmission interval.

その後、検出情報の受信を停止する場合、画像処理装置12は、送信終了要求を、全周囲立体画像表示装置11に送信する。この送信終了要求にも任意のパラメータが含まれており、例えば、検出情報の送信を停止する対象となるセンサを指定することができる。   Thereafter, when the reception of the detection information is stopped, the image processing device 12 transmits a transmission end request to the omnidirectional stereoscopic image display device 11. This transmission end request also includes an arbitrary parameter. For example, it is possible to specify a sensor that is a target for stopping transmission of detection information.

全周囲立体画像表示装置11は、画像処理装置12から送信停止要求を受信すると、その送信停止要求に含まれるパラメータに応じて、該当するセンサ54の検出情報の送信を停止する。例えば、パラメータとして、センサ54−1であるセンサ名が指定された場合、全周囲立体画像表示装置11は、センサ54−1の検出情報の送信を停止することになる。   When the omnidirectional stereoscopic image display device 11 receives the transmission stop request from the image processing device 12, the omnidirectional stereoscopic image display device 11 stops the transmission of the detection information of the corresponding sensor 54 according to the parameter included in the transmission stop request. For example, when the sensor name that is the sensor 54-1 is specified as the parameter, the omnidirectional stereoscopic image display device 11 stops transmitting the detection information of the sensor 54-1.

[検出情報を用いた立体画像表示処理]
次に、図5及び図6のフローチャートを参照して、検出情報を用いた立体画像表示処理について説明する。
[Stereoscopic image display processing using detection information]
Next, a stereoscopic image display process using detection information will be described with reference to the flowcharts of FIGS.

まず、図5のフローチャートを参照して、全周囲立体画像表示装置11により実行される立体画像表示処理について説明する。   First, a stereoscopic image display process executed by the omnidirectional stereoscopic image display device 11 will be described with reference to the flowchart of FIG.

立体画像表示処理が開始されると、画像処理装置12から画像データの送信が開始され、ステップS11以降の処理が実行される。なお、検出情報の送信の有無を示す送信フラグは、初期設定として、オフが設定されている。   When the stereoscopic image display process is started, transmission of image data is started from the image processing apparatus 12, and the processes after step S11 are executed. Note that the transmission flag indicating the presence / absence of transmission of detection information is set to OFF as an initial setting.

ステップS11において、通信I/F31は、画像処理装置12から送信される、立体画像に対応する画像データを受信する。通信I/F31により受信された画像データは、例えばミリ波帯の無線通信により、固定部21から回転部22に送信され、画像表示部53に供給される。これにより、全周囲立体画像表示装置11においては、回転部22の回転に応じて複数の発光素子が発光し、かつ、画像処理部52から供給される立体画像用の画像データに基づいて発光制御されることで、立体画像が表示される(ステップS12)。   In step S <b> 11, the communication I / F 31 receives image data corresponding to the stereoscopic image transmitted from the image processing device 12. The image data received by the communication I / F 31 is transmitted from the fixed unit 21 to the rotating unit 22 and supplied to the image display unit 53 by, for example, wireless communication in the millimeter wave band. Thereby, in the omnidirectional stereoscopic image display device 11, the plurality of light emitting elements emit light according to the rotation of the rotating unit 22, and the emission control is performed based on the image data for stereoscopic images supplied from the image processing unit 52. As a result, a stereoscopic image is displayed (step S12).

ステップS13において、センサ54は、立体画像を視認しているユーザの動作を検出する。具体的には、発光部61により発光された赤外線が、ユーザの手などにより反射され、その反射の戻り光が受光され、受光された反射光の強度に応じて、ユーザの動作が検出される。   In step S <b> 13, the sensor 54 detects the operation of the user who is viewing the stereoscopic image. Specifically, the infrared light emitted from the light emitting unit 61 is reflected by the user's hand or the like, the reflected return light is received, and the user's operation is detected according to the intensity of the received reflected light. .

ステップS14において、サンプリングフィルタ処理部81は、対象となるセンサ54の検出情報を生成する。具体的には、サンプリングフィルタ処理部81においては、センサ54から供給される受光信号に対してフィルタ処理が施された後、サンプリングが行われることで、受光信号のA/D変換が行われる。そして、A/D変換により得られたセンサ検出値と角度情報が対応付けられることで、センサ54の検出情報が生成される。生成された検出情報は、レジスタ74に記憶された後、無線通信部72と無線通信部42による無線通信によって、レジスタ43に記憶される。   In step S14, the sampling filter processing unit 81 generates detection information of the target sensor 54. Specifically, in the sampling filter processing unit 81, the light reception signal supplied from the sensor 54 is subjected to filter processing, and then sampling is performed to perform A / D conversion of the light reception signal. And the detection information of the sensor 54 is produced | generated by matching the sensor detection value obtained by A / D conversion, and angle information. The generated detection information is stored in the register 74 and then stored in the register 43 by wireless communication using the wireless communication unit 72 and the wireless communication unit 42.

ステップS15において、固定部制御部36は、通信I/F37を制御して、画像処理装置12から検出情報の送信開始要求を受信したか否かを判定する。   In step S <b> 15, the fixed unit control unit 36 controls the communication I / F 37 to determine whether or not a detection information transmission start request has been received from the image processing apparatus 12.

ステップS15において、検出情報の送信開始要求を受信したと判定された場合、処理は、ステップS16に進められる。ステップS16において、固定部制御部36は、検出情報の送信フラグをオンにする。これにより、図4に示したように、送信開始要求に含まれるパラメータに応じた検出情報の送信が開始される。一方、ステップS15において、送信開始要求を受信していないと判定された場合、ステップS16はスキップされ、処理は、ステップS17に進められる。この場合、送信フラグはオフのままとなるため、検出情報の送信は行われないことになる。   If it is determined in step S15 that the detection information transmission start request has been received, the process proceeds to step S16. In step S16, the fixed part control unit 36 turns on the detection information transmission flag. Thereby, as shown in FIG. 4, transmission of the detection information according to the parameter included in the transmission start request is started. On the other hand, if it is determined in step S15 that the transmission start request has not been received, step S16 is skipped, and the process proceeds to step S17. In this case, since the transmission flag remains off, detection information is not transmitted.

ステップS17において、固定部制御部36は、送信フラグがオンであるか否かを判定する。   In step S <b> 17, the fixed unit control unit 36 determines whether or not the transmission flag is on.

ステップS17において、送信フラグがオンであると判定された場合、処理は、ステップS18に進められる。ステップS18において、固定部制御部36は、送信開始要求に含まれる送信間隔のパラメータに基づいて、例えば1/30秒などの所定の送信間隔を経過したか否かを判定する。   If it is determined in step S17 that the transmission flag is on, the process proceeds to step S18. In step S18, the fixed unit control unit 36 determines whether or not a predetermined transmission interval such as 1/30 second has elapsed, based on the transmission interval parameter included in the transmission start request.

ステップS18において、所定の送信間隔を経過したと判定された場合、処理は、ステップS19に進められる。ステップS19において、固定部制御部36は、レジスタ43からパラメータにより指定されたセンサ54の検出情報を読み出し、変換テーブル45により変換することで、対象のセンサ54の検出情報を取得する。そして、通信I/F37は、検出情報を、画像処理装置12に送信する(ステップS20)。   If it is determined in step S18 that the predetermined transmission interval has elapsed, the process proceeds to step S19. In step S <b> 19, the fixed unit control unit 36 reads the detection information of the sensor 54 specified by the parameter from the register 43 and converts the detection information by the conversion table 45 to obtain the detection information of the target sensor 54. Then, the communication I / F 37 transmits the detection information to the image processing device 12 (step S20).

なお、送信フラグがオフである場合(ステップS17の「No」)、又は所定の送信間隔を経過していない場合(ステップS18の「No」)、検出情報の送信は行われないため、ステップS19,S20はスキップされる。   If the transmission flag is off (“No” in step S17), or if the predetermined transmission interval has not elapsed (“No” in step S18), detection information is not transmitted, so step S19 , S20 is skipped.

ステップS21において、固定部制御部36は、通信I/F37を制御して、画像処理装置12から検出情報の送信停止要求を受信したか否かを判定する。   In step S <b> 21, the fixed unit control unit 36 controls the communication I / F 37 to determine whether or not a detection information transmission stop request has been received from the image processing apparatus 12.

ステップS21において、検出情報の送信停止要求を受信したと判定された場合、処理は、ステップS22に進められる。ステップS22において、固定部制御部36は、検出情報の送信フラグをオフにする。これにより、図4に示したように、送信停止要求に含まれるパラメータに応じて検出情報の送信が停止される。一方、送信停止要求を受信していないと判定された場合、ステップS22はスキップされ、処理は、ステップS23に進められる。この場合、送信フラグの状態が維持されることになる。   If it is determined in step S21 that the detection information transmission stop request has been received, the process proceeds to step S22. In step S22, the fixed part control unit 36 turns off the detection information transmission flag. Thereby, as shown in FIG. 4, transmission of detection information is stopped according to the parameter included in the transmission stop request. On the other hand, if it is determined that the transmission stop request has not been received, step S22 is skipped, and the process proceeds to step S23. In this case, the state of the transmission flag is maintained.

続いて、ステップS23において、立体画像の表示を終了するか否かが判定され、立体画像の表示を終了しないと判定された場合、処理は、ステップS11に戻り、前述した処理が繰り返される。すなわち、ステップS11乃至S23が繰り返されることで、全周囲立体画像表示装置11では立体画像が表示されるとともに、検出情報の送信開始要求を受信してから送信停止要求を受信するまでの間は、立体画像を視認しているユーザの動作が検出され、その検出情報が画像処理装置12に送信される。   Subsequently, in step S23, it is determined whether or not to end the display of the stereoscopic image. If it is determined not to end the display of the stereoscopic image, the process returns to step S11 and the above-described processing is repeated. That is, by repeating steps S11 to S23, a stereoscopic image is displayed on the omnidirectional stereoscopic image display device 11, and from when a transmission start request for detection information is received until a transmission stop request is received, The operation of the user viewing the stereoscopic image is detected, and the detection information is transmitted to the image processing device 12.

そして、全周囲立体画像表示装置11では、送信開始要求を受信してから送信停止要求を受信するまでの間、画像処理装置12から送信される検出情報に基づき生成された画像データが受信され、検出されたユーザの動作に応じた任意の立体画像が表示される。   Then, the omnidirectional stereoscopic image display device 11 receives the image data generated based on the detection information transmitted from the image processing device 12 until the transmission stop request is received after the transmission start request is received, An arbitrary three-dimensional image corresponding to the detected user action is displayed.

その後、ステップS23において、立体画像の表示を終了すると判定された場合、図5の全周囲立体画像表示装置11による画像表示処理は終了する。   Thereafter, when it is determined in step S23 that the display of the stereoscopic image is to be ended, the image display process by the omnidirectional stereoscopic image display device 11 in FIG. 5 is ended.

以上のように、全周囲立体画像表示装置11においては、画像処理装置12から送信される立体画像用の画像データが受信され、受信された画像データに対応する任意の立体画像が表示され、表示された立体画像を視認しているユーザの動作が検出され、検出された動作に関する検出情報が生成され、画像処理装置12に送信される。そして、画像処理装置12から送信される、検出情報に基づき生成された画像データが受信され、受信された画像データに対応する、検出された動作に応じた任意の立体画像が表示される。   As described above, the omnidirectional stereoscopic image display device 11 receives the image data for stereoscopic images transmitted from the image processing device 12, displays an arbitrary stereoscopic image corresponding to the received image data, and displays it. The action of the user viewing the stereoscopic image is detected, and detection information regarding the detected action is generated and transmitted to the image processing device 12. Then, image data generated based on the detection information transmitted from the image processing device 12 is received, and an arbitrary stereoscopic image corresponding to the detected operation corresponding to the received image data is displayed.

これにより、全周囲立体画像表示装置11では、画像処理を専用に行う画像処理装置12により検出情報に基づき生成された画像データに対応する、任意の立体画像を表示させることができるので、検出情報を全周囲立体画像表示装置11の内部でのみ利用する場合と比べて、多様な画像表現を実現することができる。その結果、立体画像を視認しているユーザの満足度を向上させることができる。   Accordingly, the omnidirectional stereoscopic image display device 11 can display an arbitrary stereoscopic image corresponding to the image data generated based on the detection information by the image processing device 12 dedicated to image processing. Compared to the case where the image is used only inside the omnidirectional stereoscopic image display device 11, various image representations can be realized. As a result, the satisfaction level of the user who is viewing the stereoscopic image can be improved.

次に、図6のフローチャートを参照して、画像処理装置12により実行される立体画像表示処理について説明する。   Next, a stereoscopic image display process executed by the image processing device 12 will be described with reference to the flowchart of FIG.

ステップS51において、制御部101は、操作部102からの操作信号に基づいて、検出情報の受信を開始するか否かを判定する。   In step S <b> 51, the control unit 101 determines whether to start receiving detection information based on an operation signal from the operation unit 102.

ステップS51において、検出情報の受信を開始すると判定された場合、処理は、ステップS52に進められる。ステップS52において、通信I/F106は、制御部101の制御に従い、検出情報の送信開始要求を、全周囲立体画像表示装置11に送信する。これにより、図4に示したように、検出情報の送信が開始されることになる。一方、ステップS51において、検出情報の受信を開始しないと判定された場合、ステップS52はスキップされ、処理は、ステップS53に進められる。この場合、検出情報の送信開始要求が送信されないため、検出情報の送信は行われないことになる。   If it is determined in step S51 that reception of detection information is started, the process proceeds to step S52. In step S <b> 52, the communication I / F 106 transmits a detection information transmission start request to the omnidirectional stereoscopic image display device 11 under the control of the control unit 101. As a result, the transmission of the detection information is started as shown in FIG. On the other hand, when it is determined in step S51 that reception of detection information is not started, step S52 is skipped, and the process proceeds to step S53. In this case, since the detection information transmission start request is not transmitted, the detection information is not transmitted.

ステップS53において、制御部101は、通信I/F106を制御して、全周囲立体画像表示装置11から検出情報を受信したか否かを判定する。   In step S <b> 53, the control unit 101 controls the communication I / F 106 to determine whether detection information has been received from the omnidirectional stereoscopic image display device 11.

ステップS53において、検出情報を受信していないと判定された場合、処理は、ステップS54に進められる。ステップS54において、画像処理部104は、画像取得部103から供給される立体画像用の画像データに対して、所定の画像処理を施し、任意の立体画像に対応する画像データを生成する。そして、生成された画像データは、通信I/F105により全周囲立体画像表示装置11に送信される(ステップS57)。   If it is determined in step S53 that no detection information has been received, the process proceeds to step S54. In step S54, the image processing unit 104 performs predetermined image processing on the stereoscopic image image data supplied from the image acquisition unit 103, and generates image data corresponding to an arbitrary stereoscopic image. Then, the generated image data is transmitted to the omnidirectional stereoscopic image display device 11 by the communication I / F 105 (step S57).

一方、ステップS53において、検出情報を受信したと判定された場合、処理は、ステップS55に進められる。ステップS55において、制御部101は、通信I/F106から供給される検出情報を解析し、その解析結果を、画像処理部104に供給する。   On the other hand, if it is determined in step S53 that the detection information has been received, the process proceeds to step S55. In step S <b> 55, the control unit 101 analyzes the detection information supplied from the communication I / F 106 and supplies the analysis result to the image processing unit 104.

ステップS56において、画像処理部104は、検出情報の解析結果に基づいて、画像取得部103から供給される画像データに対して、所定の画像処理を施し、任意の立体画像に対応する画像データを生成する。   In step S56, the image processing unit 104 performs predetermined image processing on the image data supplied from the image acquisition unit 103 based on the analysis result of the detection information, and obtains image data corresponding to an arbitrary stereoscopic image. Generate.

具体的には、制御部101は、回転部22の所定の回転角ごとの距離情報に基づいて、例えばユーザの手などが存在すると推測される領域(反応領域)の判定を行う。例えば、距離情報が示す距離が、ある一定の閾値レベルを超えた角度領域を反応領域と判定する。そして、その判定結果に応じた反応領域に関する情報が、解析結果として、画像処理部104に供給される。画像処理部104は、反応領域に応じた立体画像に対応する画像データを生成する。例えば、反応領域に応じた立体画像としては、全体の表示状態が変化した立体画像や、ユーザの手や顔などが存在すると推測される反応領域に対応する部分の表示状態のみが変化した立体画像が生成される。   Specifically, based on the distance information for each predetermined rotation angle of the rotation unit 22, the control unit 101 determines an area (reaction area) in which, for example, a user's hand is estimated to exist. For example, an angle region in which the distance indicated by the distance information exceeds a certain threshold level is determined as a reaction region. Information on the reaction region corresponding to the determination result is supplied to the image processing unit 104 as an analysis result. The image processing unit 104 generates image data corresponding to a stereoscopic image corresponding to the reaction area. For example, as a stereoscopic image corresponding to the reaction region, a stereoscopic image in which the entire display state has changed, or a stereoscopic image in which only the display state of the portion corresponding to the reaction region in which the user's hand or face is assumed to exist is changed. Is generated.

なお、反応領域の判定に用いる閾値レベルには、ヒステリシスを持たせるようにしてもよい。また、閾値レベルを設けずに、距離情報(反射強度の変化)に応じた任意の表示動作をさせるようにしてもよい。   In addition, you may make it give a hysteresis to the threshold level used for determination of a reaction area | region. Moreover, you may make it perform arbitrary display operations according to distance information (change of reflection intensity), without providing a threshold level.

生成された画像データは、通信I/F105により全周囲立体画像表示装置11に送信される(ステップS57)。   The generated image data is transmitted to the omnidirectional stereoscopic image display device 11 by the communication I / F 105 (step S57).

このようにして生成された画像データを、全周囲立体画像表示装置11に送信することで、全周囲立体画像表示装置11では、反応領域(ユーザの手や顔などの検出位置)に応じて、例えば、ユーザから見た画像表示部53の表示状態が変化するように発光素子の発光制御が行われる。例えば、全周囲立体画像表示装置11において、立体画像として、鳥の画像が表示されている場合に、回転部22の周囲でユーザの手が検出されたとき、その手が検出された方向に鳥が向くような表示を行うことができる。これにより、ユーザは、手をかざしただけで、立体画像の表示状態(鳥の向き)を操作しているような感覚を得ることができる。   By transmitting the image data generated in this way to the omnidirectional stereoscopic image display device 11, the omnidirectional stereoscopic image display device 11 has a response area (detection position of a user's hand or face) according to the reaction area. For example, the light emission control of the light emitting element is performed so that the display state of the image display unit 53 viewed from the user changes. For example, in the omnidirectional stereoscopic image display device 11, when a bird image is displayed as a stereoscopic image, when a user's hand is detected around the rotating unit 22, the bird is detected in the direction in which the hand is detected. Can be displayed. Thereby, the user can obtain a feeling that the user is operating the display state of the stereoscopic image (the direction of the bird) only by holding the hand.

また、画像処理を専用に行う画像処理装置12側で、全周囲立体画像表示装置11に表示される立体画像に対応する画像データを、検出情報に応じて編集することができるため、全周囲立体画像表示装置11側に負荷をかけずに、多様な画像表現を実現することができる。   Further, since the image data corresponding to the stereoscopic image displayed on the omnidirectional stereoscopic image display device 11 can be edited on the side of the image processing apparatus 12 dedicated to image processing according to the detection information, Various image expressions can be realized without imposing a load on the image display apparatus 11 side.

ステップS57の処理が終了すると、処理は、ステップS58に進められる。   When the process of step S57 ends, the process proceeds to step S58.

ステップS58において、制御部101は、操作部102からの操作信号に基づいて、検出情報の受信を停止するか否かを判定する。   In step S <b> 58, the control unit 101 determines whether to stop receiving detection information based on the operation signal from the operation unit 102.

ステップS58において、検出情報の受信を停止すると判定された場合、処理は、ステップS59に進められる。ステップS59において、通信I/F106は、制御部101の制御に従い、検出情報の送信停止要求を、全周囲立体画像表示装置11に送信する。これにより、図4に示したように、検出情報の送信が停止されることになる。一方、ステップS58において、検出情報の受信を停止しないと判定された場合、ステップS59はスキップされ、処理は、ステップS60に進められる。この場合、検出情報の送信停止要求が送信されないため、検出情報の送信の状態が維持されることになる。   If it is determined in step S58 that reception of detection information is to be stopped, the process proceeds to step S59. In step S <b> 59, the communication I / F 106 transmits a detection information transmission stop request to the omnidirectional stereoscopic image display device 11 in accordance with the control of the control unit 101. As a result, the transmission of detection information is stopped as shown in FIG. On the other hand, if it is determined in step S58 that reception of detection information is not stopped, step S59 is skipped, and the process proceeds to step S60. In this case, the detection information transmission stop request is not transmitted, so that the detection information transmission state is maintained.

そして、ステップS60において、立体画像の表示を終了するか否かが判定され、立体画像の表示を終了しないと判定された場合、処理は、ステップS51に戻り、前述した処理が繰り返される。すなわち、ステップS51乃至S60が繰り返されることで、画像処理装置12では、検出情報の送信開始要求を送信してから、送信停止要求を送信するまでの間は、検出情報が受信され、その検出情報の解析結果に基づいた立体画像用の画像データが生成され、全周囲立体画像表示装置11に送信される。   In step S60, it is determined whether or not to end the display of the stereoscopic image. If it is determined not to end the display of the stereoscopic image, the process returns to step S51 and the above-described processing is repeated. That is, by repeating Steps S51 to S60, the image processing apparatus 12 receives the detection information from the time when the detection information transmission start request is transmitted until the time when the transmission stop request is transmitted. 3D image data based on the analysis result is generated and transmitted to the omnidirectional stereoscopic image display device 11.

その後、ステップS60において、立体画像の表示を終了すると判定された場合、図6の画像処理装置12による画像表示処理は終了する。   Thereafter, when it is determined in step S60 that the display of the stereoscopic image is to be ended, the image display process by the image processing device 12 in FIG. 6 is ended.

以上のように、画像処理装置12においては、任意の立体画像に対応する画像データが生成され、生成された画像データが、全周囲立体画像表示装置11に送信され、全周囲立体画像表示装置11から送信される検出情報が受信される。そして、受信された検出情報に基づいて、任意の立体画像に対応する画像データが生成され、検出情報に基づき生成された画像データが、全周囲立体画像表示装置11に送信される。   As described above, in the image processing device 12, image data corresponding to an arbitrary stereoscopic image is generated, and the generated image data is transmitted to the omnidirectional stereoscopic image display device 11, and the omnidirectional stereoscopic image display device 11. The detection information transmitted from is received. Then, image data corresponding to an arbitrary stereoscopic image is generated based on the received detection information, and the image data generated based on the detection information is transmitted to the omnidirectional stereoscopic image display device 11.

これにより、画像処理を専用に行う画像処理装置12では、全周囲立体画像表示装置11から送信される検出情報に基づき生成された画像データを、全周囲立体画像表示装置11に送信することができるので、検出情報を全周囲立体画像表示装置11の内部でのみ利用する場合と比べて、多様な画像表現を実現することができる。   As a result, the image processing device 12 dedicated to image processing can transmit the image data generated based on the detection information transmitted from the omnidirectional stereoscopic image display device 11 to the omnidirectional stereoscopic image display device 11. Therefore, various image representations can be realized as compared with the case where the detection information is used only within the omnidirectional stereoscopic image display device 11.

[立体画像の表示状態の変化の例]
次に、図7及び図8を参照して、立体画像の表示状態の変化の具体的な例について説明する。
[Example of change in display state of stereoscopic image]
Next, a specific example of a change in the display state of a stereoscopic image will be described with reference to FIGS.

図7には、全周囲立体画像表示装置11に表示されている立体画像に対して、ユーザの手がかざされた場合の、立体画像の表示状態の変化の様子が時系列で示されている。図7に示すように、ユーザの手が立体画像に近づくほど、「imagile」の文字が全周囲に飛び出してくるように、立体画像の表示状態を変化させることができる。   FIG. 7 shows, in time series, changes in the display state of the stereoscopic image when the user's hand is held over the stereoscopic image displayed on the omnidirectional stereoscopic image display device 11. . As shown in FIG. 7, the display state of the stereoscopic image can be changed so that the character “imagile” pops out all around as the user's hand approaches the stereoscopic image.

この場合、全周囲立体画像表示装置11側では、ユーザの手を検出して、その検出情報を画像処理装置12に送信するだけであって、ユーザの手の検出位置に応じた立体画像を表示するための画像データは、画像処理を専用に行う画像処理装置12側で生成される。そして、全周囲立体画像表示装置11では、画像処理装置12からの画像データに基づいて、例えば、ユーザから見た「imagile」の文字の表示状態が変化するように発光素子の発光制御が行われる。   In this case, the omnidirectional stereoscopic image display device 11 only detects the user's hand and transmits the detection information to the image processing device 12, and displays a stereoscopic image corresponding to the detected position of the user's hand. The image data to be generated is generated on the side of the image processing apparatus 12 that performs image processing exclusively. In the omnidirectional stereoscopic image display device 11, based on the image data from the image processing device 12, for example, the light emission control of the light emitting element is performed so that the display state of the characters “imagile” viewed from the user changes. .

また、例えば、ユーザが手をゆっくり動かしたときは、その手の動きに追従して文字が出たり、引っ込んだりする、といったこともできる。さらに、手を速く動かし過ぎて、その動作が検出されなかった場合には、例えば、文字は、飛び出し位置で3秒間停止した後は、その位置から自動的に引っ込むようにする、といったこともできる。   In addition, for example, when the user moves his / her hand slowly, characters can appear or retract following the movement of the hand. Furthermore, when the hand is moved too fast and the movement is not detected, for example, after the character stops at the pop-out position for 3 seconds, the character can be automatically retracted from the position. .

また、図8に示すように、ユーザの手が立体画像に近づくと、カメラが浮遊する一方、その逆に、手を立体画像から遠ざけると、カメラがゆっくり着地するように、立体画像の表示状態を変化させることができる。この場合も、全周囲立体画像表示装置11は、ユーザの手を検出して、その検出情報を画像処理装置12に送信するだけであって、ユーザの手の検出位置に応じた立体画像を表示するための画像データは、画像処理を専用に行う画像処理装置12により生成される。   In addition, as shown in FIG. 8, when the user's hand approaches the stereoscopic image, the camera floats, and conversely, when the hand is moved away from the stereoscopic image, the stereoscopic image display state is such that the camera slowly lands. Can be changed. Also in this case, the omnidirectional stereoscopic image display device 11 only detects the user's hand and transmits the detection information to the image processing device 12, and displays a stereoscopic image corresponding to the detected position of the user's hand. The image data to be generated is generated by the image processing device 12 that performs image processing exclusively.

これにより、ユーザは、手をかざしただけで、立体画像の表示状態を操作しているような感覚を得ることができる。   Thereby, the user can obtain a feeling that the user is operating the display state of the stereoscopic image only by holding the hand.

また、全周囲立体画像表示装置11は、検出情報を画像処理装置12に送信するだけであって、ユーザの手の検出位置に応じた立体画像を表示するための画像データを生成するのは、画像処理を専用に行う画像処理装置12であるので、検出情報の応用方法を自由にカスタマイズすることができ、多様な画像表現と合わせて、そのような画像表現を実現するためのアプリケーションを提供することができる。   The omnidirectional stereoscopic image display device 11 only transmits the detection information to the image processing device 12, and generates image data for displaying a stereoscopic image according to the detection position of the user's hand. Since the image processing apparatus 12 performs image processing exclusively, the application method of the detection information can be freely customized, and an application for realizing such image representation is provided together with various image representations. be able to.

なお、前述した説明では、センサ54として、赤外線を用いたセンサを一例に説明したが、ユーザの動作を検出するための他のセンサを用いることができる。また、センサ54の代わりに、カメラを設けることで、カメラにより撮像された撮像画像に対して所定の画像処理を行い、その結果得られる情報から、ユーザの動作を検出してもよい。さらに、センサ54の代わりに、センサを内蔵したタッチパネルを設けて、ユーザの動作を検出してもよい。   In the above description, a sensor using infrared rays has been described as an example of the sensor 54, but another sensor for detecting the user's operation can be used. In addition, by providing a camera instead of the sensor 54, predetermined image processing may be performed on a captured image captured by the camera, and a user's operation may be detected from information obtained as a result. Furthermore, instead of the sensor 54, a touch panel with a built-in sensor may be provided to detect the user's operation.

また、前述した説明では、全周囲立体画像表示装置11と画像処理装置12は、ケーブル24,25を介して、画像データや検出情報などのデータの送受信を行うとして説明したが、有線通信に限らず、所定の通信方式に従った無線通信によりデータの送受信を行うようにしてもよい。   In the above description, the omnidirectional stereoscopic image display device 11 and the image processing device 12 have been described as transmitting and receiving data such as image data and detection information via the cables 24 and 25, but are limited to wired communication. Instead, data may be transmitted and received by wireless communication in accordance with a predetermined communication method.

[本技術を適用したコンピュータの説明]
前述した全周囲立体画像表示装置11又は画像処理装置12で行われる一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
[Description of computer to which this technology is applied]
The series of processes performed by the omnidirectional stereoscopic image display device 11 or the image processing device 12 described above can be performed by hardware or software. When a series of processing is performed by software, a program constituting the software is installed in a general-purpose computer or the like.

そこで、図9は、前述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。   FIG. 9 shows an example of the configuration of an embodiment of a computer in which a program for executing the series of processes described above is installed.

プログラムは、コンピュータ200に内蔵されているハードディスク等の記録部208やROM(Read Only Memory)202に予め記録しておくことができる。   The program can be recorded in advance in a recording unit 208 such as a hard disk or a ROM (Read Only Memory) 202 built in the computer 200.

あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory),MO(Magneto Optical)ディスク,DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブルメディア211に、一時的あるいは永続的に格納(記録)しておくことができる。このようなリムーバブルメディア211は、いわゆるパッケージソフトウエアとして提供することができる。   Alternatively, the program is temporarily or permanently stored on a removable medium 211 such as a flexible disk, a CD-ROM (Compact Disc Read Only Memory), an MO (Magneto Optical) disk, a DVD (Digital Versatile Disc), a magnetic disk, or a semiconductor memory. Can be stored (recorded). Such a removable medium 211 can be provided as so-called package software.

なお、プログラムは、前述したようなリムーバブルメディア211からコンピュータ200にインストールする他、ダウンロードサイトから、デジタル衛星放送用の人工衛星を介して、コンピュータ200に無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータ200に有線で転送し、コンピュータ200では、そのようにして転送されるプログラムを、通信部209で受信し、記録部208にインストールすることができる。   The program is installed in the computer 200 from the removable medium 211 as described above, and is transferred from the download site to the computer 200 via a digital satellite broadcasting artificial satellite, or a local area network (LAN). The program can be transferred to the computer 200 via a network such as the Internet, and the computer 200 can receive the program transferred in this way by the communication unit 209 and install it in the recording unit 208.

コンピュータ200は、CPU(Central Processing Unit)201を内蔵している。CPU201には、バス204を介して、入出力インタフェース205が接続されており、CPU201は、入出力インタフェース205を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部206が操作等されることにより指令が入力されると、それに従って、ROM202に格納されているプログラムを実行する。あるいは、また、CPU201は、記録部208に格納されているプログラム、衛星若しくはネットワークから転送され、通信部209で受信されて記録部208にインストールされたプログラム、又はドライブ210に装着されたリムーバブルメディア211から読み出されて記録部208にインストールされたプログラムを、RAM(Random Access Memory)203にロードして実行する。これにより、CPU201は、前述したフローチャートにしたがった処理、あるいは前述したブロック図の構成により行われる処理を行う。そして、CPU201は、その処理結果を、必要に応じて、例えば、入出力インタフェース205を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部207から出力、あるいは、通信部209から送信、さらには、記録部208に記録等させる。   The computer 200 includes a CPU (Central Processing Unit) 201. An input / output interface 205 is connected to the CPU 201 via the bus 204, and the CPU 201 operates an input unit 206 including a keyboard, a mouse, a microphone, and the like by the user via the input / output interface 205. When a command is input by being equalized, the program stored in the ROM 202 is executed accordingly. Alternatively, the CPU 201 transfers a program stored in the recording unit 208, a program transferred from a satellite or a network, received by the communication unit 209, and installed in the recording unit 208, or a removable medium 211 installed in the drive 210. The program read from the program and installed in the recording unit 208 is loaded into a RAM (Random Access Memory) 203 and executed. Thereby, the CPU 201 performs processing according to the flowchart described above or processing performed by the configuration of the block diagram described above. Then, the CPU 201 outputs the processing result from the output unit 207 configured with an LCD (Liquid Crystal Display), a speaker, or the like via the input / output interface 205 or the communication unit 209 as necessary. Transmission is performed, and recording is performed by the recording unit 208.

ここで、本明細書において、コンピュータ200に各種の処理を行わせるためのプログラムを記述する処理ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理(例えば、並列処理あるいはオブジェクトによる処理)も含むものである。   Here, in the present specification, the processing steps for describing a program for causing the computer 200 to perform various processes do not necessarily have to be processed in time series according to the order described in the flowchart, and may be performed in parallel or individually. (For example, parallel processing or object processing).

また、プログラムは、1のコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。   Further, the program may be processed by one computer, or may be processed in a distributed manner by a plurality of computers. Furthermore, the program may be transferred to a remote computer and executed.

なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。   In the present specification, the term “system” represents the entire apparatus constituted by a plurality of apparatuses.

また、本技術の実施の形態は、前述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。   The embodiments of the present technology are not limited to the above-described embodiments, and various modifications can be made without departing from the gist of the present technology.

さらに、本技術は、以下の構成とすることも可能である。   Furthermore, this technique can also be set as the following structures.

[1]
内部に回転軸を有する円筒形状の回転部と、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信する画像受信部と、
前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、
表示された前記画像を視認しているユーザの動作を検出する検出部と、
検出された前記動作に関する検出情報を生成する検出情報生成部と、
生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部と
を備え、
前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
画像表示装置。
[2]
前記検出情報生成部は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む前記検出情報を生成する
[1]に記載の画像表示装置。
[3]
前記画像受信部は、前記画像処理装置から送信される、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示させる
[2]に記載の画像表示装置。
[4]
前記検出情報送信部は、前記検出情報を、あらかじめ設定される送信間隔で前記画像処理装置に送信する
[1]乃至[3]のいずれかに記載の画像表示装置。
[5]
前記検出部は、1又は複数設けられ、
前記検出情報生成部は、前記検出部ごとの前記検出情報を生成する
[1]乃至[4]のいずれかに記載の画像表示装置。
[6]
内部に回転軸を有する円筒形状の回転部を備える画像表示装置が、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信し、
前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させ、
表示された前記画像を視認しているユーザの動作を検出し、
検出された前記動作に関する検出情報を生成し、
生成された前記検出情報を、前記画像処理装置に送信し、
前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
ステップを含む画像表示方法。
[7]
内部に回転軸を有する円筒形状の回転部を備える画像表示装置の制御用のプログラムであって、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信し、
前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させ、
表示された前記画像を視認しているユーザの動作を検出し、
検出された前記動作に関する検出情報を生成し、
生成された前記検出情報を、前記画像処理装置に送信し、
前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
ステップを含む処理を、画像表示装置のコンピュータに実行させるためのプログラム。
[8]
任意の画像に対応する画像データを生成する画像生成部と、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信する画像送信部と、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信する検出情報受信部と
を備え、
前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
画像処理装置。
[9]
前記検出情報は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む
[8]に記載の画像処理装置。
[10]
前記画像生成部は、受信された前記検出情報に基づいて、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを生成する
[9]に記載の画像処理装置。
[11]
前記検出情報受信部は、あらかじめ設定される送信間隔で前記画像表示装置から送信される前記検出情報を受信する
[8]乃至[10]のいずれかに記載の画像処理装置。
[12]
画像処理装置が、
任意の画像に対応する画像データを生成し、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信し、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信し、
受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
ステップを含む画像処理方法。
[13]
画像処理装置の制御用のプログラムであって、
任意の画像に対応する画像データを生成し、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信し、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信し、
受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
ステップを含む処理を、画像処理装置のコンピュータに実行させるためのプログラム。
[14]
画像表示装置と、画像処理装置からなる画像表示システムであって、
前記画像表示装置は、
内部に回転軸を有する円筒形状の回転部と、
前記画像処理装置から送信される前記画像データを受信する画像受信部と、
前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、
表示された前記画像を視認しているユーザの動作を検出する検出部と、
検出された前記動作に関する検出情報を生成する検出情報生成部と、
生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部と
を備え、
前記画像処理装置は、
任意の画像に対応する画像データを生成する画像生成部と、
生成された前記画像データを、前記画像表示装置に送信する画像送信部と、
前記画像表示装置から送信される、前記検出情報を受信する検出情報受信部と
を備え、
前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信し、
前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
画像表示システム。
[1]
A cylindrical rotating part having a rotating shaft inside;
An image receiving unit that receives the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
An image display unit that is provided inside the rotating unit and displays an arbitrary image corresponding to the received image data by emitting light according to the rotation of the rotating unit;
A detection unit that detects an operation of a user viewing the displayed image;
A detection information generation unit that generates detection information related to the detected operation;
A detection information transmission unit that transmits the generated detection information to the image processing apparatus;
The image receiving unit receives image data generated based on the detection information transmitted from the image processing device,
The image display unit displays an arbitrary image corresponding to the detected operation corresponding to the received image data.
[2]
The image display device according to [1], wherein the detection information generation unit generates the detection information including information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.
[3]
The image receiving unit receives image data transmitted from the image processing device for displaying an image in which only a display state of a portion corresponding to a detection position of the motion detected at each predetermined rotation angle is changed. And
The image display device according to [2], wherein the image display unit displays an image corresponding to the received image data in which only a display state of a portion corresponding to the detected position of the detected motion is changed.
[4]
The image display device according to any one of [1] to [3], wherein the detection information transmission unit transmits the detection information to the image processing device at a preset transmission interval.
[5]
One or more detection units are provided,
The image display device according to any one of [1] to [4], wherein the detection information generation unit generates the detection information for each detection unit.
[6]
An image display device including a cylindrical rotating unit having a rotating shaft inside,
Receiving the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
By emitting light according to the rotation of the rotating unit, to display an arbitrary image corresponding to the received image data,
Detecting the action of the user viewing the displayed image,
Generating detection information regarding the detected motion;
Transmitting the generated detection information to the image processing apparatus;
Receiving image data generated based on the detection information transmitted from the image processing device;
An image display method including a step of displaying an arbitrary image corresponding to the detected motion corresponding to the received image data.
[7]
A program for controlling an image display device including a cylindrical rotating unit having a rotating shaft inside,
Receiving the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
By emitting light according to the rotation of the rotating unit, to display an arbitrary image corresponding to the received image data,
Detecting the action of the user viewing the displayed image,
Generating detection information regarding the detected motion;
Transmitting the generated detection information to the image processing apparatus;
Receiving image data generated based on the detection information transmitted from the image processing device;
A program for causing a computer of an image display device to execute a process including a step of displaying an arbitrary image corresponding to the detected operation corresponding to the received image data.
[8]
An image generation unit for generating image data corresponding to an arbitrary image;
An image transmission unit that transmits the generated image data to an image display device that displays an arbitrary image corresponding to the image data in accordance with rotation of the rotation unit;
A detection information receiving unit that receives detection information related to the action of the user viewing the image, transmitted from the image display device,
The image generation unit generates image data corresponding to an arbitrary image based on the received detection information,
The image transmission device transmits the image data generated based on the detection information to the image display device.
[9]
The image processing apparatus according to [8], wherein the detection information includes information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.
[10]
The image generation unit displays image data for displaying an image in which only a display state of a portion corresponding to the detection position of the motion detected at each predetermined rotation angle is changed based on the received detection information. The image processing apparatus according to [9].
[11]
The image processing device according to any one of [8] to [10], wherein the detection information receiving unit receives the detection information transmitted from the image display device at a preset transmission interval.
[12]
The image processing device
Generate image data corresponding to any image,
The generated image data is transmitted to an image display device that displays an arbitrary image corresponding to the image data according to the rotation of the rotation unit,
Receiving detection information transmitted from the image display device relating to the action of the user viewing the image;
Based on the received detection information, generate image data corresponding to an arbitrary image,
An image processing method including a step of transmitting the image data generated based on the detection information to the image display device.
[13]
A program for controlling an image processing apparatus,
Generate image data corresponding to any image,
The generated image data is transmitted to an image display device that displays an arbitrary image corresponding to the image data according to the rotation of the rotation unit,
Receiving detection information transmitted from the image display device relating to the action of the user viewing the image;
Based on the received detection information, generate image data corresponding to an arbitrary image,
A program for causing a computer of an image processing apparatus to execute a process including a step of transmitting the image data generated based on the detection information to the image display apparatus.
[14]
An image display system comprising an image display device and an image processing device,
The image display device includes:
A cylindrical rotating part having a rotating shaft inside;
An image receiving unit for receiving the image data transmitted from the image processing device;
An image display unit that is provided inside the rotating unit and displays an arbitrary image corresponding to the received image data by emitting light according to the rotation of the rotating unit;
A detection unit that detects an operation of a user viewing the displayed image;
A detection information generation unit that generates detection information related to the detected operation;
A detection information transmission unit that transmits the generated detection information to the image processing apparatus;
The image processing apparatus includes:
An image generation unit for generating image data corresponding to an arbitrary image;
An image transmission unit that transmits the generated image data to the image display device;
A detection information receiving unit that receives the detection information transmitted from the image display device, and
The image generation unit generates image data corresponding to an arbitrary image based on the received detection information,
The image transmission unit transmits the image data generated based on the detection information to the image display device,
The image receiving unit receives image data generated based on the detection information transmitted from the image processing device,
The image display unit displays an arbitrary image corresponding to the detected operation corresponding to the received image data.

1 立体画像表示システム, 11 全周囲立体画像表示装置, 12 画像処理装置, 21 固定部, 22 回転部, 23 スリット, 31 通信I/F, 35 検出情報処理部, 36 固定部制御部, 37 通信I/F, 45 変換テーブル, 53 画像表示部, 54,54−1,54−2 センサ, 55 検出情報処理部, 56 回転部制御部, 81 サンプリングフィルタ処理部, 101 制御部, 104 画像処理部, 105 通信I/F, 106 通信I/F, 200 コンピュータ, 201 CPU   DESCRIPTION OF SYMBOLS 1 stereoscopic image display system, 11 all-around stereoscopic image display apparatus, 12 image processing apparatus, 21 fixing | fixed part, 22 rotation part, 23 slit, 31 communication I / F, 35 detection information processing part, 36 fixed part control part, 37 communication I / F, 45 conversion table, 53 image display unit, 54, 54-1, 54-2 sensor, 55 detection information processing unit, 56 rotation unit control unit, 81 sampling filter processing unit, 101 control unit, 104 image processing unit , 105 Communication I / F, 106 Communication I / F, 200 Computer, 201 CPU

Claims (14)

内部に回転軸を有する円筒形状の回転部と、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信する画像受信部と、
前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、
表示された前記画像を視認しているユーザの動作を検出する検出部と、
検出された前記動作に関する検出情報を生成する検出情報生成部と、
生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部と
を備え、
前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
画像表示装置。
A cylindrical rotating part having a rotating shaft inside;
An image receiving unit that receives the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
An image display unit that is provided inside the rotating unit and displays an arbitrary image corresponding to the received image data by emitting light according to the rotation of the rotating unit;
A detection unit that detects an operation of a user viewing the displayed image;
A detection information generation unit that generates detection information related to the detected operation;
A detection information transmission unit that transmits the generated detection information to the image processing apparatus;
The image receiving unit receives image data generated based on the detection information transmitted from the image processing device,
The image display unit displays an arbitrary image corresponding to the detected operation corresponding to the received image data.
前記検出情報生成部は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む前記検出情報を生成する
請求項1に記載の画像表示装置。
The image display device according to claim 1, wherein the detection information generation unit generates the detection information including information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.
前記画像受信部は、前記画像処理装置から送信される、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示させる
請求項2に記載の画像表示装置。
The image receiving unit receives image data transmitted from the image processing device for displaying an image in which only a display state of a portion corresponding to a detection position of the motion detected at each predetermined rotation angle is changed. And
The image display device according to claim 2, wherein the image display unit displays an image in which only a display state of a portion corresponding to the detected position of the detected motion corresponding to the received image data is changed.
前記検出情報送信部は、前記検出情報を、あらかじめ設定される送信間隔で前記画像処理装置に送信する
請求項1に記載の画像表示装置。
The image display device according to claim 1, wherein the detection information transmission unit transmits the detection information to the image processing device at a preset transmission interval.
前記検出部は、1又は複数設けられ、
前記検出情報生成部は、前記検出部ごとの前記検出情報を生成する
請求項1に記載の画像表示装置。
One or more detection units are provided,
The image display device according to claim 1, wherein the detection information generation unit generates the detection information for each detection unit.
内部に回転軸を有する円筒形状の回転部を備える画像表示装置が、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信し、
前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させ、
表示された前記画像を視認しているユーザの動作を検出し、
検出された前記動作に関する検出情報を生成し、
生成された前記検出情報を、前記画像処理装置に送信し、
前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
ステップを含む画像表示方法。
An image display device including a cylindrical rotating unit having a rotating shaft inside,
Receiving the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
By emitting light according to the rotation of the rotating unit, to display an arbitrary image corresponding to the received image data,
Detecting the action of the user viewing the displayed image,
Generating detection information regarding the detected motion;
Transmitting the generated detection information to the image processing apparatus;
Receiving image data generated based on the detection information transmitted from the image processing device;
An image display method including a step of displaying an arbitrary image corresponding to the detected motion corresponding to the received image data.
内部に回転軸を有する円筒形状の回転部を備える画像表示装置の制御用のプログラムであって、
任意の画像を表示するための画像データを生成する画像処理装置から送信される前記画像データを受信し、
前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させ、
表示された前記画像を視認しているユーザの動作を検出し、
検出された前記動作に関する検出情報を生成し、
生成された前記検出情報を、前記画像処理装置に送信し、
前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
ステップを含む処理を、画像表示装置のコンピュータに実行させるためのプログラム。
A program for controlling an image display device including a cylindrical rotating unit having a rotating shaft inside,
Receiving the image data transmitted from an image processing device that generates image data for displaying an arbitrary image;
By emitting light according to the rotation of the rotating unit, to display an arbitrary image corresponding to the received image data,
Detecting the action of the user viewing the displayed image,
Generating detection information regarding the detected motion;
Transmitting the generated detection information to the image processing apparatus;
Receiving image data generated based on the detection information transmitted from the image processing device;
A program for causing a computer of an image display device to execute a process including a step of displaying an arbitrary image corresponding to the detected operation corresponding to the received image data.
任意の画像に対応する画像データを生成する画像生成部と、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信する画像送信部と、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信する検出情報受信部と
を備え、
前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
画像処理装置。
An image generation unit for generating image data corresponding to an arbitrary image;
An image transmission unit that transmits the generated image data to an image display device that displays an arbitrary image corresponding to the image data in accordance with rotation of the rotation unit;
A detection information receiving unit that receives detection information related to the action of the user viewing the image, transmitted from the image display device,
The image generation unit generates image data corresponding to an arbitrary image based on the received detection information,
The image transmission device transmits the image data generated based on the detection information to the image display device.
前記検出情報は、前記回転部の所定の回転角ごとに検出される前記動作の検出位置に関する情報を含む
請求項8に記載の画像処理装置。
The image processing apparatus according to claim 8, wherein the detection information includes information related to a detection position of the motion detected for each predetermined rotation angle of the rotation unit.
前記画像生成部は、受信された前記検出情報に基づいて、所定の回転角ごとに検出された前記動作の検出位置に対応する部分の表示状態のみが変化した画像を表示するための画像データを生成する
請求項9に記載の画像処理装置。
The image generation unit displays image data for displaying an image in which only a display state of a portion corresponding to the detection position of the motion detected at each predetermined rotation angle is changed based on the received detection information. The image processing apparatus according to claim 9 to be generated.
前記検出情報受信部は、あらかじめ設定される送信間隔で前記画像表示装置から送信される前記検出情報を受信する
請求項8に記載の画像処理装置。
The image processing device according to claim 8, wherein the detection information receiving unit receives the detection information transmitted from the image display device at a preset transmission interval.
画像処理装置が、
任意の画像に対応する画像データを生成し、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信し、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信し、
受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
ステップを含む画像処理方法。
The image processing device
Generate image data corresponding to any image,
The generated image data is transmitted to an image display device that displays an arbitrary image corresponding to the image data according to the rotation of the rotation unit,
Receiving detection information transmitted from the image display device relating to the action of the user viewing the image;
Based on the received detection information, generate image data corresponding to an arbitrary image,
An image processing method including a step of transmitting the image data generated based on the detection information to the image display device.
画像処理装置の制御用のプログラムであって、
任意の画像に対応する画像データを生成し、
生成された前記画像データを、回転部の回転に応じて前記画像データに対応する任意の画像を表示する画像表示装置に送信し、
前記画像表示装置から送信される、前記画像を視認しているユーザの動作に関する検出情報を受信し、
受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信する
ステップを含む処理を、画像処理装置のコンピュータに実行させるためのプログラム。
A program for controlling an image processing apparatus,
Generate image data corresponding to any image,
The generated image data is transmitted to an image display device that displays an arbitrary image corresponding to the image data according to the rotation of the rotation unit,
Receiving detection information transmitted from the image display device relating to the action of the user viewing the image;
Based on the received detection information, generate image data corresponding to an arbitrary image,
A program for causing a computer of an image processing apparatus to execute a process including a step of transmitting the image data generated based on the detection information to the image display apparatus.
画像表示装置と、画像処理装置からなる画像表示システムであって、
前記画像表示装置は、
内部に回転軸を有する円筒形状の回転部と、
前記画像処理装置から送信される前記画像データを受信する画像受信部と、
前記回転部の内部に設けられ、前記回転部の回転に応じて発光することで、受信された前記画像データに対応する任意の画像を表示させる画像表示部と、
表示された前記画像を視認しているユーザの動作を検出する検出部と、
検出された前記動作に関する検出情報を生成する検出情報生成部と、
生成された前記検出情報を、前記画像処理装置に送信する検出情報送信部と
を備え、
前記画像処理装置は、
任意の画像に対応する画像データを生成する画像生成部と、
生成された前記画像データを、前記画像表示装置に送信する画像送信部と、
前記画像表示装置から送信される、前記検出情報を受信する検出情報受信部と
を備え、
前記画像生成部は、受信された前記検出情報に基づいて、任意の画像に対応する画像データを生成し、
前記画像送信部は、前記検出情報に基づき生成された前記画像データを、前記画像表示装置に送信し、
前記画像受信部は、前記画像処理装置から送信される、前記検出情報に基づき生成された画像データを受信し、
前記画像表示部は、受信された前記画像データに対応する、検出された前記動作に応じた任意の画像を表示させる
画像表示システム。
An image display system comprising an image display device and an image processing device,
The image display device includes:
A cylindrical rotating part having a rotating shaft inside;
An image receiving unit for receiving the image data transmitted from the image processing device;
An image display unit that is provided inside the rotating unit and displays an arbitrary image corresponding to the received image data by emitting light according to the rotation of the rotating unit;
A detection unit that detects an operation of a user viewing the displayed image;
A detection information generation unit that generates detection information related to the detected operation;
A detection information transmission unit that transmits the generated detection information to the image processing apparatus;
The image processing apparatus includes:
An image generation unit for generating image data corresponding to an arbitrary image;
An image transmission unit that transmits the generated image data to the image display device;
A detection information receiving unit that receives the detection information transmitted from the image display device, and
The image generation unit generates image data corresponding to an arbitrary image based on the received detection information,
The image transmission unit transmits the image data generated based on the detection information to the image display device,
The image receiving unit receives image data generated based on the detection information transmitted from the image processing device,
The image display unit displays an arbitrary image corresponding to the detected operation corresponding to the received image data.
JP2011168945A 2011-08-02 2011-08-02 Image display device and method, image processing device and method, program, and image display system Withdrawn JP2013034085A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011168945A JP2013034085A (en) 2011-08-02 2011-08-02 Image display device and method, image processing device and method, program, and image display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011168945A JP2013034085A (en) 2011-08-02 2011-08-02 Image display device and method, image processing device and method, program, and image display system

Publications (1)

Publication Number Publication Date
JP2013034085A true JP2013034085A (en) 2013-02-14

Family

ID=47789591

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011168945A Withdrawn JP2013034085A (en) 2011-08-02 2011-08-02 Image display device and method, image processing device and method, program, and image display system

Country Status (1)

Country Link
JP (1) JP2013034085A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104243961A (en) * 2013-06-18 2014-12-24 财团法人资讯工业策进会 Display system and method of multi-view image

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104243961A (en) * 2013-06-18 2014-12-24 财团法人资讯工业策进会 Display system and method of multi-view image

Similar Documents

Publication Publication Date Title
US11989835B2 (en) Augmented reality overlay
EP2609698B1 (en) System and method for sharing information between two or more devices
US7397387B2 (en) Light sculpture system and method
CN202995744U (en) Indicia reader system in wireless communication with head receiver
KR102152921B1 (en) Apparatus and method for calibrating of oral scanner
JP2013235416A5 (en)
US20160343173A1 (en) Acousto-optical display for augmented reality
KR20130044625A (en) Three dimensional display apparatus using rotation and method for controlling thereof
CN105718048A (en) Automatic and unique haptic notification
US20140176317A1 (en) Information terminal and communication system
EP3404483A1 (en) Rotary table for photographing and image photographing system using same
CN102784479A (en) Holographic projection somatosensory interactive system and holographic projection somatosensory interactive method
JP2015092759A5 (en)
EP3892908A1 (en) Display device and control method thereof
JP2013034085A (en) Image display device and method, image processing device and method, program, and image display system
KR102075464B1 (en) Device identification device and control method of the device
JP2007148124A (en) Projection system, projection apparatus, projection method, and program
KR20150028501A (en) Remote controller and method for controlling the same
JP2016080428A (en) Radar device, radar transmission method and transmission timing control method
CN115715008A (en) Earphone positioning method, system, electronic equipment and computer readable storage medium
US10460595B2 (en) Instruction device, program, instruction system, and instruction method
JP2009194528A5 (en)
CN109188413B (en) Positioning method, device and system of virtual reality equipment
CN205545658U (en) Internet protocol camera and interactive&#39;s video monitor system
KR102553185B1 (en) Camera apparatus and mobile terminal having the same

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20141007