JP2005091571A - Display controller and display system - Google Patents

Display controller and display system Download PDF

Info

Publication number
JP2005091571A
JP2005091571A JP2003322900A JP2003322900A JP2005091571A JP 2005091571 A JP2005091571 A JP 2005091571A JP 2003322900 A JP2003322900 A JP 2003322900A JP 2003322900 A JP2003322900 A JP 2003322900A JP 2005091571 A JP2005091571 A JP 2005091571A
Authority
JP
Japan
Prior art keywords
unit
display
objects
video
selection unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003322900A
Other languages
Japanese (ja)
Inventor
Toshihiko Kako
俊彦 加來
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Holdings Corp
Original Assignee
Fuji Photo Film Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Photo Film Co Ltd filed Critical Fuji Photo Film Co Ltd
Priority to JP2003322900A priority Critical patent/JP2005091571A/en
Publication of JP2005091571A publication Critical patent/JP2005091571A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a display controller which reads objects from a video recorder and displays them on a display device, and a display system. <P>SOLUTION: The display controller reads the objects from the video recorder which stores each object included in a video image to be displayed by performing compression coding and makes the display device display the objects and is equipped with a selection part which selects an object selected by a viewer among the objects displayed on the display device and an object control part which reads the object from the video recorder and makes the display device display the object selected by the selection part more in details than other objects. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、表示制御装置、及び表示システムに関する。特に、本発明は、映像記録装置から、オブジェクトを読み出して表示装置に表示させる表示制御装置、及び表示システムに関する。   The present invention relates to a display control device and a display system. In particular, the present invention relates to a display control device and a display system that read an object from a video recording device and display the object on a display device.

近年、MPEG等の動画音声圧縮の技術的な発展により、例えばインターネット等を介して、映像が、利用者へ配信されている。この場合、様々なオブジェクトを含んだ映像が、圧縮符号化された後、ビットストリームとして利用者へ配信される(例えば、非特許文献1参照。)。   In recent years, video has been distributed to users via, for example, the Internet due to technical development of moving picture audio compression such as MPEG. In this case, a video including various objects is compressed and encoded, and then delivered to the user as a bit stream (see, for example, Non-Patent Document 1).

亀山 渉/花村 剛 監修「ディジタル放送教科書(上・下)」、株式会社IDG出版、2003年2月1日Supervised by Wataru Kameyama / Go Hanamura "Digital Broadcasting Textbook (Up / Down)", IDG Publishing Co., Ltd., February 1, 2003

しかし、数多くのオブジェクトを含んだビットストリームを復号する場合、復号に必要な処理量が、増える場合がある。これにより、表示装置は、全てのオブジェクトを含んだ映像を、適切に表示できない場合がある。   However, when decoding a bitstream including many objects, the amount of processing required for decoding may increase. Thereby, the display device may not be able to appropriately display a video including all objects.

そこで本発明は、上記の課題を解決することのできる表示制御装置、及び表示システムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。   Then, an object of this invention is to provide the display control apparatus and display system which can solve said subject. This object is achieved by a combination of features described in the independent claims. The dependent claims define further advantageous specific examples of the present invention.

即ち、本発明の第一の形態によると、表示すべき映像に含まれる各オブジェクトを圧縮符号化して格納する映像記録装置から、オブジェクトを読み出して表示装置に表示させる表示制御装置であって、表示装置に表示されたオブジェクトの中から、視聴者が選択したオブジェクトを選択する選択部と、映像記録装置からオブジェクトを読み出し、選択部により選択されたオブジェクトを、他のオブジェクトよりも詳細に、表示装置に表示させるオブジェクト制御部とを備える。   That is, according to the first aspect of the present invention, there is provided a display control device for reading an object from a video recording device for compressing and storing each object included in a video to be displayed and storing the object on the display device. A selection unit that selects an object selected by the viewer from the objects displayed on the device, and an object that is read out from the video recording device, and the object selected by the selection unit is displayed in more detail than other objects. And an object control unit to be displayed.

選択部により選択されたオブジェクトよりも低い階調、低い解像度、又は低いフレームレートで、他のオブジェクトを、オブジェクト制御部は表示装置に表示させてよい。   The object control unit may display other objects on the display device at a lower gradation, lower resolution, or lower frame rate than the object selected by the selection unit.

表示制御装置は、視聴者の視線を検出する視線検出部を更に備え、視線検出部が検出する視線に基づき、視聴者が注視しているオブジェクトを、選択部は選択してよい。   The display control device may further include a line-of-sight detection unit that detects the viewer's line of sight, and the selection unit may select an object that the viewer is gazing based on the line of sight detected by the line-of-sight detection unit.

表示制御装置は、視聴者により選択されたテンプレート画像を格納するテンプレート格納部を更に備え、テンプレート格納部に格納されているテンプレート画像と一致するオブジェクトを、選択部は選択してよい。   The display control apparatus may further include a template storage unit that stores a template image selected by the viewer, and the selection unit may select an object that matches the template image stored in the template storage unit.

表示制御装置は、視聴者により選択されたテンプレート画像を格納するテンプレート格納部を更に備え、テンプレート格納部に格納されているテンプレート画像と一致しないオブジェクトを、選択部は選択してよい。   The display control apparatus may further include a template storage unit that stores a template image selected by the viewer, and the selection unit may select an object that does not match the template image stored in the template storage unit.

表示制御装置は、オブジェクトのタイプ、又はオブジェクトに含まれるべきタグ情報を、視聴者から受け取る受付部を更に備え、受付部が受け取ったタイプに一致するオブジェクト、又は受付部が受け取ったタグ情報を含むオブジェクトを、選択部は選択してよい。   The display control apparatus further includes a reception unit that receives from the viewer the type of the object or tag information to be included in the object, and includes the object that matches the type received by the reception unit or the tag information received by the reception unit. The selection unit may select the object.

MPEG4規格により圧縮符号化されたオブジェクトを含むビットストリームを、映像記録装置は格納し、他のオブジェクトに対応して映像記録装置から受け取るビットストリームの一部を他のオブジェクトの再生に用いないことにより、オブジェクト制御部は、選択部により選択されたオブジェクトを、他のオブジェクトよりも詳細に、表示装置に表示させてよい。   By storing a bit stream including an object compressed and encoded according to the MPEG4 standard, the video recording apparatus stores a part of the bit stream received from the video recording apparatus corresponding to the other object, and does not use it for reproducing the other object. The object control unit may cause the display device to display the object selected by the selection unit in more detail than the other objects.

早送りした映像、又は逆方向に再生した映像を表示装置に表示させる場合に、選択部は、一部のオブジェクトを選択してよい。   When displaying fast-forwarded video or video reproduced in the reverse direction on the display device, the selection unit may select some objects.

表示制御装置は、圧縮符号化されたオブジェクトを復号する復号処理部と、映像に含まれる全てのオブジェクトを復号処理部が復号するのに要する復号処理の量を算出する処理量算出部とを更に備え、表示装置が表示する映像に合わせて復号処理部が処理可能な復号処理の量よりも、処理量算出部が算出する復号処理の量が大きい場合に、選択部は、映像に含まれる一部のオブジェクトを選択してよい。   The display control apparatus further includes: a decoding processing unit that decodes the compression-encoded object; and a processing amount calculation unit that calculates an amount of decoding processing required for the decoding processing unit to decode all the objects included in the video The selection unit is included in the video when the amount of decoding processing calculated by the processing amount calculation unit is larger than the amount of decoding processing that can be processed by the decoding processing unit according to the video displayed on the display device. Some objects may be selected.

映像記録装置は、圧縮符号化されたオブジェクトを、オブジェクト制御部に、通信回線を介して送信し、選択部により選択されたオブジェクトとして、他のオブジェクトよりも低い圧縮率で圧縮符号化されたオブジェクトを、オブジェクト制御部は映像記録装置から受け取ってよい。   The video recording apparatus transmits an object that has been compression-encoded to an object control unit via a communication line, and is an object that has been compression-encoded at a lower compression rate than other objects as an object selected by the selection unit May be received from the video recording apparatus.

本発明の第二の形態によると、映像を表示する表示システムであって、表示すべき映像に含まれる各オブジェクトを圧縮符号化して格納する映像記録装置と、映像を表示する表示装置と、表示装置に表示されたオブジェクトの中から、視聴者が選択したオブジェクトを選択する選択部と、映像記録装置からオブジェクトを読み出し、選択部により選択されたオブジェクトを、他のオブジェクトよりも詳細に、表示装置に表示させるオブジェクト制御部とを備える。   According to a second aspect of the present invention, there is provided a display system for displaying a video, a video recording device for compressing and storing each object included in the video to be displayed, a display device for displaying the video, and a display A selection unit that selects an object selected by the viewer from the objects displayed on the device, and an object that is read out from the video recording device, and the object selected by the selection unit is displayed in more detail than other objects. And an object control unit to be displayed.

なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションも又発明となりうる。   The above summary of the invention does not enumerate all the necessary features of the present invention, and sub-combinations of these feature groups can also be the invention.

上記説明から明らかなように、本発明によれば、映像記録装置から、オブジェクトを読み出して表示装置に表示させる表示制御装置、及び表示システムを提供することができる。   As is apparent from the above description, according to the present invention, it is possible to provide a display control device and a display system that read an object from a video recording device and display the object on the display device.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention. However, the following embodiments do not limit the invention according to the scope of claims, and all combinations of features described in the embodiments are included. It is not necessarily essential for the solution of the invention.

図1は、本発明の一実施形態である表示システム400の使用例を説明する図である。表示システム400は、ストリーム映像表示装置100と、配信サーバ200とを備える。ストリーム映像表示装置100は、本体の上部に、例えばカメラを含む視線検出部50を有している。ストリーム映像表示装置100は、視線検出部50を用いて、配信サーバ200から配信された映像を見ている視聴者の視線を検出する。ストリーム映像表示装置100は、検出した視線に基づいて、表示された映像内の視聴者が注視するオブジェクトを選択する。そして、ストリーム映像表示装置100は、選択したオブジェクトを表示画面に詳細に表示させる。このように、本例におけるストリーム映像表示装置100は、視聴者の視線を検出することにより、視聴者が注視しているオブジェクトを選択し、選択したオブジェクトを詳細に表示させることを目的とする。尚、配信サーバ200は、映像記録装置の一例である。   FIG. 1 is a diagram illustrating an example of use of a display system 400 according to an embodiment of the present invention. The display system 400 includes a stream video display device 100 and a distribution server 200. The stream video display device 100 includes a line-of-sight detection unit 50 including a camera, for example, at the top of the main body. The stream video display device 100 uses the line-of-sight detection unit 50 to detect the line of sight of the viewer watching the video distributed from the distribution server 200. The stream video display device 100 selects an object to be watched by the viewer in the displayed video based on the detected line of sight. Then, the stream video display device 100 displays the selected object in detail on the display screen. As described above, the stream video display device 100 in this example is intended to select the object that the viewer is gazing at by detecting the viewer's line of sight, and to display the selected object in detail. The distribution server 200 is an example of a video recording device.

図2は、ストリーム映像表示装置100の表示画面に表示される映像34について説明する図である。ストリーム映像表示装置100は、表示部30を備える。ストリーム映像表示装置100は、MPEG4規格に準拠した映像34を、表示部30に表示する。この場合、ストリーム映像表示装置100は、複数のオブジェクト31、32、及び33を含む映像34を表示している。ここで、複数のオブジェクト31、32、及び33は、MPEG4規格に準拠したビジュアル・オブジェクトである。ストリーム映像表示装置100は、MPEG4規格に準拠して圧縮符号化された複数のオブジェクトを受信する。この場合、ストリーム映像表示装置100は、圧縮符号化された複数のオブジェクトのそれぞれを、配信サーバ200より受信する。これにより、ストリーム映像表示装置100は、複数のビットストリームを、配信サーバ200より受信する。ストリーム映像表示装置100は、複数のビットストリームのそれぞれを復号することで、複数のオブジェクト31、32、及び33のそれぞれを含む映像34を表示する。この場合、ストリーム映像表示装置100は、1つのオブジェクトを、映像34における一部分の映像として表示する。本例において、ストリーム映像表示装置100は、複数のオブジェクト31、32、及び33のそれぞれを、映像34における、それぞれ対応する一部分の映像として、それぞれ表示する。   FIG. 2 is a diagram for explaining the video 34 displayed on the display screen of the stream video display device 100. The stream video display device 100 includes a display unit 30. The stream video display device 100 displays the video 34 compliant with the MPEG4 standard on the display unit 30. In this case, the stream video display device 100 displays a video 34 including a plurality of objects 31, 32, and 33. Here, the plurality of objects 31, 32, and 33 are visual objects compliant with the MPEG4 standard. The stream video display device 100 receives a plurality of objects that are compression-encoded in accordance with the MPEG4 standard. In this case, the stream video display device 100 receives from the distribution server 200 each of the plurality of compression-coded objects. As a result, the stream video display device 100 receives a plurality of bit streams from the distribution server 200. The stream video display device 100 displays the video 34 including each of the plurality of objects 31, 32, and 33 by decoding each of the plurality of bit streams. In this case, the stream video display device 100 displays one object as a partial video in the video 34. In this example, the stream video display device 100 displays each of the plurality of objects 31, 32, and 33 as a corresponding partial video in the video 34.

図3は、ストリーム映像表示装置100の詳細な構成の一例を示す図である。ストリーム映像表示装置100は、通信回線300を介して、配信サーバ200と接続される。配信サーバ200は、例えば映像を配信する会社が備えるサーバである。配信サーバ200は、表示すべき映像に含まれるオブジェクトを格納している。配信サーバ200は、MPEG4規格に準拠して複数のオブジェクトを圧縮符号化する。配信サーバ200は、圧縮符号化されたオブジェクトをストリーム映像表示装置100へ送信する。この場合、配信サーバ200は、複数のオブジェクトのそれぞれを、複数のビットストリームとして、通信回線300を介して、ストリーム映像表示装置100へ送信する。   FIG. 3 is a diagram illustrating an example of a detailed configuration of the stream video display device 100. The stream video display device 100 is connected to the distribution server 200 via the communication line 300. The distribution server 200 is a server provided in a company that distributes video, for example. The distribution server 200 stores objects included in the video to be displayed. The distribution server 200 compresses and encodes a plurality of objects in accordance with the MPEG4 standard. The distribution server 200 transmits the compression-coded object to the stream video display device 100. In this case, the distribution server 200 transmits each of the plurality of objects as a plurality of bit streams to the stream video display device 100 via the communication line 300.

ストリーム映像表示装置100は、例えばPCや広告表示装置等である。ストリーム映像表示装置100は、例えば各家庭や屋外等に設置される。ストリーム映像表示装置100は、表示制御部110、及び表示部30を備える。表示制御部110は、受信した複数のビットストリームを復号する。これにより、表示制御部110は、表示部30に、複数のオブジェクトを表示させる。表示部30は、ストリーム映像表示装置100における、モニタ部分である。   The stream video display device 100 is, for example, a PC or an advertisement display device. The stream video display device 100 is installed, for example, in each home or outdoors. The stream video display device 100 includes a display control unit 110 and a display unit 30. The display control unit 110 decodes the received plurality of bit streams. Thereby, the display control unit 110 causes the display unit 30 to display a plurality of objects. The display unit 30 is a monitor part in the stream video display device 100.

表示制御部110は、オブジェクト制御部10、復号処理部20、処理量算出部40、視線検出部50、及び選択部60を有する。オブジェクト制御部10、復号処理部20、及び処理量算出部40は、通信回線300を介して、配信サーバ200から、複数のビットストリームを受け取る。   The display control unit 110 includes an object control unit 10, a decoding processing unit 20, a processing amount calculation unit 40, a line-of-sight detection unit 50, and a selection unit 60. The object control unit 10, the decoding processing unit 20, and the processing amount calculation unit 40 receive a plurality of bit streams from the distribution server 200 via the communication line 300.

視線検出部50は、複数のカメラを含む。視線検出部50は、そのカメラで撮像された画像に基づき、例えば視聴者の瞳の方向を検出する。これにより、視線検出部50は、視聴者の視線を検出する。視線検出部50は、検出した視線を、選択部60へ通知する。例えば、本例において、視線検出部50は、表示部30における表示画面の画角に合わせて、複数のカメラの視野を、予め定める。視線検出部50は、これらの複数のカメラで、視聴者の顔を撮像する。視線検出部50は、これらの複数の画像から、表示画面から視聴者の顔までの距離、及び角度を算出する。また、視線検出部50は、複数の画像を用いることで、視聴者の顔の立体画像を作成する。この立体画像を用いることで、視線検出部50は、例えば両眼と鼻の位置関係を算出する。これにより、視線検出部50は、視聴者の顔の向きを特定する。さらに、視線検出部50は、視聴者の両眼における瞳の位置を求める。このように、視線検出部50は、視聴者の視線を検知してよい。尚、他の例では、視線検出部50は、複数の視聴者の視線のそれぞれを、検出してよい。   The line-of-sight detection unit 50 includes a plurality of cameras. The line-of-sight detection unit 50 detects, for example, the direction of the viewer's pupil based on the image captured by the camera. Thereby, the gaze detection unit 50 detects the gaze of the viewer. The line-of-sight detection unit 50 notifies the selection unit 60 of the detected line of sight. For example, in this example, the line-of-sight detection unit 50 determines the field of view of a plurality of cameras in advance according to the angle of view of the display screen in the display unit 30. The line-of-sight detection unit 50 images the face of the viewer with these multiple cameras. The line-of-sight detection unit 50 calculates the distance and angle from the display screen to the viewer's face from the plurality of images. The line-of-sight detection unit 50 creates a stereoscopic image of the viewer's face by using a plurality of images. By using this stereoscopic image, the line-of-sight detection unit 50 calculates, for example, the positional relationship between both eyes and the nose. As a result, the line-of-sight detection unit 50 identifies the orientation of the viewer's face. Further, the line-of-sight detection unit 50 obtains the position of the pupil in the viewer's eyes. As described above, the line-of-sight detection unit 50 may detect the line of sight of the viewer. In another example, the line-of-sight detection unit 50 may detect each of the lines of sight of a plurality of viewers.

処理量算出部40は、復号処理部20で行われるべき復号処理の量を算出する。この場合、処理量算出部40は、受信した全てのビットストームの復号が行われた場合の復号処理の量を算出する。処理量算出部40は、算出した復号処理の量を、予想量として、選択部60へ通知する。   The processing amount calculation unit 40 calculates the amount of decoding processing to be performed by the decoding processing unit 20. In this case, the processing amount calculation unit 40 calculates the amount of decoding processing when all received bit storms are decoded. The processing amount calculation unit 40 notifies the selection unit 60 of the calculated amount of decoding processing as an expected amount.

選択部60は、視線検出部50により検出された視線と、処理量算出部40より通知された予想量とに基づいて、オブジェクトを選択する。本例において、選択部60は、通知された予想量と、復号処理部20で処理可能な復号処理の量とを比較する。そして、通知された予想量が、復号処理部20で処理可能な復号処理の量よりも大きい場合、選択部60は、映像に含まれる一部のオブジェクトを選択する。本例において、選択部60は、検出された視線に基づいて、視聴者が注視しているオブジェクトを選択する。また、視聴者が注視しているオブジェクトがない場合、選択部60は、オブジェクトを選択しない。通知された予想量が、復号処理部20で処理可能な復号処理の量よりも小さい場合、選択部60は、全てのオブジェクトを選択する。選択部60は、オブジェクトの一部、又は全てのオブジェクトを選択したか、オブジェクトを選択しないかを、オブジェクト制御部10へ通知する。   The selection unit 60 selects an object based on the line of sight detected by the line-of-sight detection unit 50 and the predicted amount notified from the processing amount calculation unit 40. In this example, the selection unit 60 compares the notified predicted amount with the amount of decoding processing that can be processed by the decoding processing unit 20. When the notified predicted amount is larger than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects some objects included in the video. In this example, the selection unit 60 selects an object being watched by the viewer based on the detected line of sight. When there is no object that the viewer is watching, the selection unit 60 does not select the object. When the notified predicted amount is smaller than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects all objects. The selection unit 60 notifies the object control unit 10 whether some or all of the objects have been selected or not.

オブジェクト制御部10は、受信したビットストリームに基づいて、オブジェクトを表示させる精度を制御する。オブジェクト制御部10は、受信した複数のビットストリームに含まれる全てのオブジェクトの属性値を、抽出する。オブジェクト制御部10は、抽出した属性値に基づいて、全てのオブジェクトの階調、解像度、及びフレームレートを指定する。   The object control unit 10 controls the accuracy with which the object is displayed based on the received bitstream. The object control unit 10 extracts attribute values of all objects included in the received plurality of bit streams. The object control unit 10 specifies the gradation, resolution, and frame rate of all objects based on the extracted attribute values.

この場合、オブジェクト制御部10は、選択部60により選択されたオブジェクトを、選択されない他のオブジェクトよりも詳細に表示部30に表示させる。オブジェクト制御部10は、選択されない他のオブジェクトを、選択されたオブジェクトよりも低い階調、低い解像度、又は低いフレームレートで表示部30に表示させる。   In this case, the object control unit 10 causes the display unit 30 to display the object selected by the selection unit 60 in more detail than other objects that are not selected. The object control unit 10 causes the display unit 30 to display other objects that are not selected at a lower gradation, lower resolution, or lower frame rate than the selected object.

本例において、選択部60により一部のオブジェクトが選択された場合、オブジェクト制御部10は、処理量算出部40が算出した予想量を下回るように、選択されたオブジェクトを表示部30に詳細に表示させる。この場合、オブジェクト制御部10は、選択されないオブジェクトの階調、解像度、又はフレームレートのいずれかを下げる。この場合、オブジェクト制御部10は、階調、解像度、又はフレームレートのいずれかを下げることで、表示部30に表示させる映像の品質を、予想量の範囲内で最適とすることができる。   In this example, when some objects are selected by the selection unit 60, the object control unit 10 displays the selected objects on the display unit 30 in detail so as to be less than the expected amount calculated by the processing amount calculation unit 40. Display. In this case, the object control unit 10 decreases any of the gradation, resolution, or frame rate of an object that is not selected. In this case, the object control unit 10 can optimize the quality of the video displayed on the display unit 30 within the range of the expected amount by lowering any of the gradation, resolution, and frame rate.

選択部60により、いずれのオブジェクトも選択されない場合、オブジェクト制御部10は、処理量算出部40が算出した予想量を下回るように、全てのオブジェクトの階調、解像度、及びフレームレートのいずれかを下げて、表示部30に表示させる。オブジェクト制御部10は、オブジェクトの階調、解像度、及びフレームレートのそれぞれを指定するためのパラメタを、復号処理部20へ通知する。   When no object is selected by the selection unit 60, the object control unit 10 selects any one of the gradation, resolution, and frame rate of all the objects so as to be lower than the expected amount calculated by the processing amount calculation unit 40. Lowered and displayed on the display unit 30. The object control unit 10 notifies the decoding processing unit 20 of parameters for designating the gradation, resolution, and frame rate of the object.

復号処理部20は、MPEG4規格に準拠したデコーダである。復号処理部20は、受信した複数のビットストリームから、全てのオブジェクトを、復号する。この場合、復号処理部20は、オブジェクト制御部10が指定したパラメタを用いて、全てのオブジェクトを復号する。復号処理部20は、復号したオブジェクトを表示部30へ与える。表示部30は、復号されたオブジェクトを表示する。この場合、表示部30は、オブジェクト制御部10により指定された階調、解像度、及びフレームレートで、オブジェクトを表示する。   The decoding processing unit 20 is a decoder compliant with the MPEG4 standard. The decoding processing unit 20 decodes all the objects from the received plurality of bit streams. In this case, the decryption processing unit 20 decrypts all objects using the parameters specified by the object control unit 10. The decryption processing unit 20 gives the decrypted object to the display unit 30. The display unit 30 displays the decrypted object. In this case, the display unit 30 displays the object at the gradation, resolution, and frame rate specified by the object control unit 10.

以上のように構成されたストリーム映像表示装置100は、表示部30に表示されたオブジェクトの中から、視聴者が選択したオブジェクトを選択する。本例において、ストリーム映像表示装置100は、視聴者の視線に基づいて選択されたオブジェクトを、選択されない他のオブジェクトより詳細に表示する。例えば、視聴者が注視しているオブジェクト32(図2参照)が選択された場合、ストリーム映像表示装置100は、オブジェクト31、及び33(図2参照)の、階調、解像度、又はフレームレートを下げる。これにより、ストリーム映像表示装置100は、視聴者が見たいと考えているオブジェクト32の映像を、視聴者に詳細に表示させることができる。   The stream video display device 100 configured as described above selects the object selected by the viewer from the objects displayed on the display unit 30. In this example, the stream video display apparatus 100 displays an object selected based on the viewer's line of sight in more detail than other objects that are not selected. For example, when the object 32 (see FIG. 2) being watched by the viewer is selected, the stream video display device 100 sets the gradation, resolution, or frame rate of the objects 31 and 33 (see FIG. 2). Lower. Thereby, the stream video display apparatus 100 can display the video of the object 32 that the viewer wants to watch in detail to the viewer.

また、ストリーム映像表示装置100は、受信した複数のビットストリームが復号処理部20で処理可能な復号処理の予想量を越えた場合、選択されないオブジェクトの表示の精度を下げる。これにより、ストリーム映像表示装置100は、復号処理部20における復号処理の量を減らす。従って、本例におけるストリーム映像表示装置100は、処理可能な復号処理の量を超えたビットストリームを受信した場合においても、映像を破綻させることなく、視聴者が必要とする映像を適切に表示することができる。   Also, the stream video display device 100 reduces the display accuracy of the unselected object when the received bit streams exceed the expected amount of decoding processing that can be processed by the decoding processing unit 20. Thereby, the stream video display apparatus 100 reduces the amount of decoding processing in the decoding processing unit 20. Therefore, the stream video display apparatus 100 in this example appropriately displays the video required by the viewer without breaking the video even when a bit stream exceeding the amount of decoding processing that can be processed is received. be able to.

尚、本例におけるストリーム映像表示装置100は、早送りの映像、又は逆方向に再生した映像を、表示部30に表示してよい。この場合、オブジェクト制御部10は、オブジェクトを再生させる速度を制御してよい。オブジェクト制御部10が、早送りした映像、又は逆方向に再生した映像を表示部30に表示させる場合、選択部60は、一部のオブジェクトを選択する。この場合、選択されない他のオブジェクトに対応して配信サーバ200から受け取るビットストリームの一部をオブジェクトの再生に用いないことにより、オブジェクト制御部10は、選択部60により選択されたオブジェクトを、他のオブジェクトよりも詳細に、表示部30に表示させる。これにより、ストリーム映像表示装置100は、早送り、又は逆方向に再生する場合において、映像を破綻させることなく、視聴者が必要とする映像を適切に表示することができる。   Note that the stream video display device 100 in this example may display fast-forward video or video reproduced in the reverse direction on the display unit 30. In this case, the object control unit 10 may control the speed at which the object is reproduced. When the object control unit 10 displays the fast-forwarded video or the video reproduced in the reverse direction on the display unit 30, the selection unit 60 selects some objects. In this case, by not using a part of the bit stream received from the distribution server 200 corresponding to the other object not selected for the reproduction of the object, the object control unit 10 changes the object selected by the selection unit 60 to the other object. It is displayed on the display unit 30 in more detail than the object. Thereby, the stream video display apparatus 100 can appropriately display the video required by the viewer without breaking the video when fast-forwarding or reproducing in the reverse direction.

図4は、ストリーム映像表示装置100の動作の一例を示すフローチャートである。ストリーム映像表示装置100は、複数のオブジェクトを示す複数のビットストリームを、配信サーバ200から受信する(S100)。   FIG. 4 is a flowchart illustrating an example of the operation of the stream video display device 100. The stream video display device 100 receives a plurality of bit streams indicating a plurality of objects from the distribution server 200 (S100).

選択部60は、処理量算出部40により算出された予想量と、視線検出部50により検出された視線とに基づき、オブジェクトを選択する(S102)。選択部60は、選択したオブジェクトを、オブジェクト制御部10へ通知する。   The selection unit 60 selects an object based on the predicted amount calculated by the processing amount calculation unit 40 and the line of sight detected by the line-of-sight detection unit 50 (S102). The selection unit 60 notifies the object control unit 10 of the selected object.

次に、オブジェクト制御部10は、受信したビットストリームに基づいて、オブジェクトを表示部30へ表示させる精度を、制御する。この場合、オブジェクト制御部10は、選択されていないオブジェクトを、例えば、低い階調、低い解像度、又は低いフレームレートで表示部30に表示させることにより、選択されていないオブジェクトを表示させる精度を下げる(S104)。これにより、選択部60により選択されたオブジェクトを選択されないオブジェクトよりも詳細に、表示部30へ表示させる。オブジェクト制御部10は、全てのオブジェクトの階調、解像度、及びフレームレートのそれぞれを指定するためのパラメタを、復号処理部20へ通知する。   Next, the object control unit 10 controls the accuracy with which the object is displayed on the display unit 30 based on the received bitstream. In this case, the object control unit 10 reduces the accuracy of displaying the unselected object by displaying the unselected object on the display unit 30 with, for example, low gradation, low resolution, or low frame rate. (S104). Thereby, the object selected by the selection unit 60 is displayed on the display unit 30 in more detail than the object not selected. The object control unit 10 notifies the decoding processing unit 20 of parameters for designating the gradation, resolution, and frame rate of all objects.

復号処理部20は、受信したビットストリームと、オブジェクト制御部10により指定されたパラメタとに基づいて、オブジェクトを復号する。そして、表示部30は、復号されたオブジェクトを、オブジェクト制御部10により指定された階調、解像度、及びフレームレートで、オブジェクトを表示する(S106)。以上で本フローチャートは終了する。   The decoding processing unit 20 decodes the object based on the received bit stream and the parameters specified by the object control unit 10. Then, the display unit 30 displays the decoded object with the gradation, resolution, and frame rate specified by the object control unit 10 (S106). This flowchart is complete | finished above.

尚、S104において、オブジェクト制御部10は、選択されたオブジェクトを、選択されたオブジェクトに含まれる全ての周波数成分を用いて表示部30へ表示させてよい。また、オブジェクト制御部10は、選択されない他のオブジェクトを、選択されない他のオブジェクトに含まれる一部の周波数成分のみを用いて表示部30へ表示させてよい。これにより、オブジェクト制御部10は、選択されたオブジェクトの画質を、選択されないオブジェクトよりも詳細に、表示部30へ表示させる。更に、受信したビットストリームにエラ−が含まれていた場合、オブジェクト制御部10は、復号処理部20に、選択されたオブジェクトを、選択されないオブジェクトよりも詳細に、エラー処理をさせてよい。このように、本例におけるストリーム映像表示装置100は、選択されたオブジェクトの画質を、選択されないオブジェクトの画質よりも詳細に表示することができる。   In S104, the object control unit 10 may display the selected object on the display unit 30 using all frequency components included in the selected object. Further, the object control unit 10 may display other objects that are not selected on the display unit 30 using only some of the frequency components included in the other objects that are not selected. Thereby, the object control unit 10 causes the display unit 30 to display the image quality of the selected object in more detail than the non-selected object. Further, when an error is included in the received bitstream, the object control unit 10 may cause the decoding processing unit 20 to perform error processing on the selected object in more detail than the unselected object. As described above, the stream video display device 100 in the present example can display the image quality of the selected object in more detail than the image quality of the non-selected object.

図5は、図4のS102における選択部60の動作の詳細を説明するフローチャートである。処理量算出部40は、受信したビットストリームから、復号処理部20での復号処理の予想量を、算出する(S200)。そして、処理量算出部40は、算出した予想量を、選択部60へ通知する。また、視線検出部50は、視聴者の視線を検出する(S202)。そして、視線検出部50は、検出した視線を選択部60へ通知する。   FIG. 5 is a flowchart for explaining details of the operation of the selection unit 60 in S102 of FIG. The processing amount calculation unit 40 calculates the expected amount of decoding processing in the decoding processing unit 20 from the received bitstream (S200). Then, the processing amount calculation unit 40 notifies the selection unit 60 of the calculated predicted amount. The line-of-sight detection unit 50 detects the viewer's line of sight (S202). Then, the line-of-sight detection unit 50 notifies the selection unit 60 of the detected line of sight.

選択部60は、通知された予想量と、復号処理部20で処理可能な復号処理の量とを比較する(S204)。この場合、選択部60は、復号処理部20で処理可能な復号処理の最大の量を、例えば予め格納してよい。これにより、選択部60は、通知された予想量が、予め格納している復号処理の最大の量の範囲内であるかを判定してよい。そして、通知された予想量が、復号処理の最大の量を超えた場合(S204 YES)、選択部60は、通知された視線により注視されているオブジェクトを選択する(S206)。また、S204において、通知された予想量が、復号処理の最大の量を超えない場合(S204 NO)、選択部60は、全てのオブジェクトを選択する(S208)。以上で本フローチャートは終了する。   The selection unit 60 compares the notified predicted amount with the amount of decoding processing that can be processed by the decoding processing unit 20 (S204). In this case, the selection unit 60 may store the maximum amount of decoding processing that can be processed by the decoding processing unit 20 in advance, for example. Thereby, the selection unit 60 may determine whether the notified predicted amount is within the range of the maximum amount of decoding processing stored in advance. If the notified predicted amount exceeds the maximum amount of decoding processing (S204 YES), the selection unit 60 selects an object that is being watched by the notified line of sight (S206). In S204, when the notified predicted amount does not exceed the maximum amount of decoding processing (NO in S204), the selection unit 60 selects all objects (S208). This flowchart is complete | finished above.

このように、選択部60は、視線検出部50により検出された視線と、処理量算出部40により通知された予想量とに基づいて、オブジェクトを適切に選択することができる。   As described above, the selection unit 60 can appropriately select an object based on the line of sight detected by the line-of-sight detection unit 50 and the predicted amount notified by the processing amount calculation unit 40.

図6は、ストリーム映像表示装置100の構成の他の例を示す図である。本例におけるストリーム映像表示装置100は、視聴者が指定するオブジェクトを詳細に表示させることを目的とする。尚、図3と同じ符号を付した構成は、図3における構成と同一又は同様の機能を有するので、以下に述べる点を除いて、説明を省略する。   FIG. 6 is a diagram illustrating another example of the configuration of the stream video display device 100. The stream video display device 100 in this example is intended to display in detail an object designated by the viewer. 3 having the same or similar functions as those in FIG. 3 will not be described except for the following points.

ストリーム映像表示装置100は、表示制御部110、及び表示部30を備える。そして、表示制御部110は、オブジェクト制御部10、復号処理部20、処理量算出部40、受付部70、及び選択部60を有する。オブジェクト制御部10、復号処理部20、処理量算出部40、及び選択部60は、通信回線300を介して、配信サーバ200から、複数のビットストリームを受け取る。   The stream video display device 100 includes a display control unit 110 and a display unit 30. The display control unit 110 includes an object control unit 10, a decryption processing unit 20, a processing amount calculation unit 40, a reception unit 70, and a selection unit 60. The object control unit 10, the decoding processing unit 20, the processing amount calculation unit 40, and the selection unit 60 receive a plurality of bit streams from the distribution server 200 via the communication line 300.

受付部70は、例えば、キーボードやリモコン等の入力装置を含む。これにより、受付部70は、オブジェクトのタイプ、又はオブジェクトに含まれるべきタグ情報を、視聴者から受け取る。この場合、受付部70は、オブジェクトの内容について記述された情報であるタグ情報を、受け取る。受付部70は、MPEG7規格に準拠したコンテンツ・メタデータを、タグ情報として、受け取ってよい。また、受付部70は、オブジェクトの形式又は種類について記述された情報であるタイプを、受け取る。受付部70は、白黒映像、カラー映像、動画映像、自然画映像、アニメーション映像、CG映像等の映像の種類を、タイプとして受け取る。受付部70は、例えば、階調、解像度、又はフレームレート等の映像の形式を、タイプとして受け取る。また、受付部70は、例えばMPEG7におけるビジュアル記述子で記述される、画像の特徴量を、タイプとして受け取ってよい。受付部70は、複数のタグ情報、又は複数のタイプのそれぞれを、受け取ってよい。受付部70は、視聴者により指定された、タグ情報、又はタイプを、選択部60へ通知する。   The accepting unit 70 includes an input device such as a keyboard and a remote controller, for example. Thereby, the reception unit 70 receives the type of object or tag information to be included in the object from the viewer. In this case, the reception unit 70 receives tag information that is information described about the contents of the object. The receiving unit 70 may receive content / metadata compliant with the MPEG7 standard as tag information. The receiving unit 70 also receives a type that is information describing the format or type of the object. The receiving unit 70 receives types of video such as black and white video, color video, video video, natural video, animation video, and CG video as types. The receiving unit 70 receives, for example, a video format such as gradation, resolution, or frame rate as a type. Further, the receiving unit 70 may receive, as a type, a feature amount of an image described by a visual descriptor in MPEG7, for example. The accepting unit 70 may receive a plurality of tag information or a plurality of types. The reception unit 70 notifies the selection unit 60 of the tag information or the type specified by the viewer.

選択部60は、受付部70により通知されたオブジェクトのタイプ、又はタグ情報と、処理量算出部40より通知された予想量と、受信したビットストリームとに基づいて、オブジェクトを選択する。ここで、配信サーバ200は、タグ情報を含むビットストリームを、ストリーム映像表示装置100へ送信している。選択部60は、受信したビットストリームに含まれる全てのオブジェクトのタグ情報、及びタイプを抽出している。選択部60は、通知された予想量が、復号処理部20で処理可能な復号処理の量よりも大きい場合、映像に含まれる一部のオブジェクトを選択する。この場合、選択部60は、受付部70が受け取ったタイプに一致するオブジェクト、又は受付部70が受け取ったタグ情報を含むオブジェクトを、選択する。尚、配信サーバ200は、映像製作者により、予め作成されたタグ情報を、ストリーム映像表示装置100へ送信してよい。   The selection unit 60 selects an object based on the object type or tag information notified by the reception unit 70, the expected amount notified from the processing amount calculation unit 40, and the received bitstream. Here, the distribution server 200 transmits a bit stream including tag information to the stream video display device 100. The selection unit 60 extracts tag information and types of all objects included in the received bitstream. When the notified predicted amount is larger than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects some objects included in the video. In this case, the selection unit 60 selects an object that matches the type received by the reception unit 70 or an object that includes the tag information received by the reception unit 70. The distribution server 200 may transmit tag information created in advance by the video producer to the stream video display device 100.

タグ情報、又はタイプに一致するオブジェクトがない場合、選択部60は、オブジェクトを選択しない。また、通知された予想量が、復号処理部20で処理可能な復号処理の量よりも小さい場合、選択部60は、全てのオブジェクトを選択する。選択部60は、オブジェクトの一部、又は全てのオブジェクトを選択したか、オブジェクトを選択しないかを、オブジェクト制御部10へ通知する。   When there is no object that matches the tag information or the type, the selection unit 60 does not select the object. When the notified predicted amount is smaller than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects all objects. The selection unit 60 notifies the object control unit 10 whether some or all of the objects have been selected or not.

本例におけるストリーム映像表示装置100は、視聴者により指定されたオブジェクトのタイプ、又はタグ情報に基づいて、選択されたオブジェクトを、選択されない他のオブジェクトより詳細に表示する。これにより、ストリーム映像表示装置100は、処理可能な復号処理の量を超えたビットストリームを受信した場合においても、映像を破綻させることなく、視聴者に指定されたオブジェクトの映像を適切に表示させることができる。   The stream video display apparatus 100 in this example displays the selected object in more detail than the other objects that are not selected based on the object type or tag information specified by the viewer. Thereby, the stream video display device 100 appropriately displays the video of the object designated by the viewer without breaking the video even when the bit stream exceeding the amount of decoding processing that can be processed is received. be able to.

ここで、本例において、選択部60は、視聴者により指定されたオブジェクトのタイプ、又はタグ情報に基づき、視聴者が指定するオブジェクトを選択している。他の例において、選択部60は、視聴者が指定したオブジェクト以外のオブジェクトを選択してもよい。この場合、ストリーム映像表示装置100は、選択されたオブジェクトを他のオブジェクトよりも詳細に表示することにより、視聴者に指定されていないオブジェクトを、指定されたオブジェクトよりも、詳細に表示する。   Here, in this example, the selection unit 60 selects the object specified by the viewer based on the type of the object specified by the viewer or the tag information. In another example, the selection unit 60 may select an object other than the object specified by the viewer. In this case, the stream video display device 100 displays the selected object in more detail than the other objects, thereby displaying the object not designated by the viewer in more detail than the designated object.

図7は、ストリーム映像表示装置100の他の例における選択部60の動作の詳細を説明するフローチャートである。処理量算出部40は、受信したビットストリームから、復号処理部20での復号処理の予想量を、算出する(S220)。そして、処理量算出部40は、算出した予想量を、選択部60へ通知する。   FIG. 7 is a flowchart illustrating details of the operation of the selection unit 60 in another example of the stream video display device 100. The processing amount calculation unit 40 calculates the expected amount of decoding processing in the decoding processing unit 20 from the received bitstream (S220). Then, the processing amount calculation unit 40 notifies the selection unit 60 of the calculated predicted amount.

受付部70は、視聴者よりタグ情報又はタイプを受付ける(S222)。そして、受付部70は、受付けたタグ情報又はタイプを、選択部60へ通知する。選択部60において、処理量算出部40より通知された予想量が、復号処理の最大の量を超えた場合(S224 YES)、選択部60は、入力されたタグ情報又はタイプと、抽出されたタグ情報又はタイプとが一致したオブジェクトを選択する(S226)。また、S224において、通知された予想量が、復号処理の最大の量を超えない場合(S224 NO)、選択部60は、全てのオブジェクトを選択する(S228)。以上で本フローチャートは終了する。   The receiving unit 70 receives tag information or type from the viewer (S222). Then, the reception unit 70 notifies the selection unit 60 of the received tag information or type. In the selection unit 60, when the predicted amount notified from the processing amount calculation unit 40 exceeds the maximum amount of decoding processing (S224: YES), the selection unit 60 extracts the input tag information or type and the extracted tag information or type. An object whose tag information or type matches is selected (S226). In S224, when the notified predicted amount does not exceed the maximum amount of decoding processing (S224 NO), the selection unit 60 selects all objects (S228). This flowchart is complete | finished above.

図8は、ストリーム映像表示装置100の構成の更に他の例を示す図である。本例におけるストリーム映像表示装置100は、視聴者によりテンプレート画像を用いて指定されたオブジェクトを、詳細に表示させることを目的とする。尚、図3、又は図6と同じ符号を付した構成は、図3、又は図6における構成と同一又は同様の機能を有するので、以下に述べる点を除いて、説明を省略する。   FIG. 8 is a diagram illustrating still another example of the configuration of the stream video display device 100. The stream video display device 100 in this example is intended to display in detail an object designated by a viewer using a template image. 3 and FIG. 6 have the same or similar functions as those in FIG. 3 or FIG. 6, and thus the description is omitted except for the points described below.

配信サーバ200は、通信回線300を介して、ストリーム映像表示装置100と接続される。配信サーバ200は、例えば店内やアーケード等に設置された監視カメラを備える。配信サーバ200は、この監視カメラにより撮像された映像を、ストリーム映像表示装置100へ送信する。配信サーバ200は、撮像した映像に含まれる複数のオブジェクトを、MPEG4規格に準拠して圧縮符号化する。配信サーバ200は、圧縮符号化されたオブジェクトをストリーム映像表示装置100へ送信する。この場合、配信サーバ200は、複数のオブジェクトのそれぞれを、複数のビットストリームとして、ストリーム映像表示装置100へ送信する。   The distribution server 200 is connected to the stream video display device 100 via the communication line 300. The distribution server 200 includes a monitoring camera installed in, for example, a store or an arcade. The distribution server 200 transmits the video captured by the monitoring camera to the stream video display device 100. The distribution server 200 compresses and encodes a plurality of objects included in the captured video according to the MPEG4 standard. The distribution server 200 transmits the compression-coded object to the stream video display device 100. In this case, the distribution server 200 transmits each of the plurality of objects to the stream video display device 100 as a plurality of bit streams.

ストリーム映像表示装置100は、例えばセキュリティ管理会社や、建物の管理センタに設置される。本例において、これらのセキュリティ管理会社等の従業員が、視聴者として表示部30に表示される映像を、観察する。ストリーム映像表示装置100は、表示制御部110、及び表示部30を備える。表示制御部110は、オブジェクト制御部10、復号処理部20、処理量算出部40、テンプレート格納部80、及び選択部60を有する。オブジェクト制御部10、復号処理部20、処理量算出部40、及び選択部60は、通信回線300を介して、配信サーバ200から、複数のビットストリームを受け取る。   The stream video display device 100 is installed in, for example, a security management company or a building management center. In this example, employees such as these security management companies observe images displayed on the display unit 30 as viewers. The stream video display device 100 includes a display control unit 110 and a display unit 30. The display control unit 110 includes an object control unit 10, a decryption processing unit 20, a processing amount calculation unit 40, a template storage unit 80, and a selection unit 60. The object control unit 10, the decoding processing unit 20, the processing amount calculation unit 40, and the selection unit 60 receive a plurality of bit streams from the distribution server 200 via the communication line 300.

テンプレート格納部80は、テンプレートマッチング画像処理を行う場合の基準の画像であるテンプレート画像を格納する。この場合、テンプレート格納部80は、複数のテンプレート画像を含む。また、テンプレート格納部80は、例えばキーボードやリモコン等の入力装置を含む。テンプレート格納部80は、この入力装置を用いて視聴者により選択されたテンプレート画像を、格納する。テンプレート格納部80は、視聴者に選択されたテンプレート画像を、選択部60へ通知する。また、テンプレート格納部80は、視聴者により選択された複数のテンプレート画像のそれぞれを、格納してよい。テンプレート格納部80は、視聴者により入力された新たなテンプレート画像を格納してもよい。   The template storage unit 80 stores a template image that is a reference image when performing template matching image processing. In this case, the template storage unit 80 includes a plurality of template images. The template storage unit 80 includes an input device such as a keyboard and a remote controller. The template storage unit 80 stores a template image selected by the viewer using this input device. The template storage unit 80 notifies the selection unit 60 of the template image selected by the viewer. The template storage unit 80 may store each of a plurality of template images selected by the viewer. The template storage unit 80 may store a new template image input by the viewer.

選択部60は、テンプレート格納部80により通知されたテンプレート画像と、処理量算出部40より通知された予想量と、受信したビットストリームとに基づいて、オブジェクトを選択する。選択部60は、通知された予想量が、復号処理部20で処理可能な復号処理の量よりも大きい場合、映像に含まれる一部のオブジェクトを選択する。この場合、選択部60は、テンプレート格納部80に格納されているテンプレート画像と一致するオブジェクトを、選択する。本例において、選択部60は、受信したビットストリームに含まれる、全てのオブジェクトに対して、テンプレート画像とのテンプレートマッチング画像処理を行っている。選択部60は、例えば、所定の値以上の一致度でテンプレート画像と一致した画像を、選択する。   The selection unit 60 selects an object based on the template image notified from the template storage unit 80, the predicted amount notified from the processing amount calculation unit 40, and the received bitstream. When the notified predicted amount is larger than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects some objects included in the video. In this case, the selection unit 60 selects an object that matches the template image stored in the template storage unit 80. In this example, the selection unit 60 performs template matching image processing with a template image for all objects included in the received bitstream. For example, the selection unit 60 selects an image that matches the template image with a matching degree equal to or greater than a predetermined value.

テンプレート画像と一致するオブジェクトがない場合、選択部60は、オブジェクトを選択しない。また、通知された予想量が、復号処理部20で処理可能な復号処理の量よりも小さい場合、選択部60は、全てのオブジェクトを選択する。選択部60は、オブジェクトの一部、又は全てのオブジェクトを選択したか、オブジェクトを選択しないかを、オブジェクト制御部10へ通知する。   When there is no object that matches the template image, the selection unit 60 does not select the object. When the notified predicted amount is smaller than the amount of decoding processing that can be processed by the decoding processing unit 20, the selection unit 60 selects all objects. The selection unit 60 notifies the object control unit 10 whether some or all of the objects have been selected or not.

本例におけるストリーム映像表示装置100は、視聴者により指定されたテンプレート画像に基づいて、選択されたオブジェクトを、選択されない他のオブジェクトより詳細に表示する。これにより、ストリーム映像表示装置100は、処理可能な復号処理の量を超えたビットストリームを受信した場合においても、映像を破綻させることなく、視聴者に指定されたオブジェクトの映像を適切に表示させることができる。   The stream video display device 100 in this example displays the selected object in more detail than the other objects that are not selected based on the template image specified by the viewer. Thereby, the stream video display device 100 appropriately displays the video of the object designated by the viewer without breaking the video even when the bit stream exceeding the amount of decoding processing that can be processed is received. be able to.

尚、本例において、テンプレート格納部80は、人物の特徴を示すテンプレート画像を含んでよい。この場合、テンプレート格納部80は、例えば、人物の顔、髪型、服装、又は体型等の画像を、人物の特徴を示すテンプレート画像として含む。テンプレート格納部80は、これらのテンプレート画像から、視聴者により指定されたテンプレート画像を、格納する。これにより、選択部60は、指定された人物の特徴と一致した特徴を持つ人物のオブジェクトを、選択する。これにより、オブジェクト制御部10は、選択されたオブジェクトを、表示部30に詳細に表示させる。このように、本例におけるストリーム映像表示装置100は、例えば複数の人物を含む監視カメラ映像を表示する場合、指定された特徴を持つ人物の映像を、詳細に表示することができる。これにより、ストリーム映像表示装置100は、視聴者に、指定した人物の動きを、詳細に観察させることができる。   In this example, the template storage unit 80 may include a template image indicating the characteristics of a person. In this case, the template storage unit 80 includes, for example, an image of a person's face, hairstyle, clothes, body shape, or the like as a template image indicating the characteristics of the person. The template storage unit 80 stores a template image designated by the viewer from these template images. Thereby, the selection unit 60 selects a person object having a feature that matches the feature of the designated person. Thereby, the object control unit 10 causes the display unit 30 to display the selected object in detail. As described above, the stream video display apparatus 100 according to the present example can display the video of the person having the specified characteristics in detail when the surveillance camera video including a plurality of persons is displayed, for example. Thereby, the stream video display apparatus 100 allows the viewer to observe the movement of the designated person in detail.

尚、他の例において、選択部60は、視聴者により指定されたテンプレート画像と一致しないオブジェクトを選択してもよい。この場合、テンプレート格納部80は、例えば従業員等の、映像に予め写ることが予想されている人物を示すテンプレートを格納してよい。この場合、ストリーム映像表示装置100は、例えば、従業員等以外の人物を示すオブジェクトを、従業員等を示すオブジェクトよりも詳細に表示する。これにより、ストリーム映像表示装置100は、監視カメラの映像として必要な情報を適切に表示しつつ、映像全体の情報量を低減することができる。   In another example, the selection unit 60 may select an object that does not match the template image specified by the viewer. In this case, the template storage unit 80 may store a template indicating a person who is expected to appear in the video in advance, such as an employee. In this case, the stream video display apparatus 100 displays, for example, an object indicating a person other than an employee in more detail than an object indicating an employee or the like. Thereby, the stream video display apparatus 100 can reduce the amount of information of the entire video while appropriately displaying information necessary for the video of the monitoring camera.

図9は、ストリーム映像表示装置100の更に他の例における選択部60の動作の詳細を説明するフローチャートである。処理量算出部40は、受信したビットストリームから、復号処理部20での復号処理の予想量を、算出する(S240)。そして、処理量算出部40は、算出した予想量を、選択部60へ通知する。   FIG. 9 is a flowchart illustrating details of the operation of the selection unit 60 in still another example of the stream video display device 100. The processing amount calculation unit 40 calculates the expected amount of decoding processing in the decoding processing unit 20 from the received bitstream (S240). Then, the processing amount calculation unit 40 notifies the selection unit 60 of the calculated predicted amount.

テンプレート格納部80は、視聴者により選択されたテンプレート画像を格納する(S242)。そして、テンプレート格納部80は、選択されたテンプレート画像を、選択部60へ通知する。処理量算出部40により通知された予想量が、復号処理の最大の量を超えた場合(S244 YES)、選択部60は、通知されたテンプレート画像と、所定の値以上の一致度で一致したオブジェクトを選択する(S246)。   The template storage unit 80 stores the template image selected by the viewer (S242). Then, the template storage unit 80 notifies the selection unit 60 of the selected template image. When the predicted amount notified by the processing amount calculation unit 40 exceeds the maximum amount of decoding processing (S244: YES), the selection unit 60 matches the notified template image with a matching degree equal to or greater than a predetermined value. An object is selected (S246).

また、S244において、通知された予想量が、復号処理の最大の量を超えない場合(S244 NO)、選択部60は、全てのオブジェクトを選択する(S248)。以上で本フローチャートは終了する。   In S244, when the notified predicted amount does not exceed the maximum amount of decoding processing (S244 NO), the selection unit 60 selects all objects (S248). This flowchart is complete | finished above.

図10は、本発明の他の実施形態であるカーナビゲーションシステム450の構成の一例を示す図である。カーナビゲーションシステム450は、GPS衛星500、配信サーバ200、及びカーナビゲーション表示装置140を備える。本例におけるカーナビゲーション表示装置140は、利用者により指定された経路を示す地図情報を詳細に表示させることを目的とする。尚、本例において、利用者は、カーナビゲーション表示装置140を注視する視聴者の一例である。   FIG. 10 is a diagram showing an example of a configuration of a car navigation system 450 which is another embodiment of the present invention. The car navigation system 450 includes a GPS satellite 500, a distribution server 200, and a car navigation display device 140. The purpose of the car navigation display device 140 in this example is to display in detail the map information indicating the route specified by the user. In this example, the user is an example of a viewer watching the car navigation display device 140.

GPS衛星500は、カーナビゲーション表示装置140に測位信号を通知する。配信サーバ200は、例えば交通情報を管理する会社により管理される。配信サーバ200は、地図情報を、通信回線300を介してカーナビゲーション表示装置140へ配信する。この場合、配信サーバ200は、地図情報を、MPEG4における静止画を示すオブジェクトとして圧縮符号化して、カーナビゲーション表示装置140へ配信する。   The GPS satellite 500 notifies the car navigation display device 140 of a positioning signal. The distribution server 200 is managed by, for example, a company that manages traffic information. The distribution server 200 distributes the map information to the car navigation display device 140 via the communication line 300. In this case, the distribution server 200 compresses and encodes the map information as an object indicating a still image in MPEG4 and distributes the map information to the car navigation display device 140.

この場合、配信サーバ200は、地図情報をメッシュ状に分割し、分割された地図情報のそれぞれの部分を、静止画を示すオブジェクトとして格納している。また、配信サーバ200は、同一の縮尺の地図情報を、異なる解像度のオブジェクトとして、予め格納している。この場合、配信サーバ200は、地図情報を、高解像度の複数のオブジェクト、及び、高解像度のオブジェクトよりも低解像度の複数のオブジェクトとして、格納している。そして、配信サーバ200は、高解像度の複数のオブジェクトを、低圧縮率で符号化して格納している。また、配信サーバ200は、低解像度の複数のオブジェクトを、高解像度のオブジェクトよりも高い圧縮率で符号化して格納している。   In this case, the distribution server 200 divides the map information into a mesh shape, and stores each portion of the divided map information as an object indicating a still image. In addition, the distribution server 200 stores map information of the same scale in advance as objects of different resolutions. In this case, the distribution server 200 stores the map information as a plurality of high-resolution objects and a plurality of objects having a lower resolution than the high-resolution objects. The distribution server 200 encodes and stores a plurality of high resolution objects at a low compression rate. Further, the distribution server 200 encodes and stores a plurality of low resolution objects at a higher compression rate than that of the high resolution objects.

カーナビゲーション表示装置140は、表示制御部110及び表示部30を備える。表示制御部110は、オブジェクト制御部10、復号処理部20、及び選択部60を有する。   The car navigation display device 140 includes a display control unit 110 and a display unit 30. The display control unit 110 includes an object control unit 10, a decryption processing unit 20, and a selection unit 60.

選択部60は、例えばリモコン等の入力装置を含む。選択部60は、この入力装置を用いて利用者により指定された行き先を、受け取る。この場合、選択部60は、指定された行き先までの経路を検索する。選択部60は、表示部30に表示された複数の経路の中から、適切な経路を利用者に指定させてよい。選択部60は、検索した経路を含む地図情報のオブジェクトを選択する。この場合、選択部60は、利用者に指定された経路に対応した複数の静止画のオブジェクトのそれぞれを、選択する。選択部60は、選択した複数のオブジェクトをオブジェクト制御部10へ通知する。   The selection unit 60 includes an input device such as a remote controller, for example. The selection unit 60 receives the destination designated by the user using this input device. In this case, the selection unit 60 searches for a route to the designated destination. The selection unit 60 may cause the user to specify an appropriate route from among a plurality of routes displayed on the display unit 30. The selection unit 60 selects an object of map information including the searched route. In this case, the selection unit 60 selects each of a plurality of still image objects corresponding to the route designated by the user. The selection unit 60 notifies the object control unit 10 of the plurality of selected objects.

オブジェクト制御部10は、GPS衛星500より測位信号を受信する。また、オブジェクト制御部10は、配信サーバ200より地図情報を受信する。オブジェクト制御部10は、測位信号と、地図情報とに基づいて、地図上での現在位置を、表示部30へ表示させる。また、選択部60によりオブジェクトが選択された場合、オブジェクト制御部10は、選択部60により選択されたオブジェクトとして、選択されない他のオブジェクトよりも低い圧縮率で圧縮符号化されたオブジェクトを、配信サーバ200から受け取る。また、オブジェクト制御部10は、選択部60により選択されない他のオブジェクトとして、高い圧縮率で圧縮符号化されたオブジェクトを、配信サーバ200から受け取る。これにより、オブジェクト制御部10は、選択されたオブジェクトを、高解像度で、表示部30に表示させる。また、オブジェクト制御部10は、選択されないオブジェクトを、低解像度で、表示部30に表示させる。尚、オブジェクト制御部10は、選択部60に選択されたオブジェクトを、選択されないオブジェクトよりも先に、配信サーバ200から受け取ってよい。   The object control unit 10 receives a positioning signal from the GPS satellite 500. In addition, the object control unit 10 receives map information from the distribution server 200. The object control unit 10 displays the current position on the map on the display unit 30 based on the positioning signal and the map information. In addition, when an object is selected by the selection unit 60, the object control unit 10 selects, as the object selected by the selection unit 60, an object that has been compression-encoded at a lower compression rate than other objects that are not selected. Receive from 200. In addition, the object control unit 10 receives from the distribution server 200 an object that has been compression-encoded at a high compression rate as another object that is not selected by the selection unit 60. As a result, the object control unit 10 causes the display unit 30 to display the selected object with high resolution. Further, the object control unit 10 causes the display unit 30 to display an unselected object with a low resolution. The object control unit 10 may receive the object selected by the selection unit 60 from the distribution server 200 before the object that is not selected.

選択部60によりオブジェクトが選択されない場合、オブジェクト制御部10は、地図情報として、高い圧縮率で圧縮符号化されたオブジェクトを、配信サーバ200から受け取る。この場合、オブジェクト制御部10は、受け取ったオブジェクトを、低解像度で、表示部30に表示させる。オブジェクト制御部10は、受け取ったオブジェクトのビットストリームと、地図上での現在位置とを、復号処理部20へ与える。   When the selection unit 60 does not select an object, the object control unit 10 receives from the distribution server 200 an object that has been compression-encoded at a high compression rate as map information. In this case, the object control unit 10 displays the received object on the display unit 30 with a low resolution. The object control unit 10 gives the bit stream of the received object and the current position on the map to the decoding processing unit 20.

復号処理部20は、MPEG4規格に準拠したデコーダである。復号処理部20は、オブジェクト制御部10より受信した地図情報を示すビットストリームから、オブジェクトを、復号する。復号処理部20は、復号したオブジェクトを表示部30へ与える。表示部30は、復号されたオブジェクトを表示する。   The decoding processing unit 20 is a decoder compliant with the MPEG4 standard. The decoding processing unit 20 decodes the object from the bit stream indicating the map information received from the object control unit 10. The decryption processing unit 20 gives the decrypted object to the display unit 30. The display unit 30 displays the decrypted object.

以上のように、構成されたカーナビゲーションシステム450において、通信回線300への伝送量が限られている場合であっても、カーナビゲーション表示装置140は、利用者が指定した経路を含む地図情報を、適切に受け取ることができる。また、カーナビゲーション表示装置140は、利用者が指定した経路の地図情報を、詳細に表示することができる。   As described above, even if the amount of transmission to the communication line 300 is limited in the configured car navigation system 450, the car navigation display device 140 displays the map information including the route specified by the user. Can be received properly. In addition, the car navigation display device 140 can display the map information of the route specified by the user in detail.

図11は、カーナビゲーション表示装置140の動作の一例を示すフローチャートである。オブジェクト制御部10は、GPS衛星500より測位信号を受信する。また、オブジェクト制御部10は、配信サーバ200より地図情報を受信する(S300)。   FIG. 11 is a flowchart showing an example of the operation of the car navigation display device 140. The object control unit 10 receives a positioning signal from the GPS satellite 500. The object control unit 10 receives map information from the distribution server 200 (S300).

そして、選択部60が、利用者から行き先までの経路を受け取った場合(S302 YES)、選択部60は、利用者により指定された経路を含む地図情報のオブジェクトを選択する。そして、選択部60は、選択したオブジェクトをオブジェクト制御部10へ通知する。オブジェクト制御部10は、選択されたオブジェクトとして、予め低い圧縮率で符号化されていたオブジェクトを、配信サーバ200からダウンロードする(S304)。   When the selection unit 60 receives a route from the user to the destination (YES in S302), the selection unit 60 selects an object of map information including the route specified by the user. Then, the selection unit 60 notifies the object control unit 10 of the selected object. The object control unit 10 downloads from the distribution server 200 an object that has been encoded in advance at a low compression rate as the selected object (S304).

この場合、オブジェクト制御部10は、選択されない他のオブジェクトとして、予め高い圧縮率で符号化されていたオブジェクトを、配信サーバ200からダウンロードする。表示部30は、選択されたオブジェクトを高解像度で表示する。また、表示部30は、選択されない他のオブジェクトを低解像度で表示する(S308)。   In this case, the object control unit 10 downloads from the distribution server 200 an object that has been encoded in advance at a high compression rate as another object that is not selected. The display unit 30 displays the selected object with high resolution. The display unit 30 displays other objects that are not selected at a low resolution (S308).

選択部60が、利用者から行き先までの経路を受け取らない場合(S302 No)、選択部60は、オブジェクトを選択しない。この場合、オブジェクト制御部10は、全てのオブジェクトとして、予め高い圧縮率で符号化されたオブジェクトを、配信サーバ200からダウンロードする(S306)。表示部30は、全てのオブジェクトを、低解像度で、表示する(S308)。以上で、本フローチャートは終了する。   When the selection unit 60 does not receive a route from the user to the destination (No in S302), the selection unit 60 does not select an object. In this case, the object control unit 10 downloads, as all objects, objects previously encoded at a high compression rate from the distribution server 200 (S306). The display unit 30 displays all objects at a low resolution (S308). Above, this flowchart is complete | finished.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

本発明の一実施形態である表示システム400の使用例を説明する図である。It is a figure explaining the usage example of the display system 400 which is one Embodiment of this invention. ストリーム映像表示装置100の表示画面に表示される映像34について説明する図である。4 is a diagram for describing a video image 34 displayed on a display screen of a stream video display device 100. FIG. ストリーム映像表示装置100の詳細な構成の一例を示す図である。2 is a diagram illustrating an example of a detailed configuration of a stream video display device 100. FIG. ストリーム映像表示装置100の動作の一例を示すフローチャートである。5 is a flowchart illustrating an example of an operation of the stream video display device 100. 図4のS102における選択部60の動作の詳細を説明するフローチャートである。5 is a flowchart illustrating details of an operation of a selection unit 60 in S102 of FIG. ストリーム映像表示装置100の構成の他の例を示す図である。6 is a diagram illustrating another example of the configuration of the stream video display device 100. FIG. ストリーム映像表示装置100の他の例における選択部60の動作の詳細を説明するフローチャートである。12 is a flowchart illustrating details of an operation of the selection unit 60 in another example of the stream video display device 100. ストリーム映像表示装置100の構成の更に他の例を示す図である。6 is a diagram illustrating still another example of the configuration of the stream video display device 100. FIG. ストリーム映像表示装置100の更に他の例における選択部60の動作の詳細を説明するフローチャートである。12 is a flowchart illustrating details of the operation of the selection unit 60 in still another example of the stream video display device 100. 本発明の他の実施形態であるカーナビゲーションシステム450の構成の一例を示す図である。It is a figure which shows an example of a structure of the car navigation system 450 which is other embodiment of this invention. カーナビゲーション表示装置140の動作の一例を示すフローチャートである。5 is a flowchart showing an example of the operation of the car navigation display device 140.

符号の説明Explanation of symbols

10・・・オブジェクト制御部、20・・・復号処理部、30・・・表示部、31、32、33・・・オブジェクト、34・・・映像、40・・・処理量算出部、50・・・視線検出部、60・・・選択部、70・・・受付部、80・・・テンプレート格納部、100・・・ストリーム映像表示装置、110・・・表示制御部、140・・・カーナビゲーション表示装置、200・・・配信サーバ、300・・・通信回線、400・・・表示システム、450・・・カーナビゲーションシステム、500・・・GPS衛星 DESCRIPTION OF SYMBOLS 10 ... Object control part, 20 ... Decoding processing part, 30 ... Display part, 31, 32, 33 ... Object, 34 ... Image | video, 40 ... Processing amount calculation part, 50. ..Gaze detection unit, 60 ... selection unit, 70 ... reception unit, 80 ... template storage unit, 100 ... stream video display device, 110 ... display control unit, 140 ... car Navigation display device, 200 ... distribution server, 300 ... communication line, 400 ... display system, 450 ... car navigation system, 500 ... GPS satellite

Claims (11)

表示すべき映像に含まれる各オブジェクトを圧縮符号化して格納する映像記録装置から、前記オブジェクトを読み出して表示装置に表示させる表示制御装置であって、
前記表示装置に表示されたオブジェクトの中から、視聴者が選択したオブジェクトを選択する選択部と、
前記映像記録装置から前記オブジェクトを読み出し、前記選択部により選択されたオブジェクトを、他のオブジェクトよりも詳細に、前記表示装置に表示させるオブジェクト制御部と
を備える表示制御装置。
A display control device that reads out and displays the object on a display device from a video recording device that compresses and stores each object included in the video to be displayed,
A selection unit for selecting an object selected by a viewer from the objects displayed on the display device;
A display control device comprising: an object control unit that reads out the object from the video recording device and causes the display device to display the object selected by the selection unit in more detail than the other objects.
前記選択部により選択されたオブジェクトよりも低い階調、低い解像度、又は低いフレームレートで、前記他のオブジェクトを、前記オブジェクト制御部は前記表示装置に表示させる請求項1に記載の表示制御装置。   The display control device according to claim 1, wherein the object control unit causes the display device to display the other object at a lower gradation, lower resolution, or lower frame rate than the object selected by the selection unit. 前記視聴者の視線を検出する視線検出部を更に備え、
前記視線検出部が検出する前記視線に基づき、前記視聴者が注視しているオブジェクトを、前記選択部は選択する請求項1に記載の表示制御装置。
A line-of-sight detection unit for detecting the line of sight of the viewer;
The display control apparatus according to claim 1, wherein the selection unit selects an object being watched by the viewer based on the line of sight detected by the line-of-sight detection unit.
前記視聴者により選択されたテンプレート画像を格納するテンプレート格納部を更に備え、
前記テンプレート格納部に格納されている前記テンプレート画像と一致するオブジェクトを、前記選択部は選択する請求項1に記載の表示制御装置。
A template storage unit for storing a template image selected by the viewer;
The display control apparatus according to claim 1, wherein the selection unit selects an object that matches the template image stored in the template storage unit.
前記視聴者により選択されたテンプレート画像を格納するテンプレート格納部を更に備え、
前記テンプレート格納部に格納されている前記テンプレート画像と一致しないオブジェクトを、前記選択部は選択する請求項1に記載の表示制御装置。
A template storage unit for storing a template image selected by the viewer;
The display control apparatus according to claim 1, wherein the selection unit selects an object that does not match the template image stored in the template storage unit.
オブジェクトのタイプ、又はオブジェクトに含まれるべきタグ情報を、前記視聴者から受け取る受付部を更に備え、
前記受付部が受け取った前記タイプに一致するオブジェクト、又は前記受付部が受け取った前記タグ情報を含むオブジェクトを、前記選択部は選択する請求項1に記載の表示制御装置。
A reception unit that receives from the viewer the type of object or tag information to be included in the object;
The display control apparatus according to claim 1, wherein the selection unit selects an object that matches the type received by the reception unit or an object that includes the tag information received by the reception unit.
MPEG4規格により圧縮符号化された前記オブジェクトを含むビットストリームを、前記映像記録装置は格納し、
前記他のオブジェクトに対応して前記映像記録装置から受け取る前記ビットストリームの一部を前記他のオブジェクトの再生に用いないことにより、前記オブジェクト制御部は、前記選択部により選択されたオブジェクトを、前記他のオブジェクトよりも詳細に、前記表示装置に表示させる請求項1に記載の表示制御装置。
The video recording apparatus stores a bitstream including the object compressed and encoded according to the MPEG4 standard,
By not using a part of the bit stream received from the video recording apparatus corresponding to the other object for reproduction of the other object, the object control unit selects the object selected by the selection unit as the object. The display control apparatus according to claim 1, wherein the display is displayed on the display device in more detail than other objects.
早送りした前記映像、又は逆方向に再生した前記映像を前記表示装置に表示させる場合に、前記選択部は、一部のオブジェクトを選択する請求項1に記載の表示制御装置。   The display control device according to claim 1, wherein when the fast-forwarded video or the video reproduced in the reverse direction is displayed on the display device, the selection unit selects some objects. 圧縮符号化されたオブジェクトを復号する復号処理部と、
前記映像に含まれる全てのオブジェクトを前記復号処理部が復号するのに要する復号処理の量を算出する処理量算出部と
を更に備え、
前記表示装置が表示する前記映像に合わせて前記復号処理部が処理可能な復号処理の量よりも、前記処理量算出部が算出する復号処理の量が大きい場合に、前記選択部は、前記映像に含まれる一部のオブジェクトを選択する請求項1に記載の表示制御装置。
A decoding processing unit for decoding the compression-encoded object;
A processing amount calculation unit that calculates the amount of decoding processing required for the decoding processing unit to decode all the objects included in the video;
When the amount of decoding processing calculated by the processing amount calculation unit is larger than the amount of decoding processing that can be processed by the decoding processing unit in accordance with the video displayed by the display device, the selection unit selects the video The display control apparatus according to claim 1, wherein some objects included in the display are selected.
前記映像記録装置は、圧縮符号化された前記オブジェクトを、前記オブジェクト制御部に、通信回線を介して送信し、
前記選択部により選択されたオブジェクトとして、前記他のオブジェクトよりも低い圧縮率で圧縮符号化されたオブジェクトを、前記オブジェクト制御部は前記映像記録装置から受け取る請求項1に記載の表示制御装置。
The video recording device transmits the compression-encoded object to the object control unit via a communication line,
The display control device according to claim 1, wherein the object control unit receives from the video recording device an object that has been compression-encoded at a lower compression rate than the other objects as the object selected by the selection unit.
映像を表示する表示システムであって、
表示すべき映像に含まれる各オブジェクトを圧縮符号化して格納する映像記録装置と、
前記映像を表示する表示装置と、
前記表示装置に表示されたオブジェクトの中から、視聴者が選択したオブジェクトを選択する選択部と、
前記映像記録装置から前記オブジェクトを読み出し、前記選択部により選択されたオブジェクトを、他のオブジェクトよりも詳細に、前記表示装置に表示させるオブジェクト制御部と
を備える表示システム。
A display system for displaying images,
A video recording device for compressing and storing each object included in the video to be displayed;
A display device for displaying the video;
A selection unit for selecting an object selected by a viewer from the objects displayed on the display device;
A display system comprising: an object control unit that reads the object from the video recording device and causes the display device to display the object selected by the selection unit in more detail than the other objects.
JP2003322900A 2003-09-16 2003-09-16 Display controller and display system Pending JP2005091571A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003322900A JP2005091571A (en) 2003-09-16 2003-09-16 Display controller and display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003322900A JP2005091571A (en) 2003-09-16 2003-09-16 Display controller and display system

Publications (1)

Publication Number Publication Date
JP2005091571A true JP2005091571A (en) 2005-04-07

Family

ID=34454122

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003322900A Pending JP2005091571A (en) 2003-09-16 2003-09-16 Display controller and display system

Country Status (1)

Country Link
JP (1) JP2005091571A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008111886A (en) * 2006-10-27 2008-05-15 Digital Electronics Corp Automatic door, screen display apparatus, screen display control program, and computer readable recording medium recorded with the program
JP2012221498A (en) * 2011-04-08 2012-11-12 Sony Computer Entertainment Inc System and method for providing feedback by user gaze and gestures
JP2014508311A (en) * 2010-12-08 2014-04-03 株式会社ソニー・コンピュータエンタテインメント Adaptive display using eye tracking
CN103765346A (en) * 2011-09-08 2014-04-30 英特尔公司 Eye gaze based location selection for audio visual playback
WO2014199666A1 (en) * 2013-06-13 2014-12-18 シャープ株式会社 Display device
JP2017004366A (en) * 2015-06-12 2017-01-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Display control method, display controller and control program

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008111886A (en) * 2006-10-27 2008-05-15 Digital Electronics Corp Automatic door, screen display apparatus, screen display control program, and computer readable recording medium recorded with the program
JP2014508311A (en) * 2010-12-08 2014-04-03 株式会社ソニー・コンピュータエンタテインメント Adaptive display using eye tracking
JP2012221498A (en) * 2011-04-08 2012-11-12 Sony Computer Entertainment Inc System and method for providing feedback by user gaze and gestures
CN103765346A (en) * 2011-09-08 2014-04-30 英特尔公司 Eye gaze based location selection for audio visual playback
JP2014526725A (en) * 2011-09-08 2014-10-06 インテル・コーポレーション Audio visual playback position selection based on gaze
CN103765346B (en) * 2011-09-08 2018-01-26 英特尔公司 The position selection for being used for audio-visual playback based on eye gaze
WO2014199666A1 (en) * 2013-06-13 2014-12-18 シャープ株式会社 Display device
US9875695B2 (en) 2013-06-13 2018-01-23 Sharp Kabushiki Kaisha Display device
JP2017004366A (en) * 2015-06-12 2017-01-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Display control method, display controller and control program

Similar Documents

Publication Publication Date Title
JP4000844B2 (en) Content distribution system, content distribution system distribution server and display terminal, and content distribution program
KR101602879B1 (en) Media processing apparatus for multi-display system and method of operation thereof
CN110677672A (en) Method and system for encoding video with overlays
KR20190022851A (en) Apparatus and method for providing and displaying content
CN101431690B (en) Image processing apparatus, image processing method
US8330863B2 (en) Information presentation apparatus and information presentation method that display subtitles together with video
US11317075B2 (en) Program guide graphics and video in window for 3DTV
US20100329640A1 (en) Recording/Reproducing Apparatus
CN112911398B (en) Broadcast receiving apparatus, broadcast receiving method, and content outputting method
JP6860485B2 (en) Information processing equipment, information processing methods, and programs
US20150350565A1 (en) Techniques for magnifying a high resolution image
US7889229B2 (en) Security surveillance system capable of outputting still images together with moving images
JP2008299241A (en) Image processing apparatus and display
KR20180093702A (en) Electronic apparatus for playing substitutional advertisement and method for controlling method thereof
CN111836096B (en) Broadcast receiving apparatus
KR102287510B1 (en) Server, apparatus for providing image, and system including the same
CN103037169A (en) Picture split joint combination method of embedded hard disk video
JP2005091571A (en) Display controller and display system
JP4655065B2 (en) Content distribution system, content distribution system distribution server and display terminal, and content distribution program
US20080244405A1 (en) Gui display system recording apparatus, and gui display method
KR100853959B1 (en) System and method for remote surveillance of multi channel video using iptv network
JP6706279B2 (en) Broadcast program content storage control method
JP2021016187A (en) Display device
US20070019925A1 (en) Systems, methods, and apparatus for trick mode
JP6006962B2 (en) Content display control apparatus and program