JP4712437B2 - Information processing terminal - Google Patents

Information processing terminal Download PDF

Info

Publication number
JP4712437B2
JP4712437B2 JP2005141487A JP2005141487A JP4712437B2 JP 4712437 B2 JP4712437 B2 JP 4712437B2 JP 2005141487 A JP2005141487 A JP 2005141487A JP 2005141487 A JP2005141487 A JP 2005141487A JP 4712437 B2 JP4712437 B2 JP 4712437B2
Authority
JP
Japan
Prior art keywords
modification
media data
display
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005141487A
Other languages
Japanese (ja)
Other versions
JP2006319774A (en
Inventor
義弘 塚本
浩司 幡野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2005141487A priority Critical patent/JP4712437B2/en
Publication of JP2006319774A publication Critical patent/JP2006319774A/en
Application granted granted Critical
Publication of JP4712437B2 publication Critical patent/JP4712437B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Digital Computer Display Output (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、メディア(テレビ放送、ストーリーミング配信、記憶媒体からの読み出しなどの、視聴者に情報を伝える手段)により伝えられる複数のコンテンツ(視聴者に伝えるべき情報)の表示形態を調整して、その複数のコンテンツを同一の表示画面上に表示させる情報処理端末に関する。   The present invention adjusts the display form of a plurality of contents (information to be transmitted to the viewer) transmitted by the media (means for transmitting information to the viewer such as TV broadcasting, story distribution, and reading from a storage medium). The present invention also relates to an information processing terminal that displays the plurality of contents on the same display screen.

従来、主画面と複数の子画面を一つのディスプレイの表示画面上に同時に表示する画面表示装置が提供されている。例えば、コンテンツが番組、メディアが無線放送であるテレビ放送においては、あるチャネルの番組を表示画面の大部分(主画面)に表示させ、その他のチャネルの番組をそれぞれ表示画面の残りの部分(子画面)に表示させる装置が挙げられる。これにより、現在見ている主画面に代えて、次に見たい番組を複数の子画面の中から選択し易くし、ユーザの利便が図られている。   2. Description of the Related Art Conventionally, a screen display device that simultaneously displays a main screen and a plurality of sub-screens on a display screen of one display has been provided. For example, in a television broadcast in which the content is a program and the media is a wireless broadcast, a program of a certain channel is displayed on a large part (main screen) of the display screen, and programs of other channels are respectively displayed on the remaining parts (children). For example, a device to be displayed on the screen. This makes it easier for the user to select a program to be viewed next from a plurality of sub-screens instead of the main screen that is currently being viewed, which is convenient for the user.

上述の従来の画面表示装置は、複数の子画面のうち放送時間が終了して無信号状態(砂あらし)の画面や、ノイズの多い画面など、見難い画面を表示すると、聴視者には極めて目障りとなる。このため、目障りとなる子画面については画面表示を行わないようにし、一方、その子画面の表示を行わない分、他の子画面や主画面の表示サイズを大きくして、他の子画面や主画面を再配置する画面表示装置が提案されている(例えば、特許文献1参照)。   The above-described conventional screen display device displays a hard-to-see screen such as a no-signal state (sandstorm) screen or a noisy screen among a plurality of sub-screens when the broadcast time is over. It is extremely annoying. For this reason, screen display is not performed for obscure sub-screens. On the other hand, the display size of other sub-screens and main screens is increased so that other sub-screens and main screens are not displayed. A screen display device that rearranges screens has been proposed (see, for example, Patent Document 1).

特開平11‐239307号公報JP-A-11-239307

しかしながら、従来の画面表示装置にあっては、聴視者にとって目障りな子画面を非表示としてしまうために、その子画面にて伝えようとする情報が聴視者に全く伝わらなくなってしまう。上述の無信号状態の画面とノイズの多い画面のそれぞれの場合で説明すると、放送時間が終了して無信号状態の放送は視聴者に伝えるべき情報を有していないため、その放送を表示する子画面を非表示としても問題無い。しかし、ノイズが含まれる放送は見難いながらも視聴者に伝えるべき情報を含んでいるおり、その放送を表示する子画面を非表示としてしまうと、その情報が視聴者に全く伝わらず、従って、その情報が全く利用されないことになってしまう。   However, in the conventional screen display device, since the child screen which is annoying for the viewer is hidden, the information to be transmitted on the child screen is not transmitted to the viewer at all. In the case of the above-mentioned screen with no signal and noisy screen, since the broadcast time has ended and no signal has information to be transmitted to the viewer, the broadcast is displayed. There is no problem even if the sub-screen is hidden. However, broadcasts that contain noise are difficult to see but contain information that should be communicated to the viewer. If the sub-screen that displays the broadcast is hidden, the information will not be transmitted to the viewer at all. That information will not be used at all.

本発明は、上記事情に鑑みてなされたもので、複数のコンテンツの表示形態を調整して、その複数のコンテンツを同一の表示画面上に表示させる場合、その複数のコンテンツの中に表示品質の悪いコンテンツがあっても、そのコンテンツが伝えるべき情報を効果的に聴視者に伝えることができる情報処理端末を提供することを目的とする。   The present invention has been made in view of the above circumstances, and when adjusting the display form of a plurality of contents and displaying the plurality of contents on the same display screen, the display quality of the plurality of contents is improved. An object of the present invention is to provide an information processing terminal capable of effectively transmitting information to be transmitted to a viewer even if there is bad content.

本発明の情報処理端末は、コンテンツ内容の異なる複数のメディアデータを表示部に表示させる情報処理端末であって、少なくとも1つのメディアデータについてのメディアデータ関連情報を抽出する抽出手段と、予め設定された、メディアデータ関連情報と前記表示部による表示形態との対応関係を参照して、前記抽出手段により抽出したメディアデータ関連情報に対応する前記表示部の表示形態を決定する決定手段と、を備え、前記表示部は、前記決定手段が決定した表示形態により、前記抽出手段によりメディアデータ関連情報を抽出したメディアデータを少なくとも表示する、ものである。   An information processing terminal according to the present invention is an information processing terminal that displays a plurality of media data having different content contents on a display unit, and is set in advance with extraction means for extracting media data related information for at least one media data. And determining means for determining a display form of the display unit corresponding to the media data related information extracted by the extracting unit with reference to a correspondence relationship between the media data related information and the display form by the display unit. The display unit displays at least the media data obtained by extracting the media data related information by the extracting unit according to the display form determined by the determining unit.

この構成により、複数のコンテンツの中に表示品質の悪いコンテンツがあっても、そのコンテンツが伝えるべき情報を効果的に聴視者に伝えることができる。   With this configuration, even if there is content with poor display quality among a plurality of content, information to be transmitted by the content can be effectively transmitted to the viewer.

また、本発明の情報処理端末は、前記決定手段が、予め設定された、メディアデータ関連情報と前記メディアデータ関連情報を格付けした必要度との第1の対応関係を参照して、前記抽出手段により抽出したメディアデータ関連情報に対応する前記必要度を決定する必要度決定手段と、前記必要度と前記表示部による表示形態との第2の対応関係を参照して、前記必要度決定手段により決定した必要度に対応する前記表示部の表示形態を決定する表示形態決定手段と、を含むものである。   Further, the information processing terminal of the present invention refers to the first correspondence relationship between the media data related information and the degree of necessity that the media data related information is rated by the determining means, which is set in advance. The necessity determination means for determining the necessity corresponding to the media data related information extracted by the above and a second correspondence relationship between the necessity and the display form by the display unit, by the necessity determination means Display form determining means for determining the display form of the display unit corresponding to the determined degree of necessity.

この構成により、必要度を介しメディアデータ関連情報と表示形態とを対応付けることができるため、この必要度を用いてメディアデータ関連情報と表示形態との対応付けを簡素化できるとともに、その対応付けにかかる手間を軽減できる。   With this configuration, the media data related information and the display form can be associated with each other through the necessity. Therefore, the association between the media data related information and the display form can be simplified using the necessity, and the association can be performed. Such labor can be reduced.

また、本発明の情報処理端末は、前記決定手段により決定した前記表示部の表示形態に応じて、前記複数のメディアデータの表示形態を調整する調整手段を備え、前記表示部は、前記調整手段が調整した表示形態により、前記抽出手段によりメディアデータ関連情報を抽出したメディアデータを含む複数のメディアデータを表示する、ものを含む。   The information processing terminal according to the present invention further includes an adjusting unit that adjusts a display mode of the plurality of media data according to a display mode of the display unit determined by the determining unit, and the display unit includes the adjusting unit. Display a plurality of media data including the media data obtained by extracting the media data related information by the extracting means.

この構成により、1つのメディアデータの表示形態に応じて他のメディアデータの表示形態を調整することができる。   With this configuration, the display form of other media data can be adjusted according to the display form of one media data.

また、本発明の情報処理端末は、前記抽出手段が、少なくとも2つのメディアデータについてのメディアデータ関連情報を抽出し、前記決定手段が、前記抽出手段により抽出したそれぞれのメディアデータ関連情報に対応する前記表示部の表示形態を決定し、前記調整手段が、前記決定手段により決定した、それぞれのメディアデータ関連情報に対応する前記表示部の表示形態に応じて、前記抽出手段によりメディアデータ関連情報を抽出したメディアデータを少なくとも含む、複数のメディアデータの表示形態を調整する、ものを含む。   In the information processing terminal according to the present invention, the extracting unit extracts media data related information for at least two media data, and the determining unit corresponds to each media data related information extracted by the extracting unit. The display form of the display unit is determined, and the adjusting unit determines the media data related information by the extracting unit according to the display form of the display unit corresponding to each media data related information determined by the determining unit. And adjusting the display form of a plurality of media data including at least the extracted media data.

この構成により、複数のメディアデータ毎のメディアデータ関連情報を取り出して、その複数のメディアデータ関連情報全てあるいは一部を反映した修飾処理を行うことができるため、様々なコンテンツを同時に表示させる場合の、コンテンツ表示方法の自由度が高まる。   With this configuration, media data related information for each of a plurality of media data can be extracted, and modification processing reflecting all or part of the plurality of media data related information can be performed. The degree of freedom of the content display method is increased.

本発明の情報処理端末によれば、複数のコンテンツの表示形態を調整して、その複数のコンテンツを同一の表示画面上に表示させる場合、その複数のコンテンツの中に表示品質の悪いコンテンツがあっても、そのコンテンツが伝えるべき情報を効果的に聴視者に伝えることができる。   According to the information processing terminal of the present invention, when adjusting the display form of a plurality of contents and displaying the plurality of contents on the same display screen, there is a content with poor display quality among the plurality of contents. However, it is possible to effectively convey information to be transmitted to the viewer.

以下、本発明の実施形態の情報処理端末について、図面を用いて説明する。   Hereinafter, an information processing terminal according to an embodiment of the present invention will be described with reference to the drawings.

(第1の実施形態)
本発明の第1の実施形態の情報処理端末を、図1に示す。
図1において、情報処理端末11は、メディア処理部12、13と、レイアウト調整手段14と、合成手段15と、表示手段16と、を備える。
また、前記メディア処理部12は、データ通信手段17と、修飾必要度決定手段18と、修飾決定手段19と、修飾手段20と、を有する。前記メディア処理部13は、データ通信手段21と、修飾手段22と、を有する。
(First embodiment)
An information processing terminal according to the first embodiment of the present invention is shown in FIG.
In FIG. 1, the information processing terminal 11 includes media processing units 12 and 13, a layout adjustment unit 14, a synthesis unit 15, and a display unit 16.
The media processing unit 12 includes a data communication unit 17, a modification necessity degree determination unit 18, a modification determination unit 19, and a modification unit 20. The media processing unit 13 includes data communication means 21 and modification means 22.

前記メディア処理部12、13は、例えば一方が主画面用のメディアデータ処理をするものとすると、他方が一または複数の子画面用のメディアデータ処理をするものとなる。また、一方が複数の子画面用のメディアデータ処理をするものとすると、他方が他の子画面用のメディアデータ処理をするもの、または主画面用のメディアデータ処理をするものとなる。ここで、メディアデータは、各メディアにより伝送、保存または作成される、文字、動画像、静止画像などを表示手段16に表示するためのデータで、無線電波、インターネット通信などのネットワークN1、N2を通じて伝達されたり、あるいは本発明の情報処理端末の文字・画像編集用アプリケーションを利用して作成される。メディア処理部12、13によりデータ処理されたメディアデータが、表示手段16に表示されることにより、コンテンツが視聴者に伝わることになる。   For example, if one of the media processing units 12 and 13 performs media data processing for a main screen, the other performs media data processing for one or more sub-screens. If one side performs media data processing for a plurality of sub-screens, the other side performs media data processing for other sub-screens or media data processing for main screens. Here, the media data is data for displaying characters, moving images, still images and the like transmitted, stored or created by each medium on the display means 16, and is transmitted through networks N1 and N2 such as radio waves and Internet communications. It is transmitted or created using the character / image editing application of the information processing terminal of the present invention. The media data processed by the media processing units 12 and 13 is displayed on the display means 16 so that the content is transmitted to the viewer.

従って、メディアデータ処理部12は、例えばテレビ放送で受信した主画面にかかるメディアデータを、同時に受信したメディアデータ関連情報に応じて決定した所定の画面サイズ(例えば拡大)に処理し、一方、メディアデータ処理部13は、受信した一つの子画面にかかるメディアデータの画面サイズを、前記決定された主画面の画面サイズに応じたサイズ(例えば、縮小)に調整する。なお、このようなマルチ画面表示における画面サイズの調整処理は、テレビ放送以外の例えば、インターネット放送で扱う複数データのストリーミング配信や、複数メールのメールアプリケーション処理にも適用し得るものである。ここで、メディアデータ関連情報は、メディアデータ転送レート、パケット欠損状況、コンテンツに対するユーザの関心度、災害情報やニュース速報などの緊急度、経時的に報知情報が変更になるニュースや天気予報などの情報の新鮮度(例えば、更新日時からの経過時間に基づく)等の情報が含まれており、ネットワークN1、N2を通じて伝達されたり、メディアデータを基にデータ通信手段17、21が算出したり、あるいは、本発明の情報処理端末が備える入力手段(図示せず)により装置利用者が入力することにより登録される。このメディアデータ関連情報は、主画面および子画面それぞれの表示形態(例えば、表示領域の縮小率、拡大率)を決定するために、利用される。なお、図1では、データ通信手段17は、メディアデータ関連情報の1つとしてメディアデータ転送レートを修飾必要度決定手段18に出力するよう記載している。   Therefore, the media data processing unit 12 processes the media data relating to the main screen received, for example, by television broadcasting into a predetermined screen size (for example, enlargement) determined according to the media data related information received at the same time. The data processing unit 13 adjusts the screen size of the media data relating to the received single child screen to a size (for example, reduction) corresponding to the determined screen size of the main screen. Note that such screen size adjustment processing in multi-screen display can be applied to, for example, streaming distribution of a plurality of data handled by Internet broadcasting other than television broadcasting and mail application processing of a plurality of mails. Here, media data related information includes media data transfer rate, packet loss status, user interest in content, urgency such as disaster information and breaking news, news and weather forecasts whose notification information will change over time Information such as the freshness of the information (for example, based on the elapsed time from the update date and time) is included, transmitted through the networks N1 and N2, or calculated by the data communication means 17 and 21 based on the media data, Alternatively, registration is performed by an apparatus user input using an input unit (not shown) provided in the information processing terminal of the present invention. This media data related information is used to determine the display forms (for example, the reduction ratio and enlargement ratio of the display area) of the main screen and the sub-screen. In FIG. 1, the data communication unit 17 is described to output the media data transfer rate to the modification necessity degree determination unit 18 as one piece of media data related information.

なお、本実施形態のメディア処理部12、13はネットワークN1、N2を介して行うデータ通信からメディアデータ関連情報を受信しているが、ユーザが興味ある情報としての関心度情報をメディアデータ関連情報として入力し、各メディアデータのメディア関連情報を設定することも考えられる。   The media processing units 12 and 13 of the present embodiment receive media data related information from data communication performed via the networks N1 and N2. However, the interest level information as information that the user is interested in is represented as media data related information. It is also possible to set the media related information of each media data.

前記データ通信手段17、21は、それぞれネットワークN1、N2を介してメディアデータを受信するとともに、メディアデータ関連情報を抽出あるいは算出し、そのメディアデータとメディアデータ関連情報を修飾必要度決定手段18に出力する。   The data communication means 17 and 21 receive media data via the networks N1 and N2, respectively, extract or calculate media data related information, and send the media data and media data related information to the modification necessity degree determining means 18. Output.

前記修飾必要度決定手段18は、データ通信手段17から入力されるメディアデータ関連情報にもとづき、そのメディアデータ関連情報を有するメディア情報の修飾必要度を決定するものである。例えば、メディアデータ関連情報がメディアデータ転送レートである場合には、図2に示すように、各メディアデータ転送レートに対する修飾必要度を、数値にて指定する。ここで、修飾必要度の数値「0」〜「3」は、メディアデータ関連情報が、例えばメディアデータ転送レートである場合に、このメディアデータ転送レートに応じた修飾処理、つまり画面サイズの縮小率や拡大率をランク付けする目安の値であり、任意の数値に設定される。これにより、メディアデータ関連情報と修飾処理との対応付けをする手間、つまり設定にかかる手間を軽減することができる。   The modification necessity degree determining means 18 determines the necessity degree of modification of media information having the media data related information based on the media data related information input from the data communication means 17. For example, when the media data related information is a media data transfer rate, the degree of modification necessary for each media data transfer rate is designated by a numerical value as shown in FIG. Here, the numerical values “0” to “3” of the degree of modification need to be modified according to the media data transfer rate when the media data related information is, for example, the media data transfer rate, that is, the screen size reduction rate. It is a guideline value for ranking the enlargement ratio and can be set to any numerical value. As a result, it is possible to reduce the trouble of associating the media data related information with the modification process, that is, the trouble of setting.

また、修飾決定手段19は、修飾必要度決定手段18が決定した修飾必要度を通知されると、予め決められた修飾ポリシー情報に従って、適用すべき修飾処理を決定するように機能する。この修飾ポリシー情報は、図3の情報テーブルに示すように、前記修飾必要度ごとに、どのような修飾処理を施すべきかを規定するものである。修飾処理は、前記のように修飾必要度ごとに対応付けられており、修飾ポリシー情報は、異なる修飾必要度ごとに対応付けられた複数の修飾処理の集合のことを指す。この修飾処理には、例えば表示領域の拡大・縮小、正しく表示できない部分を非表示にする、表示内容レベルの変更、テキストのフォントの色、サイズの変更、などの表示手段16による空間的レイアウトの変更や、表示フレームレートや表示更新間隔や表示の継続時間や累積時間の変更、などの表示手段による時間的レイアウトの変更が含まれる。なお、修飾処理は、ここで述べた変更処理に限定するものではなく、視聴者のあるコンテンツに対する関心を意図的に変えることができる、そのコンテンツの表示形態の変更であれば良い。   Further, the modification determining unit 19 functions to determine a modification process to be applied in accordance with predetermined modification policy information when notified of the modification necessary level determined by the modification necessary level determining unit 18. As shown in the information table of FIG. 3, this modification policy information defines what modification processing should be performed for each degree of modification required. The modification process is associated with each modification necessity as described above, and the modification policy information indicates a set of a plurality of modification processes associated with different modification necessity levels. This modification processing includes, for example, enlargement / reduction of the display area, non-display of a portion that cannot be correctly displayed, change of the display content level, change of the font color of the text, change of the size, etc. Changes include changes in the temporal layout by display means, such as changes in the display frame rate, display update interval, display duration, and cumulative time. The modification process is not limited to the change process described here, but may be any change in the display form of the content that can intentionally change the viewer's interest in the content.

修飾決定手段19は、前記決定した修飾処理をレイアウト調整手段14に通知する。図1では、修飾決定手段19からレイアウト調整手段14に通知する情報を適用予定修飾処理と記載しているが、これは、メディア処理部12、13で受信したメディアデータの最終的な修飾処理を決定するレイアウト調整手段14に(詳細は後述する)、その決定する前に通知する情報であるためである。   The modification determination unit 19 notifies the layout adjustment unit 14 of the determined modification process. In FIG. 1, the information notified from the modification determination unit 19 to the layout adjustment unit 14 is described as the application schedule modification process. This is the final modification process of the media data received by the media processing units 12 and 13. This is because the information is notified to the layout adjusting unit 14 to be determined (details will be described later) before the determination.

前記レイアウト調整手段14は、修飾決定手段19から通知された適用予定修飾処理の内容を受け取り、この内容に応じてメディア処理部13により受信した他のメディアデータの修飾処理を決定するものである。レイアウト調整手段14は、メディア処理部12で処理するメディアデータ(メディアデータA)の適用予定修飾処理内容に応じてメディア処理部13で処理するメディアデータ(メディアデータB)の修飾処理内容を、図4に示すような情報テーブル(以下調整ポリシー情報と記述する)を参照して、メディアデータA、Bの修飾処理を決定する。例えば、メディアデータAの適用予定修飾処理が縮小率50〜69%である場合には、メディアデータAが縮小60%、メディアデータBが130%の拡大と決定する。レイアウト調整手段14は、決定したメディアデータA、Bに対して決定したそれぞれの修飾処理を、メディアデータAは修飾決定手段19に、メディアデータBは修飾手段22に通知する。なお、レイアウト調整手段14から修飾決定手段19に通知する情報のことを、調整後修飾処理と称する。   The layout adjustment unit 14 receives the contents of the application schedule modification process notified from the modification determination unit 19 and determines the modification process of other media data received by the media processing unit 13 according to the contents. The layout adjusting unit 14 displays the modification processing content of the media data (media data B) processed by the media processing unit 13 in accordance with the application schedule modification processing content of the media data (media data A) processed by the media processing unit 12. The modification process for the media data A and B is determined with reference to an information table (hereinafter referred to as adjustment policy information) as shown in FIG. For example, when the application schedule modification process of the media data A is a reduction rate of 50 to 69%, it is determined that the media data A is reduced by 60% and the media data B is enlarged by 130%. The layout adjustment unit 14 notifies the modification processing determined for the determined media data A and B, the media data A to the modification determination unit 19, and the media data B to the modification unit 22. The information notified from the layout adjustment unit 14 to the modification determination unit 19 is referred to as post-adjustment modification process.

また、メディア処理部12の修飾手段20は、修飾決定手段19がレイアウト調整手段14からの調整後修飾処理の通知を受けて決定した修飾処理を実行し、この修飾処理を行った修飾済みメディアデータAを、合成手段15を介して表示装置16へ出力する。メディア処理部13の修飾手段22は、レイアウト調整手段14から通知を受けた修飾処理を実行し、この修飾処理を行った修飾済みメディアデータBを、合成手段15を介して表示装置16へ出力する。   The modification unit 20 of the media processing unit 12 executes the modification process determined by the modification determination unit 19 upon receiving the post-adjustment modification process notification from the layout adjustment unit 14, and the modified media data subjected to this modification process. A is output to the display device 16 via the combining means 15. The modifying unit 22 of the media processing unit 13 executes the modifying process notified from the layout adjusting unit 14 and outputs the modified media data B subjected to the modifying process to the display device 16 via the combining unit 15. .

前記合成手段15は、修飾手段20、22からの画面サイズ調整等の修飾処理済の各メディアデータを合成するように機能し、表示手段16はその各画面を所定のレイアウトで表示するように機能する。つまり、画面サイズが調整された2つの主画面および子画面を、1つの表示画面に、例えば上下方向や左右方向隣接する配置になるように合成する。修飾手段20、22によるメディアデータA、Bの修飾処理が行われ、合成手段15により修飾処理済のメディアデータを合成した結果、表示手段16がメディアデータA、Bにより構成されるコンテンツをそれぞれ、ある表示形態により表示することになる。   The synthesizing unit 15 functions to synthesize each media data subjected to modification processing such as screen size adjustment from the modification units 20 and 22, and the display unit 16 functions to display each screen in a predetermined layout. To do. That is, the two main screens and sub-screens whose screen sizes are adjusted are synthesized so as to be arranged adjacent to one display screen, for example, in the vertical direction or the horizontal direction. As a result of the modification processing of the media data A and B performed by the modification means 20 and 22 and the combination of the media data subjected to the modification processing by the composition means 15, the display means 16 displays the contents constituted by the media data A and B, respectively. The display is performed in a certain display form.

前記のように構成された情報処理端末について、その動作を説明する。
データ通信手段17は、ネットワークN1からメディアデータAを受信する。修飾必要度決定手段18は、データ通信手段17を通して得たメディアデータ関連情報であるメディアデータ転送レートを受け、図2に示すテーブルを参照して、このメディアデータ転送レートに対応する修飾必要度を決定する。ここでは、転送レートが4〜32kbpsの間、すなわち、修飾必要度が「2」である場合を例に説明する。メディアデータの修飾必要度「2」に応じて、修飾決定手段19が図3に示す修飾ポリシー情報を参照して、適用すべき修飾処理つまり「画面サイズ75%に縮小」の処理を、決定する。
The operation of the information processing terminal configured as described above will be described.
The data communication means 17 receives media data A from the network N1. The modification necessity degree determination means 18 receives the media data transfer rate which is the media data related information obtained through the data communication means 17, and refers to the table shown in FIG. 2 to determine the modification necessity degree corresponding to this media data transfer rate. decide. Here, a case where the transfer rate is between 4 and 32 kbps, that is, the modification necessity level is “2” will be described as an example. In accordance with the modification degree “2” of the media data, the modification determining unit 19 refers to the modification policy information shown in FIG. 3 and determines the modification process to be applied, that is, the process of “reducing the screen size to 75%”. .

修飾決定手段19は、修飾ポリシー情報から修飾必要度に対応する適用予定修飾処理「画面サイズ75%に縮小」を取得し、さらに、この取得した適用予定修飾処理の修飾対象となるメディアデータについての基本情報(修飾処理前の表示サイズ情報、表示位置情報、配色情報など)、および、表示手段16の性能を示す表示仕様情報(ドット数、解像度、表示可能範囲など)を、それぞれ取得する。例えば、修飾処理が表示サイズの拡大または縮小である場合に、基本情報としてコンテンツの表示サイズ(修飾前のメディアAのサイズ120×100ドット、修飾前のメディアBのサイズ120×100ドット)を、表示仕様情報として最大QVGA(ディスプレイ解像度)の320×240ドットを、それぞれ取得する。修飾決定手段19は、これら、適用予定修飾処理情報、修飾対象となるメディアデータの基本情報、および、表示手段16の表示仕様情報を、レイアウト調整手段に出力する。   The modification determination unit 19 acquires the application schedule modification process “reduction to 75% of the screen size” corresponding to the modification necessity level from the modification policy information, and further, the media data to be modified by the acquired application schedule modification process is obtained. Basic information (display size information before modification processing, display position information, color arrangement information, etc.) and display specification information (dot number, resolution, displayable range, etc.) indicating the performance of the display means 16 are acquired. For example, when the modification processing is enlargement or reduction of the display size, the display size of the content (size 120 × 100 dots of the medium A before modification, size 120 × 100 dots of the medium B before modification) is used as basic information. 320 × 240 dots having a maximum QVGA (display resolution) are respectively acquired as display specification information. The modification determination unit 19 outputs the application schedule modification process information, the basic information of the media data to be modified, and the display specification information of the display unit 16 to the layout adjustment unit.

レイアウト調整手段19は、例えば、修飾処理が表示サイズの拡大または縮小である場合に、図4の調整ポリシー情報を参照して適用予定修飾処理情報から決定されるメディアデータA、Bの調整後修飾処理(メディアデータAは「縮小80%」、メディアデータBは「拡大115%」)と、メディアデータA、Bそれぞれの基本情報(修飾前のメディアAのサイズ120×100ドット、修飾前のメディアBのサイズ120×100ドット)と、から予想される、表示サイズが拡大または縮小されたメディアデータA、B(縮小したメディアデータAのサイズ96×80ドット、拡大したメディアBのサイズ138×115ドット)が表示可能範囲内(最大QVGAの320×240ドット)に収まるか否かを判定する。レイアウト調整手段14は、さらにメディアデータA、Bの基本情報である表示位置情報を参照して、範囲内に収まると判定した場合には、適用予定修飾処理情報から決定されるメディアデータA、Bの調整後修飾処理(メディアデータAは「縮小80%」、メディアデータBは「拡大115%」)が実際に修飾決定手段19に通知する調整後修飾処理となる。一方、表示可能範囲外となる場合には、レイアウト調整手段19は、メディアデータA、Bの調整後修飾処理の拡大率および縮小率を表示可能範囲の最大値に合わせて調整する。そして、この調整した調整後修飾処理を修飾決定手段19に通知する。   For example, when the modification process is enlargement or reduction of the display size, the layout adjustment unit 19 refers to the adjustment policy information in FIG. 4 and modifies the media data A and B determined from the application schedule modification process information. Processing (media data A is “reduction 80%”, media data B is “expansion 115%”), and basic information of each of media data A and B (media A size 120 × 100 dots before modification, medium before modification B (120 × 100 dots of B) and the media data A and B whose display size is enlarged or reduced as expected from the size B (96 × 80 dots of the reduced media data A, 138 × 115 of the enlarged media B) It is determined whether or not (dots) are within the displayable range (maximum QVGA 320 × 240 dots). If the layout adjusting means 14 further refers to the display position information, which is basic information of the media data A and B, and determines that it falls within the range, the media data A and B determined from the application schedule modification processing information The post-adjustment modification process (media data A is “reduction 80%” and media data B is “expansion 115%”) is the post-adjustment modification process that is actually notified to the modification determination means 19. On the other hand, when it is out of the displayable range, the layout adjusting unit 19 adjusts the enlargement ratio and the reduction ratio of the post-adjustment modification processing of the media data A and B according to the maximum value of the displayable range. Then, the adjusted post-adjustment modification process is notified to the modification determination means 19.

これらのメディアデータの配置方法は、各メディアデータのコンテンツ情報として基準位置情報(拡大・縮小の基準とする座標)が保持されているものとして、例えば下記の手順とする。
(1)表示位置情報を取得する。
(2)表示位置情報の座標は固定したまま、それぞれのメディアデータを拡大/縮小する(場合によっては、表示領域の一部が端末の画面からはみ出る)。
(3)表示領域の重なりの有無を判定する。重なりがあった場合は、重なっているメディアデータが何であるかを特定し、修飾競合処理ルールにもとづき、重ね合わせ順を規定する。
(4)何も表示されない部分は黒色で塗りつぶす。
The arrangement method of these media data is based on the following procedure, assuming that reference position information (coordinates for enlargement / reduction) is held as content information of each media data.
(1) Obtain display position information.
(2) The respective media data is enlarged / reduced while the coordinates of the display position information are fixed (in some cases, a part of the display area protrudes from the terminal screen).
(3) The presence or absence of overlapping display areas is determined. If there is an overlap, it identifies what the overlapped media data is and defines the overlay order based on the modification conflict processing rules.
(4) The area where nothing is displayed is painted in black.

メディア処理部12の修飾手段20は、修飾決定手段19からの指示に従って、データ通信手段17で受信したメディアデータAの修飾処理を実行する。また、メディア処理部13の修飾手段22は、レイアウト調整手段14からの指示に従って、データ通信手段21で受信したメディアデータBの修飾処理を実行する。そして、この修飾処理したメディアデータは合成手段15を介して表示手段16に入力され、画面表示が行われる。これにより、低い転送レートにより受信した画像を表示して視聴者にとって見難い場合であっても、非表示とせずにその転送レートに応じたサイズに調整した画面として表示することにより、視聴者の見難さに合せてサイズを調整した画面により表示できるため、限られた表示領域を有効的に利用しつつ、画像により伝えようとする情報を効果的に聴視者に伝えることができる。   The modifying unit 20 of the media processing unit 12 executes the modifying process of the media data A received by the data communication unit 17 in accordance with the instruction from the modification determining unit 19. Further, the modifying unit 22 of the media processing unit 13 executes the modifying process for the media data B received by the data communication unit 21 in accordance with the instruction from the layout adjusting unit 14. The modified media data is input to the display means 16 via the synthesizing means 15 and screen display is performed. As a result, even if it is difficult for the viewer to view an image received at a low transfer rate, it is displayed as a screen adjusted to the size corresponding to the transfer rate without being hidden. Since it is possible to display on a screen whose size is adjusted according to difficulty of viewing, it is possible to effectively convey information to be transmitted to the viewer while using the limited display area effectively.

さらに、図4に示すような情報テーブルの調整ポリシー情報を利用する場合には、自メディアデータの修飾内容とともに、これらに応じた他メディアデータの修飾処理を、適切に決定できる。レイアウト調整手段14では、この調整ポリシー情報にもとづき、他のメディアデータの修飾処理を決定する。これにより、メディアデータの修飾処理に応じたメディアデータの修飾処理の制御方法を任意に指定することができる。このようにすれば、調整ルール情報にもとづき、1つのメディアデータの縮小サイズに対応して、他のメディアデータの拡大サイズを決定し、表示することができる。   Furthermore, when the adjustment policy information in the information table as shown in FIG. 4 is used, the modification processing of other media data corresponding to the modification contents of the own media data can be appropriately determined. The layout adjustment unit 14 determines other media data modification processing based on the adjustment policy information. Accordingly, it is possible to arbitrarily specify a control method for media data modification processing according to the media data modification processing. In this way, the enlarged size of other media data can be determined and displayed in accordance with the reduced size of one media data based on the adjustment rule information.

図5は、第1の実施形態による表示例を示す。図5(a)は、本来の表示レイアウトにおいてデータ転送レートが低く、ビデオ表示領域(主画面)Aの画像(投球中のピッチャーの画像)が不鮮明である場合を示す。この場合には、図5(b)に示すように、ビデオ表示領域Aを縮小し、テキスト表示部分の表示領域(子画面)Bを拡大して、1つの表示画面上に表示することができる。これにより、不鮮明な画面Aであっても、伝えようとする情報の凡そを聴視者に伝えることができ、テキストとの併用でその情報をさらに明確に認識できるようになる。   FIG. 5 shows a display example according to the first embodiment. FIG. 5A shows a case where the data transfer rate is low in the original display layout, and the image in the video display area (main screen) A (the image of the pitcher during pitching) is unclear. In this case, as shown in FIG. 5B, the video display area A can be reduced and the display area (child screen) B of the text display portion can be enlarged and displayed on one display screen. . As a result, even if the screen A is unclear, it is possible to convey the general information to be transmitted to the viewer, and the information can be recognized more clearly in combination with the text.

なお、第1の実施形態では、メディアデータ関連情報としてメディアデータ転送レートを例に挙げて説明したが、パケット欠損状況、災害情報やニュース速報などの緊急度、経時的に報知情報が変更になるニュースや天気予報などの情報の新鮮度(例えば、更新日時からの経過時間に基づく)等の情報と、修飾必要度とを対応させた修飾ポリシー情報を作成しておけば、同様に本発明を実現することができる。   In the first embodiment, the media data transfer rate is described as an example of the media data related information. However, the packet information is changed over time, the degree of urgency such as disaster information or breaking news, and the like. If modification policy information in which information such as the freshness of information such as news and weather forecasts (for example, based on the elapsed time from the update date and time) is associated with the degree of modification is created, the present invention is similarly applied. Can be realized.

また、第1の実施形態では、メディアデータの表示形態の修飾処理を拡大・縮小について説明したが、これに限るものではなく、正しく表示できない部分を非表示にする、表示内容の変更、テキストのフォントの色、フォントのサイズの変更、表示フレームレートや表示の更新間隔や表示の継続時間や累積時間の変更などによっても、効果をあげることができる。   In the first embodiment, the modification processing of the display format of the media data has been described with respect to the enlargement / reduction. However, the present invention is not limited to this. Effects can also be achieved by changing the font color, font size, display frame rate, display update interval, display duration, and cumulative time.

(第2の実施形態)
本発明の第2の実施形態の情報処理端末23を、図6に示す。
情報処理端末23は、メディア処理部24、25と、レイアウト調整手段14と、合成手段15と、表示手段16と、ユーザ関心度データベース26と、を備える。また、前記メディア処理部24は、データ通信手段17と、メタデータ抽出手段27と、修飾必要度決定手段18と、就職決定手段19と、修飾手段20と、を有する。前記メディア処理部25は、データ通信処理手段21と、メタデータ抽出手段28と、修飾必要度決定手段29と、修飾決定手段30と、修飾手段22と、を有する。
(Second Embodiment)
An information processing terminal 23 according to the second embodiment of the present invention is shown in FIG.
The information processing terminal 23 includes media processing units 24 and 25, a layout adjusting unit 14, a synthesizing unit 15, a display unit 16, and a user interest level database 26. The media processing unit 24 includes data communication means 17, metadata extraction means 27, modification necessity degree determination means 18, employment determination means 19, and modification means 20. The media processing unit 25 includes a data communication processing unit 21, a metadata extraction unit 28, a modification necessity degree determination unit 29, a modification determination unit 30, and a modification unit 22.

前記データ通信手段17、21は、それぞれネットワークN1、N2を介してメディアデータを受信する。   The data communication means 17 and 21 receive media data via the networks N1 and N2, respectively.

メタデータ抽出手段27、28は、各データ通信手段17、21で受信したメディアデータからメタ情報を取り出す。   The metadata extraction units 27 and 28 extract meta information from the media data received by the data communication units 17 and 21.

修飾必要度決定手段18、29は、メタデータ抽出手段27、28から入力されたメタ情報から対象キーワード情報を得る。また、この対象キーワード情報が、ユーザが関心を持つ対象キーワードとその関心度合いを示す関心度との対応をデータ化した、図7に示すような対応テーブルを持つユーザ関心度データベース25内に登録されている場合は、該当する関心度合いを修飾必要度の代わりに用いる。図7では、対象キーワードとして、「ゴルフ」、「山田太郎」、「サッカー」、「○×リーグ」が登録されており、それぞれに関心度「1」、「2」が登録されている。(図7も、上記同様に個人名称を変更してください)   The modification necessity level determination means 18 and 29 obtain target keyword information from the meta information input from the metadata extraction means 27 and 28. Further, this target keyword information is registered in the user interest level database 25 having a correspondence table as shown in FIG. 7 in which the correspondence between the target keyword that the user is interested in and the interest level indicating the interest level is converted into data. If so, the corresponding degree of interest is used instead of the modification necessity. In FIG. 7, “golf”, “Taro Yamada”, “soccer”, and “XX league” are registered as target keywords, and interest levels “1” and “2” are registered respectively. (Please change your personal name in the same way as above)

また、修飾決定手段19、30は、修飾必要度決定手段18、29が決定した修飾必要度(関心度合い)に応じ、予め認められた修飾ポリシー情報に従って、適用すべき修飾処理を決定するように機能する。修飾ポリシー情報は、修飾必要度が関心度合いに変わった点以外、図3と同様である。この修飾ポリシー情報は、前記修飾必要度ごとにどのような修飾処理を施すべきかを規定するものである。修飾決定手段19、30は、決定した修飾処理の内容(適用予定修飾処理)をレイアウト調整手段14に通知する。   Further, the modification determining means 19 and 30 determine the modification process to be applied according to the modification policy information recognized in advance according to the modification necessity (degree of interest) determined by the modification necessity determination means 18 and 29. Function. The modification policy information is the same as that in FIG. 3 except that the modification necessity level is changed to the interest level. This modification policy information defines what modification processing should be performed for each modification necessity level. The modification determining units 19 and 30 notify the layout adjusting unit 14 of the contents of the determined modification process (scheduled modification process).

また、レイアウト調整手段14は、各メディアデータの適用予定修飾処理内容に対応する各メディアデータの調整後修飾処理内容を調整ポリシー情報とする、図8に示すような情報テーブルを参照して、各メディアデータの調整後修飾処理内容を決定し、この決定した調整後修飾処理内容を修飾決定手段19、30に通知する。   Further, the layout adjusting unit 14 refers to an information table as shown in FIG. 8 in which the adjustment processing content after adjustment of each media data corresponding to the application schedule modification processing content of each media data is used as adjustment policy information. The post-adjustment modification processing content of the media data is determined, and the determined post-adjustment modification processing content is notified to the modification determination means 19 and 30.

また、修飾手段20、22は、修飾決定手段19、30が決定した修飾処理を実行し、この処理結果を、合成手段15を介して表示装置16へ出力するように機能する。   The modification units 20 and 22 function to execute the modification process determined by the modification determination units 19 and 30 and output the processing result to the display device 16 via the synthesis unit 15.

第2の実施形態の情報処理端末について、その処理の流れを説明する。
メタデータ抽出手段27、28は、ネットワークN1、N2を通じてデータ通信手段17、18で受信した各メディアデータ(メディア処理部12はメディアデータAを受信し、メディア処理部13はメディアデータBを受信)から、メタデータを抽出する。
A processing flow of the information processing terminal according to the second embodiment will be described.
The metadata extraction means 27 and 28 are media data received by the data communication means 17 and 18 through the networks N1 and N2 (the media processing unit 12 receives media data A, and the media processing unit 13 receives media data B). To extract metadata.

修飾必要度決定手段18、29は、メタデータ抽出手段27、28が抽出した各メタデータから対象のキーワード情報を得る。また、これらのキーワードに対応する関心度データがユーザ関心度データベース26に登録されている場合には、そのキーワード対応のユーザ関心度を修飾必要度として、それぞれ修飾決定手段19、30に入力する。   The modification necessity degree determination means 18 and 29 obtain target keyword information from each metadata extracted by the metadata extraction means 27 and 28. When interest level data corresponding to these keywords is registered in the user interest level database 26, the user interest level corresponding to the keyword is input to the modification determining means 19 and 30 as the degree of necessity for modification, respectively.

修飾決定手段19、30は、修飾ポリシー情報から修飾必要度に対応する適用予定修飾処理を取得し、さらに、この取得した適用予定修飾処理の修飾対象となるメディアデータについての基本情報(修飾処理前の表示サイズ情報、表示位置情報、配色情報など)、および、表示手段16の性能を示す表示仕様情報(ドット数、解像度、表示可能範囲など)を、それぞれ取得する。例えば、修飾処理が表示サイズの拡大または縮小である場合に、基本情報としてコンテンツの表示サイズ(修飾前のメディアAのサイズ120×100ドット、修飾前のメディアBのサイズ120×100ドット)を、表示仕様情報として最大QVGA(ディスプレイ解像度)の320×240ドットを、それぞれ取得する。修飾決定手段19、30は、これら、適用予定修飾処理情報、修飾対象となるメディアデータの基本情報、および、表示手段16の表示仕様情報を、レイアウト調整手段に出力する。   The modification determining means 19 and 30 acquire the application schedule modification process corresponding to the degree of modification necessity from the modification policy information, and further, basic information about the media data to be modified by the acquired application schedule modification process (before the modification process) Display size information, display position information, color arrangement information, etc.) and display specification information (dot number, resolution, displayable range, etc.) indicating the performance of the display means 16 are acquired. For example, when the modification processing is enlargement or reduction of the display size, the display size of the content (size 120 × 100 dots of the medium A before modification, size 120 × 100 dots of the medium B before modification) is used as basic information. 320 × 240 dots having a maximum QVGA (display resolution) are respectively acquired as display specification information. The modification determination units 19 and 30 output the application schedule modification process information, the basic information of the media data to be modified, and the display specification information of the display unit 16 to the layout adjustment unit.

レイアウト調整手段14は、図8に示すような調整ポリシー情報を持った情報テーブルを参照して、各メディアデータの修飾処理を決定する。レイアウト調整手段14は、例えば、メディアデータAの適用予定修飾処理が「画面サイズ100〜130%に拡大」、メディアデータBの適用予定修飾処理が「画面サイズ100〜130%に拡大」と修飾決定手段19、30から通知された場合、図8の調整ポリシー情報を参照して適用予定修飾処理情報から決定されるメディアデータA、Bの調整後修飾処理(メディアデータAは「拡大120%」、メディアデータBは「縮小80%」)と、メディアデータA、Bそれぞれの基本情報(修飾前のメディアAのサイズ120×100ドット、修飾前のメディアBのサイズ120×100ドット)と、から予想される、表示サイズが拡大または縮小されたメディアデータA、B(拡大したメディアデータAのサイズ144×120ドット、縮小したメディアBのサイズ96×80ドット)が表示可能範囲内(最大QVGAの320×240ドット)に収まるか否かを判定する。   The layout adjusting unit 14 determines the modification processing of each media data with reference to the information table having the adjustment policy information as shown in FIG. For example, the layout adjustment means 14 determines that the application schedule modification process for the media data A is “enlarged to a screen size of 100 to 130%” and the application schedule modification process for the media data B is “enlarged to a screen size of 100 to 130%”. When notified from the means 19 and 30, the post-adjustment modification process of the media data A and B determined from the application schedule modification process information with reference to the adjustment policy information of FIG. 8 (media data A is “enlargement 120%”, Media data B is “80% reduction”) and basic information of media data A and B (size 120 × 100 dots of media A before modification, size 120 × 100 dots of medium B before modification) Media data A and B whose display size is enlarged or reduced (size of the enlarged media data A is 144 × 120 dots, Size 96 × 80 dots) of the media B determines whether fall within the display range (maximum QVGA of 320 × 240 dots).

レイアウト調整手段14は、メディアデータA、Bの基本情報である表示位置情報を判定の際に参照して、範囲内に収まると判定した場合には、適用予定修飾処理情報から決定されるメディアデータA、Bの調整後修飾処理(メディアデータAは「拡大120%」、メディアデータBは「縮小80%」)が実際に修飾決定手段19に通知する調整後修飾処理となる。一方、表示可能範囲外となる場合には、レイアウト調整手段19は、メディアデータA、Bの調整後修飾処理の拡大率および縮小率を表示可能範囲の最大値に合わせて調整する。そして、この調整した調整後修飾処理を修飾決定手段19に通知する。また、メディアデータA、Bの配置にて表示領域に重なりが生じた場合には、修飾競合処理ルールに従って処理する。この修飾競合処理ルールは、メディアデータの修飾処理に競合が生じた場合に用いるルールで、表示領域に重なりが生じた場合の重ね合わせの優先順位が決められている。こうして、修飾処理の調整を行った調整後修飾処理を修飾決定手段19、30に通知する。なお、レイアウト調整手段14の調整方法は、上述の手法に限るものではなく、公知の調整方法を利用しても実現することができる。   The layout adjusting unit 14 refers to the display position information, which is basic information of the media data A and B, in the determination, and when determining that it is within the range, the media data determined from the application schedule modification processing information The post-adjustment modification processing for A and B (media data A is “enlargement 120%” and media data B is “reduction 80%”) is the post-adjustment modification processing that is actually notified to the modification determination means 19. On the other hand, when it is out of the displayable range, the layout adjusting unit 19 adjusts the enlargement ratio and the reduction ratio of the post-adjustment modification processing of the media data A and B according to the maximum value of the displayable range. Then, the adjusted post-adjustment modification process is notified to the modification determination means 19. Further, when an overlap occurs in the display area due to the arrangement of the media data A and B, processing is performed according to the modification conflict processing rule. This modification conflict processing rule is used when a conflict occurs in the modification processing of the media data, and the priority of overlapping when the display area overlaps is determined. In this way, the post-adjustment modification process in which the modification process has been adjusted is notified to the modification determination means 19 and 30. Note that the adjustment method of the layout adjusting unit 14 is not limited to the above-described method, and can be realized by using a known adjustment method.

このメディアデータの配置方法は、各メディアデータのコンテンツ情報として基準位置情報(拡大・縮小の基準とする座標)が保持されているものとして、例えば下記の手順とする。
(1)表示位置情報を取得する。
(2)表示位置情報の座標は固定したまま、それぞれのメディアデータを拡大/縮小する(場合によっては、表示領域の一部が端末の画面からはみ出る)。
(3)表示領域の重なりの有無を判定する。重なりがあった場合は、重なっているメディアデータが何であるかを特定し、修飾競合処理ルールにもとづき、重ね合わせ順を規定する。
(4)何も表示されない部分は黒色で塗りつぶす。
This media data arrangement method is based on the following procedure assuming that reference position information (coordinates for enlargement / reduction) is held as content information of each media data.
(1) Obtain display position information.
(2) The respective media data is enlarged / reduced while the coordinates of the display position information are fixed (in some cases, a part of the display area protrudes from the terminal screen).
(3) The presence or absence of overlapping display areas is determined. If there is an overlap, it identifies what the overlapped media data is and defines the overlay order based on the modification conflict processing rules.
(4) The area where nothing is displayed is painted in black.

修飾手段20、22は、修飾決定手段19、30から通知される修飾処理を実行し、この処理結果を、合成手段15を介して表示装置16へ出力する   The modification units 20 and 22 execute the modification process notified from the modification determination units 19 and 30 and output the processing result to the display device 16 via the synthesis unit 15.

このように、それぞれのメディアデータの内容に対するユーザの関心度に応じて各メディアデータの表示領域を拡大または縮小することができる。図9(a)は、本来の表示レイアウトにおいて、ユーザ関心度データベース26に登録されている「ゴルフ」に関するビデオ画像Cが、テキストDとともに表示されており、図9(b)では、ユーザ関心度の高い「ゴルフ」の映像Cが拡大され、テキストDの表示領域がその分縮小されている。   In this manner, the display area of each media data can be enlarged or reduced according to the degree of interest of the user with respect to the contents of each media data. FIG. 9A shows a video image C related to “golf” registered in the user interest database 26 together with the text D in the original display layout, and FIG. 9B shows the user interest degree. The video “C” of “Golf” having a high height is enlarged, and the display area of the text D is reduced accordingly.

本実施形態では、メタ情報に含まれる対象キーワードを抽出して、そのキーワードを基に修飾必要度を決めるため、装置利用者の嗜好に応じて様々な修飾処理を行うことができる。   In the present embodiment, since the target keyword included in the meta information is extracted and the degree of modification necessity is determined based on the keyword, various modification processes can be performed according to the preference of the device user.

また、本実施形態では、メディア処理部毎に修飾必要度決定手段と修飾決定手段を設けることにより、コンテンツ内容の異なる複数のメディアデータ毎のメディアデータ関連情報を取り出して、その複数のメディアデータ関連情報全てあるいは一部を反映した修飾処理を行うことができる。このため、様々なコンテンツを同時に表示させる場合の、コンテンツ表示方法の自由度が高まる。   Further, in this embodiment, by providing a modification necessity degree determination unit and a modification determination unit for each media processing unit, media data related information for each of a plurality of media data having different content contents is extracted, and the plurality of media data related Modification processing reflecting all or part of the information can be performed. For this reason, the freedom degree of the content display method in the case of displaying various content simultaneously increases.

なお、第2の実施形態では、メディアデータ関連情報としてメディアデータに対するユーザの関心度を例に挙げて説明したが、メディアデータ転送レート、パケット欠損状況、災害情報やニュース速報などの緊急度、経時的に報知情報が変更になるニュースや天気予報などの情報の新鮮度(例えば、更新日時からの経過時間に基づく)等の情報と、修飾必要度とを対応させた修飾ポリシー情報を作成しておけば、同様に本発明を実現することができる。   In the second embodiment, the interest level of the user with respect to the media data is described as an example of the media data related information. However, the media data transfer rate, the packet loss situation, the urgency level such as disaster information and breaking news, Create modification policy information that associates information such as news freshness and news forecasts that are subject to change in information (for example, based on the elapsed time from the update date and time) and the degree of modification required If this is the case, the present invention can be similarly realized.

また、第2の実施形態では、メディアデータの表示形態の修飾処理を拡大・縮小について説明したが、これに限るものではなく、正しく表示できない部分を非表示にする、表示内容の変更、テキストのフォントの色、フォントのサイズの変更、表示フレームレートや表示更新の間隔や表示の継続時間や累積時間の変更などによっても、効果をあげることができる。   In the second embodiment, the modification processing of the display format of the media data has been described with respect to enlargement / reduction. However, the present invention is not limited to this, and the display content change, text change, and the like are not limited to this. Effects can also be achieved by changing the font color, font size, display frame rate, display update interval, display duration, and cumulative time.

また、第2の実施形態では、メディア処理部24、25の修飾必要度決定手段18、29は、同じ種類のメディアデータ関連情報により修飾必要度を決定するように記載したが、それぞれ別の種類のメディアデータ関連情報により修飾必要度を決定するようにしても構わない。   Further, in the second embodiment, the modification necessity degree determining units 18 and 29 of the media processing units 24 and 25 are described so as to determine the modification necessity degree based on the same type of media data related information. The degree of necessity of modification may be determined based on the media data related information.

本発明の情報処理端末によれば、複数のコンテンツの表示形態を調整して、その複数のコンテンツを同一の表示画面上に表示させる場合、その複数のコンテンツの中に表示品質の悪いコンテンツがあっても、そのコンテンツが伝えるべき情報を効果的に聴視者に伝えることができるという効果を有し、メディアにより伝えられる複数のコンテンツの表示形態を調整して、その複数のコンテンツを同一の表示画面上に表示させる情報処理端末の分野において有用である。   According to the information processing terminal of the present invention, when adjusting the display form of a plurality of contents and displaying the plurality of contents on the same display screen, there is a content with poor display quality among the plurality of contents. However, the information that the content should convey can be effectively transmitted to the viewer, and the display form of the plurality of contents transmitted by the media is adjusted to display the plurality of contents in the same way. This is useful in the field of information processing terminals to be displayed on the screen.

本発明の第1の実施形態の情報処理端末を示すブロック図The block diagram which shows the information processing terminal of the 1st Embodiment of this invention メディアデータ転送レートと修飾必要度との対応関係を示すテーブルA table showing the correspondence between the media data transfer rate and the degree of necessity for modification 修飾必要度と適用予定修飾処理との対応関係を示すテーブルA table showing the correspondence between the degree of modification required and the scheduled modification process 適用予定修飾処理と調整後修飾処理との対応関係を示すテーブルTable showing the correspondence between the application modification process and post-adjustment modification process 第1の実施形態によるレイアウト調整例を示す説明図Explanatory drawing which shows the example of layout adjustment by 1st Embodiment 本発明の第2の実施形態の情報処理端末を示すブロック図The block diagram which shows the information processing terminal of the 2nd Embodiment of this invention 対象キーワードと関心度との対応関係を示すテーブルTable showing correspondence between target keyword and interest level 適用予定修飾処理と調整後修飾処理との対応関係を示すテーブルTable showing the correspondence between the application modification process and post-adjustment modification process 第2の実施形態によるレイアウト調整例を示す説明図Explanatory drawing which shows the example of layout adjustment by 2nd Embodiment

符号の説明Explanation of symbols

11 情報処理端末
14 レイアウト調整手段
15 合成手段
16 表示手段
17、21 データ通信手段
18、29 修飾必要度決定手段
19、30 修飾決定手段
20、22 修飾手段
23 情報処理端末
26 ユーザ関心度データベース
27、28 メタデータ抽出手段
N1、N2 ネットワーク
DESCRIPTION OF SYMBOLS 11 Information processing terminal 14 Layout adjustment means 15 Composition means 16 Display means 17, 21 Data communication means 18, 29 Modification required degree determination means 19, 30 Modification determination means 20, 22 Modification means 23 Information processing terminal 26 User interest degree database 27, 28 Metadata extraction means N1, N2 network

Claims (2)

ビデオコンテンツとテキストコンテンツとを受信するデータ通信部と、
前記ビデオコンテンツと、前記テキストコンテンツを同一画面内に表示する表示部と、
前記ビデオコンテンツの受信転送レートに応じて、前記ビデオコンテンツの第一の表示倍率を決定する修飾必要度決定部と、
前記第一の表示倍率に対応する前記ビデオコンテンツの第二の表示倍率及び前記テキストコンテンツの第三の表示倍率の情報を備えるレイアウト調整部と、を備え、
前記表示部は、前記ビデオコンテンツを前記第二の表示倍率で表示し、前記テキストコンテンツを前記第三の表示倍率で表示する情報処理端末。
A data communication unit for receiving video content and text content;
A display unit for displaying the video content and the text content in the same screen;
A modification necessity determining unit that determines a first display magnification of the video content according to a reception transfer rate of the video content;
A layout adjustment unit comprising information on a second display magnification of the video content corresponding to the first display magnification and a third display magnification of the text content,
The information processing terminal , wherein the display unit displays the video content at the second display magnification and displays the text content at the third display magnification .
請求項1に記載の情報処理端末であって、
前記修飾必要度決定部は、前記ビデオコンテンツの受信転送レートが低くなるに応じて、前記第一の表示倍率を小さくする情報処理端末。
The information processing terminal according to claim 1,
The modification necessity degree determination unit is an information processing terminal that reduces the first display magnification as the reception transfer rate of the video content decreases .
JP2005141487A 2005-05-13 2005-05-13 Information processing terminal Expired - Fee Related JP4712437B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005141487A JP4712437B2 (en) 2005-05-13 2005-05-13 Information processing terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005141487A JP4712437B2 (en) 2005-05-13 2005-05-13 Information processing terminal

Publications (2)

Publication Number Publication Date
JP2006319774A JP2006319774A (en) 2006-11-24
JP4712437B2 true JP4712437B2 (en) 2011-06-29

Family

ID=37540017

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005141487A Expired - Fee Related JP4712437B2 (en) 2005-05-13 2005-05-13 Information processing terminal

Country Status (1)

Country Link
JP (1) JP4712437B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000222164A (en) * 1999-01-29 2000-08-11 Canon Inc Multi-image display system and multi-image display method
JP2002091950A (en) * 2000-09-12 2002-03-29 Minolta Co Ltd Device and method for processing image and computer readable recording medium
JP2003219351A (en) * 2002-01-22 2003-07-31 Canon Inc Signal processing apparatus
JP2004288028A (en) * 2003-03-24 2004-10-14 Seiko Epson Corp Layout system, layout support system, layout program, layout support program, layout method and layout support method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000222164A (en) * 1999-01-29 2000-08-11 Canon Inc Multi-image display system and multi-image display method
JP2002091950A (en) * 2000-09-12 2002-03-29 Minolta Co Ltd Device and method for processing image and computer readable recording medium
JP2003219351A (en) * 2002-01-22 2003-07-31 Canon Inc Signal processing apparatus
JP2004288028A (en) * 2003-03-24 2004-10-14 Seiko Epson Corp Layout system, layout support system, layout program, layout support program, layout method and layout support method

Also Published As

Publication number Publication date
JP2006319774A (en) 2006-11-24

Similar Documents

Publication Publication Date Title
US8482672B2 (en) Video output device and video output method
US9407969B2 (en) Forming overlays at user's premises and utilizing them for selective combinations of TV broadcast channel format material and IP-format material
JP4672856B2 (en) Multi-screen display device and multi-screen display method
EP1850587A2 (en) Digital broadcast receiving apparatus and control method thereof
JP5013832B2 (en) Image control apparatus and method
US20110157474A1 (en) Image display control apparatus
US7193635B2 (en) Portable terminal, overlay output method, and program therefor
US8407739B2 (en) Apparatus and method for displaying broadcasting program guide information
CN100508569C (en) Picture displaying method, system and device
JP4192476B2 (en) Video conversion apparatus and video conversion method
US20100053436A1 (en) Video Display Apparatus and Video Display Method
US7810118B2 (en) Digital broadcast receiving apparatus and method of displaying video data in electronic program guide with data length depending on TV program duration
EP1737221A1 (en) Method and apparatus for adding background of auxiliary information of television program
JP2007087023A (en) Information processor
JP2011146057A (en) Broadcasting receiver
JP4712437B2 (en) Information processing terminal
JP2005203955A (en) Device and method for processing electronic program table, and computer program
JP4404808B2 (en) Broadcast receiver and display device
JP2011091578A (en) Video determination device, video display device, and method for controlling them, program
KR100329273B1 (en) Method and device for picture output in TV
JP2007201816A (en) Video image display system and video image receiver
JP2002300492A (en) Broadcasting receiver and program display method
US20170201710A1 (en) Display apparatus and operating method thereof
KR20040008555A (en) On screen display method of digital data broadcasting
JP4208033B2 (en) Receiver

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20071113

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20071120

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080331

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100601

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100802

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110222

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110323

LAPS Cancellation because of no payment of annual fees