JP2016187136A - Receiving device, receiving method, and program - Google Patents

Receiving device, receiving method, and program Download PDF

Info

Publication number
JP2016187136A
JP2016187136A JP2015067086A JP2015067086A JP2016187136A JP 2016187136 A JP2016187136 A JP 2016187136A JP 2015067086 A JP2015067086 A JP 2015067086A JP 2015067086 A JP2015067086 A JP 2015067086A JP 2016187136 A JP2016187136 A JP 2016187136A
Authority
JP
Japan
Prior art keywords
dialog
information
volume
sound
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015067086A
Other languages
Japanese (ja)
Other versions
JP6436573B2 (en
Inventor
徳幸 工藤
Tokuyuki Kudo
徳幸 工藤
川口 将顧
Shoko Kawaguchi
将顧 川口
隆徳 金野
Takanori Konno
隆徳 金野
高明 野口
Takaaki Noguchi
高明 野口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2015067086A priority Critical patent/JP6436573B2/en
Publication of JP2016187136A publication Critical patent/JP2016187136A/en
Application granted granted Critical
Publication of JP6436573B2 publication Critical patent/JP6436573B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To enable a user to recognize a dialog voice to promote the use thereof.SOLUTION: A dialog detection part detects voice data of a dialog voice to be reproduced in a predetermined channel from received voice data on the basis of additional information on a voice in a broadcast program. A volume control part controls the volume of a channel, of a plurality of channels, dedicated to dialog for reproducing the dialog voice and the volume of the other channels. A notification processing part outputs notification information on the dialog voice detected by the dialog detection part.SELECTED DRAWING: Figure 8

Description

本発明は、受信装置、受信方法、及びプログラムに関する。   The present invention relates to a receiving device, a receiving method, and a program.

デジタルテレビジョン放送において、多チャンネル音声の一部のチャンネルについて、他のチャンネルと独立した音量制御を可能とするダイアログ専用チャンネルを設けることが検討されている。ダイアログ専用チャンネルには、番組の一部の要素としてダイアログ音声が提供される。ダイアログ音声対応の受信装置は、ダイアログ音声が提供されていることを認識し、全チャンネルについての音量調整とは別にダイアログ専用チャンネルについて音量調整を可能とする。このことにより、ユーザはダイアログ音声の音量を所望の聞きやすい音量に調整することができる。   In digital television broadcasting, it has been considered to provide a dialog dedicated channel that enables volume control independent of other channels for some channels of multi-channel audio. Dialog audio is provided as a part of the program to the dialog dedicated channel. The dialog voice compatible receiving apparatus recognizes that dialog voice is provided, and enables volume adjustment for the dialog dedicated channel separately from volume adjustment for all channels. This allows the user to adjust the volume of the dialog voice to a desired level that is easy to hear.

例えば、特許文献1には、ダイアログ音量制御部、主音量制御部及びダイアログ音量制御部ならびに主音量制御部と結合され、ダイアログ音量及び主音量をそれぞれ個別に調節するためのダイアログ音量調節信号及び主音量調節信号を個別に生成するように構成される回路部を含むことを特徴とする装置について記載されている。   For example, Patent Literature 1 is combined with a dialog volume control unit, a main volume control unit, a dialog volume control unit, and a main volume control unit, and a dialog volume adjustment signal and a main volume for individually adjusting the dialog volume and the main volume. An apparatus is described that includes a circuit portion configured to individually generate a volume control signal.

特表2010−515290号公報Special table 2010-515290

しかしながら、従来のダイアログ音声対応受信装置では、ダイアログ音声を提供する放送であるダイアログ対応放送が提供されることをユーザが知る手段が用意されていなかった。また、ダイアログ対応放送においてダイアログ音声をダイアログ音声以外の音声とは別個に音量を調整できることが認知されていなかった。さらに、ダイアログ対応放送にユーザが気づいた場合でも、番組制作者や放送事業者がダイアログ音声を提供した意図を知ることができなかった。そのため、ユーザがダイアログ音声をいかに扱うべきか判断できないことがあった。   However, in the conventional dialog sound compatible receiving device, there is no means for the user to know that a dialog compatible broadcast, which is a broadcast that provides dialog sound, is provided. Further, it has not been recognized that the dialog sound can be adjusted separately from the sound other than the dialog sound in the dialog-compatible broadcast. Furthermore, even if the user notices the dialog-compatible broadcast, the intention of the program producer or broadcaster to provide the dialog sound cannot be known. For this reason, there is a case where the user cannot determine how to handle the dialog voice.

本発明は、上記の課題に鑑みてなされたものであって、ユーザにダイアログ音声について認知させ、利用を促進することができる受信装置、受信方法、及びプログラムを提供することを目的とする。   The present invention has been made in view of the above problems, and an object of the present invention is to provide a receiving device, a receiving method, and a program that allow a user to recognize a dialog voice and promote the use.

本発明の一態様は、受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の音声に関する補助情報に基づいて検出するダイアログ検出部と、複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御部と、前記ダイアログ検出部が検出したダイアログ音声に関する通知情報を出力する通知処理部と、を備える受信装置である。   According to one aspect of the present invention, a dialog detection unit that detects audio data of dialog audio to be reproduced on a predetermined channel from received audio data based on auxiliary information related to audio of a broadcast program, and the dialog audio of a plurality of channels is detected. The receiving apparatus includes a volume control unit that controls a volume of a dedicated channel for dialog to be reproduced, a volume of other channels, and a notification processing unit that outputs notification information about the dialog sound detected by the dialog detection unit.

本発明の一態様によれば、ユーザにダイアログ音声について認知させ、利用を促進することができる。   According to one embodiment of the present invention, the user can be made aware of the dialog voice and promote the use.

第1の実施形態に係る放送システムの概略ブロック図である。1 is a schematic block diagram of a broadcasting system according to a first embodiment. ダイアログ音声を説明するための図である。It is a figure for demonstrating a dialog audio | voice. ダイアログ音声の音量調整を説明するための図である。It is a figure for demonstrating volume adjustment of a dialog sound. 音声データのストリームの例を示す図である。It is a figure which shows the example of the stream of audio | voice data. 補助情報のデータ構成を示す図である。It is a figure which shows the data structure of auxiliary information. ダイアログ分類テーブルの例を示す図である。It is a figure which shows the example of a dialog classification | category table. ダイアログ分類デフォルトテーブルの例を示す図である。It is a figure which shows the example of a dialog classification | category default table. 第1の実施形態に係る受信装置の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of the receiver which concerns on 1st Embodiment. 第1の実施形態に係る受信処理を示すフローチャートである。It is a flowchart which shows the reception process which concerns on 1st Embodiment. 第1の実施形態に係る通知画面の一例を示す図である。It is a figure which shows an example of the notification screen which concerns on 1st Embodiment. リモートコントローラの一例を示す外観図である。It is an external view which shows an example of a remote controller. 第1の実施形態に係る通知画面の他の例を示す図である。It is a figure which shows the other example of the notification screen which concerns on 1st Embodiment. 第1の実施形態に係る通知画面のさらに他の例を示す図である。It is a figure which shows the further another example of the notification screen which concerns on 1st Embodiment. 第1の実施形態に係る通知情報の他の形態の例を示す図である。It is a figure which shows the example of the other form of the notification information which concerns on 1st Embodiment. 第1の実施形態に係る通知情報のさらに他の形態の例を示す図である。It is a figure which shows the example of the further another form of the notification information which concerns on 1st Embodiment. 第1の実施形態に係る通知情報の他の機器への表示例を示す図である。It is a figure which shows the example of a display to the other apparatus of the notification information which concerns on 1st Embodiment. 第2の実施形態に係る放送システムの概略ブロック図である。It is a schematic block diagram of the broadcasting system which concerns on 2nd Embodiment. 第2の実施形態に係る受信装置の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of the receiver which concerns on 2nd Embodiment.

(第1の実施形態)
以下、本発明の第1の実施形態について、図面を参照して説明する。
図1は、本実施形態に係る放送システム1の概略ブロック図である。
放送システム1は、送信装置10と、受信装置30とを含んで構成される。放送システム1では、一般に送信装置10、受信装置30が、それぞれ複数個存在しうる。但し、以下では説明を簡潔にするため、送信装置10の個数、受信装置30の個数が、それぞれ1個である場合を例にする。
(First embodiment)
A first embodiment of the present invention will be described below with reference to the drawings.
FIG. 1 is a schematic block diagram of a broadcast system 1 according to the present embodiment.
The broadcast system 1 includes a transmission device 10 and a reception device 30. In the broadcast system 1, there can generally be a plurality of transmission devices 10 and a plurality of reception devices 30, respectively. However, in the following, for the sake of brevity, an example in which the number of transmitting apparatuses 10 and the number of receiving apparatuses 30 are one is taken as an example.

放送システム1は、放送番組を構成するコンテンツを示す番組データを所定の多重化・伝送方式を用いて伝送するシステムである。コンテンツとは、音声、映像、などの放送番組の構成要素であり、受信装置30により提示される情報である。番組データには、放送番組の音声を示す音声データと、映像を示す映像データが含まれる。以下の説明では、多重化・伝送方式として、主にMPEG−2(Moving Picture Experts Group−2)システムで規定された方式が用いられる場合を例にする。   The broadcast system 1 is a system that transmits program data indicating content constituting a broadcast program using a predetermined multiplexing / transmission method. The content is a component of a broadcast program such as audio and video, and is information presented by the receiving device 30. The program data includes audio data indicating the sound of the broadcast program and video data indicating the video. In the following description, as an example of the multiplexing / transmission method, a method mainly defined in the MPEG-2 (Moving Picture Experts Group-2) system is used as an example.

送信装置10は、番組データと放送番組の構成を示す構成情報をそれぞれ取得し、取得した番組データと付加情報を所定の多重化方式を用いて多重化した多重化データを生成する。取得された番組データは、符号化された音声データ、符号化された映像データを含むデータである。送信装置10は、音声データや映像データのストリームをそれぞれエレメンタリストリーム(ES:Elementary Stream)として多重化し、番組データとしてトランスポートストリーム(TS:Transport Stream)を生成する。本実施形態では、放送番組のコンテンツにダイアログ音声が含まれる。ダイアログ音声は、複数のチャンネルの音声(多チャンネル音声)のうち、所定のチャンネルで再生させる音声である。ダイアログ音声は、通常の放送の音声(放送音声)と同一のストリームで送信されることも、別個のストリームで送信されることもある。ダイアログ音声については後述する。   The transmission apparatus 10 acquires program data and configuration information indicating the configuration of the broadcast program, and generates multiplexed data in which the acquired program data and additional information are multiplexed using a predetermined multiplexing method. The acquired program data is data including encoded audio data and encoded video data. The transmission device 10 multiplexes audio data and video data streams as elementary streams (ES: Elementary Stream), respectively, and generates a transport stream (TS: Transport Stream) as program data. In the present embodiment, the dialog sound is included in the content of the broadcast program. The dialog sound is sound that is reproduced on a predetermined channel among the sound of a plurality of channels (multi-channel sound). The dialog sound may be transmitted in the same stream as normal broadcast sound (broadcast sound) or may be transmitted in a separate stream. The dialog sound will be described later.

構成情報には、個々の放送番組の構成要素であるコンテンツを示すプログラム情報と、放送番組の名称、放送日時、放送番組のジャンル、出演者など、個々の放送番組に関する番組情報が含まれる。送信装置10は、プログラム情報を示すプログラムマップテーブル(PMT:Program Map Table)と、番組情報を示すイベント情報テーブル(EIT:Event Information Table)を多重化し、構成情報としてプログラム特定サービス情報(PSI/SI:Program Specific Information/Service Information)を生成する。送信装置10は、番組データと構成情報を多重化して、多重化データを生成する。送信装置10は、生成した多重化データを搬送する放送波を受信装置30に放送伝送路11を介して送信する。送信装置10は、例えば、放送事業者の放送設備を構成する送信装置である。   The configuration information includes program information indicating content that is a component of each broadcast program, and program information related to each broadcast program, such as the name of the broadcast program, the broadcast date and time, the genre of the broadcast program, and the performers. The transmission device 10 multiplexes a program map table (PMT: Program Map Table) indicating program information and an event information table (EIT: Event Information Table) indicating program information, and program specific service information (PSI / SI) as configuration information. : Program Specific Information / Service Information). The transmission device 10 multiplexes program data and configuration information to generate multiplexed data. The transmission device 10 transmits a broadcast wave carrying the generated multiplexed data to the reception device 30 via the broadcast transmission path 11. The transmission device 10 is, for example, a transmission device that constitutes broadcast facilities of a broadcaster.

放送伝送路11は、各種のデータを同時に複数の受信装置30に対して一方的に伝送する伝送路である。放送伝送路11は、放送衛星12を含んで構成される。放送衛星12は、送信装置10が送信した放送波を中継し、中継した放送波を受信装置30に送信する中継装置(図示せず)を搭載する。放送伝送路11は、その一部に通信回線、例えば、送信装置10から送信アンテナまでの間を有線又は無線で接続する通信ネットワークを含んでもよい。なお、放送伝送路11を介して各種のデータを伝送(送信、受信)することを「放送で伝送(送信、受信)する」呼ぶ。   The broadcast transmission path 11 is a transmission path for unilaterally transmitting various data to a plurality of receiving devices 30 at the same time. The broadcast transmission path 11 includes a broadcast satellite 12. The broadcast satellite 12 is equipped with a relay device (not shown) that relays the broadcast wave transmitted by the transmission device 10 and transmits the relayed broadcast wave to the reception device 30. The broadcast transmission path 11 may include a communication line, for example, a communication network that connects the transmission device 10 to the transmission antenna in a wired or wireless manner. The transmission (transmission, reception) of various data via the broadcast transmission path 11 is referred to as “transmission (transmission, reception)”.

受信装置30は、送信装置10から放送伝送路11を介して多重化データを受信し、受信した多重化データに含まれる番組データで表される放送番組のコンテンツを提示可能な電子機器である。受信装置30は、構成情報に基づいて多重化データから分離した音声データが示す音声を再生し、映像データが示す映像を表示する。受信装置30は、例えば、テレビジョン受像機、その他テレビジョン放送の受信機能を備える電子機器である。   The receiving device 30 is an electronic device that can receive multiplexed data from the transmitting device 10 via the broadcast transmission path 11 and present broadcast program content represented by program data included in the received multiplexed data. The receiving device 30 reproduces the audio indicated by the audio data separated from the multiplexed data based on the configuration information, and displays the video indicated by the video data. The receiving device 30 is, for example, a television receiver or other electronic device having a receiving function for television broadcasting.

受信装置30は、音声データが示す多チャンネル音声がダイアログ音声を含んだ音声データであることを当該音声データに付加された補助情報に基づいて検出する。受信装置30は、複数のチャンネルのうちダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御し、検出したダイアログ音声に関する通知情報を出力する。通知情報を受けたユーザは、ダイアログ音声の存在に気付くことができる。また、通知情報にダイアログ専用チャンネルの音量の調整に関する案内情報を含めることで、ダイアログ音声についてその他のチャンネルと独立に音量が調整可能であることや、その調整方法がユーザに通知される。また、通知情報にダイアログ音声に関する解説情報を含めることで、例えば、放送事業者や番組制作者がダイアログ音声を提供した意図や、ダイアログ音声の概要や意義についてユーザに知得させることができる。   The receiving device 30 detects that the multi-channel sound indicated by the sound data is sound data including dialog sound based on the auxiliary information added to the sound data. The receiving device 30 controls the volume of the dedicated channel for reproducing the dialog sound among the plurality of channels and the volume of the other channels, and outputs notification information regarding the detected dialog sound. The user who has received the notification information can notice the presence of the dialog voice. In addition, by including guidance information related to the adjustment of the volume of the dialog dedicated channel in the notification information, the user can be notified that the volume of the dialog sound can be adjusted independently of the other channels and the adjustment method. In addition, by including commentary information related to the dialog sound in the notification information, for example, it is possible to let the user know the intention that the broadcaster or the program producer provided the dialog sound and the outline and significance of the dialog sound.

(ダイアログ音声)
次に、ダイアログ音声について説明する。
図2は、ダイアログ音声を説明するための図である。
ダイアログ音声とは、複数のチャンネルのうち所定のチャンネルを用いて再生される音声である。ダイアログ音声は、通例2ch(channel)よりも多くのチャンネルを有するサラウンド音声の一部として用いられる。ダイアログとは、本来、ドラマ、映画などの演芸のせりふを意味する語であるが、本実施形態では、ダイアログ音声には、せりふに限らず、主に人間が発話した音声もしくは合成された音声であって、放送番組の内容、要点、意味、背景などの内容を表す音声も含まれる。ダイアログ音声には、例えば、スポーツ放送、演芸番組、ニュース番組などの番組の解説音声が含まれる。また、ダイアログ音声は、外国語で発話された外国語音声やそれらを含む多言語音声として提供されることがある。また、ダイアログ音声は、視覚障害や聴覚障害などの知覚障害を補完するために用いられることがある。視覚障害用の音声として、例えば、映像が表現する情報を表す解説音声が用いられる。聴覚障害用の音声として、例えば、通常の音声よりも発話速度が遅い音声や、通常の音声よりも音量が大きい音声が用いられる。
(Dialog voice)
Next, dialog voice will be described.
FIG. 2 is a diagram for explaining dialog voice.
Dialog sound is sound reproduced using a predetermined channel among a plurality of channels. Dialog audio is typically used as part of surround audio with more channels than 2ch. A dialog is a word that originally means a dialogue for a performance such as a drama or a movie. In this embodiment, a dialogue voice is not limited to a dialogue but is mainly a voice spoken by a human or a synthesized voice. Thus, it also includes audio representing the contents, points, meaning, background, etc. of the broadcast program. The dialog sound includes commentary sound of programs such as sports broadcasts, performance programs, and news programs. In addition, the dialog voice may be provided as a foreign language voice spoken in a foreign language or a multilingual voice including them. Dialog voices may also be used to supplement perceptual disturbances such as visual impairment and hearing impairment. As the audio for visual impairment, for example, commentary audio representing information represented by the video is used. As the sound for hearing impairment, for example, a voice having a slower utterance speed than a normal voice or a voice having a louder volume than a normal voice is used.

図2は、受信装置30が多チャンネル音声の再生方式としてサラウンド5.1chを用いる場合を例にする。サラウンド5.1chは、所定の受聴位置Osを基準として前方正面(C:Center)、前方左(L:Left)、前方右(R:Right)、後方左(LS:Left Surround)、後方右(RS:Right Surround)に設置された5個のスピーカと、所定の周波数よりも低い周波数帯域の音声である低域効果音(LFE)専用のスピーカを用いる再生方式である。前方正面(C)、前方左(L)、前方右(R)、後方左(LS)、後方右(RS)、低域効果音(LFE)の各チャンネル又はスピーカは、それぞれFC(Front Center)、FL(Front Left)、FR(Front Right)、SL(Surround Left)、SR(Surround Right)、SW(Sub−woofer)と呼ばれることがある。   FIG. 2 shows an example in which the receiving apparatus 30 uses surround 5.1ch as a multi-channel audio reproduction method. Surround 5.1ch is based on a predetermined listening position Os as a front front (C: Center), front left (L: Left), front right (R: Right), rear left (LS: Left Surround), rear right ( This is a reproduction method using five speakers installed in RS (Right Surround) and a speaker dedicated to low-frequency effect sound (LFE), which is a sound of a frequency band lower than a predetermined frequency. Each channel or speaker of front front (C), front left (L), front right (R), rear left (LS), rear right (RS), and low-frequency sound effect (LFE) is FC (Front Center). , FL (Front Left), FR (Front Right), SL (Surround Left), SR (Surround Right), and SW (Sub-woofer).

ダイアログ音声を再生するチャンネルであるダイアログ専用チャンネルとして、通例、前方正面(C)のチャンネルが用いられ、低域効果音(LFE)のチャンネルは用いられない。これは、ユーザに対してダイアログ音声を前方正面に知覚させることで、ダイアログ音声が表すせりふ、解説音声などの内容を明瞭に把握させるためである。従って、所定の内容を有する音声をダイアログ音声として用いることで、その内容をユーザに容易に把握させることができる。ダイアログ音声は、例えば、ユーザの言語、嗜好等の諸要件に応じてその内容に注目させること、ユーザの聴力を補完すること、残響・騒音などの視聴環境の影響を低減すること、を目的として用いられることが期待される。   As a dialog-dedicated channel, which is a channel for reproducing dialog sound, the front front (C) channel is usually used, and the low-frequency effect sound (LFE) channel is not used. This is to allow the user to perceive the dialog sound in front of the user so that the contents of the dialog and the commentary sound represented by the dialog sound can be clearly understood. Therefore, by using a voice having a predetermined content as a dialog voice, the user can easily grasp the content. For example, dialog voices are intended to focus on the contents according to various requirements such as the user's language and preferences, to supplement the user's hearing, and to reduce the influence of the viewing environment such as reverberation and noise. Expected to be used.

(ダイアログ音声の音量調整)
次に、ダイアログ音声の音量調整について説明する。
図3は、ダイアログ音声の音量調整を説明するための図である。
受信装置30は、複数のチャンネルのうちダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量を個々に制御する。図3に示す例では、ダイアログ専用チャンネルの音量は、その他のチャンネルの音量との差分である相対レベルによって指定される。縦軸、横軸は、それぞれ音量のレベル、相対レベルを示す。図3は、左から右に順に相対レベルが+10dB、+7dB、0dB、−3dBである場合におけるダイアログ専用チャンネル、その他のチャンネルの音量レベルをそれぞれ示す。ダイアログ専用チャンネルの音量レベル、その他のチャンネルの音量レベルは、それぞれ塗りつぶし、白抜きの棒グラフで表される。
(Adjust volume of dialog voice)
Next, the volume adjustment of the dialog sound will be described.
FIG. 3 is a diagram for explaining the volume adjustment of the dialog sound.
The receiving apparatus 30 individually controls the volume of the dialog dedicated channel for reproducing the dialog sound among the plurality of channels and the volume of the other channels. In the example shown in FIG. 3, the volume of the dialog-dedicated channel is specified by a relative level that is a difference from the volume of other channels. The vertical axis and the horizontal axis indicate the volume level and the relative level, respectively. FIG. 3 shows the volume levels of the dialog dedicated channel and other channels when the relative levels are +10 dB, +7 dB, 0 dB, and −3 dB in order from left to right. The volume level of the dialog-dedicated channel and the volume level of the other channels are each represented by a solid bar graph.

図3に示す例では、全チャンネル共通の音量レベルの基準値は0dBであり、相対レベルに関わらず音量レベルが基準値を超えないように制御される。0dBより高い相対レベルではダイアログ専用チャンネルの音量レベルが基準値に固定され、相対レベルが高いほどその他のチャンネルの音量が低くなる。0dB未満の相対レベルではその他のチャンネルの音量が基準値に固定され、相対レベルが低いほどダイアログ専用チャンネルの音量が低い。例えば、相対レベルが+10dBである場合、ダイアログ専用チャンネル、その他のチャンネルそれぞれの音量レベルは、それぞれ0dB、−10dBである。相対レベルが−3dBである場合、ダイアログ専用チャンネル、その他のチャンネルそれぞれの音量レベルは、それぞれ−3dB、0dBである。以下、ダイアログ専用チャンネルの音声の音量レベルをダイアログ音量と呼び、その他のチャンネルの音量レベルを他チャンネル音量と呼び、全チャンネル共通の音量レベルをチャンネル共通音量と呼ぶ。   In the example shown in FIG. 3, the reference value of the sound volume level common to all channels is 0 dB, and the sound volume level is controlled so as not to exceed the reference value regardless of the relative level. When the relative level is higher than 0 dB, the volume level of the dialog-dedicated channel is fixed to the reference value, and the volume of the other channels decreases as the relative level increases. When the relative level is less than 0 dB, the volume of the other channels is fixed to the reference value, and the volume of the dialog dedicated channel is lower as the relative level is lower. For example, when the relative level is +10 dB, the volume levels of the dialog dedicated channel and the other channels are 0 dB and −10 dB, respectively. When the relative level is −3 dB, the volume levels of the dialog dedicated channel and the other channels are −3 dB and 0 dB, respectively. Hereinafter, the sound volume level of the dialog dedicated channel is referred to as the dialog volume, the volume level of the other channels is referred to as the other channel volume, and the volume level common to all the channels is referred to as the channel common volume.

(音声データのストリーム)
次に、音声データのストリームについて説明する。
図4は、音声データのストリームの例を示す図である。本実施形態では、送信装置10が送信する音声データのストリームは、符号化された音声データに付加情報が付加されて構成されるビットストリームである。図4は、音声データのストリームがLATM/LOAS(Low−overhead MPEG−4 Audio Transport Multiplex/Low Overhead Audio Stream)ストリーム形式で構成されている場合を例にする。LATM/LOASストリーム形式は、LOAS、LATMヘッダ、SCE1(Single Channel Element 1)、CPE1(Channel Pair Element 1)、CPE2、LFE、PCE(Program Configuration Element)、DSE(Data Stream Element)、TERM(Terminator)の各領域を有する。
(Audio data stream)
Next, a stream of audio data will be described.
FIG. 4 is a diagram illustrating an example of a stream of audio data. In the present embodiment, the audio data stream transmitted by the transmission device 10 is a bit stream configured by adding additional information to encoded audio data. FIG. 4 shows an example in which a stream of audio data is configured in a LATM / LOAS (Low-overhead MPEG-4 Audio Transport Multiplex / Low Overhead Audio Stream) stream format. The LATM / LOAS stream format includes LOAS, LATM header, SCE1 (Single Channel Element 1), CPE1 (Channel Pair Element 1), CPE2, LFE, PCE (Program Configuration Element), DSE (Dam (Tem), DSE (Dam) Each area.

LATMヘッダには、符号化された音声データに関する音声設定情報(AudioSpecificConfig)として、チャンネル設定情報(channelConfiguration)が含まれる。チャンネル設定情報には、設定値として再生方式(音声モード)を示す設定値が指定される。例えば、設定値「6」は、5.1chサラウンドを示し、設定値「13」は、22.2chサラウンドを示す。SCE1、CPE1、CPE2及びLFEには、符号化された音声データが格納される。SCE1、LFEには、それぞれ前方正面(C)、低域効果音(LFE)のチャンネルの音声データが格納される。CPE1には、前方左(L)ならびに前方右(R)のチャンネルの音声データが格納され、CPE2には、後方左(LS)ならびに後方右(RS)のチャンネルの音声データが格納される。PCEには、SCE1、CPE1、CPE2及びLFEと各チャンネルの対応関係やダイアログ情報の有無を示すエレメント構成情報が格納される。即ち、ストリームに含まれる音声データには、エレメント構成情報と補助情報が付加情報として付加される。   The LATM header includes channel setting information (channelConfiguration) as audio setting information (Audio Specific Config) regarding the encoded audio data. In the channel setting information, a setting value indicating a reproduction method (audio mode) is specified as a setting value. For example, the set value “6” indicates 5.1ch surround, and the set value “13” indicates 22.2ch surround. SCE1, CPE1, CPE2, and LFE store encoded audio data. SCE1 and LFE store audio data of the front front (C) and low-frequency effect sound (LFE) channels, respectively. CPE1 stores the audio data of the front left (L) and front right (R) channels, and CPE2 stores the audio data of the rear left (LS) and rear right (RS) channels. The PCE stores element configuration information indicating the correspondence between SCE1, CPE1, CPE2, and LFE and each channel, and the presence or absence of dialog information. That is, element configuration information and auxiliary information are added as additional information to the audio data included in the stream.

ダイアログ情報の有無は、エレメント構成情報に含まれるデータ要素(Data Element)として補助情報要素(num_assoc_data_element)の設定値により指定される。例えば、設定値「1」は、DSEにおいてダイアログ情報が指定されていることを示し、設定値「0」は、DSEにおいてダイアログ情報が指定されていないことを示す。DSEには、ビットストリームシンタックスとしてダイアログ情報を記述した補助情報(MPEG4_ancillary_data)が格納される。   The presence / absence of dialog information is specified by the setting value of the auxiliary information element (num_assoc_data_element) as a data element (Data Element) included in the element configuration information. For example, the setting value “1” indicates that dialog information is specified in the DSE, and the setting value “0” indicates that dialog information is not specified in the DSE. The DSE stores auxiliary information (MPEG4_ancillary_data) describing dialog information as bitstream syntax.

次に、補助情報のデータ構成について説明する。
図5は、補助情報のデータ構成を示す図である。補助情報には、ダイアログ存在情報(ext_dialogue_status)、ダイアログ分類情報(dialogue_category_code)及びダイアログ分類デフォルト利得情報(dialogue_category_default_gain)が含まれる。
ダイアログ存在情報には、設定値としてダイアログ音声の有無を示す設定値が指定される。例えば、設定値「1」は、ダイアログ音声が存在することを示す。設定値「0」は、ダイアログ音声が存在しないことを示す。ダイアログ分類情報は、設定値としてダイアログ音声が属する分類(ジャンル)を示す設定値が指定される。ダイアログ分類デフォルト利得情報は、設定値として指定された分類に属するダイアログ音声に与えるデフォルトの利得を示す設定値が指定される。デフォルトの利得とは、具体的にはユーザによる指示を受けずにダイアログ音声に与えられる相対レベル又は増幅率である。
Next, the data structure of auxiliary information will be described.
FIG. 5 is a diagram illustrating a data configuration of auxiliary information. The auxiliary information includes dialog existence information (ext_dialogue_status), dialog classification information (dialogue_category_code), and dialog classification default gain information (dialogue_category_default_gain).
In the dialog presence information, a setting value indicating the presence or absence of dialog sound is specified as a setting value. For example, the setting value “1” indicates that there is a dialog voice. The setting value “0” indicates that there is no dialog sound. In the dialog classification information, a setting value indicating a classification (genre) to which the dialog sound belongs is specified as a setting value. In the dialog category default gain information, a setting value indicating a default gain to be given to dialog sounds belonging to the category specified as the setting value is specified. Specifically, the default gain is a relative level or an amplification factor given to the dialog voice without receiving an instruction from the user.

次に、ダイアログ分類情報で指定される指定値毎の分類を示すダイアログ分類テーブルの例について説明する。
図6は、ダイアログ分類テーブルの例を示す図である。図6に示す例では、設定値「0000」、「0001」、「0010」、「0011」、「0100」は、それぞれ、「聴覚障害」、「視覚障害」、「スポーツ解説」、「演芸解説」、「その他解説」を示す。受信装置30は、ダイアログ分類テーブルを参照し、指定された設定値に対応する分類を、ダイアログ音声が属する分類として特定することができる。
Next, an example of a dialog classification table indicating the classification for each specified value specified by the dialog classification information will be described.
FIG. 6 is a diagram illustrating an example of the dialog classification table. In the example shown in FIG. 6, the setting values “0000”, “0001”, “0010”, “0011”, and “0100” are “Hearing impairment”, “Visual impairment”, “Sports commentary”, and “Entertainment commentary”, respectively. ”,“ Other explanation ”. The receiving device 30 can specify the classification corresponding to the designated set value as the classification to which the dialog voice belongs by referring to the dialog classification table.

次に、ダイアログ分類デフォルト利得情報で指定される指定値毎の分類を示すダイアログ分類デフォルト利得テーブルの例について説明する。
図7は、ダイアログ分類デフォルトテーブルの例を示す図である。図7に示す例では、設定値「0011」、「0101」、「1000」、「1010」は、それぞれ増幅率として「0.251」、「0.501」、「1」、「1.995」を示す。これらの増幅率は、それぞれ−12dB、−6dB、0dB、+6dBの相対レベルに相当する。受信装置30は、ダイアログ分類テーブルを参照し、指定された設定値に対応するデフォルトの増幅率又は相対レベルを、ダイアログ音声に与えられる初期の増幅率又は相対レベルとして特定することができる。
Next, an example of a dialog classification default gain table indicating classification for each designated value specified by the dialog classification default gain information will be described.
FIG. 7 is a diagram illustrating an example of the dialog classification default table. In the example illustrated in FIG. 7, the set values “0011”, “0101”, “1000”, and “1010” are “0.251”, “0.501”, “1”, and “1.995” as amplification factors, respectively. Is shown. These amplification factors correspond to relative levels of -12 dB, -6 dB, 0 dB, and +6 dB, respectively. The receiving device 30 can specify the default gain or relative level corresponding to the specified set value as the initial gain or relative level given to the dialog sound by referring to the dialog classification table.

(受信装置の構成)
次に、受信装置30の構成について説明する。
図8は、本実施形態に係る受信装置30の構成を示す概略ブロック図である。
受信装置30は、放送受信部31と、拡声部33と、入出力部34と、表示部35と、記憶部36と、制御部37と、を含んで構成される。
(Receiver configuration)
Next, the configuration of the receiving device 30 will be described.
FIG. 8 is a schematic block diagram illustrating a configuration of the receiving device 30 according to the present embodiment.
The receiving device 30 includes a broadcast receiving unit 31, a loudspeaker unit 33, an input / output unit 34, a display unit 35, a storage unit 36, and a control unit 37.

放送受信部31は、放送伝送路11を介して送信装置10からの多重化データを搬送する放送波を受信する。放送受信部31は、例えば、チューナである。放送受信部31は、放送伝送路11を介して受信した放送波による受信信号を制御部37に出力する。
拡声部33は、制御部37から入力される音声信号に基づく音声を再生する。拡声部33は、例えば、複数のスピーカを含んで構成される。個々のスピーカは、各チャンネルの音声を再生するために用いられる。拡声部33は、6個のスピーカを備えることで5.1chサラウンドの音声を再生することができる。
The broadcast receiving unit 31 receives a broadcast wave carrying multiplexed data from the transmission device 10 via the broadcast transmission path 11. The broadcast receiving unit 31 is, for example, a tuner. The broadcast receiving unit 31 outputs a reception signal based on a broadcast wave received via the broadcast transmission path 11 to the control unit 37.
The loudspeaker 33 reproduces sound based on the sound signal input from the controller 37. The loudspeaker 33 includes, for example, a plurality of speakers. Individual speakers are used to reproduce the sound of each channel. The loudspeaker 33 can reproduce 5.1ch surround sound by providing six speakers.

入出力部34は、ユーザの操作入力に応じた操作信号を取得し、取得した操作信号を制御部37に出力する。入出力部34は、スイッチ、ボタン、つまみなどの物理的な部材を含んで構成されてよいし、マウス、タッチセンサなどの汎用の部材を含んで構成されてもよい。また、入出力部34は、他の機器から無線又は有線で伝送された操作信号が入力され、入力された操作信号を制御部37に出力する入出力インターフェース又は通信インターフェースを含んで構成されてもよい。他の機器は、例えば、専用の遠隔制御機器(リモートコントローラ)、汎用の携帯電話機(いわゆるスマートフォンを含む)などの電子機器である。他の機器は、制御部37から入出力部34を介して出力された各種の情報を表示する表示部を備える電子機器であってもよい。
表示部35は、制御部37から取得した映像信号が示す映像を表示する。表示部35は、例えば、液晶ディスプレイ、有機EL(Electro−luminescence)ディスプレイなどのディスプレイである。
The input / output unit 34 acquires an operation signal corresponding to a user's operation input, and outputs the acquired operation signal to the control unit 37. The input / output unit 34 may be configured to include physical members such as switches, buttons, and knobs, or may be configured to include general-purpose members such as a mouse and a touch sensor. Further, the input / output unit 34 may include an input / output interface or a communication interface that receives an operation signal transmitted from another device wirelessly or by wire and outputs the input operation signal to the control unit 37. Good. The other devices are electronic devices such as a dedicated remote control device (remote controller) and a general-purpose mobile phone (including a so-called smartphone), for example. The other device may be an electronic device including a display unit that displays various types of information output from the control unit 37 via the input / output unit 34.
The display unit 35 displays the video indicated by the video signal acquired from the control unit 37. The display unit 35 is a display such as a liquid crystal display or an organic EL (Electro-Luminescence) display.

記憶部36は、RAM(Random Access Memory)、ROM(Read−only Memory)などの記憶媒体を含んで構成される。記憶媒体として、その他に不揮発メモリ、HDD(Hard Disk Drive)などを含んでもよい。により構成される。記憶部36は、制御部37が実行する処理を記述した各種のプログラムや、それらの処理に用いられる各種のデータや、処理によって生成される各種のデータを記憶する。例えば、記憶部36は、放送番組の映像を示す映像信号や、各種の通知情報を示す映像信号を記憶する。
なお、後述するように拡声部33、入出力部34により接続される他の機器又は表示部35は、制御部37から入力された通知情報を提示する通知部38として機能する。
The storage unit 36 includes a storage medium such as a RAM (Random Access Memory) and a ROM (Read-only Memory). Other storage media may include non-volatile memory, HDD (Hard Disk Drive), and the like. Consists of. The storage unit 36 stores various programs describing processes executed by the control unit 37, various data used for the processes, and various data generated by the processes. For example, the storage unit 36 stores a video signal indicating a video of a broadcast program and a video signal indicating various kinds of notification information.
As will be described later, another device or display unit 35 connected by the loudspeaker unit 33 and the input / output unit 34 functions as a notification unit 38 that presents notification information input from the control unit 37.

制御部37は、受信装置30の動作を制御する。制御部37は、復調部371と、分離部372と、音声処理部373と、通知処理部374と、を含んで構成される。また、音声処理部373は、音声復号部3731と、付加情報解析部3732と、ダイアログ検出部3733と、音量制御部3734とを含んで構成される。映像処理部375は、映像復号部3751と、表示合成部3752とを含んで構成される。制御部37は、各種の処理を実行するCPU(Central Processing Unit)などの制御デバイスと、上述した記憶媒体を含んで構成される。制御部37は、予め記憶媒体に記憶しておいた制御プログラムを読み出し、読み出した制御プログラムに記述される指令で指示される処理を実行してもよい。この実行により、復調部371と、分離部372と、音声処理部373と、通知処理部374の機能を実現する。   The control unit 37 controls the operation of the receiving device 30. The control unit 37 includes a demodulation unit 371, a separation unit 372, an audio processing unit 373, and a notification processing unit 374. The audio processing unit 373 includes an audio decoding unit 3731, an additional information analysis unit 3732, a dialog detection unit 3733, and a volume control unit 3734. The video processing unit 375 includes a video decoding unit 3751 and a display synthesis unit 3752. The control unit 37 includes a control device such as a CPU (Central Processing Unit) that executes various processes and the storage medium described above. The control unit 37 may read a control program stored in advance in a storage medium, and execute processing instructed by a command described in the read control program. With this execution, the functions of the demodulation unit 371, the separation unit 372, the audio processing unit 373, and the notification processing unit 374 are realized.

復調部371は、放送受信部31から入力された受信信号を所定の復調方式(例えば、QPSK:Quadrature Phase Shift Keying)を用いて復調する。復調部371において用いられる復調方式は、送信装置10で用いられた変調方式に対応する復調方式である。復調部371は、復調により得られた多重化データを分離部372に出力する。   The demodulator 371 demodulates the received signal input from the broadcast receiver 31 using a predetermined demodulation method (for example, QPSK: Quadrature Phase Shift Keying). The demodulation method used in the demodulation unit 371 is a demodulation method corresponding to the modulation method used in the transmission device 10. Demodulation section 371 outputs multiplexed data obtained by demodulation to separation section 372.

分離部372には、放送で伝送された多重化データが復調部371から入力される。分離部372は、放送で伝送された多重化データから構成情報(PSI/SI)と番組データ(TS)を抽出する。分離部372は、構成情報に含まれるプログラム情報(PMT)に基づいて番組データの要素である音声データのストリーム(ES)と映像データのストリーム(ES)に分離する。分離部372は、分離した音声データのストリームを音声復号部3731と付加情報解析部3732に出力し、映像データのストリームを映像復号部3751に出力する。   The demultiplexing unit 372 receives multiplexed data transmitted by broadcasting from the demodulation unit 371. The separation unit 372 extracts configuration information (PSI / SI) and program data (TS) from the multiplexed data transmitted by broadcasting. The separation unit 372 separates an audio data stream (ES) and a video data stream (ES), which are elements of program data, based on program information (PMT) included in the configuration information. The separation unit 372 outputs the separated audio data stream to the audio decoding unit 3731 and the additional information analysis unit 3732, and outputs the video data stream to the video decoding unit 3751.

音声復号部3731は、分離部372から入力された音声データのストリームから、チャンネル指定情報で指定されるチャンネル数の音声データを抽出する。音声復号部3731は、各チャンネルの音声データを所定の音声復号方式(例えば、MPEG−4 AAC)を用いて復号し、復号により得られた各チャンネルの音声信号を音量制御部3734に出力する。   The audio decoding unit 3731 extracts audio data for the number of channels specified by the channel specification information from the audio data stream input from the separation unit 372. The audio decoding unit 3731 decodes the audio data of each channel using a predetermined audio decoding method (for example, MPEG-4 AAC), and outputs the audio signal of each channel obtained by the decoding to the volume control unit 3734.

付加情報解析部3732は、分離部372から入力された音声データのストリームにおいて音声データに付加された付加情報を解析し、ダイアログ情報の有無を判定する。具体的には、付加情報解析部3732は、当該ストリームに含まれる付加情報としてエレメント構成情報において設定されたエレメント構成情報の補助情報要素に指定された設定値を読み取る。付加情報解析部3732は、読み取った設定値が「1」である場合、ダイアログ情報があると判定し、読み取った設定値が「0」である場合、ダイアログ情報がないと判定する。ダイアログ情報があると判定するとき、付加情報解析部3732は、音声データのストリームからダイアログ情報を記述した補助情報を読み取り、読み取った補助情報をダイアログ検出部3733に出力する。   The additional information analysis unit 3732 analyzes the additional information added to the audio data in the audio data stream input from the separation unit 372, and determines the presence or absence of dialog information. Specifically, the additional information analysis unit 3732 reads the set value specified in the auxiliary information element of the element configuration information set in the element configuration information as additional information included in the stream. The additional information analysis unit 3732 determines that there is dialog information when the read setting value is “1”, and determines that there is no dialog information when the read setting value is “0”. When determining that there is dialog information, the additional information analysis unit 3732 reads auxiliary information describing the dialog information from the audio data stream, and outputs the read auxiliary information to the dialog detection unit 3733.

ダイアログ検出部3733は、付加情報解析部3732から入力された補助情報に基づいてダイアログ音声を検出する。具体的には、ダイアログ検出部3733は、補助情報に設定されたダイアログ存在情報を読み取る。ダイアログ検出部3733は、読み取った設定値が「1」である場合、ダイアログ音声があると判定し、読み取った設定値が「0」である場合、ダイアログ音声がないと判定する。ダイアログ検出部3733は、ダイアログ音声があると判定する場合、ダイアログ存在情報を通知処理部374に出力する。この場合、ダイアログ検出部3733は、補助情報から読み取ったダイアログ分類デフォルト利得情報を音量制御部3734に出力する。
なお、ダイアログ検出部3733は、付加情報解析部3732においてダイアログ情報があると判定されたとき、ダイアログ音声があると判定し、ダイアログ情報がないと判定されたとき、ダイアログ音声がないと判定してもよい。
The dialog detection unit 3733 detects the dialog voice based on the auxiliary information input from the additional information analysis unit 3732. Specifically, the dialog detection unit 3733 reads the dialog presence information set in the auxiliary information. The dialog detection unit 3733 determines that there is a dialog sound when the read setting value is “1”, and determines that there is no dialog sound when the read setting value is “0”. When the dialog detection unit 3733 determines that there is a dialog sound, the dialog detection unit 3733 outputs the dialog presence information to the notification processing unit 374. In this case, the dialog detection unit 3733 outputs the dialog classification default gain information read from the auxiliary information to the volume control unit 3734.
The dialog detection unit 3733 determines that there is dialog sound when the additional information analysis unit 3732 determines that there is dialog information, and determines that there is no dialog sound when it is determined that there is no dialog information. Also good.

音量制御部3734は、音声復号部3731から入力された各チャンネルの音声信号に係る音量を制御する。ダイアログ音声があると判定される場合、音量制御部3734は、入出力部34から入力される操作信号に基づいてダイアログ専用チャンネルの音量と他チャンネルの音量を個々に制御する。具体的には、音量制御部3734は、図3を参照して上述したように操作信号で指定される相対レベルと共通チャンネル音量に基づいてダイアログ音量と他チャンネル音量を定める。そして、音量制御部3734は、ダイアログ専用チャンネルの音声信号の信号値にダイアログ音量に対応する増幅率を乗算し、その他のチャンネル音声信号の信号値に他チャンネル音量に対応する増幅率を乗算する。音量制御部3734は、音量を制御した各チャンネルの音声信号を拡声部33に出力することにより、各チャンネルの音声を再生させる。   The volume control unit 3734 controls the volume related to the audio signal of each channel input from the audio decoding unit 3731. When it is determined that there is dialog sound, the volume control unit 3734 individually controls the volume of the dialog dedicated channel and the volume of other channels based on the operation signal input from the input / output unit 34. Specifically, the volume control unit 3734 determines the dialog volume and the other channel volume based on the relative level specified by the operation signal and the common channel volume as described above with reference to FIG. Then, the volume control unit 3734 multiplies the signal value of the audio signal of the dialog dedicated channel by the amplification factor corresponding to the dialog volume, and multiplies the signal value of the other channel audio signal by the amplification factor corresponding to the other channel volume. The volume control unit 3734 outputs the audio signal of each channel whose volume is controlled to the loudspeaker unit 33, thereby reproducing the sound of each channel.

但し、音量制御部3734は、ダイアログ分類デフォルト利得情報に基づいてデフォルトのダイアログ音量を定める。具体的には、音量制御部3734は、記憶部36に予め記憶されたダイアログ分類デフォルト利得情報を参照し、ダイアログ分類デフォルト情報で指定される設定値に対応する相対レベルを読み取る。読み取った相対レベルが0dB以上である場合には、音量制御部3734は、ダイアログ音量を所定の基準値(例えば、0dB)に定め、他チャンネル音量を所定の基準値から相対レベルを減算して得られる値に定める。読み取った相対レベルが0dB未満である場合には、音量制御部3734は、ダイアログ音量を所定の基準値に相対レベルを加算した値に定め、他チャンネル音量を所定の基準値に定める。そして、音量制御部3734は、ダイアログ専用チャンネルの音声信号の信号値にダイアログ音量に対応する増幅率を乗算し、その他のチャンネル音声信号の信号値に他チャンネル音量に対応する増幅率を乗算する。   However, the volume control unit 3734 determines the default dialog volume based on the dialog classification default gain information. Specifically, the volume control unit 3734 refers to the dialog classification default gain information stored in advance in the storage unit 36, and reads the relative level corresponding to the setting value specified by the dialog classification default information. When the read relative level is 0 dB or more, the volume control unit 3734 sets the dialog volume to a predetermined reference value (eg, 0 dB), and obtains the other channel volume by subtracting the relative level from the predetermined reference value. Set to the value to be. When the read relative level is less than 0 dB, the volume control unit 3734 sets the dialog volume to a value obtained by adding the relative level to a predetermined reference value, and sets the other channel volume to a predetermined reference value. Then, the volume control unit 3734 multiplies the signal value of the audio signal of the dialog dedicated channel by the amplification factor corresponding to the dialog volume, and multiplies the signal value of the other channel audio signal by the amplification factor corresponding to the other channel volume.

なお、ダイアログ音声の有無に関わらず、音量制御部3734は、操作信号が示す共通チャンネル音量に基づいて全チャンネルの音量を一斉に制御する。ダイアログ音声がないと判定される場合には、音量制御部3734は、相対レベルに基づく音量の制御を行わない。   Regardless of the presence or absence of the dialog voice, the volume control unit 3734 controls the volume of all channels simultaneously based on the common channel volume indicated by the operation signal. When it is determined that there is no dialog sound, the volume control unit 3734 does not perform volume control based on the relative level.

通知処理部374は、ダイアログ検出部3733からのダイアログ存在情報の入力に応じてダイアログ音声に関する通知情報を直接又は間接的に通知部38に出力する。通知処理部374は、例えば、記憶部36に予め記憶しておいた通知画面データを読み取り、読み取った通知画面データを表示合成部3752に出力することにより、通知画面データが示す通知画面を表示部35に表示させる。通知画面には、ダイアログ音声に関する通知情報として、例えば、放送番組におけるダイアログ音声の提供、ダイアログ音量の調節に係る操作方法の案内、ダイアログ音声に関する解説が含まれてもよい。また、ダイアログ検出部3733からダイアログ音声の属性を示す属性情報が入力されるとき、通知処理部374は、属性情報に対応づけられた通知情報もしくは属性情報が付加された通知情報を通知部38に出力してもよい。属性情報として、例えば、上述したダイアログ分類情報やダイアログ音声の言語を示すダイアログ言語情報がある。ダイアログ言語情報として、補助情報に記述されたダイアログ言語情報(dialogue_main_lang_code)が利用可能である。ダイアログ検出部3733は、このダイアログ言語情報を補助情報から抽出する。通知情報の例については、後述する。   The notification processing unit 374 outputs the notification information related to the dialog sound directly or indirectly to the notification unit 38 in response to the input of the dialog presence information from the dialog detection unit 3733. For example, the notification processing unit 374 reads the notification screen data stored in advance in the storage unit 36, and outputs the read notification screen data to the display synthesis unit 3752, thereby displaying the notification screen indicated by the notification screen data. 35. The notification screen may include, for example, provision of dialog sound in a broadcast program, guidance on an operation method related to adjustment of dialog volume, and explanation about dialog sound as notification information regarding dialog sound. When attribute information indicating the attribute of the dialog voice is input from the dialog detection unit 3733, the notification processing unit 374 sends notification information associated with the attribute information or notification information to which the attribute information is added to the notification unit 38. It may be output. As attribute information, for example, there is dialog language information indicating the language of dialog classification information and dialog sound described above. Dialog language information (dialogue_main_lang_code) described in the auxiliary information can be used as the dialog language information. The dialog detection unit 3733 extracts the dialog language information from the auxiliary information. An example of the notification information will be described later.

映像復号部3751は、分離部372から入力される映像データのストリームから映像データを抽出する。映像復号部3751は、抽出した映像データを所定の映像復号方式(例えば、MPEG−2 ビデオ)を用いて復号し、復号した映像データを生成する。復号した映像データは、各時刻における映像(フレーム画像)を形成する信号値を示すデータである。映像復号部3751は、復号した映像データを表示合成部3752に出力する。
表示合成部3752は、映像復号部3751から入力された映像データが示す映像と、通知処理部374から入力された通知画面データ又はその他の画面データが示す画面とを合成する。表示合成部3752は、合成により得られた合成映像を示す表示データを表示部35に出力する。
The video decoding unit 3751 extracts video data from the video data stream input from the separation unit 372. The video decoding unit 3751 decodes the extracted video data using a predetermined video decoding method (for example, MPEG-2 video), and generates decoded video data. The decoded video data is data indicating signal values forming a video (frame image) at each time. The video decoding unit 3751 outputs the decoded video data to the display synthesis unit 3752.
The display synthesis unit 3752 synthesizes the video indicated by the video data input from the video decoding unit 3751 and the screen indicated by the notification screen data or other screen data input from the notification processing unit 374. The display synthesis unit 3752 outputs display data indicating the synthesized video obtained by synthesis to the display unit 35.

(受信方法)
次に、本実施形態に係る受信処理について説明する。
図9は、本実施形態に係る受信処理を示すフローチャートである。
(ステップS101)分離部372は、放送で伝送された多重化データに含まれるプログラム情報に基づいて、当該多重化データから音声データのストリームを分離する。その後、ステップS102に進む。
(ステップS102)付加情報解析部3732は、分離された音声データのストリームから音声データに付加された付加情報を解析し、ダイアログ情報の有無を判定する。ダイアログ情報があると判定するとき、付加情報解析部3732は、ダイアログ情報を記述した補助情報を抽出する。その後、ステップS103に進む。
(ステップS103)音声復号部3731は、音声データのストリームに含まれる各チャンネルの音声データを復号し、音声信号を取得する。その後、ステップS104に進む。
(Receiving method)
Next, the reception process according to the present embodiment will be described.
FIG. 9 is a flowchart showing a reception process according to the present embodiment.
(Step S101) The separation unit 372 separates a stream of audio data from the multiplexed data based on program information included in the multiplexed data transmitted by broadcasting. Thereafter, the process proceeds to step S102.
(Step S102) The additional information analysis unit 3732 analyzes the additional information added to the audio data from the separated audio data stream, and determines the presence or absence of the dialog information. When determining that there is dialog information, the additional information analysis unit 3732 extracts auxiliary information describing the dialog information. Thereafter, the process proceeds to step S103.
(Step S103) The audio decoding unit 3731 decodes audio data of each channel included in the audio data stream, and acquires an audio signal. Thereafter, the process proceeds to step S104.

(ステップS104)ダイアログ検出部3733は、抽出された補助情報に含まれるダイアログ存在情報に基づいてダイアログ音声の有無を判定する。ダイアログ音声があると判定されるとき(ステップS104 YES)、ステップS105に進む。ダイアログ音声がないと判定されるとき(ステップS104 NO)、図9に示す処理を終了する。
(ステップS105)通知処理部374は、ダイアログ音声に関する通知情報を通知部38に出力する。通知部38は、通知処理部374からの通知情報を通知する。その後、ステップS106に進む。
(ステップS106)音量制御部3734は、各チャンネルの音声データが示す音声のうち、ダイアログ専用チャンネルの音声について、補助情報に含まれるダイアログ分類デフォルト利得情報に基づいてデフォルトのダイアログ音量を定める。音量制御部3734は、操作信号に基づいてダイアログ専用チャンネルの音量と他チャンネルの音量を制御する。拡声部33は、音量が制御された各チャンネルの音声を再生する。その後、図9に示す処理を終了する。
(Step S104) The dialog detection unit 3733 determines the presence or absence of dialog sound based on the dialog presence information included in the extracted auxiliary information. When it is determined that there is a dialog voice (YES in step S104), the process proceeds to step S105. When it is determined that there is no dialog sound (NO in step S104), the process shown in FIG.
(Step S <b> 105) The notification processing unit 374 outputs notification information related to the dialog sound to the notification unit 38. The notification unit 38 notifies the notification information from the notification processing unit 374. Thereafter, the process proceeds to step S106.
(Step S106) The volume control unit 3734 determines the default dialog volume based on the dialog classification default gain information included in the auxiliary information for the voice of the dialog dedicated channel among the voices indicated by the voice data of each channel. The volume control unit 3734 controls the volume of the dialog dedicated channel and the volume of other channels based on the operation signal. The loudspeaker 33 reproduces the sound of each channel whose volume is controlled. Thereafter, the process shown in FIG. 9 ends.

(通知情報の例)
次に、通知部38が通知する通知情報の例について説明する。
図10は、本実施形態に係る通知画面の一例を示す図である。図10に示す通知画面は、表示部35の表示領域の右下端から所定範囲内の領域に表示される。この領域に表示されることにより、ユーザによる映像の視認が妨げられない。通知画面に含まれるメッセージMg1が含まれる。メッセージMg1の第1文「この放送では、演劇解説のダイアログがあります。」は、放送番組において演劇解説に属する分類の内容を示すダイアログ音声が含まれることを示す。メッセージMg1の第2文「演劇解説をお聞きになる場合には、ダイアログボタンを押して音量調節を行います」は、ダイアログ音量が調節可能であることと、その調節に係る操作方法を案内する案内情報の一例である。
(Example of notification information)
Next, an example of notification information notified by the notification unit 38 will be described.
FIG. 10 is a diagram illustrating an example of a notification screen according to the present embodiment. The notification screen illustrated in FIG. 10 is displayed in an area within a predetermined range from the lower right end of the display area of the display unit 35. By being displayed in this area, visual recognition by the user is not hindered. A message Mg1 included in the notification screen is included. The first sentence of the message Mg1 “There is a dialog for theater commentary in this broadcast” indicates that a dialog sound indicating the content of the classification belonging to the theater commentary is included in the broadcast program. The second sentence of message Mg1 “If you want to listen to theatrical commentary, press the dialog button to adjust the volume” is a guide to show that the dialog volume can be adjusted and how to operate it. It is an example of information.

ダイアログ分類情報を含む通知情報を表示する際、通知処理部374は、記憶部36から読み出した通知画面データにダイアログ検出部3733からのダイアログ分類情報を付加し、ダイアログ分類情報を付加した通知画面データを表示合成部3752に出力する。また、記憶部36には、予めダイアログ分類情報が含まれた通知画面データを記憶部36に記憶させておいてもよい。その場合には、通知処理部374は、ダイアログ検出部3733から取得したダイアログ分類情報に対応する通知画面データを読み出し、読み出した通知画面データを表示合成部3752に出力する。   When displaying the notification information including the dialog classification information, the notification processing unit 374 adds the dialog classification information from the dialog detection unit 3733 to the notification screen data read from the storage unit 36, and the notification screen data to which the dialog classification information is added. Is output to the display composition unit 3752. The storage unit 36 may store notification screen data including dialog classification information in advance in the storage unit 36. In that case, the notification processing unit 374 reads the notification screen data corresponding to the dialog classification information acquired from the dialog detection unit 3733, and outputs the read notification screen data to the display composition unit 3752.

メッセージMg1の第2文において言及されているダイアログボタンは、リモートコントローラRc(図11)が備えるダイアログ音量を調整するためのダイアログボタンDbtである。ダイアログボタンDbtは、共通チャンネル音量を調整するための音量ボタンVbtとは別個に設けられる操作ボタンである。図11に示す例では、ダイアログボタンDbt、音量ボタンVbtの近傍には、それぞれ「ダイアログ」、「VOL」の文字が付されている。ユーザの操作によりダイアログボタンDbtが押下されるとき、リモートコントローラRcは、相対レベルを示す操作信号を受信装置30の入出力部34に無線(例えば、赤外線)で送信する。音量制御部3734は、上述したように、入出力部34からの操作信号が示す相対レベルに基づいてダイアログ音量を制御する。なお、本実施形態では「押下」とは、物理的なボタンが現実に押下されることの他、画面上に表示されたボタン又はその表示領域が操作信号により指示されることも意味する。   The dialog button mentioned in the second sentence of the message Mg1 is the dialog button Dbt for adjusting the dialog volume provided in the remote controller Rc (FIG. 11). The dialog button Dbt is an operation button provided separately from the volume button Vbt for adjusting the common channel volume. In the example shown in FIG. 11, the characters “dialog” and “VOL” are attached in the vicinity of the dialog button Dbt and the volume button Vbt, respectively. When the dialog button Dbt is pressed by a user operation, the remote controller Rc transmits an operation signal indicating a relative level to the input / output unit 34 of the receiving device 30 wirelessly (for example, infrared rays). As described above, the volume control unit 3734 controls the dialog volume based on the relative level indicated by the operation signal from the input / output unit 34. In this embodiment, “pressing” means that a physical button is actually pressed, and that a button displayed on the screen or its display area is indicated by an operation signal.

リモートコントローラRcは、さらに音声切替ボタンAswと4個のカラーボタンBbt、Rbt、Gbt、Ybtを備える。音声切替ボタンAswは、押下により再生対象の音声(再生対象音声)の切り替えを指示するためのボタンである。音声切替ボタンAswが機能するのは、再生対象音声が複数存在する場合である。本実施形態では、例えば、ダイアログ音声の音声データと通常の放送音声の音声データとが並列に伝送される場合、複数のダイアログ音声の音声データが並列に伝送される場合、などがある。音声処理部373は、音声切替ボタンAswが押下される都度、複数の伝送音声のいずれか又はそれらの組み合わせを重ね合わせた音声を再生対象音声として巡回的に選択する。
カラーボタンBbt、Rbt、Gbt、Ybtは、青、赤、緑、黄の各色が着色された無地のボタンである。円で囲まれる色を表す文字、例えば、「青」は、その色が着色されていることを示す文字であり、実際にはそれらの文字が表されない。本実施形態では、カラーボタンBbt、Rbt、Gbt、Ybtは、後述する機能を指示するために用いられる。以下の説明では、カラーボタンBbt、Rbt、Gbt、Ybtを、それぞれ青ボタンBbt、赤ボタンRbt、緑ボタンGbt、黄ボタンYbtと呼ぶ。
The remote controller Rc further includes a voice switching button Asw and four color buttons Bbt, Rbt, Gbt, and Ybt. The audio switching button Asw is a button for instructing to switch the audio to be reproduced (audio to be reproduced) when pressed. The voice switching button Asw functions when there are a plurality of playback target voices. In the present embodiment, for example, audio data of dialog sound and normal broadcast audio data are transmitted in parallel, and audio data of a plurality of dialog sounds are transmitted in parallel. Each time the voice switching button Asw is pressed, the voice processing unit 373 cyclically selects a voice obtained by superimposing any one of a plurality of transmission voices or a combination thereof as a playback target voice.
The color buttons Bbt, Rbt, Gbt, and Ybt are plain buttons colored in blue, red, green, and yellow. Characters representing colors surrounded by a circle, for example, “blue” are characters indicating that the color is colored, and these characters are not actually represented. In the present embodiment, the color buttons Bbt, Rbt, Gbt, and Ybt are used for instructing functions to be described later. In the following description, the color buttons Bbt, Rbt, Gbt, and Ybt are referred to as a blue button Bbt, a red button Rbt, a green button Gbt, and a yellow button Ybt, respectively.

次に、通知画面の他の例について説明する。
図12は、本実施形態に係る通知画面の他の例を示す図である。図12に示す例では、通知画面は、表示部35の表示領域の左下端から所定範囲内の領域に表示される。この領域に表示されることにより、ユーザによる映像の視認が妨げられない。通知画面に含まれるメッセージMg2として「ダイアログ対応放送です。」とのメッセージと、「黄」の文字で囲まれる円と、その円に隣接した「詳細」とのメッセージを含む。「ダイアログ対応放送です。」とのメッセージは、放送番組においてダイアログ音声が提供されることを示すメッセージである。従って、その円に隣接した「詳細」とのメッセージは、黄ボタンYbtの押下により、提供されるダイアログ音声に関するより詳細な情報が表示されることを表す。ユーザの操作により黄ボタンYbtが押下されるとき、リモートコントローラRcは、詳細情報の表示を示す操作信号を受信装置30の入出力部34に送信する。通知処理部374は、入出力部34からの操作信号の入力に応じて、当該ダイアログ音声に関する詳細情報を表示合成部3752に出力することにより、表示部35に表示させる。
Next, another example of the notification screen will be described.
FIG. 12 is a diagram illustrating another example of the notification screen according to the present embodiment. In the example illustrated in FIG. 12, the notification screen is displayed in an area within a predetermined range from the lower left corner of the display area of the display unit 35. By being displayed in this area, visual recognition by the user is not hindered. The message Mg2 included in the notification screen includes a message “Dialog-compatible broadcast”, a circle surrounded by characters of “yellow”, and a message “detail” adjacent to the circle. The message “Dialog-compatible broadcast” is a message indicating that dialog sound is provided in the broadcast program. Therefore, the message “detail” adjacent to the circle indicates that more detailed information regarding the provided dialog sound is displayed when the yellow button Ybt is pressed. When the yellow button Ybt is pressed by a user operation, the remote controller Rc transmits an operation signal indicating display of detailed information to the input / output unit 34 of the receiving device 30. In response to the input of the operation signal from the input / output unit 34, the notification processing unit 374 outputs detailed information regarding the dialog sound to the display synthesis unit 3752, thereby causing the display unit 35 to display the detailed information.

詳細情報は、記憶部36に予め記憶された情報、ダイアログ検出部3733が補助情報から抽出した情報のいずれでもよい。予め記憶された情報は、例えば、受信装置30の取り扱い方法を示す取扱説明書データ(電子マニュアル)である。これにより、ユーザは取扱説明書データに誘導されるので、受信装置30の取り扱いについてより詳細な情報に容易に接することができる。補助情報から抽出した情報は、例えば、ダイアログ音声に関する解説を示すダイアログ解説情報である。補助情報において、ダイアログ解説情報は、補助情報のメインダイアログコメントデータ(dialogue_main_lang_comment_data)の項目に格納される。これにより、番組制作者や放送事業者が制作した、より詳細なダイアログ音声に関する解説が伝達される。ダイアログ解説情報として、放送番組の構成やダイアログ音声の位置づけに応じた説明が含まれてもよい。例えば、スポーツ番組において、複数の解説者による解説音声がそれぞれダイアログ音声として含まれる場合、それぞれの解説者の略歴、主たる解説対象の選手、チームの解説やそれぞれの選手、チームの立場に立った競技の概要や、それらのダイアログ音声の切り替え方法などの説明が含まれてもよい。   The detailed information may be either information stored in advance in the storage unit 36 or information extracted from the auxiliary information by the dialog detection unit 3733. The information stored in advance is, for example, instruction manual data (electronic manual) indicating how to handle the receiving device 30. Thereby, since the user is guided to the instruction manual data, the user can easily access more detailed information about the handling of the receiving device 30. The information extracted from the auxiliary information is, for example, dialog commentary information indicating commentary on the dialog sound. In the auxiliary information, the dialog commentary information is stored in an item of main dialog comment data (dialogue_main_lang_comment_data) of the auxiliary information. As a result, more detailed explanations about dialog sounds produced by program producers and broadcasters are transmitted. The dialog commentary information may include a description according to the configuration of the broadcast program and the position of the dialog sound. For example, in a sports program, when commentary sounds from multiple commentators are included as dialog sounds, the biography of each commentator, the main commentary player, the team commentary, and the competition based on each player and team position And an explanation of the dialog voice switching method and the like.

次に、通知画面のさらに他の例について説明する。
図13は、本実施形態に係る通知画面のさらに他の例を示す図である。図13に示す例では、通知画面は、表示部35の表示領域の下辺から所定範囲内の領域に表示される。通知画面に含まれるメッセージMg3の第1文の「この放送は、フランス語音声のダイアログがあります。」とのメッセージは、提供言語がフランス語であるダイアログ音声が提供されることを示す。この提供言語は、通知処理部374は、ダイアログ検出部3733からのダイアログ言語情報が示す言語である。
Next, still another example of the notification screen will be described.
FIG. 13 is a diagram showing still another example of the notification screen according to the present embodiment. In the example illustrated in FIG. 13, the notification screen is displayed in an area within a predetermined range from the lower side of the display area of the display unit 35. The message “This broadcast has a French voice dialog” in the first sentence of the message Mg3 included in the notification screen indicates that a dialog voice in which the provided language is French is provided. The provided language is the language indicated by the dialog language information from the dialog detection unit 3733 in the notification processing unit 374.

メッセージMg3の第2文の「フランス語に切り替える場合には音声切替ボタンを押してください。」とのメッセージは、リモートコントローラRcの音声切替ボタンAswの押下により、提供されるダイアログ音声が再生対象の音声として選択されることを示す。
ユーザの操作により音声切替ボタンAswが押下されるとき、リモートコントローラRcは、再生対象音声の切り替えを示す操作信号を受信装置30の入出力部34に送信する。音量制御部3734は、入出力部34からの操作信号の入力に応じて、ダイアログ音声に係る音声信号の出力を開始する。このとき、音量制御部3734は、その他の音声データに基づく音声信号の出力を停止(ミュート)してもよい。
The message “Please press the voice switch button when switching to French” in the second sentence of the message Mg3 indicates that the provided dialog voice is the voice to be played when the voice switch button Asw of the remote controller Rc is pressed. Indicates that it will be selected.
When the voice switching button Asw is pressed by a user operation, the remote controller Rc transmits an operation signal indicating switching of the playback target voice to the input / output unit 34 of the receiving device 30. The volume control unit 3734 starts outputting the audio signal related to the dialog sound in response to the input of the operation signal from the input / output unit 34. At this time, the volume control unit 3734 may stop (mute) the output of the audio signal based on the other audio data.

メッセージMg3には、第3文として「青ボタン、赤ボタンを押すとダイアログの音量を調整できます。」とのメッセージ、「赤」の文字で囲まれる円に隣接した「ダイアログ音量UP」とのメッセージ、「青」の文字で囲まれる円に隣接した「ダイアログ音量DOWN」とのメッセージが含まれる。これらのメッセージは、赤ボタンRbtの押下により、より高い相対レベルを与えるようにダイアログ音量が調整され、青ボタンBbtの押下により、より低い相対レベルを与えるようにダイアログ音量が調整されることを示す。   In the message Mg3, the third sentence says “You can adjust the volume of the dialog by pressing the blue and red buttons” and “Dialog volume UP” adjacent to the circle surrounded by the letters “red”. The message “Dialog volume DOWN” adjacent to the circle surrounded by the letters “blue” is included. These messages indicate that the dialog volume is adjusted to give a higher relative level by pressing the red button Rbt, and the dialog volume is adjusted to give a lower relative level by pressing the blue button Bbt. .

ユーザの操作により赤ボタンRbtが押下されるとき、リモートコントローラRcは、その時点までに指示された相対レベルよりも高い相対レベルを示す操作信号を示す操作信号を受信装置30の入出力部34に送信する。青ボタンBbtが押下されるとき、リモートコントローラRcは、その時点までに指示された相対レベルよりも低い相対レベルを示す操作信号を示す操作信号を受信装置30の入出力部34に送信する。音量制御部3734は、入出力部34から入力された操作信号が示す相対レベルに基づいてダイアログ音量を制御する。   When the red button Rbt is pressed by a user operation, the remote controller Rc sends an operation signal indicating an operation signal indicating a relative level higher than the instructed relative level to the input / output unit 34 of the receiving device 30. Send. When the blue button Bbt is pressed, the remote controller Rc transmits an operation signal indicating an operation signal indicating a relative level lower than the instructed relative level to the input / output unit 34 of the receiving device 30. The volume control unit 3734 controls the dialog volume based on the relative level indicated by the operation signal input from the input / output unit 34.

通知情報の形態や内容は、図10、12、13に例示されるポップアップウィンドウとして表される通知画面に限られない。通知情報は、テキストで表されてもよく、他の情報に付加して表されてもよい。図14に示す例では、表示部35の表示領域の右上端から所定範囲内の領域にメッセージMg4が表示される。メッセージMg4のうち、「ZYX」、「BS5」、「5.1ch サラウンド」は、それぞれ放送事業者名、チャンネル名、音声の再生方式を示し、いずれも番組情報の要素である。「(ダイアログ解説あり)」は、当該番組で提供されるダイアログ音声の存在を示す通知情報に相当する。そこで、通知処理部374は、分離部372から構成情報に含まれる番組情報を抽出する。通知処理部374は、予め記憶された所定の通知情報を記憶部36から読み出し、読み出した通知情報を表すテキストと構成情報を表すテキストとを統合したテキストを示すメッセージデータを生成する。通知処理部374は、生成したメッセージデータを表示合成部3752に出力することにより、それらのテキストを表示部35に表示させる。   The form and content of the notification information are not limited to the notification screen represented as a pop-up window exemplified in FIGS. The notification information may be expressed in text or may be expressed in addition to other information. In the example illustrated in FIG. 14, the message Mg4 is displayed in an area within a predetermined range from the upper right end of the display area of the display unit 35. Of the message Mg4, “ZYX”, “BS5”, and “5.1ch surround” indicate the broadcaster name, channel name, and audio playback method, respectively, and are all elements of program information. “(With dialog explanation)” corresponds to notification information indicating the presence of dialog sound provided in the program. Therefore, the notification processing unit 374 extracts program information included in the configuration information from the separation unit 372. The notification processing unit 374 reads predetermined notification information stored in advance from the storage unit 36, and generates message data indicating text obtained by integrating the text indicating the read notification information and the text indicating the configuration information. The notification processing unit 374 causes the display unit 35 to display the text by outputting the generated message data to the display synthesis unit 3752.

また、通知情報には、テキストが含まれていなくてもよく、所定の図案を有するアイコンなどの画像、所定の記号(ロゴ)であってもよい。また、通知処理部374は、これらの記号や模様を、番組情報に基づいて生成した電子番組表(EPG)のうち、該当する放送番組の表示領域に重ね合わせて表示させてもよい。   The notification information may not include text, and may be an image such as an icon having a predetermined design or a predetermined symbol (logo). Further, the notification processing unit 374 may display these symbols and patterns so as to be superimposed on the display area of the corresponding broadcast program in the electronic program guide (EPG) generated based on the program information.

通知情報は、表示部35以外の部材を通知部38として用いることにより通知されてもよい。例えば、図15に示すように、通知情報は、表示部35の外枠部の表面に配置された発光部Leを点灯又は点滅させることにより提示されてもよい。その場合、通知処理部374は、通知情報として、発光部Leへの電力供給の有無を切り替える切替部(スイッチ)に、電力供給を指示する情報を出力する。切替部は、通知情報の入力に応じて発光部Leに電力を供給する。また、通知情報は、拡声部33を構成するスピーカから音声を再生させることにより提示されてもよい。その場合、通知処理部374は、通知情報として所定の音声信号を拡声部33に出力することにより、その音声信号が示す音声を再生させる。再生させる音声は、所定の効果音でもよいし、各種のメッセージの内容を示す発話音声もしくは合成音声、例えば、案内情報、解説情報、ダイアログ分類情報などを、その内容として示す音声でもよい。再生させる音声として、例えば、「ダイアログ対応放送です!ダイアログボタンで解説音声の強弱が調整できます!」との内容を表す音声が用いられてもよい。   The notification information may be notified by using a member other than the display unit 35 as the notification unit 38. For example, as illustrated in FIG. 15, the notification information may be presented by lighting or blinking the light emitting unit Le arranged on the surface of the outer frame portion of the display unit 35. In that case, the notification processing unit 374 outputs, as notification information, information instructing power supply to a switching unit (switch) that switches presence / absence of power supply to the light emitting unit Le. The switching unit supplies power to the light emitting unit Le according to the input of the notification information. Further, the notification information may be presented by reproducing sound from a speaker constituting the loudspeaker 33. In this case, the notification processing unit 374 outputs a predetermined audio signal as notification information to the loudspeaker unit 33, thereby reproducing the sound indicated by the audio signal. The sound to be reproduced may be a predetermined sound effect, or may be an utterance voice or a synthetic voice indicating the contents of various messages, for example, a voice indicating the content of guidance information, commentary information, dialog classification information, or the like. As the sound to be played back, for example, a sound representing the content “This is a dialog-compatible broadcast! The intensity of the commentary sound can be adjusted with the dialog button!” May be used.

また、通知情報は、入出力部34を介して他の機器から通知されてもよい。即ち、入出力部34と他の機器が、通知部38として用いられる。他の機器として表示部を有する電子機器、例えば、リモートコントローラ、携帯電話機、等が用いられてもよい(セカンドスクリーン)。表示合成部3752は、例えば、通知情報を他の機器に入出力部34を介して出力することによって、その機器が備える表示部に表示させる。   The notification information may be notified from another device via the input / output unit 34. That is, the input / output unit 34 and other devices are used as the notification unit 38. As another device, an electronic device having a display unit, for example, a remote controller, a mobile phone, or the like may be used (second screen). For example, the display synthesis unit 3752 outputs the notification information to another device via the input / output unit 34, thereby causing the display unit included in the device to display the notification information.

図16は、本実施形態に係る通知情報の他の機器への表示例を示す図である。図16に示す例では、他の機器は、携帯電話機UEである。携帯電話機UEは、その1つの面に表示部Dsを備える。表示部Dsの表示領域において、その上辺から所定範囲内にメッセージMg4が表示される。このメッセージMg4は、図14に示すメッセージMg4と同様の内容を含む。従って、受信装置30の表示部35とは別個のユーザ所望の機器から通知情報が提示されることにより、放送番組で提供される映像や音声の視聴が妨げられずに済む。なお、表示部を備える他の機器には、通知処理部374は、上述の通知画面や詳細情報を表示させてもよい。   FIG. 16 is a diagram illustrating a display example of the notification information according to the present embodiment on another device. In the example shown in FIG. 16, the other device is a mobile phone UE. The mobile phone UE includes a display unit Ds on one surface thereof. In the display area of the display unit Ds, the message Mg4 is displayed within a predetermined range from the upper side. This message Mg4 includes the same contents as the message Mg4 shown in FIG. Therefore, the notification information is presented from a device desired by the user, which is separate from the display unit 35 of the receiving device 30, so that viewing of video and audio provided in the broadcast program can be prevented. Note that the notification processing unit 374 may display the above-described notification screen and detailed information on other devices including a display unit.

なお、通知情報の出力先となる部材や機器は、予め制御部37に設定された出力先情報により指定されてもよいし、送信装置10から受信した各種の情報、例えば、補助情報、構成情報などに含まれる記述子により指定されてもよい。   Note that the member or device that is the output destination of the notification information may be specified by the output destination information set in the control unit 37 in advance, or various types of information received from the transmission device 10, such as auxiliary information and configuration information. It may be specified by a descriptor included in.

以上に説明したように、本実施形態に係る受信装置30は、受信した音声データからダイアログ音声の音声データを、放送番組の音声に関する補助情報に基づいて検出するダイアログ検出部3733を備える。また、受信装置30は、ダイアログ音量と、他チャンネル音量をそれぞれ制御する音量制御部3734と、ダイアログ検出部3733が検出したダイアログ音声に関する通知情報を出力する通知処理部374とを備える。
この構成により、放送中に提供される放送番組の音声から検出されたダイアログ音声に関する通知情報が提示されるので、ユーザは検出されるダイアログ音声の存在を認知することができる。そのため、提供されるダイアログ音声の利用をユーザに促進することができる。
As described above, the receiving device 30 according to the present embodiment includes the dialog detection unit 3733 that detects the audio data of the dialog audio from the received audio data based on the auxiliary information regarding the audio of the broadcast program. In addition, the receiving device 30 includes a volume control unit 3734 that controls the dialog volume and the other channel volume, and a notification processing unit 374 that outputs notification information about the dialog sound detected by the dialog detection unit 3733.
With this configuration, the notification information related to the dialog sound detected from the sound of the broadcast program provided during the broadcast is presented, so the user can recognize the presence of the detected dialog sound. Therefore, use of the provided dialog sound can be promoted to the user.

また、補助情報はダイアログ音声の属性を示す属性情報を含み、通知処理部374は、属性情報に応じた通知情報を出力する。
この構成により、ダイアログ音声の属性情報に応じた通知情報が提示されるので、検出されるダイアログ音声の属性情報が示す属性に応じてダイアログ音声の利用や、その利用の要否の判断をユーザに促進することができる。
The auxiliary information includes attribute information indicating the attribute of the dialog sound, and the notification processing unit 374 outputs notification information corresponding to the attribute information.
With this configuration, the notification information corresponding to the attribute information of the dialog sound is presented, so that the user can determine whether to use the dialog sound or whether to use the dialog sound according to the attribute indicated by the detected attribute information of the dialog sound. Can be promoted.

また、通知情報は、ダイアログ専用チャンネルの音量の調整に関する案内情報を含む。
これにより、ユーザにはダイアログ音量が調整可能であって、その調整方法が通知される。そのため、ダイアログ音声を所望の音量で受聴するための調整をユーザに促進することができる。
The notification information includes guidance information related to the volume adjustment of the dialog dedicated channel.
As a result, the dialog volume can be adjusted and the user is notified of the adjustment method. Therefore, the adjustment for listening to the dialog sound at a desired volume can be promoted to the user.

また、前記通知情報は、ダイアログ音声に関する解説情報を含む。
これにより、ユーザは、ダイアログ音声に関する解説情報として、例えば、番組制作者や放送事業者による提供の意図、ダイアログ音声の概要、背景、番組における位置づけ、などを知得することができる。そのため、ダイアログ音声や当該ダイアログ音声が提供される放送番組全体についてユーザの興趣を深めることができる。
The notification information includes commentary information related to the dialog sound.
As a result, the user can know, for example, the intention of provision by the program producer or the broadcaster, the outline of the dialog sound, the background, the position in the program, and the like as commentary information regarding the dialog sound. Therefore, the user's interest can be deepened with respect to the dialog sound and the entire broadcast program provided with the dialog sound.

また、前記通知処理部は、前記ダイアログ音声の存在を示す通知情報の出力後、操作入力に応じてダイアログ専用チャンネルの音量の調整に関する案内情報またはダイアログ音声に関する解説情報を出力する。この構成により、提示される通知情報の表示領域を小さくして、その提示による放送番組の視聴の妨害を回避するとともに、ユーザの判断に応じてより詳細な案内情報または解説情報が提供される。そのため、ダイアログ音声の利用をさらにユーザに促進することができる。   In addition, after outputting the notification information indicating the presence of the dialog sound, the notification processing unit outputs guidance information related to the volume adjustment of the dialog dedicated channel or comment information related to the dialog sound in accordance with the operation input. With this configuration, the display area of the notification information to be presented is reduced, and obstruction of viewing of the broadcast program due to the presentation is avoided, and more detailed guidance information or commentary information is provided according to the user's judgment. Therefore, the use of dialog voice can be further promoted to the user.

(第2の実施形態)
次に、本発明の第2の実施形態について説明する。第1の実施形態と同一の構成については、同一の符号を付してその説明を援用する。以下、主に第1の実施形態との差異点について説明する。
第1の実施形態では、送信装置10(図1)が放送伝送路11を介して番組データを送信する放送システム1を例にした。本実施形態では、放送システム1が放送通信連携システムとして構成されている場合を例にする。
(Second Embodiment)
Next, a second embodiment of the present invention will be described. About the same structure as 1st Embodiment, the same code | symbol is attached | subjected and the description is used. Hereinafter, differences from the first embodiment will be mainly described.
In the first embodiment, the broadcast system 1 in which the transmission device 10 (FIG. 1) transmits program data via the broadcast transmission path 11 is taken as an example. In this embodiment, the case where the broadcast system 1 is comprised as a broadcast communication cooperation system is made into an example.

図17は、本実施形態に係る放送システム1の概略ブロック図である。
本実施形態に係る放送システム1は、さらに通信装置20を含んで構成される。
通信装置20は、受信装置30から要求信号を受信するとき、その応答としてアプリケーションプログラム(以下、アプリケーションと呼ぶ)を受信装置30に送信する。このアプリケーションは、所定の記述言語(例えば、HTML5)で記述され、放送番組を構成する一部のコンテンツのデータを含む。そのデータとして音声データが含まれることがある。このアプリケーションには、通知情報が含まれることや、その通知情報を通知部38に通知させるための命令が記述されることがある。通信装置20は、例えば、放送事業者又はコンテンツ提供者のサーバー装置である。
FIG. 17 is a schematic block diagram of the broadcast system 1 according to the present embodiment.
The broadcast system 1 according to the present embodiment further includes a communication device 20.
When receiving a request signal from the receiving device 30, the communication device 20 transmits an application program (hereinafter referred to as an application) to the receiving device 30 as a response. This application is described in a predetermined description language (for example, HTML5), and includes data of some contents constituting a broadcast program. The data may include audio data. This application may include notification information or a command for causing the notification unit 38 to notify the notification information. The communication device 20 is, for example, a broadcaster or content provider server device.

通信伝送路21は、通信装置20と受信装置30との間で各種のデータを双方向的に伝送する伝送路である。通信伝送路21は、例えば、インターネット、公衆無線通信網、等の広域通信網を含む。通信伝送路21には、一部に構内通信網(LAN:Local Area Network)や専用のアクセス網が含まれてもよい。なお、通信伝送路21を介して各種のデータを伝送(又は、送信、受信)することを、「通信で伝送(又は、送信、受信)する」と呼ぶことがある。   The communication transmission path 21 is a transmission path for bidirectionally transmitting various data between the communication apparatus 20 and the reception apparatus 30. The communication transmission path 21 includes, for example, a wide area communication network such as the Internet or a public wireless communication network. The communication transmission line 21 may partially include a local area network (LAN) or a dedicated access network. Note that transmitting (or transmitting or receiving) various data via the communication transmission path 21 may be referred to as “transmitting (or transmitting or receiving) by communication”.

本実施形態に係る送信装置10は、さらに制御情報を取得する。制御情報は、アプリケーションの取得先情報として通信装置20のURL(Uniform Resource Locator)や、アプリケーションの起動、停止、等の実行を制御するための情報が含まれる。制御情報は、所定の形式を有するデータ、例えば、アプリケーション情報テーブル(AIT:Application Information Table)として表され、上述した構成情報に含まれる。従って、送信装置10は、この構成情報を含んだ多重化データを受信装置30に放送伝送路11を介して送信する。   The transmission device 10 according to the present embodiment further acquires control information. The control information includes URL (Uniform Resource Locator) of the communication device 20 and information for controlling execution such as starting and stopping of the application as acquisition destination information of the application. The control information is represented as data having a predetermined format, for example, an application information table (AIT) and is included in the configuration information described above. Therefore, the transmission device 10 transmits the multiplexed data including the configuration information to the reception device 30 via the broadcast transmission path 11.

次に、本実施形態に係る受信装置30の構成について説明する。
図18は、本実施形態に係る受信装置30の構成を示す概略ブロック図である。
本実施形態に係る受信装置30は、さらに通信部32と、アプリケーション処理部376とを備える。アプリケーション処理部376は、アプリケーション制御部3761と、アプリケーション実行部3762とを備える。
Next, the configuration of the receiving device 30 according to this embodiment will be described.
FIG. 18 is a schematic block diagram illustrating a configuration of the receiving device 30 according to the present embodiment.
The receiving apparatus 30 according to the present embodiment further includes a communication unit 32 and an application processing unit 376. The application processing unit 376 includes an application control unit 3761 and an application execution unit 3762.

分離部372は、多重化データから分離された構成情報から、さらに制御情報を分離し、分離した制御情報をアプリケーション制御部3761に出力する。
アプリケーション制御部3761は、分離部372から制御情報を取得し、取得した制御情報に基づいてアプリケーションを取得し、取得したアプリケーションに記述された命令で指示される処理を制御する。なお、以下の説明ではアプリケーションに記述された命令で指示される処理を行わせることを、「アプリケーションを実行する」と呼ぶ。
アプリケーション制御部3761は、制御情報で指示されたアプリケーションの取得先情報が示す通信装置20にアプリケーションの取得を指示するための要求信号を生成する。アプリケーション制御部3761は、生成した要求信号を通信装置20に通信部32を介して送信する。アプリケーション制御部3761は、その応答として通信装置20から通信部32を介してアプリケーションを受信する。アプリケーション制御部3761は、受信したアプリケーションをアプリケーション実行部3762に出力する。アプリケーション制御部3761は、制御情報に基づいてアプリケーション実行部3762にアプリケーションの実行を開始させ、その実行を停止させる。
The separation unit 372 further separates the control information from the configuration information separated from the multiplexed data, and outputs the separated control information to the application control unit 3761.
The application control unit 3761 acquires control information from the separation unit 372, acquires an application based on the acquired control information, and controls processing instructed by a command described in the acquired application. In the following description, performing a process designated by an instruction described in an application is referred to as “execution of the application”.
The application control unit 3761 generates a request signal for instructing the communication device 20 indicated by the acquisition destination information of the application indicated by the control information to acquire the application. The application control unit 3761 transmits the generated request signal to the communication device 20 via the communication unit 32. The application control unit 3761 receives an application from the communication device 20 via the communication unit 32 as a response. Application control unit 3761 outputs the received application to application execution unit 3762. The application control unit 3761 causes the application execution unit 3762 to start executing the application based on the control information, and stops the execution.

アプリケーション実行部3762は、アプリケーション制御部3761から入力されたアプリケーションを、アプリケーション制御部3761による制御に従って実行する。アプリケーション実行部3762は、例えば、当該アプリケーションに含まれる放送番組を構成する一部のコンテンツを示す番組データを抽出する。また、アプリケーション実行部3762は、当該アプリケーションで指定された取得先から通信伝送路21を介して番組データを取得してもよい。アプリケーション実行部3762は、取得した番組データを分離部372に出力する。分離部372は、アプリケーション実行部3762から入力された番組データから音声データと映像データを分離し、分離した音声データを音声処理部373に出力し、分離した映像データを映像処理部375に出力する。よって、当該アプリケーションの実行により指定されたコンテンツが提示される。アプリケーション実行部3762は、アプリケーションに記述された命令に基づいて、番組データが示すコンテンツの提示やその提示に関する処理を他の機能部に実行させる。例えば、アプリケーション実行部3762は、当該アプリケーションの実行として通知処理部374に、ダイアログ音声に関する通知情報を直接又は間接的に通知部38に出力する処理を行わせる。また、通知処理部374は、出力する通知情報の一部又は全部として当該アプリケーションに含まれる通知情報や、当該アプリケーションにより指定(リンク)された通知情報を用いてもよい。   The application execution unit 3762 executes the application input from the application control unit 3761 according to control by the application control unit 3761. For example, the application execution unit 3762 extracts program data indicating a part of content constituting a broadcast program included in the application. Further, the application execution unit 3762 may acquire program data from the acquisition destination designated by the application via the communication transmission path 21. The application execution unit 3762 outputs the acquired program data to the separation unit 372. The separation unit 372 separates audio data and video data from the program data input from the application execution unit 3762, outputs the separated audio data to the audio processing unit 373, and outputs the separated video data to the video processing unit 375. . Therefore, the content designated by the execution of the application is presented. The application execution unit 3762 causes other functional units to execute the presentation of the content indicated by the program data and the processing related to the presentation based on the command described in the application. For example, the application execution unit 3762 causes the notification processing unit 374 to perform processing for outputting the notification information related to the dialog sound directly or indirectly to the notification unit 38 as the execution of the application. Further, the notification processing unit 374 may use notification information included in the application as part or all of the notification information to be output, or notification information designated (linked) by the application.

以上に説明したように、本実施形態によれば、受信装置30は、通信装置20から取得したアプリケーションの実行により取得した音声データからダイアログ音声の音声データを、放送番組の音声に関する補助情報に基づいて検出する。
この構成によっても、放送中に提供されるアプリケーションの実行により取得した音声から検出されたダイアログ音声に関する通知情報が提示されるので、ユーザは検出されるダイアログ音声の存在を認知することができ、提供されるダイアログ音声の利用をユーザに促進することができる。
また、補助情報は、音声データが伝送されるストリームにおいて当該音声データに付加される。そのため、本実施形態において取得した音声データについても、受信装置30は、放送により取得した音声データと共通のダイアログ検出部3733、音量制御部3734、通知処理部374、それぞれの機能を発揮することができる。
As described above, according to the present embodiment, the receiving device 30 converts the audio data of the dialog audio from the audio data acquired by executing the application acquired from the communication device 20 based on the auxiliary information related to the audio of the broadcast program. To detect.
Even with this configuration, the notification information about the dialog sound detected from the sound acquired by executing the application provided during broadcasting is presented, so the user can recognize the presence of the detected dialog sound and provide The user can be encouraged to use the dialog voice.
Further, the auxiliary information is added to the audio data in a stream in which the audio data is transmitted. For this reason, the reception device 30 can also perform the functions of the dialog detection unit 3733, the volume control unit 3734, and the notification processing unit 374 that are common to the audio data acquired by broadcasting, for the audio data acquired in the present embodiment. it can.

なお、本発明は上述した各実施形態に限定されるものではなく、特許請求の範囲に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的構成を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
また、本発明の各構成要素は、任意に取捨選択することができ、取捨選択した構成を具備する発明も本発明に含まれるものである。
It should be noted that the present invention is not limited to the above-described embodiments, and various modifications are possible within the scope indicated in the claims, and the technical configurations disclosed in different embodiments are appropriately combined. The obtained embodiment is also included in the technical scope of the present invention.
Each component of the present invention can be arbitrarily selected, and an invention having a selected configuration is also included in the present invention.

例えば、複数のダイアログ音声の存在を示す補助情報において、ダイアログ分類情報とダイアログ分類デフォルト利得情報のいずれか又は両者は、全てのダイアログ音声について一括して指定されてもよいし、個々のダイアログ音声について指定されてもよい。ダイアログ分類デフォルト利得情報が一括して指定された全てのダイアログ音声について、音量制御部3734は、当該ダイアログ分類デフォルト利得情報に基づいてデフォルトのダイアログ音量を定める。ダイアログ分類情報が一括して指定された全てのダイアログ音声について、通知処理部374は、当該ダイアログ分類情報に基づいて通知情報を生成、出力する。他方、音量制御部3734は、個々に指定されたダイアログデフォルト利得情報に基づいて指定対象のダイアログ音声についてそれぞれデフォルトのダイアログ音量を定める。また、通知処理部374は、個々にダイアログ分類情報に基づいて指定対象のダイアログ音声について通知情報をそれぞれ生成、出力する。   For example, in the auxiliary information indicating the presence of a plurality of dialog sounds, either or both of the dialog classification information and the dialog classification default gain information may be specified for all the dialog sounds, or for each dialog sound. May be specified. For all dialog voices for which the dialog classification default gain information is specified at once, the volume control unit 3734 determines a default dialog volume based on the dialog classification default gain information. For all dialog voices for which the dialog classification information is collectively specified, the notification processing unit 374 generates and outputs notification information based on the dialog classification information. On the other hand, the volume control unit 3734 determines a default dialog volume for each of the designation target dialog sounds based on the individually designated dialog default gain information. In addition, the notification processing unit 374 generates and outputs notification information for each specified dialog voice based on the dialog classification information.

上述した実施形態では、主に音声モードが5.1chサラウンドである場合を例にしたが、その他の多チャンネル音声に係る音声モードが用いられてもよい。音声モードは、例えば、22.2chサラウンドであってもよい。また、上述した実施形態は、5.1ch、22.2chなどの多チャンネルのサラウンド音声をより少ないチャンネルの音声モード(例えば、2.0chステレオ、2.1chステレオ)にダウンミックスする手段を備えた再生システムとして実現されてもよい。このような再生システムについても、ユーザに独立に音量を調整することが可能なダイアログ音声の存在を認知させ、その利用を促すことができる。
また、受信装置30との間で各種のデータが送受信可能であれば拡声部33、入力部34、及び表示部35のいずれか又はそれらの組み合わせが受信装置30の本体から省略され、別体として構成されてもよい。
In the embodiment described above, the case where the audio mode is mainly 5.1ch surround has been described as an example, but other audio modes related to multi-channel audio may be used. The audio mode may be 22.2 ch surround, for example. In addition, the above-described embodiment includes means for downmixing 5.1 channel, 22.2 channel, etc. multi-channel surround sound to a smaller channel sound mode (for example, 2.0ch stereo, 2.1ch stereo). It may be realized as a reproduction system. Also for such a playback system, it is possible to make the user recognize the existence of a dialog voice whose volume can be adjusted independently, and to promote the use thereof.
If various data can be transmitted to and received from the receiving device 30, any of the loudspeaker 33, the input unit 34, and the display unit 35 or a combination thereof is omitted from the main body of the receiving device 30, and is separately provided. It may be configured.

上述した実施形態では、各種のデータを伝送する際、MPEG−2システムで規定された方式を用いる場合を例にしたが、その他の多重化・伝送方式が用いられてもよい。例えば、MPEG−Hで規定されたMMT(MPEG Media Transport)によるメディアトランスポート方式が用いられてもよい。また、伝送に係るデータ形式、暗号化方式、符号化方式も、その伝送方式において利用可能なデータ形式、暗号化方式、符号化方式が用いられてもよい。   In the above-described embodiment, an example in which a method defined in the MPEG-2 system is used when transmitting various data is described. However, other multiplexing / transmission methods may be used. For example, a media transport system based on MMT (MPEG Media Transport) defined by MPEG-H may be used. Also, the data format, encryption method, and encoding method that can be used in the transmission method may be used as the data format, encryption method, and encoding method related to transmission.

また、上述した実施形態における受信装置30の一部をコンピュータで実現するようにしてもよい。その場合、この制御機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、認識データ伝送装置に内蔵されたコンピュータシステムであって、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間、動的にプログラムを保持するもの、その場合のサーバーやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。   Moreover, you may make it implement | achieve a part of receiver 30 in embodiment mentioned above with a computer. In that case, the program for realizing the control function may be recorded on a computer-readable recording medium, and the program recorded on the recording medium may be read by the computer system and executed. Here, the “computer system” is a computer system built in the recognition data transmission apparatus, and includes an OS and hardware such as peripheral devices. The “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM and a CD-ROM, and a hard disk incorporated in a computer system. Furthermore, the “computer-readable recording medium” is a medium that dynamically holds a program for a short time, such as a communication line when transmitting a program via a network such as the Internet or a communication line such as a telephone line, In this case, a volatile memory inside a computer system that serves as a server or a client may be included that holds a program for a certain period of time. The program may be a program for realizing a part of the functions described above, and may be a program capable of realizing the functions described above in combination with a program already recorded in a computer system.

なお、本発明は次の態様でも実施することができる。
(1)受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の音声に関する補助情報に基づいて検出するダイアログ検出部と、複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御部と、前記ダイアログ検出部が検出したダイアログ音声に関する通知情報を出力する通知処理部と、を備える受信装置。
In addition, this invention can be implemented also in the following aspect.
(1) A dialog detection unit for detecting audio data of dialog audio to be reproduced on a predetermined channel from received audio data based on auxiliary information related to audio of a broadcast program, and dedicated to a dialog for reproducing the dialog audio among a plurality of channels A receiving apparatus comprising: a volume control unit that controls a volume of a channel and a volume of another channel; and a notification processing unit that outputs notification information related to the dialog sound detected by the dialog detection unit.

(2)前記補助情報は前記ダイアログ音声の属性を示す属性情報を含み、前記通知処理部は、前記属性情報に応じた通知情報を出力する(1)の受信装置。 (2) The receiving apparatus according to (1), wherein the auxiliary information includes attribute information indicating an attribute of the dialog voice, and the notification processing unit outputs notification information corresponding to the attribute information.

(3)前記通知情報は、前記ダイアログ専用チャンネルの音量の調整に関する案内情報を含む(1)または(2)の受信装置。 (3) The receiving apparatus according to (1) or (2), wherein the notification information includes guidance information related to volume adjustment of the dialog dedicated channel.

(4)前記通知情報は、前記ダイアログ音声に関する解説情報を含む(1)から(3)のいずれかの受信装置。 (4) The receiving device according to any one of (1) to (3), wherein the notification information includes commentary information related to the dialog voice.

(5)前記通知処理部は、前記ダイアログ音声の存在を示す通知情報の出力後、操作入力に応じて前記ダイアログ専用チャンネルの音量の調整に関する案内情報または前記ダイアログ音声に関する解説情報を出力する(4)の受信装置。 (5) After outputting the notification information indicating the presence of the dialog sound, the notification processing unit outputs guidance information related to the volume adjustment of the dialog dedicated channel or commentary information related to the dialog sound according to an operation input (4 ) Receiver.

(6)受信装置の受信方法であって、受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の音声に関する補助情報に基づいて検出するダイアログ検出過程と、複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御過程と、前記ダイアログ検出過程で検出されたダイアログ音声に関する通知情報を出力する通知処理過程と、を有する受信方法。 (6) A reception method of a receiving apparatus, wherein a dialog detection process for detecting audio data of dialog audio to be reproduced on a predetermined channel from received audio data based on auxiliary information related to audio of a broadcast program, and a plurality of channels Of these, a volume control process for controlling the volume of the dialog dedicated channel for reproducing the dialog sound, the volume of the other channels, and a notification processing process for outputting notification information regarding the dialog sound detected in the dialog detection process. Having a receiving method.

(7)受信装置のコンピュータに、受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の再生に関する補助情報に基づいて検出するダイアログ検出手順、複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御手順、前記ダイアログ検出手順で検出されたダイアログ音声に関する通知情報を出力する通知処理手順、を実行させるためのプログラム。 (7) A dialog detection procedure for detecting audio data of dialog audio to be reproduced on a predetermined channel from received audio data by the computer of the receiving device based on auxiliary information related to reproduction of a broadcast program, the dialog audio of a plurality of channels A program for executing a volume control procedure for controlling the volume of a dialog dedicated channel for reproducing the volume, the volume of other channels, and a notification processing procedure for outputting notification information relating to the dialog sound detected in the dialog detection procedure.

1…放送システム、10…送信装置、11…放送伝送路、12…放送衛星、20…通信装置、21…通信伝送路、30…受信装置、31…放送受信部、32…通信部、33…拡声部、34…入出力部、35…表示部、36…記憶部、37…制御部、371…復調部、372…分離部、373…音声処理部、3731…音声復号部、3732…付加情報解析部、3733…ダイアログ検出部、3734…音量制御部、374…通知処理部、375…映像処理部、3751…映像復号部、3752…表示合成部、376…アプリケーション処理部、3761…アプリケーション制御部、3762…アプリケーション実行部、38…通知部   DESCRIPTION OF SYMBOLS 1 ... Broadcasting system, 10 ... Transmission apparatus, 11 ... Broadcast transmission path, 12 ... Broadcasting satellite, 20 ... Communication apparatus, 21 ... Communication transmission path, 30 ... Reception apparatus, 31 ... Broadcast receiving part, 32 ... Communication part, 33 ... Loudspeaker, 34 ... Input / output unit, 35 ... Display unit, 36 ... Storage unit, 37 ... Control unit, 371 ... Demodulation unit, 372 ... Separation unit, 373 ... Audio processing unit, 3731 ... Audio decoding unit, 3732 ... Additional information Analysis unit, 3733 ... Dialog detection unit, 3734 ... Volume control unit, 374 ... Notification processing unit, 375 ... Video processing unit, 3751 ... Video decoding unit, 3752 ... Display composition unit, 376 ... Application processing unit, 3761 ... Application control unit 3762 ... Application execution unit 38 ... Notification unit

Claims (7)

受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の音声に関する補助情報に基づいて検出するダイアログ検出部と、
複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御部と、
前記ダイアログ検出部が検出したダイアログ音声に関する通知情報を出力する通知処理部と、
を備える受信装置。
A dialog detector for detecting audio data of dialog audio to be played back on a predetermined channel from received audio data based on auxiliary information related to audio of the broadcast program;
A volume control unit for controlling the volume of a dialog dedicated channel for playing the dialog sound among a plurality of channels, and the volume of other channels;
A notification processing unit that outputs notification information related to the dialog sound detected by the dialog detection unit;
A receiving device.
前記補助情報は前記ダイアログ音声の属性を示す属性情報を含み、
前記通知処理部は、前記属性情報に応じた通知情報を出力する請求項1に記載の受信装置。
The auxiliary information includes attribute information indicating attributes of the dialog sound,
The receiving device according to claim 1, wherein the notification processing unit outputs notification information corresponding to the attribute information.
前記通知情報は、前記ダイアログ専用チャンネルの音量の調整に関する案内情報を含む請求項1または請求項2に記載の受信装置。   The receiving apparatus according to claim 1, wherein the notification information includes guidance information regarding adjustment of a volume of the dialog dedicated channel. 前記通知情報は、前記ダイアログ音声に関する解説情報を含む請求項1から請求項3のいずれか一項記載の受信装置。   The receiving apparatus according to any one of claims 1 to 3, wherein the notification information includes commentary information related to the dialog sound. 前記通知処理部は、前記ダイアログ音声の存在を示す通知情報の出力後、操作入力に応じて前記ダイアログ専用チャンネルの音量の調整に関する案内情報または前記ダイアログ音声に関する解説情報を出力する請求項3または請求項4に記載の受信装置。   4. The notification processing unit according to claim 3 or claim, wherein after the notification information indicating the presence of the dialog voice is output, guidance information relating to volume adjustment of the dialog dedicated channel or commentary information relating to the dialog voice is output according to an operation input. Item 5. The receiving device according to Item 4. 受信装置の受信方法であって、
受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の音声に関する補助情報に基づいて検出するダイアログ検出過程と、
複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御過程と、
前記ダイアログ検出過程で検出されたダイアログ音声に関する通知情報を出力する通知処理過程と、
を有する受信方法。
A receiving method of a receiving device,
A dialog detection process for detecting audio data of dialog audio to be reproduced on a predetermined channel from received audio data based on auxiliary information related to audio of a broadcast program;
A volume control process for controlling the volume of a dialog dedicated channel for playing the dialog sound among a plurality of channels and the volume of other channels;
A notification processing step for outputting notification information about the dialog voice detected in the dialog detection step;
Receiving method.
受信装置のコンピュータに、
受信した音声データから所定のチャンネルで再生させるダイアログ音声の音声データを放送番組の再生に関する補助情報に基づいて検出するダイアログ検出手順、
複数のチャンネルのうち前記ダイアログ音声を再生するダイアログ専用チャンネルの音量と、その他のチャンネルの音量をそれぞれ制御する音量制御手順、
前記ダイアログ検出手順で検出されたダイアログ音声に関する通知情報を出力する通知処理手順、
を実行させるためのプログラム。
In the computer of the receiving device,
Dialog detection procedure for detecting audio data of dialog audio to be played back on a predetermined channel from received audio data based on auxiliary information related to broadcast program playback,
Volume control procedure for controlling the volume of the dialog dedicated channel for playing the dialog sound among a plurality of channels and the volume of the other channels,
A notification processing procedure for outputting notification information relating to the dialog sound detected in the dialog detection procedure;
A program for running
JP2015067086A 2015-03-27 2015-03-27 Receiving apparatus, receiving method, and program Active JP6436573B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015067086A JP6436573B2 (en) 2015-03-27 2015-03-27 Receiving apparatus, receiving method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015067086A JP6436573B2 (en) 2015-03-27 2015-03-27 Receiving apparatus, receiving method, and program

Publications (2)

Publication Number Publication Date
JP2016187136A true JP2016187136A (en) 2016-10-27
JP6436573B2 JP6436573B2 (en) 2018-12-12

Family

ID=57202706

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015067086A Active JP6436573B2 (en) 2015-03-27 2015-03-27 Receiving apparatus, receiving method, and program

Country Status (1)

Country Link
JP (1) JP6436573B2 (en)

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001245237A (en) * 2000-02-28 2001-09-07 Victor Co Of Japan Ltd Broadcast receiving device
JP2003524906A (en) * 1998-04-14 2003-08-19 ヒアリング エンハンスメント カンパニー,リミティド ライアビリティー カンパニー Method and apparatus for providing a user-adjustable ability to the taste of hearing-impaired and non-hearing-impaired listeners
JP2003244081A (en) * 2002-02-13 2003-08-29 Nippon Hoso Kyokai <Nhk> Elderly voice service method and receiver
JP2007208559A (en) * 2006-01-31 2007-08-16 Sharp Corp Image output device
JP2007214945A (en) * 2006-02-10 2007-08-23 Seiko Epson Corp Emergency broadcast reception support system, television receiver and remote controller
JP2008311931A (en) * 2007-06-14 2008-12-25 Canon Inc Signal processor
JP2009038757A (en) * 2007-08-03 2009-02-19 Kenwood Corp Digital broadcast receiver and digital broadcast switching method
US20090232478A1 (en) * 2008-03-12 2009-09-17 Ching-Ming Chen Audio service playback method and apparatus thereof
JP2010074238A (en) * 2008-09-16 2010-04-02 Canon Inc Receiver and control method therefor
JP2010515290A (en) * 2006-09-14 2010-05-06 エルジー エレクトロニクス インコーポレイティド Dialog enhancement technology controller and user interface
JP2010145717A (en) * 2008-12-18 2010-07-01 Toyota Motor Corp On-board machine terminal
JP2010187157A (en) * 2009-02-12 2010-08-26 Funai Electric Co Ltd Digital television broadcasting receiver
WO2014141413A1 (en) * 2013-03-13 2014-09-18 株式会社東芝 Information processing device, output method, and program
WO2015186535A1 (en) * 2014-06-06 2015-12-10 ソニー株式会社 Audio signal processing apparatus and method, encoding apparatus and method, and program
WO2016039150A1 (en) * 2014-09-08 2016-03-17 ソニー株式会社 Coding device and method, decoding device and method, and program

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003524906A (en) * 1998-04-14 2003-08-19 ヒアリング エンハンスメント カンパニー,リミティド ライアビリティー カンパニー Method and apparatus for providing a user-adjustable ability to the taste of hearing-impaired and non-hearing-impaired listeners
JP2001245237A (en) * 2000-02-28 2001-09-07 Victor Co Of Japan Ltd Broadcast receiving device
JP2003244081A (en) * 2002-02-13 2003-08-29 Nippon Hoso Kyokai <Nhk> Elderly voice service method and receiver
JP2007208559A (en) * 2006-01-31 2007-08-16 Sharp Corp Image output device
JP2007214945A (en) * 2006-02-10 2007-08-23 Seiko Epson Corp Emergency broadcast reception support system, television receiver and remote controller
JP2010515290A (en) * 2006-09-14 2010-05-06 エルジー エレクトロニクス インコーポレイティド Dialog enhancement technology controller and user interface
JP2008311931A (en) * 2007-06-14 2008-12-25 Canon Inc Signal processor
JP2009038757A (en) * 2007-08-03 2009-02-19 Kenwood Corp Digital broadcast receiver and digital broadcast switching method
US20090232478A1 (en) * 2008-03-12 2009-09-17 Ching-Ming Chen Audio service playback method and apparatus thereof
JP2010074238A (en) * 2008-09-16 2010-04-02 Canon Inc Receiver and control method therefor
JP2010145717A (en) * 2008-12-18 2010-07-01 Toyota Motor Corp On-board machine terminal
JP2010187157A (en) * 2009-02-12 2010-08-26 Funai Electric Co Ltd Digital television broadcasting receiver
WO2014141413A1 (en) * 2013-03-13 2014-09-18 株式会社東芝 Information processing device, output method, and program
WO2015186535A1 (en) * 2014-06-06 2015-12-10 ソニー株式会社 Audio signal processing apparatus and method, encoding apparatus and method, and program
WO2016039150A1 (en) * 2014-09-08 2016-03-17 ソニー株式会社 Coding device and method, decoding device and method, and program

Also Published As

Publication number Publication date
JP6436573B2 (en) 2018-12-12

Similar Documents

Publication Publication Date Title
JP6721510B2 (en) Method and apparatus for synchronizing playback in two electronic devices
JP2010187158A (en) Content processing device
CN109417648B (en) Receiving apparatus and receiving method
JP2007306470A (en) Video/audio reproducing unit and sound image moving method thereof
JP6436573B2 (en) Receiving apparatus, receiving method, and program
JP6137755B2 (en) Receiving device, receiving method and program
JP2007116301A (en) Method and system for viewing television broadcast, television receiver, and wireless receiver
JP2001257964A (en) Digital broadcasting receiver
JP6440314B2 (en) Receiving apparatus, receiving method, and program
JP6309061B2 (en) Broadcast system
JP6508831B2 (en) Receiving device, receiving method, broadcast system and program
JP2010258776A (en) Sound signal processing apparatus
JP6137754B2 (en) Receiving device, receiving method and program
JP2001078117A (en) Digital broadcast receiver
JP6238379B2 (en) Receiving device, broadcasting system and program
JP6279140B1 (en) Receiver
JP6559542B2 (en) Receiving device, receiving method and program
JP6279063B2 (en) Receiving device, receiving method and program
KR20100030756A (en) A display apparatus and method for controllong thesame
JP6327711B2 (en) Receiving apparatus, broadcasting system, receiving method and program
KR100757111B1 (en) Television For Automatically Creating A Seeing And Hearing Atmosphere Of Image And Its Method
JP6683618B2 (en) Audio signal processor
WO2011037204A1 (en) Content playback device, audio parameter setting method, program, and storage medium
JP2018142971A (en) Receiving device, receiving method and program
JP2023125821A (en) Receiving device, broadcasting device, broadcasting system, receiving method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170925

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180719

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181016

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181112

R150 Certificate of patent or registration of utility model

Ref document number: 6436573

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150