JP6882584B1 - Content playback device and program - Google Patents

Content playback device and program Download PDF

Info

Publication number
JP6882584B1
JP6882584B1 JP2020147487A JP2020147487A JP6882584B1 JP 6882584 B1 JP6882584 B1 JP 6882584B1 JP 2020147487 A JP2020147487 A JP 2020147487A JP 2020147487 A JP2020147487 A JP 2020147487A JP 6882584 B1 JP6882584 B1 JP 6882584B1
Authority
JP
Japan
Prior art keywords
character
sound
reproduction
data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020147487A
Other languages
Japanese (ja)
Other versions
JP2022042186A (en
Inventor
隆一郎 林
隆一郎 林
純一 鶴見
純一 鶴見
政明 厚地
政明 厚地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2020147487A priority Critical patent/JP6882584B1/en
Application granted granted Critical
Publication of JP6882584B1 publication Critical patent/JP6882584B1/en
Publication of JP2022042186A publication Critical patent/JP2022042186A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】動画像を視聴する際の臨場感を高める。【解決手段】コンテンツ再生装置1は、動画像データと、音データと、音データの複数の再生態様の決定に用いられる再生態様データと、を含む動画コンテンツを取得するコンテンツ取得部161と、再生態様データが示す複数の再生態様から、音データの再生に使用する再生態様の選択操作を受け付ける操作受付部162と、動画像データを再生している間に、選択された再生態様に基づいて音データを再生する再生部163と、を有する。【選択図】図6PROBLEM TO BE SOLVED: To enhance the sense of presence when viewing a moving image. SOLUTION: A content reproduction device 1 has a content acquisition unit 161 for acquiring moving image content including moving image data, sound data, and reproduction mode data used for determining a plurality of reproduction modes of the sound data, and reproduction. The operation reception unit 162 that accepts the operation of selecting the reproduction mode to be used for reproducing the sound data from the plurality of reproduction modes indicated by the aspect data, and the sound based on the selected reproduction mode while the moving image data is being reproduced. It has a reproduction unit 163 for reproducing data, and a reproduction unit 163. [Selection diagram] Fig. 6

Description

本発明は、コンテンツ再生装置及びプログラムに関する。 The present invention relates to a content reproduction device and a program.

従来、複数のキャラクター画像が含まれる画像を表示することができる装置が知られている(例えば、特許文献1を参照)。 Conventionally, a device capable of displaying an image including a plurality of character images is known (see, for example, Patent Document 1).

特開2009−279144号公報JP-A-2009-279144

複数のキャラクター画像が表示された状態で音データが再生される場合、ユーザは、複数のキャラクターを外部から見ている状態になるため、臨場感を得づらいという問題があった。 When the sound data is reproduced while a plurality of character images are displayed, the user is in a state of viewing the plurality of characters from the outside, which causes a problem that it is difficult to obtain a sense of presence.

そこで、本発明はこれらの点に鑑みてなされたものであり、動画像を視聴する際の臨場感を高めることを目的とする。 Therefore, the present invention has been made in view of these points, and an object of the present invention is to enhance the sense of presence when viewing a moving image.

本発明の第1の態様のコンテンツ再生装置は、動画像データと、音データと、前記音データの複数の再生態様の決定に用いられる再生態様データと、を含む動画コンテンツを取得するコンテンツ取得部と、前記再生態様データが示す前記複数の再生態様から、前記音データの再生に使用する再生態様の選択操作を受け付ける操作受付部と、前記動画像データを再生している間に、選択された前記再生態様に基づいて前記音データを再生する再生部と、を有する。 The content reproduction device of the first aspect of the present invention is a content acquisition unit that acquires moving image content including moving image data, sound data, and reproduction mode data used for determining a plurality of reproduction modes of the sound data. And, from the plurality of reproduction modes indicated by the reproduction mode data, the operation reception unit that accepts the operation of selecting the reproduction mode to be used for reproducing the sound data and the moving image data are selected while being reproduced. It has a reproduction unit that reproduces the sound data based on the reproduction mode.

前記動画コンテンツには複数のキャラクターが含まれており、前記操作受付部は、前記複数のキャラクターから一つのキャラクターを選択する操作を前記選択操作として受け付けてもよい。 The moving image content includes a plurality of characters, and the operation reception unit may accept an operation of selecting one character from the plurality of characters as the selection operation.

前記再生態様データは、前記動画コンテンツに含まれるキャラクターの位置と音の発生場所との位置関係を示す関係データを含み、前記再生部は、選択された前記キャラクターと前記音データの発生場所との位置関係に対応する態様で前記音データを再生してもよい。 The reproduction mode data includes relational data indicating the positional relationship between the position of the character included in the moving image content and the place where the sound is generated, and the reproduction unit includes the selected character and the place where the sound data is generated. The sound data may be reproduced in a manner corresponding to the positional relationship.

前記再生部は、選択された前記キャラクターから前記音データの発生場所までの距離が長いほど小さな音量で前記音データを再生してもよい。 The reproduction unit may reproduce the sound data at a smaller volume as the distance from the selected character to the place where the sound data is generated becomes longer.

前記再生態様データは、前記動画コンテンツに含まれるキャラクターに対応する音の態様を示す音態様データを含み、前記再生部は、前記音態様データが示す態様で前記音データを再生してもよい。 The reproduction mode data includes sound mode data indicating the mode of the sound corresponding to the character included in the moving image content, and the reproduction unit may reproduce the sound data in the mode indicated by the sound mode data.

前記操作受付部は、前記再生部が再生中の前記動画コンテンツが表示されている画面上で行われたスワイプ操作の向きに基づいて、選択された前記キャラクターを特定してもよい。 The operation reception unit may specify the selected character based on the direction of the swipe operation performed on the screen on which the moving image content being reproduced by the reproduction unit is displayed.

前記再生部は、前記動画コンテンツに含まれる第1キャラクターから第2キャラクターに向かう向きに前記画面上でスワイプされたことを条件として、前記第1キャラクターの位置で聞こえる音量から前記第2キャラクターの位置で聞こえる音量に切り替えてもよい。 The playback unit is located at the position of the second character from the volume heard at the position of the first character, provided that the playback unit is swiped on the screen in the direction from the first character to the second character included in the video content. You may switch to the volume that you can hear with.

前記コンテンツ再生装置は、前記操作受付部が前記キャラクターを選択する操作を受け付けた場合に、選択された前記キャラクターを識別するための識別情報を記憶する記憶部をさらに有し、前記再生部は、前記コンテンツ取得部が取得した前記動画コンテンツに、前記記憶部に前記識別情報が記憶された前記キャラクターが含まれている場合に、当該キャラクターに対応する再生態様で前記音データを再生してもよい。 The content playback device further includes a storage unit that stores identification information for identifying the selected character when the operation reception unit receives an operation for selecting the character, and the playback unit includes the playback unit. When the moving image content acquired by the content acquisition unit includes the character in which the identification information is stored in the storage unit, the sound data may be reproduced in a reproduction mode corresponding to the character. ..

前記操作受付部は、選択された前記再生態様に含まれる音量又は音質の少なくともいずれかの内容を調整するための操作を受け付け、前記再生部は、前記操作受付部が受け付けた操作により調整された後の音量又は音質で前記音データを再生してもよい。 The operation reception unit accepts an operation for adjusting at least one of the volume or sound quality included in the selected reproduction mode, and the reproduction unit is adjusted by the operation received by the operation reception unit. The sound data may be reproduced at a later volume or sound quality.

前記操作受付部は、前記再生部が前記動画コンテンツを再生している間に、前記選択操作を受け付けられる時間帯を示す情報を表示してもよい。 The operation reception unit may display information indicating a time zone in which the selection operation can be accepted while the reproduction unit is playing the moving image content.

本発明の第2の態様のプログラムは、コンピュータに、動画像データと、音データと、前記音データの複数の再生態様の決定に用いられる再生態様データとを含むコンテンツを取得するステップと、前記再生態様データが示す前記複数の再生態様から、前記音データの再生に使用する選択再生態様の選択操作を受け付けるステップと、前記動画像データを再生している間に、前記選択再生態様に基づいて前記音データを再生するステップと、を実行させる。 The program of the second aspect of the present invention includes a step of acquiring moving image data, sound data, and reproduction mode data used for determining a plurality of reproduction modes of the sound data on a computer, and the step of acquiring the content including the reproduction mode data. Based on the step of accepting the selection operation of the selective reproduction mode used for reproducing the sound data from the plurality of reproduction modes indicated by the reproduction mode data, and while the moving image data is being reproduced, based on the selected reproduction mode. The step of reproducing the sound data and the step of reproducing the sound data are executed.

本発明によれば、動画像を視聴する際の臨場感を高めることができるという効果を奏する。 According to the present invention, there is an effect that it is possible to enhance the sense of presence when viewing a moving image.

本実施形態に係るコンテンツ再生システムSの構成を示す図である。It is a figure which shows the structure of the content reproduction system S which concerns on this embodiment. コンテンツ再生装置1が音データを再生する方法について説明するための図である。It is a figure for demonstrating the method which the content reproduction apparatus 1 reproduces sound data. 再生態様データの一例を示す図である。It is a figure which shows an example of the reproduction mode data. 再生態様データの他の例を示す図である。It is a figure which shows another example of a reproduction mode data. 再生態様データの他の例を示す図である。It is a figure which shows another example of a reproduction mode data. コンテンツ再生装置1の構成を示す図である。It is a figure which shows the structure of the content reproduction apparatus 1. キャラクターを選択する操作について説明するための図である。It is a figure for demonstrating operation for selecting a character. コンテンツ再生装置1における処理の流れを示すフローチャートである。It is a flowchart which shows the flow of processing in a content reproduction apparatus 1.

[コンテンツ再生システムSの構成]
図1は、本実施形態に係るコンテンツ再生システムSの構成を示す図である。コンテンツ再生システムSは、複数のコンテンツ再生装置1とコンテンツ配信装置2とを有する。コンテンツ再生装置1及びコンテンツ配信装置2は、ネットワークNを介して各種のデータを送受信する。ネットワークNは、例えばインターネット又は携帯電話網を含む。
[Configuration of content playback system S]
FIG. 1 is a diagram showing a configuration of a content reproduction system S according to the present embodiment. The content reproduction system S has a plurality of content reproduction devices 1 and a content distribution device 2. The content playback device 1 and the content distribution device 2 transmit and receive various data via the network N. The network N includes, for example, the Internet or a mobile phone network.

コンテンツ配信装置2は、動画コンテンツを複数のコンテンツ再生装置1に配信するサーバである。動画コンテンツには、動画像データと、音データと、音データの複数の再生態様の決定に用いられる再生態様データと、が含まれる。動画像データは、例えばカメラで撮影されたドラマの動画像データ、又はコンピュータで作成されたアニメーションの動画像データである。音データは、動画像データに対応しており、例えば動画像データに含まれるキャラクターが発する音声、動画像データに含まれる音源が発する音のデータである。 The content distribution device 2 is a server that distributes moving image content to a plurality of content playback devices 1. The moving image content includes moving image data, sound data, and reproduction mode data used for determining a plurality of reproduction modes of the sound data. The moving image data is, for example, moving image data of a drama taken by a camera or moving image data of an animation created by a computer. The sound data corresponds to the moving image data, for example, the sound data emitted by the character included in the moving image data and the sound data emitted by the sound source included in the moving image data.

再生態様データは、コンテンツ再生装置1が音データを再生する際の音量、音質又はタイミング等を決定するために用いられるデータである。再生態様データは、例えば動画コンテンツに含まれるキャラクターの位置と音の発生場所との位置関係を示す関係データを含む。関係データは、例えば、それぞれのキャラクターの画面内の位置を示す座標データ、又はキャラクター間の距離を示す距離データである。再生態様データは、動画コンテンツに含まれるキャラクターに対応する音の態様を示す音態様データを含んでいてもよい。音態様データは、例えば、音量、音質又は音を発するタイミングの少なくともいずれかを示すデータである。 The reproduction mode data is data used for determining the volume, sound quality, timing, etc. when the content reproduction device 1 reproduces the sound data. The reproduction mode data includes, for example, relational data indicating the positional relationship between the position of the character included in the moving image content and the place where the sound is generated. The relationship data is, for example, coordinate data indicating the position of each character in the screen, or distance data indicating the distance between the characters. The reproduction mode data may include sound mode data indicating the mode of the sound corresponding to the character included in the moving image content. The sound mode data is, for example, data indicating at least one of volume, sound quality, and timing at which sound is emitted.

コンテンツ配信装置2は、複数の動画コンテンツを記憶する記憶媒体を有しており、カメラ又はコンピュータ等の外部装置から動画コンテンツを取得して記憶媒体に記憶する。コンテンツ配信装置2は、同一の動画コンテンツを複数のコンテンツ再生装置1に配信してもよく、異なる動画コンテンツを複数のコンテンツ再生装置1に配信してもよい。 The content distribution device 2 has a storage medium for storing a plurality of moving image contents, and acquires the moving image contents from an external device such as a camera or a computer and stores the moving image contents in the storage medium. The content distribution device 2 may distribute the same video content to a plurality of content playback devices 1, or may distribute different video contents to a plurality of content playback devices 1.

コンテンツ配信装置2が配信するドラマやアニメーション等の動画コンテンツには、複数のキャラクターが登場する。本明細書におけるキャラクターは、ドラマやアニメーションに登場する人物又は動物等である。動画コンテンツには、例えば、それぞれのシーンに登場する複数のキャラクターそれぞれに対応する再生態様データが含まれている。例えば動画コンテンツにおいて第1キャラクターA及び第2キャラクターBが登場するシーンにおいては、第1キャラクターAがいる位置で聞こえる音の再生に用いられる第1再生態様データと、第2キャラクターBがいる位置で聞こえる音の再生に用いられる第2再生態様データとが含まれている。 A plurality of characters appear in video contents such as dramas and animations distributed by the content distribution device 2. The characters in the present specification are characters, animals, etc. appearing in dramas and animations. The moving image content includes, for example, reproduction mode data corresponding to each of a plurality of characters appearing in each scene. For example, in a scene in which the first character A and the second character B appear in the video content, the first reproduction mode data used for reproducing the sound heard at the position where the first character A is present and the position where the second character B is present. It includes a second reproduction mode data used for reproducing the audible sound.

コンテンツ再生装置1は、コンテンツ配信装置2から配信された動画コンテンツを再生する端末であり、例えばコンピュータ、スマートフォン、タブレット又はヘッドマウントディスプレイである。コンテンツ再生装置1は、動画コンテンツに含まれる動画像データをディスプレイに表示させ、動画コンテンツに含まれる音データをスピーカーから出力する。コンテンツ再生装置1は、動画コンテンツに含まれる複数の再生態様データのうち、コンテンツ再生装置1のユーザにより選択されたキャラクターの位置で聞こえる音に対応する再生態様データに基づいて音データを再生する。 The content reproduction device 1 is a terminal that reproduces moving image content distributed from the content distribution device 2, and is, for example, a computer, a smartphone, a tablet, or a head-mounted display. The content playback device 1 displays the moving image data included in the moving image content on the display, and outputs the sound data included in the moving image content from the speaker. The content reproduction device 1 reproduces the sound data based on the reproduction mode data corresponding to the sound heard at the position of the character selected by the user of the content reproduction device 1 among the plurality of reproduction mode data included in the moving image content.

図2は、コンテンツ再生装置1が音データを再生する方法について説明するための図である。図2(a)は、動画コンテンツの一つのシーンを示しており、第1キャラクターA(ネズミ)、第2キャラクターB(犬)、及び第3キャラクターC(鳥)の画像が含まれている。第3キャラクターCは、時間の経過に伴って右向きに移動しているものとする。 FIG. 2 is a diagram for explaining a method in which the content reproduction device 1 reproduces sound data. FIG. 2A shows one scene of the moving image content, and includes images of the first character A (mouse), the second character B (dog), and the third character C (bird). It is assumed that the third character C is moving to the right with the passage of time.

図2(b)は、第1キャラクターAの位置で聞こえる音の大きさを模式的に示している。図2(b)の横軸は時間、縦軸は音量を示している。第1キャラクターAの位置においては、第1キャラクターAが発する音声aが、第2キャラクターB及び第3キャラクターCが発する音声b、音声cよりも大きな音量で再生される。第3キャラクターCは、画面の左端から右端に向かって移動するので、第3キャラクターCが第1キャラクターAに近づくにつれて音声cは大きくなり、時刻T1で最大になった後で小さくなっている。 FIG. 2B schematically shows the loudness of the sound heard at the position of the first character A. The horizontal axis of FIG. 2B shows time, and the vertical axis shows volume. At the position of the first character A, the voice a emitted by the first character A is reproduced at a louder volume than the voice b and the voice c emitted by the second character B and the third character C. Since the third character C moves from the left edge to the right edge of the screen, the voice c becomes louder as the third character C approaches the first character A, and becomes quieter after reaching the maximum at time T1.

図2(c)は、第2キャラクターBの位置で聞こえる音の大きさを模式的に示している。第2キャラクターBの位置においては、第2キャラクターBが発する音声bが、第1キャラクターA及び第3キャラクターCが発する音声a、音声cよりも大きな音量で再生される。第3キャラクターCは、画面の左端から右端に向かって移動するので、第3キャラクターCが第2キャラクターBに近づくにつれて音声cは大きくなり、時刻T2で最大になった後で小さくなっている。 FIG. 2C schematically shows the loudness of the sound heard at the position of the second character B. At the position of the second character B, the voice b emitted by the second character B is reproduced at a louder volume than the voices a and c emitted by the first character A and the third character C. Since the third character C moves from the left edge to the right edge of the screen, the voice c becomes louder as the third character C approaches the second character B, and becomes quieter after reaching the maximum at time T2.

図2(b)と図2(c)とを比較すると、各音声の音量が異なっているとともに、音声cの音量の変化の態様が異なっていることがわかる。ユーザは、自分が好きなキャラクターを選択することにより、選択したキャラクターの位置において聞こえる音を聞きながら動画コンテンツを視聴することができるので、高い臨場感を得ることができる。 Comparing FIG. 2B and FIG. 2C, it can be seen that the volume of each voice is different and the mode of change in the volume of voice c is different. By selecting a character that the user likes, the user can watch the video content while listening to the sound that can be heard at the position of the selected character, so that a high sense of presence can be obtained.

図3は、図2に示す動画像データに対応する再生態様データの一例を示す図である。図3においては、各キャラクターが発する音を再生する際の音量のレベルを1秒ごとに示している。「大」は3段階のうち最も音量が大きい状態を示しており、「中」は音量が2番目の状態を示しており、「小」は最も小さい状態を示している。第3キャラクターCは移動しているので、時間の経過に伴って音量が変化している。 FIG. 3 is a diagram showing an example of reproduction mode data corresponding to the moving image data shown in FIG. In FIG. 3, the level of the volume when reproducing the sound emitted by each character is shown every second. "Large" indicates the loudest state among the three stages, "Medium" indicates the second loudest state, and "Low" indicates the lowest volume. Since the third character C is moving, the volume changes with the passage of time.

図3(a)は、第1キャラクターAの位置で聞こえる音を再生する場合の再生態様データである。図3(b)は、第2キャラクターBの位置で聞こえる音を再生する場合の再生態様データである。図3(a)と図3(b)とを比較すると、どのキャラクターの位置で聞こえる音かによって音量のレベルが異なっている。コンテンツ再生装置1が、このような再生態様データに基づいて音を再生することで、ユーザは、図2に示したように、選択したキャラクターによって異なる態様の音を聞くことができる。 FIG. 3A is reproduction mode data in the case of reproducing the sound heard at the position of the first character A. FIG. 3B is reproduction mode data in the case of reproducing the sound heard at the position of the second character B. Comparing FIG. 3A and FIG. 3B, the volume level differs depending on which character's position the sound is heard. When the content reproduction device 1 reproduces the sound based on such reproduction mode data, the user can hear the sound of a different mode depending on the selected character, as shown in FIG.

図4は、図2に示す動画像データに対応する再生態様データの他の例を示す図である。キャラクター間の位置関係を示す再生態様データは、図4(a)及び図4(b)のように、一つのキャラクターから他のキャラクターまでの距離に対応する情報を示すデータであってもよい。図4(a)及び図4(b)においては、距離が「大」、「中」、「小」の3段階で示されている。図4(a)は、第1キャラクターAから他のキャラクターまでの距離を示しており、図4(b)は、第2キャラクターBから他のキャラクターまでの距離を示している。コンテンツ再生装置1は、距離に応じた音量で音を再生することで、臨場感を高めることができる。 FIG. 4 is a diagram showing another example of reproduction mode data corresponding to the moving image data shown in FIG. The reproduction mode data indicating the positional relationship between the characters may be data indicating information corresponding to the distance from one character to another character, as shown in FIGS. 4A and 4B. In FIGS. 4 (a) and 4 (b), the distance is shown in three stages of "large", "medium", and "small". FIG. 4A shows the distance from the first character A to the other character, and FIG. 4B shows the distance from the second character B to the other character. The content reproduction device 1 can enhance the sense of presence by reproducing the sound at a volume corresponding to the distance.

図5は、図2に示す動画像データに対応する再生態様データの他の例を示す図である。図5においては、時間の経過に伴う各キャラクターの位置が示されている。座標(X,Y)は、画面の左上の原点(0,0)に対する左右方向の位置Xと上下方向の位置Yを表している。詳細については後述するが、コンテンツ再生装置1は、このような再生態様データが示すキャラクターや音源の位置に基づいて、ユーザが選択したキャラクターと音源との距離を算出することにより、キャラクターや音源が発する音を再生する際の音の態様を決定してもよい。 FIG. 5 is a diagram showing another example of reproduction mode data corresponding to the moving image data shown in FIG. In FIG. 5, the position of each character with the passage of time is shown. The coordinates (X, Y) represent the position X in the left-right direction and the position Y in the up-down direction with respect to the origin (0,0) at the upper left of the screen. Although the details will be described later, the content reproduction device 1 calculates the distance between the character and the sound source selected by the user based on the position of the character or the sound source indicated by the reproduction mode data, so that the character or the sound source can be generated. The mode of the sound when reproducing the emitted sound may be determined.

[コンテンツ再生装置1の構成]
図6は、コンテンツ再生装置1の構成を示す図である。コンテンツ再生装置1は、通信部11と、スピーカー12と、ディスプレイ13と、操作部14と、記憶部15と、制御部16と、を有する。制御部16は、コンテンツ取得部161と、操作受付部162と、再生部163と、を有する。
[Configuration of content playback device 1]
FIG. 6 is a diagram showing the configuration of the content reproduction device 1. The content reproduction device 1 includes a communication unit 11, a speaker 12, a display 13, an operation unit 14, a storage unit 15, and a control unit 16. The control unit 16 includes a content acquisition unit 161, an operation reception unit 162, and a reproduction unit 163.

通信部11は、ネットワークNを介してコンテンツ配信装置2から動画コンテンツを受信するための通信インターフェースである。通信部11は、受信した動画コンテンツをコンテンツ取得部161に入力する。 The communication unit 11 is a communication interface for receiving moving image content from the content distribution device 2 via the network N. The communication unit 11 inputs the received moving image content to the content acquisition unit 161.

スピーカー12は、動画コンテンツに基づく音声を出力するデバイスである。スピーカー12は、再生部163から入力された動画コンテンツに含まれるキャラクターが発した音声、又は動画コンテンツに含まれる音源が発した音を出力する。
ディスプレイ13は、動画コンテンツに基づく画像を出力するデバイスである。ディスプレイ13は、再生部163から入力された動画コンテンツを表示する。
The speaker 12 is a device that outputs audio based on moving image content. The speaker 12 outputs the sound emitted by the character included in the moving image content input from the playback unit 163 or the sound emitted by the sound source included in the moving image content.
The display 13 is a device that outputs an image based on the moving image content. The display 13 displays the moving image content input from the playback unit 163.

操作部14は、ユーザの操作を受けるためのデバイスであり、例えばディスプレイ13に重ねて設けられたタッチパネルである。操作部14は、ユーザが操作した位置を示す座標情報を操作受付部162に通知する。 The operation unit 14 is a device for receiving a user's operation, and is, for example, a touch panel provided on the display 13. The operation unit 14 notifies the operation reception unit 162 of the coordinate information indicating the position operated by the user.

記憶部15は、ROM(Read Only Memory)及びRAM(Random Access Memory)を含む記憶媒体である。記憶部15は、制御部16が実行するプログラムを記憶している。記憶部15は、通信部11が受信した動画コンテンツを一時的に記憶してもよい。また、記憶部15は、操作受付部162がキャラクターを選択する操作を受け付けた場合に、選択されたキャラクターを識別する識別情報を記憶する。さらに記憶部15は、再生部163が動画コンテンツを再生する間、動画コンテンツに含まれている再生態様データを記憶する。 The storage unit 15 is a storage medium including a ROM (Read Only Memory) and a RAM (Random Access Memory). The storage unit 15 stores a program executed by the control unit 16. The storage unit 15 may temporarily store the moving image content received by the communication unit 11. Further, the storage unit 15 stores identification information for identifying the selected character when the operation reception unit 162 receives an operation for selecting a character. Further, the storage unit 15 stores the reproduction mode data included in the moving image content while the reproducing unit 163 reproduces the moving image content.

制御部16は、例えばCPU(Central Processing Unit)を有する。制御部16は、記憶部15に記憶されたプログラムを実行することにより、コンテンツ取得部161、操作受付部162及び再生部163として機能する。 The control unit 16 has, for example, a CPU (Central Processing Unit). The control unit 16 functions as a content acquisition unit 161, an operation reception unit 162, and a reproduction unit 163 by executing the program stored in the storage unit 15.

コンテンツ取得部161は、音データと、音データの複数の再生態様の決定に用いられる再生態様データと、動画像データとを含むコンテンツを取得する。コンテンツ取得部161は、これらのデータを同時に取得してもよく、それぞれを異なるタイミングで取得してもよい。 The content acquisition unit 161 acquires content including sound data, reproduction mode data used for determining a plurality of reproduction modes of sound data, and moving image data. The content acquisition unit 161 may acquire these data at the same time, or may acquire each of them at different timings.

操作受付部162は、再生態様データが示す複数の再生態様から、音データの再生に使用する再生態様の選択操作を受け付ける。操作受付部162は、例えば、操作受付部162は、画面上のどの位置で聞こえる音を再生するかを設定するための操作を受け付ける。操作受付部162は、例えば、再生態様を選択するための画面を表示させ、当該画面が表示されている間にユーザがタッチした位置で聞こえる態様の音を再生態様として選択する。 The operation reception unit 162 accepts a reproduction mode selection operation to be used for reproducing the sound data from a plurality of reproduction modes indicated by the reproduction mode data. The operation reception unit 162, for example, the operation reception unit 162 accepts an operation for setting at which position on the screen the sound to be heard is reproduced. The operation reception unit 162 displays, for example, a screen for selecting a reproduction mode, and selects a sound in a mode that can be heard at the position touched by the user while the screen is displayed as the reproduction mode.

操作受付部162は、再生態様の選択操作として、動画コンテンツに含まれている複数のキャラクターから一つのキャラクターを選択する操作を選択操作として受け付けてもよい。一例として、操作受付部162は、複数のキャラクターがディスプレイ13に表示された状態で、ユーザが希望するキャラクターを選択する操作を受け付ける。操作受付部162は、選択された再生態様を再生部163に通知する。 The operation reception unit 162 may accept an operation of selecting one character from a plurality of characters included in the moving image content as a selection operation as a selection operation of the reproduction mode. As an example, the operation reception unit 162 accepts an operation of selecting a character desired by a user while a plurality of characters are displayed on the display 13. The operation reception unit 162 notifies the reproduction unit 163 of the selected reproduction mode.

なお、操作受付部162は、再生部163が動画コンテンツを再生している間に、選択操作を受け付けられる時間帯を示す情報を表示してもよい。この場合、操作受付部162は、選択操作を受け付けられる時間帯が複数ある場合、複数の時間帯それぞれに対して再生態様の選択を受け付けてもよい。 The operation reception unit 162 may display information indicating a time zone in which the selection operation can be accepted while the playback unit 163 is playing the moving image content. In this case, when there are a plurality of time zones in which the operation reception unit 162 can accept the selection operation, the operation reception unit 162 may accept the selection of the reproduction mode for each of the plurality of time zones.

図7は、キャラクターを選択する操作について説明するための図である。図7に示す画面の上方には、動画像データの表示可能時間帯が0から30分00秒までであることを示すスライドバー画像G0と、音声の再生態様を選択する操作を受け付けられる時間帯を示す画像G1(G1a〜G1d)と、再生中の時刻を示す画像G2と、が表示されている。ユーザは、画像G2の位置を動かすことで、再生する時刻を変えることができる。 FIG. 7 is a diagram for explaining an operation of selecting a character. At the upper part of the screen shown in FIG. 7, a slide bar image G0 indicating that the displayable time zone of the moving image data is from 0 to 30:00, and a time zone in which the operation of selecting the sound reproduction mode can be accepted. The images G1 (G1a to G1d) showing the above and the images G2 showing the time during playback are displayed. The user can change the playback time by moving the position of the image G2.

画面の右上には、選択中の再生態様を示すアイコン画像Mが表示されている。図7(a)は、第1キャラクターAの位置で聞こえる音を再生している状態の画面を示している。図7(a)に示す画面の右上には、第1キャラクターAの位置で聞こえる音を再生していることを示すネズミのアイコン画像M1が表示されている。 An icon image M indicating the selected reproduction mode is displayed on the upper right of the screen. FIG. 7A shows a screen in which the sound heard at the position of the first character A is being reproduced. At the upper right of the screen shown in FIG. 7A, a mouse icon image M1 indicating that the sound heard at the position of the first character A is being reproduced is displayed.

図7(a)の画面が表示されている状態で、操作受付部162は、第2キャラクターBの位置で聞こえる音を再生する状態に切り替えるための操作を受け付ける。一例として、操作受付部162は、再生部163が再生中の動画像データが表示されている画面上で行われたスワイプ操作の向きに基づいて選択キャラクターを特定する。 While the screen of FIG. 7A is displayed, the operation reception unit 162 accepts an operation for switching to a state of reproducing the sound heard at the position of the second character B. As an example, the operation reception unit 162 identifies the selected character based on the direction of the swipe operation performed on the screen on which the moving image data being reproduced by the reproduction unit 163 is displayed.

操作受付部162は、例えば、動画像データに含まれる第1キャラクターAから第2キャラクターBに向かう向きにスワイプ操作が行われた場合に、第2キャラクターBの位置で聞こえる音を再生する方法に切り替えるように再生部163に指示する。操作受付部162は、第2キャラクターBから第1キャラクターAに向かう向きにスワイプ操作が行われた場合に、第2キャラクターBの位置で聞こえる音を再生する方法に切り替えるように再生部163に指示してもよい。また、操作受付部162は、図7(a)の画面において第1キャラクターAがタッチされた場合に、第1キャラクターAの位置で聞こえる音を再生し、第2キャラクターBがタッチされた場合に、第2キャラクターBの位置で聞こえる音を再生するように再生部163に指示してもよい。 The operation reception unit 162 is a method of reproducing the sound heard at the position of the second character B when the swipe operation is performed in the direction from the first character A to the second character B included in the moving image data, for example. Instruct the playback unit 163 to switch. The operation reception unit 162 instructs the reproduction unit 163 to switch to the method of reproducing the sound heard at the position of the second character B when the swipe operation is performed in the direction from the second character B to the first character A. You may. Further, the operation reception unit 162 reproduces a sound heard at the position of the first character A when the first character A is touched on the screen of FIG. 7A, and when the second character B is touched. , The reproduction unit 163 may be instructed to reproduce the sound heard at the position of the second character B.

図7(b)は、第2キャラクターBの位置で聞こえる音を再生している状態に切り替わった後の画面を示している。図7(b)に示す画面の右上には、第2キャラクターBの位置で聞こえる音を再生していることを示す犬のアイコン画像M2が表示されている。 FIG. 7B shows the screen after switching to the state in which the sound heard at the position of the second character B is being reproduced. At the upper right of the screen shown in FIG. 7B, a dog icon image M2 indicating that the sound heard at the position of the second character B is being reproduced is displayed.

操作受付部162は、キャラクターを選択する操作を受け付けた場合に、選択されたキャラクターを識別するための識別情報を記憶部15に記憶させてもよい。記憶部15に記憶させた識別情報は、同じキャラクターが登場する動画コンテンツをユーザが将来視聴する際に、再生部163によって参照される。 When the operation reception unit 162 receives the operation of selecting a character, the operation reception unit 162 may store the identification information for identifying the selected character in the storage unit 15. The identification information stored in the storage unit 15 is referred to by the reproduction unit 163 when the user views the moving image content in which the same character appears in the future.

再生部163は、動画像データ及び音データを再生する。再生部163は、動画像データを再生することにより画面データを作成し、作成した画面データをディスプレイ13に入力することにより動画像を表示させる。また、再生部163は、動画像データを再生している間に、ユーザにより選択された再生態様に基づいて音データを再生し、再生した音データをスピーカー12に入力することにより、ユーザが所望する位置で聞こえる音をスピーカー12から出力させることができる。 The reproduction unit 163 reproduces the moving image data and the sound data. The reproduction unit 163 creates screen data by reproducing the moving image data, and displays the moving image by inputting the created screen data to the display 13. Further, the reproduction unit 163 reproduces the sound data based on the reproduction mode selected by the user while reproducing the moving image data, and inputs the reproduced sound data to the speaker 12, so that the user desires it. The sound that can be heard at the desired position can be output from the speaker 12.

再生部163は、選択されたキャラクターと音データの発生場所との位置関係に対応する音量又は音質で音データを再生する。すなわち、図2を参照しながら説明したように、再生部163は、選択されたキャラクターから音データの発生場所(例えば他のキャラクターや音源の位置)までの距離が長いほど小さな音量で音データを再生する。再生部163は、選択されたキャラクターと音源との間に音を反響させる物体が存在する場合には、そのような物体が存在しない場合よりもエコーがかかった音質で音データを再生してもよい。 The reproduction unit 163 reproduces the sound data at a volume or sound quality corresponding to the positional relationship between the selected character and the place where the sound data is generated. That is, as described with reference to FIG. 2, the playback unit 163 outputs sound data at a lower volume as the distance from the selected character to the sound data generation location (for example, the position of another character or sound source) is longer. Reproduce. When an object that reverberates the sound exists between the selected character and the sound source, the reproduction unit 163 reproduces the sound data with an echoed sound quality as compared with the case where such an object does not exist. Good.

再生部163は、選択されたキャラクターと音源との間に音を反射させる物体(例えば建物)が存在する場合、物体で反射しないで届いた音データを再生するタイミングから遅れたタイミングで反射音を再生してもよい。このように再生部163が、選択されたキャラクターと、それぞれのシーンにおける他のキャラクターや物体との位置関係に基づいて音量、音質、タイミング等を変えることで、ユーザが高い臨場感を得ることができる。 When there is an object (for example, a building) that reflects sound between the selected character and the sound source, the reproduction unit 163 generates the reflected sound at a timing delayed from the timing of reproducing the sound data that arrived without being reflected by the object. You may play it. In this way, the playback unit 163 changes the volume, sound quality, timing, etc. based on the positional relationship between the selected character and other characters or objects in each scene, so that the user can obtain a high sense of presence. it can.

再生部163は、動画コンテンツに含まれる第1キャラクターから第2キャラクターに向かう向きに画面上でスワイプされたことを条件として、第1キャラクターの位置で聞こえる音量から第2キャラクターの位置で聞こえる音量に切り替えてもよい。再生部163がこのように動作することで、ユーザは、動画コンテンツを視聴している間に、容易に異なるキャラクターの位置で聞こえる音を聞くことができるので、一つの動画コンテンツで多様な楽しみ方ができる。 The playback unit 163 changes from the volume heard at the position of the first character to the volume heard at the position of the second character, provided that the player swipes on the screen in the direction from the first character to the second character included in the video content. You may switch. By operating the playback unit 163 in this way, the user can easily hear the sounds heard at different character positions while watching the video content, so that one video content can be enjoyed in various ways. Can be done.

再生部163は、コンテンツ取得部161が取得した動画コンテンツに、記憶部15に識別情報が記憶されたキャラクターが含まれている場合に、当該キャラクターに対応する再生態様(例えば、当該キャラクターの位置で聞こえる態様)で音データを再生してもよい。再生部163は、コンテンツ取得部161が動画コンテンツを取得すると、例えば動画コンテンツに含まれているメタ情報を参照することにより、動画コンテンツに含まれているキャラクターを特定する。そして、再生部163は、記憶部15に、特定したキャラクターに対応する識別情報が含まれているか否かを確認する。再生部163は、当該識別情報が含まれている場合、当該識別情報に対応するキャラクターに対応する再生態様で音データを再生する。 When the video content acquired by the content acquisition unit 161 includes a character whose identification information is stored in the storage unit 15, the reproduction unit 163 has a reproduction mode corresponding to the character (for example, at the position of the character). Sound data may be reproduced in an audible manner). When the content acquisition unit 161 acquires the video content, the playback unit 163 identifies the character included in the video content, for example, by referring to the meta information included in the video content. Then, the reproduction unit 163 confirms whether or not the storage unit 15 contains the identification information corresponding to the specified character. When the identification information is included, the reproduction unit 163 reproduces the sound data in the reproduction mode corresponding to the character corresponding to the identification information.

具体的には、ユーザが、過去に第1キャラクターAが登場する動画コンテンツを視聴した際に、第1キャラクターAに対応する音声を選択していたとする。この場合、ユーザが第1キャラクターAを好きであると考えられる。そこで、再生部163は、第1キャラクターAが含まれている他の動画コンテンツを再生する際に、第1キャラクターAに対応する音声を自動的に選択して再生する。再生部163がこのように動作することで、ユーザが、第1キャラクターAに対応する音声を再生するための操作を行う必要がないので、ユーザの好みが固定されている場合に好適である。 Specifically, it is assumed that the user has selected the sound corresponding to the first character A when viewing the video content in which the first character A appears in the past. In this case, it is considered that the user likes the first character A. Therefore, when the reproduction unit 163 reproduces another moving image content including the first character A, the reproduction unit 163 automatically selects and reproduces the sound corresponding to the first character A. By operating the reproduction unit 163 in this way, the user does not need to perform an operation for reproducing the sound corresponding to the first character A, which is suitable when the user's preference is fixed.

再生部163は、複数のキャラクターの識別情報が記憶部15に記憶されており、コンテンツ取得部161から入力された動画コンテンツに、識別情報が記憶部15に記憶された複数のキャラクターが含まれている場合、操作受付部162に、キャラクターの選択を受け付けるように指示してもよい。この場合、操作受付部162は、キャラクターの選択を受け付ける画面を表示して、ユーザによるキャラクターの選択を受け付ける。 In the playback unit 163, identification information of a plurality of characters is stored in the storage unit 15, and the moving image content input from the content acquisition unit 161 includes a plurality of characters whose identification information is stored in the storage unit 15. If so, the operation reception unit 162 may be instructed to accept the selection of the character. In this case, the operation reception unit 162 displays a screen for accepting the character selection and accepts the character selection by the user.

再生部163は、複数のキャラクターの識別情報が記憶部15に記憶されている場合であっても、識別情報が記憶部15に記憶された日時に基づいて、直近の所定の期間内においてユーザにより選択される頻度が高いキャラクターを選択してもよい。再生部163がこのように動作することで、ユーザが複数のキャラクターに関心がある場合であっても、よりユーザが好んでいる蓋然性が高いキャラクターの位置で聞こえる音声を再生することができる。 Even when the identification information of a plurality of characters is stored in the storage unit 15, the playback unit 163 is used by the user within the latest predetermined period based on the date and time when the identification information is stored in the storage unit 15. Characters that are frequently selected may be selected. By operating the reproduction unit 163 in this way, even when the user is interested in a plurality of characters, it is possible to reproduce the sound that can be heard at the position of the character that is more likely to be preferred by the user.

[コンテンツ再生装置1における処理の流れ]
図8は、コンテンツ再生装置1における処理の流れを示すフローチャートである。図8に示すフローチャートは、コンテンツ再生装置1のユーザが動画コンテンツを視聴する操作をした時点から開始している。
[Process flow in content playback device 1]
FIG. 8 is a flowchart showing a processing flow in the content reproduction device 1. The flowchart shown in FIG. 8 starts from the time when the user of the content reproduction device 1 performs an operation of viewing the moving image content.

コンテンツ取得部161が動画コンテンツをコンテンツ配信装置2から取得すると(S11)、操作受付部162は、ユーザからキャラクターを選択する操作を受け付けて、選択されたキャラクターを識別するための情報を再生部163に通知する(S12)。再生部163は、動画コンテンツに含まれる再生態様データを参照することにより、選択されたキャラクターと音源との距離を特定する(S13)。再生部163は、特定した距離に基づいて音量を決定し(S14)、決定した音量で音データを再生する(S15)。 When the content acquisition unit 161 acquires the video content from the content distribution device 2 (S11), the operation reception unit 162 accepts an operation of selecting a character from the user and reproduces information for identifying the selected character 163. (S12). The reproduction unit 163 specifies the distance between the selected character and the sound source by referring to the reproduction mode data included in the moving image content (S13). The reproduction unit 163 determines the volume based on the specified distance (S14), and reproduces the sound data at the determined volume (S15).

再生部163が音データ及び動画像データを再生している間、操作受付部162は、再生させる音声に対応するキャラクターを切り替える操作(例えばスワイプ操作)が行われたかどうかを監視する(S16)。切替操作があったと操作受付部162が判定した場合(S16においてYES)、再生部163は、処理をS13に戻して、切り替え後のキャラクターと音源との距離を特定し、新たな音量によって音データを再生する(S13〜S15)。 While the reproduction unit 163 is reproducing the sound data and the moving image data, the operation reception unit 162 monitors whether or not an operation (for example, a swipe operation) for switching the character corresponding to the sound to be reproduced is performed (S16). When the operation reception unit 162 determines that the switching operation has been performed (YES in S16), the playback unit 163 returns the processing to S13, specifies the distance between the character and the sound source after the switching, and uses the new volume for sound data. Is reproduced (S13 to S15).

S16において切替操作があったと操作受付部162が判定しない場合(S16においてNO)、動画コンテンツの再生を終了する操作が行われたか否かを判定し(S17)、終了操作が行われるまでS15からS17までの処理を繰り返す。 When the operation reception unit 162 does not determine that the switching operation has been performed in S16 (NO in S16), it is determined whether or not the operation to end the playback of the video content has been performed (S17), and from S15 until the end operation is performed. The process up to S17 is repeated.

[第1変形例]
以上の説明においては、選択されたキャラクターに対応する音声再生態様が、キャラクターと音源との距離に基づいて決定される場合を例示したが、コンテンツ再生装置1は、このようにして決定される音量又は音質等をユーザが調整できるようにしてもよい。この場合、操作受付部162は、選択された再生方法に含まれる音量又は音質の少なくともいずれかの内容を調整するための操作を受け付ける。そして、再生部163は、操作受付部162が受け付けた操作により調整された後の音量又は音質で音データを再生する。
[First modification]
In the above description, the case where the audio reproduction mode corresponding to the selected character is determined based on the distance between the character and the sound source has been illustrated, but the content reproduction device 1 has the volume determined in this way. Alternatively, the user may be able to adjust the sound quality and the like. In this case, the operation reception unit 162 accepts an operation for adjusting at least one of the volume and the sound quality included in the selected reproduction method. Then, the reproduction unit 163 reproduces the sound data at the volume or sound quality after being adjusted by the operation received by the operation reception unit 162.

一例として、操作受付部162は、動画コンテンツが再生されている状態、又は動画コンテンツを再生する前に、再生する音量又は音質等を調整するための画面を表示させるためのアイコン画像をディスプレイ13に表示させる。操作受付部162は、当該アイコン画像が選択されると、音量又は音質等を調整するための画面をディスプレイ13に表示させる。 As an example, the operation reception unit 162 displays an icon image on the display 13 for displaying a screen for adjusting the volume or sound quality to be played before the video content is being played or the video content is being played. Display it. When the icon image is selected, the operation reception unit 162 displays a screen for adjusting the volume, sound quality, or the like on the display 13.

操作受付部162は、動画コンテンツに登場するキャラクターごとに音量又は音質の調整を受け付けてもよい。操作受付部162は、図7に示した、音声の再生態様を選択する操作を受け付けられる時間帯において登場するキャラクターの音量又は音質の調整を受け付けてもよい。操作受付部162がこのように音声の再生態様を調整する操作を受け付けることで、ユーザが好みの態様で音声を聞くことができるので、より高い臨場感を得ることが可能になる。 The operation reception unit 162 may accept adjustment of volume or sound quality for each character appearing in the moving image content. The operation reception unit 162 may accept adjustment of the volume or sound quality of the character appearing in the time zone in which the operation of selecting the sound reproduction mode shown in FIG. 7 is accepted. By accepting the operation of adjusting the sound reproduction mode in this way, the operation reception unit 162 allows the user to listen to the sound in a preferred mode, so that a higher sense of presence can be obtained.

[第2変形例]
以上の説明においては、動画コンテンツに、音データを再生する際の音量、音質又はタイミング等を示す再生態様データが含まれている場合を例示したが、再生態様データは、それぞれのキャラクターに対応する音データ(例えば、音データを含むファイル)であってもよい。例えば、動画コンテンツに第1キャラクター及び第2キャラクターが含まれている場合、動画コンテンツには、標準的な音データと、第1キャラクターの位置で聞こえる音に対応する音データにより構成される第1再生態様データと、第2キャラクターの位置で聞こえる音に対応する音データにより構成される第2再生態様データとが含まれていてもよい。動画コンテンツに、キャラクターの数に対応する数の音データが含まれていてもよい。
[Second modification]
In the above description, the case where the video content includes the reproduction mode data indicating the volume, sound quality, timing, etc. when the sound data is reproduced has been illustrated, but the reproduction mode data corresponds to each character. It may be sound data (for example, a file containing sound data). For example, when the video content includes the first character and the second character, the video content is composed of standard sound data and sound data corresponding to the sound heard at the position of the first character. The reproduction mode data and the second reproduction mode data composed of the sound data corresponding to the sound heard at the position of the second character may be included. The video content may include a number of sound data corresponding to the number of characters.

第1再生態様データには、例えば図3(a)に示したような音量に対応する各音源が発する音データが含まれている。第2再生態様データには、例えば図3(b)に示したような音量に対応する各音源が発する音データが含まれている。この場合、再生部163は、ユーザにより選択されたキャラクターに対応する再生態様データに含まれる音データを再生する。再生態様データがこのように構成されていることで、再生部163が、再生時の音の態様を調整した音データを作成する必要がないので、再生部163における処理の遅延の発生を防ぐことができる。 The first reproduction mode data includes sound data emitted by each sound source corresponding to the volume as shown in FIG. 3A, for example. The second reproduction mode data includes sound data emitted by each sound source corresponding to the volume as shown in FIG. 3B, for example. In this case, the reproduction unit 163 reproduces the sound data included in the reproduction mode data corresponding to the character selected by the user. Since the reproduction mode data is configured in this way, the reproduction unit 163 does not need to create the sound data in which the mode of the sound at the time of reproduction is adjusted, so that the generation of processing delay in the reproduction unit 163 can be prevented. Can be done.

[第3変形例]
コンテンツ再生装置1は、再生される音の質をさらに切替可能に構成されていてもよい。コンテンツ再生装置1は、例えば、音源の方向や音源までの距離を感じることができる立体音響(三次元音響又は三次元オーディオともいう)で再生するための選択操作をユーザから受け付けて、選択操作に応じた質の音を再生してもよい。この場合、コンテンツ再生装置1は、標準の音を再生する場合にはユーザに課金せず、標準の音以外の音を再生する場合にユーザに課金するように動作してもよい。コンテンツ再生装置1の制御部16は、例えば、ユーザが標準の音以外を選択した場合に、ユーザ識別情報をコンテンツ配信装置2に送信することにより、コンテンツ配信装置2から再生する音データを取得する。コンテンツ配信装置2は、ユーザ識別情報に関連付けて課金額を記憶し、所定のタイミングでユーザに対して課金する。コンテンツ再生装置1及びコンテンツ配信装置2がこのように動作することで、質が高い音をユーザに提供することが可能になる。
[Third variant]
The content reproduction device 1 may be configured so that the quality of the reproduced sound can be further switched. The content playback device 1 receives from the user a selection operation for reproducing with stereophonic sound (also referred to as three-dimensional sound or three-dimensional audio) that allows the direction of the sound source and the distance to the sound source to be felt, and performs the selection operation. Sound of the corresponding quality may be reproduced. In this case, the content reproduction device 1 may operate so as not to charge the user when reproducing the standard sound, but to charge the user when reproducing a sound other than the standard sound. The control unit 16 of the content reproduction device 1 acquires sound data to be reproduced from the content distribution device 2 by transmitting user identification information to the content distribution device 2, for example, when the user selects a sound other than the standard sound. .. The content distribution device 2 stores the billing amount in association with the user identification information, and bills the user at a predetermined timing. By operating the content playback device 1 and the content distribution device 2 in this way, it is possible to provide a high-quality sound to the user.

[コンテンツ再生装置1による効果]
以上説明したように、コンテンツ取得部161は、動画像データと、音データと、音データの複数の再生態様の決定に用いられる再生態様データと、を含む動画コンテンツを取得する。そして、再生部163は、動画像データを再生している間に、ユーザによって選択された再生態様(選択再生態様)に基づいて音データを再生する。再生部163は、例えば、ユーザによって選択されたキャラクターの位置で聞こえる音を再生する。コンテンツ再生装置1がこのように構成されていることで、ユーザは、動画コンテンツに登場するキャラクターになったような気分で動画コンテンツを視聴することができるので、臨場感が高まる。
[Effect of content playback device 1]
As described above, the content acquisition unit 161 acquires moving image content including moving image data, sound data, and reproduction mode data used for determining a plurality of reproduction modes of the sound data. Then, the reproduction unit 163 reproduces the sound data based on the reproduction mode (selective reproduction mode) selected by the user while reproducing the moving image data. The playback unit 163 reproduces, for example, the sound heard at the position of the character selected by the user. When the content playback device 1 is configured in this way, the user can watch the video content as if he / she became a character appearing in the video content, so that the sense of presence is enhanced.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments, and various modifications and changes can be made within the scope of the gist thereof. is there. For example, all or a part of the device can be functionally or physically distributed / integrated in any unit. Also included in the embodiments of the present invention are new embodiments resulting from any combination of the plurality of embodiments. The effect of the new embodiment produced by the combination also has the effect of the original embodiment.

1 コンテンツ再生装置
2 コンテンツ配信装置
11 通信部
12 スピーカー
13 ディスプレイ
14 操作部
15 記憶部
16 制御部
161 コンテンツ取得部
162 操作受付部
163 再生部
1 Content playback device 2 Content distribution device 11 Communication unit 12 Speaker 13 Display 14 Operation unit 15 Storage unit 16 Control unit 161 Content acquisition unit 162 Operation reception unit 163 Playback unit

Claims (10)

動画像データと、音データと、前記音データの複数の再生態様の決定に用いられる再生態様データと、複数のキャラクターと、を含む動画コンテンツを取得するコンテンツ取得部と、
前記再生態様データが示す前記複数の再生態様から、前記音データの再生に使用する再生態様を選択するための選択操作として、前記複数のキャラクターから一つのキャラクターを選択する操作を受け付ける操作受付部と、
前記動画像データを再生している間に、選択された前記再生態様に基づいて前記音データを再生する再生部と、
を有するコンテンツ再生装置。
A content acquisition unit that acquires video content including moving image data, sound data, reproduction mode data used for determining a plurality of reproduction modes of the sound data, and a plurality of characters.
An operation reception unit that accepts an operation of selecting one character from the plurality of characters as a selection operation for selecting a reproduction mode to be used for reproducing the sound data from the plurality of reproduction modes indicated by the reproduction mode data. ,
A reproduction unit that reproduces the sound data based on the selected reproduction mode while reproducing the moving image data, and a reproduction unit.
Content playback device with.
前記再生態様データは、前記動画コンテンツに含まれる前記キャラクターの位置と音の発生場所との位置関係を示す関係データを含み、
前記再生部は、選択された前記キャラクターと前記音データの発生場所との位置関係に対応する態様で前記音データを再生する、
請求項に記載のコンテンツ再生装置。
The reproduction mode data includes relationship data indicating a positional relationship between the place of occurrence of the position and the sound of the character included in the video content,
The reproduction unit reproduces the sound data in an manner corresponding to the positional relationship between the selected character and the place where the sound data is generated.
The content playback device according to claim 1.
前記再生部は、選択された前記キャラクターから前記音データの発生場所までの距離が長いほど小さな音量で前記音データを再生する、
請求項に記載のコンテンツ再生装置。
The reproduction unit reproduces the sound data at a smaller volume as the distance from the selected character to the place where the sound data is generated becomes longer.
The content playback device according to claim 2.
前記再生態様データは、前記動画コンテンツに含まれる前記キャラクターに対応する音の態様を示す音態様データを含み、
前記再生部は、前記音態様データが示す態様で前記音データを再生する、
請求項に記載のコンテンツ再生装置。
The reproduction mode data includes the sound mode data indicating the mode of sound corresponding to the characters included in the video content,
The reproduction unit reproduces the sound data in the manner indicated by the sound aspect data.
The content playback device according to claim 1.
前記操作受付部は、前記再生部が再生中の前記動画コンテンツが表示されている画面上で行われたスワイプ操作の向きに基づいて、選択された前記キャラクターを特定する、
請求項からのいずれか一項に記載のコンテンツ再生装置。
The operation reception unit identifies the selected character based on the direction of the swipe operation performed on the screen on which the video content being played by the playback unit is displayed.
The content playback device according to any one of claims 1 to 4.
前記再生部は、前記動画コンテンツに含まれる第1キャラクターから第2キャラクターに向かう向きに前記画面上でスワイプされたことを条件として、前記第1キャラクターの位置で聞こえる音量から前記第2キャラクターの位置で聞こえる音量に切り替える、
請求項に記載のコンテンツ再生装置。
The playback unit is located at the position of the second character from the volume heard at the position of the first character, provided that the playback unit is swiped on the screen in the direction from the first character to the second character included in the video content. Switch to the volume you can hear with
The content playback device according to claim 5.
前記操作受付部が前記キャラクターを選択する操作を受け付けた場合に、選択された前記キャラクターを識別するための識別情報を記憶する記憶部をさらに有し、
前記再生部は、前記コンテンツ取得部が取得した前記動画コンテンツに、前記記憶部に前記識別情報が記憶された前記キャラクターが含まれている場合に、当該キャラクターに対応する再生態様で前記音データを再生する、
請求項からのいずれか一項に記載のコンテンツ再生装置。
Further having a storage unit for storing identification information for identifying the selected character when the operation reception unit receives an operation for selecting the character.
When the moving image content acquired by the content acquisition unit includes the character whose identification information is stored in the storage unit, the playback unit outputs the sound data in a reproduction mode corresponding to the character. Reproduce,
The content playback device according to any one of claims 1 to 6.
前記操作受付部は、選択された前記再生態様に含まれる音量又は音質の少なくともいずれかの内容を調整するための操作を受け付け、
前記再生部は、前記操作受付部が受け付けた操作により調整された後の音量又は音質で前記音データを再生する、
請求項1からのいずれか一項に記載のコンテンツ再生装置。
The operation receiving unit receives an operation for adjusting at least one of the volume and sound quality included in the selected playback mode.
The playback unit reproduces the sound data at a volume or sound quality adjusted by the operation received by the operation reception unit.
The content playback device according to any one of claims 1 to 7.
前記操作受付部は、前記再生部が前記動画コンテンツを再生している間に、前記選択操作を受け付けられる時間帯を示す情報を表示する、
請求項1からのいずれか一項に記載のコンテンツ再生装置。
The operation reception unit displays information indicating a time zone in which the selection operation can be accepted while the playback unit is playing the moving image content.
The content playback device according to any one of claims 1 to 8.
コンピュータに、
動画像データと、音データと、前記音データの複数の再生態様の決定に用いられる再生態様データと、複数のキャラクターと、を含むコンテンツを取得するステップと、
前記再生態様データが示す前記複数の再生態様から、前記音データの再生に使用する選択再生態様を選択するための選択操作として、前記複数のキャラクターから一つのキャラクターを選択する操作を受け付けるステップと、
前記動画像データを再生している間に、前記選択再生態様に基づいて前記音データを再生するステップと、
を実行させるためのプログラム。
On the computer
A step of acquiring content including moving image data, sound data, reproduction mode data used for determining a plurality of reproduction modes of the sound data, and a plurality of characters.
A step of accepting an operation of selecting one character from the plurality of characters as a selection operation for selecting a selective reproduction mode to be used for reproducing the sound data from the plurality of reproduction modes indicated by the reproduction mode data.
While reproducing the moving image data, a step of reproducing the sound data based on the selective reproduction mode, and
A program to execute.
JP2020147487A 2020-09-02 2020-09-02 Content playback device and program Active JP6882584B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020147487A JP6882584B1 (en) 2020-09-02 2020-09-02 Content playback device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020147487A JP6882584B1 (en) 2020-09-02 2020-09-02 Content playback device and program

Publications (2)

Publication Number Publication Date
JP6882584B1 true JP6882584B1 (en) 2021-06-02
JP2022042186A JP2022042186A (en) 2022-03-14

Family

ID=76083945

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020147487A Active JP6882584B1 (en) 2020-09-02 2020-09-02 Content playback device and program

Country Status (1)

Country Link
JP (1) JP6882584B1 (en)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006155627A (en) * 2005-12-05 2006-06-15 Sony Corp Simulation system, virtual space providing device and method, user terminal and virtual space image generation method
JP2007116316A (en) * 2005-10-19 2007-05-10 Xing Inc Method and device for data distribution, communication terminal device, and data output program
JP2008159034A (en) * 2007-11-07 2008-07-10 Fujitsu Ltd Server and voice signal collection/distribution method
JP2011055483A (en) * 2009-08-06 2011-03-17 Bond:Kk Program image distribution system, program image distribution method, and program
US20130046873A1 (en) * 2011-08-19 2013-02-21 Electronics And Telecommunications Research Institute Apparatus and method for producing multimedia package, system and method for providing multimedia package service
WO2015008613A1 (en) * 2013-07-19 2015-01-22 ソニー株式会社 Information processing device and information processing method
CN105007531A (en) * 2014-04-23 2015-10-28 Lg电子株式会社 Image display device and control method thereof
JP2016051407A (en) * 2014-09-01 2016-04-11 ヤフー株式会社 Information processing device, distribution device, reproduction method, and reproduction program
KR20160093404A (en) * 2015-01-29 2016-08-08 한국전자통신연구원 Method and Apparatus for Multimedia Contents Service with Character Selective Audio Zoom In
JP2017116316A (en) * 2015-12-22 2017-06-29 株式会社デンソー Air flow rate measuring device

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007116316A (en) * 2005-10-19 2007-05-10 Xing Inc Method and device for data distribution, communication terminal device, and data output program
JP2006155627A (en) * 2005-12-05 2006-06-15 Sony Corp Simulation system, virtual space providing device and method, user terminal and virtual space image generation method
JP2008159034A (en) * 2007-11-07 2008-07-10 Fujitsu Ltd Server and voice signal collection/distribution method
JP2011055483A (en) * 2009-08-06 2011-03-17 Bond:Kk Program image distribution system, program image distribution method, and program
US20130046873A1 (en) * 2011-08-19 2013-02-21 Electronics And Telecommunications Research Institute Apparatus and method for producing multimedia package, system and method for providing multimedia package service
WO2015008613A1 (en) * 2013-07-19 2015-01-22 ソニー株式会社 Information processing device and information processing method
CN105007531A (en) * 2014-04-23 2015-10-28 Lg电子株式会社 Image display device and control method thereof
JP2016051407A (en) * 2014-09-01 2016-04-11 ヤフー株式会社 Information processing device, distribution device, reproduction method, and reproduction program
KR20160093404A (en) * 2015-01-29 2016-08-08 한국전자통신연구원 Method and Apparatus for Multimedia Contents Service with Character Selective Audio Zoom In
JP2017116316A (en) * 2015-12-22 2017-06-29 株式会社デンソー Air flow rate measuring device

Also Published As

Publication number Publication date
JP2022042186A (en) 2022-03-14

Similar Documents

Publication Publication Date Title
US10514885B2 (en) Apparatus and method for controlling audio mixing in virtual reality environments
US9489113B2 (en) System and method for playback of media content with audio touch menu functionality
KR101490725B1 (en) A video display apparatus, an audio-video system, a method for sound reproduction, and a sound reproduction system for localized perceptual audio
JP6754968B2 (en) A computer-readable storage medium that stores a video playback method, video playback device, and video playback program.
EP2261926A1 (en) Spatial audio enhanced user interface for browsing a list of items
KR100805308B1 (en) Method for contents recommendation service in mobile communication terminal and mobile communication terminal therefor
US20170075468A1 (en) System and method for playback of media content with support for force-sensitive touch input
WO2021199559A1 (en) Video distribution device, video distribution method, and video distribution program
US20160249091A1 (en) Method and an electronic device for providing a media stream
JP5632792B2 (en) Participation type content management apparatus, viewing terminal, participation type content management program, and viewing program
JP6478162B2 (en) Mobile terminal device and content distribution system
JP2010114571A (en) Comment distribution system, terminal, comment output method, and program
CN108595133B (en) Picture-in-picture display method and system
CN111316654A (en) Content information distribution server, terminal device, content information distribution system, content information distribution method, content information playback method, content information distribution program, and content information playback program
JP2016039612A (en) Content distribution system, content distribution method, transmission device, and program
JP6882584B1 (en) Content playback device and program
JP2002123693A (en) Contents appreciation system
JPWO2018198790A1 (en) Communication device, communication method, program, and telepresence system
JP6217015B2 (en) Terminal device, terminal device display method, program, server device
WO2023218824A1 (en) Information processing apparatus, information processing method, and program
JP6872067B1 (en) Image display device and program
JP6941723B1 (en) Image display device and program
WO2022234699A1 (en) Moving image delivery device, display control device, moving image delivery system, moving image delivery method, and program
KR20100055662A (en) Client terminal apparatus, performance impression service system and its method
JP2004040450A (en) Information delivery system, information processing apparatus and method, reproducing device and method, recording medium, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200917

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20200917

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20200923

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210302

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210419

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210427

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210506

R150 Certificate of patent or registration of utility model

Ref document number: 6882584

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150