WO2009104546A1 - Karaoke recorder and computer program - Google Patents
Karaoke recorder and computer program Download PDFInfo
- Publication number
- WO2009104546A1 WO2009104546A1 PCT/JP2009/052525 JP2009052525W WO2009104546A1 WO 2009104546 A1 WO2009104546 A1 WO 2009104546A1 JP 2009052525 W JP2009052525 W JP 2009052525W WO 2009104546 A1 WO2009104546 A1 WO 2009104546A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- unit
- voice
- image
- color recording
- audio
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/368—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems displaying animated or moving pictures synchronized with the music or audio part
Definitions
- a seventh aspect of the present invention is the color recording apparatus (1) according to any one of the first to sixth aspects, wherein the voice received by the voice receiving unit (2B) is similar to the predetermined voice.
- a speech similarity determination unit (14) that determines the similarity based on at least one of voice quality, timing, and pronunciation content, and the display unit (4) visually determines the similarity determined by the speech similarity determination unit.
- This is a color recording device characterized by displaying on the screen.
- the invention of claim 8 is the color recording apparatus (1) according to any one of claims 1 to 7, wherein the image content stored in the storage medium (26) or other connected via a communication network.
- the invention of claim 9 is the color recording apparatus (1) according to any one of claims 1 to 8, wherein the color recording apparatus is a portable terminal.
- the present invention can use still image content. Therefore, production of image content can be performed at a low cost and in a short period of time. In addition, since the capacity of the image content can be reduced as compared with a moving image, the system load of the color recording apparatus can be reduced.
- FIG. 3 is a flowchart of the main process of the color recording apparatus 1 according to this embodiment.
- the control unit 7 displays a selection screen for image content and casting on the display unit 4.
- the image content refers to, for example, one scene of a drama or movie, a moving image such as a CM, or a still image such as a four-frame cartoon.
- One scene is a digest of about 4 or 5 minutes about a drama or a movie.
- the term “casting” refers to an actor who is a target of color recording in the image content. Note that one or more actors may be subject to color recording.
- step S ⁇ b> 8 the control unit 7 starts photographing by the photographing unit 5. As a result, it is possible to photograph the state of the player who performs color recording.
- step S ⁇ b> 9 the control unit 7 displays the image of the player photographed by the photographing unit 5 on the display unit 4. Therefore, the player can see the figure of the player who is speaking the selected cast line while speaking the line. Accordingly, it is possible to provide a new enjoyment that the player and the audience can be excited while watching the player speaking the words.
- FIG. 6 is a flowchart of the replay process according to the present embodiment.
- the control unit 7 displays a list of replayable image contents on the display unit 4. For example, a list of image contents recorded by the player himself / herself may be displayed, or a list of image contents including those recorded by the other person may be displayed.
Abstract
Disclosed are a karaoke recorder and computer program with novel entertainment. A karaoke recorder (1) comprises a selection receiving section (2A) for receiving the selection of image contents and casting, a voice output setting section (11) for setting so as not to output a predetermined voice corresponding to the casting out of the voices corresponding to the images of the image contents received by the selection receiving section (2A), a voice output section (3) for outputting voices except the predetermined voice according to the setting of the voice output setting section (11), a display section (4) for displaying the images of the image contents and the characters corresponding to the predetermined voice, and a voice receiving section (2B) for receiving the voice of a player during the display of the characters on the display section (4).
Description
本発明は、カラレコ装置及びコンピュータプログラムに関する。
The present invention relates to a color recording apparatus and a computer program.
かつて、活弁士という職業が存在し、活躍した時代があった。活弁士とは、活動弁士ともいい、活動写真と呼ばれた無声映画を上映中に、その内容を語りで表現して解説する者をいう。初期の映画は、ほとんどが無声映画であり、役者の声や音楽等が一切流れないものであった。特に外国で製作された映画にあっては、言語や文化の違いによる説明も必要であったため、映画の上映中に、進行に応じて映画の内容にあわせたセリフを語る活弁士が活躍した。活弁士の力量で、映画に対する評価が変わるという点で、活弁士は重要な役割を担っていた。
In the past, there was a time when there was a career as a spokesman and played an active role. Active spokesman is also called an active patent attorney and is a person who expresses and explains the contents of a silent movie called activity photo. Most of the early films were silent films, and the voices and music of actors did not flow at all. Especially for movies produced in foreign countries, explanations based on differences in language and culture were necessary, so during the movie screenings, active activists who spoke lines according to the content of the movie were active as the movie progressed. The active attorneys played an important role in that the ability of the active attorneys changed the evaluation of the movie.
他方、現在では、娯楽の１つとして、家族間や友人間でカラオケが盛んに行われている。カラオケは、カラオケボックスや飲食店、自宅等の場所において行われるものであり、歌を歌いたい者が好みの曲を選択することで、選択した曲の伴奏を再生すると共に、歌詞を表示する。そして、歌いたい者が、伴奏をバックに歌詞を見ながら歌を楽しむものである。歌っている者自身が、伴奏をバックに歌うことで気持ちよくなるだけでなく、曲のリズムや歌唱力、その場の雰囲気により、それを聴いている聴衆も盛り上がることができる。このように、カラオケは気軽にできるため、人気の娯楽として定着している。そんな中、例えば、複数のボーカルパートを選択的に再生出力するカラオケ装置が開示されている（特許文献１参照）。
特開２０００－９９０５０号公報
On the other hand, at present, karaoke is actively performed among family members and friends as one of entertainment. Karaoke is performed in places such as a karaoke box, a restaurant, or a home. When a person who wants to sing a song selects a favorite song, the accompaniment of the selected song is reproduced and lyrics are displayed. The person who wants to sing enjoys singing while watching the lyrics with accompaniment. Not only will the singers feel better by singing along with the accompaniment, but the audience who listens to them will also be excited by the rhythm, singing ability, and atmosphere of the song. In this way, karaoke is a popular pastime because it can be easily done. In the meantime, for example, a karaoke apparatus that selectively reproduces and outputs a plurality of vocal parts is disclosed (see Patent Document 1).
JP 2000-99050 A
しかし、歌が好きな者にとって、ストレス発散となるカラオケも、歌が苦手な者には苦痛なものである。また、歌は苦手だが、しゃべりが得意という者もいる。また、映画やアニメに精通している者もいる。そこで、歌以外のエンタテイメント性のある娯楽として、アフレコに着目した。アフレコとは、アフターレコーディングの略であり、一般には、映画等で、撮影時に役者のセリフを録音せずに、撮影後にセリフだけを録音することをいう。本明細書においては、カラオケのように手軽に行える、プレイヤが画像に合わせてセリフ等を話すアフレコをカラレコというものとする。
However, for those who like singing, karaoke, which is a stress relief, is painful for those who are not good at singing. Some people are not good at singing but are good at talking. Some are familiar with movies and anime. Therefore, we focused on dubbing as entertainment with entertainment other than singing. After-recording is an abbreviation for after-recording, and generally refers to recording only the lines after shooting without recording the actor's lines at the time of shooting in a movie or the like. In this specification, dubbing that can be performed easily as in karaoke and in which a player speaks a dialogue or the like in accordance with an image is referred to as “color recording.
本発明は、新たなエンタテイメント性を有するカラレコ装置及びコンピュータプログラムを提供することを目的とする。
An object of the present invention is to provide a color recording apparatus and a computer program having new entertainment properties.
本発明は、以下のような解決手段により、前記課題を解決する。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。
The present invention solves the above problems by the following means. In addition, in order to make an understanding easy, although the code | symbol corresponding to embodiment of this invention is attached | subjected and demonstrated, it is not limited to this.
請求項１の発明は、画像コンテンツ及び配役の選択を受け付ける選択受付部（２Ａ）と、前記選択受付部により受け付けられた前記画像コンテンツの画像に対応する音声のうち、前記配役に対応する所定の音声を出力しないように設定する音声出力設定部（１１）と、前記音声出力設定部の設定に応じて、前記所定の音声を除く他の音声を出力する音声出力部（３）と、前記画像コンテンツの画像と、前記所定の音声に対応する文字とを表示する表示部（４）と、前記表示部に前記文字が表示されている間プレイヤの音声を受け付ける音声受付部（２Ｂ）と、を備えるカラレコ装置（１）である。
According to the first aspect of the present invention, a selection receiving unit (2A) that receives selection of image content and a casting, and a voice corresponding to an image of the image content received by the selection receiving unit, a predetermined corresponding to the casting An audio output setting unit (11) for setting so as not to output audio, an audio output unit (3) for outputting other audio except the predetermined audio in accordance with the setting of the audio output setting unit, and the image A display unit (4) for displaying a content image and a character corresponding to the predetermined sound; and a sound receiving unit (2B) for receiving a player's sound while the character is displayed on the display unit. It is a color recording device (1) provided.
請求項２の発明は、請求項１に記載のカラレコ装置（１）において、前記プレイヤを撮影する撮影部（５）を備え、前記表示部（４）は、前記撮影部により撮影された前記プレイヤの画像を表示すること、を特徴とするカラレコ装置である。
請求項３の発明は、請求項２に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声を検知する音声検知部（１２）を備え、前記表示部（４）は、前記音声検知部が前記音声を検知したことに応じて、前記撮影部（５）により撮影された前記プレイヤの画像を表示すること、を特徴とするカラレコ装置である。
請求項４の発明は、請求項２又は３に記載のカラレコ装置（１）において、前記表示部（４）は、前記表示部の一部領域に、又は前記配役に対応する画像に置き換えて、前記プレイヤの画像を表示すること、を特徴とするカラレコ装置である。
請求項５の発明は、請求項１から４のいずれか１項に記載のカラレコ装置（１）において、前記画像コンテンツの画像は、静止画により構成されるものであること、を特徴とするカラレコ装置である。
請求項６の発明は、請求項１から５のいずれか１項に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声を記憶する記憶部（６）と、前記記憶部に記録された前記音声を、前記画像コンテンツの画像と、前記他の音声と共に再生する再生部（１３）と、を備えること、を特徴とするカラレコ装置である。
請求項７の発明は、請求項１から６のいずれか１項に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声と、前記所定の音声との類似度を、声質、タイミング、及び発音内容の少なくともいずれかに基づき判定する音声類似判定部（１４）を備え、前記表示部（４）は、前記音声類似判定部により判定された前記類似度を視覚的に表示すること、を特徴とするカラレコ装置である。
請求項８の発明は、請求項１から７のいずれか１項に記載のカラレコ装置（１）において、記憶媒体（２６）に記憶された前記画像コンテンツ、又は通信ネットワークを介して接続された他の装置からダウンロードされた前記画像コンテンツを用いること、を特徴とするカラレコ装置である。
請求項９の発明は、請求項１から８のいずれか１項に記載のカラレコ装置（１）において、このカラレコ装置は、携帯端末であること、を特徴とするカラレコ装置である。 According to a second aspect of the present invention, in the color recording apparatus (1) according to the first aspect, the photographing unit (5) for photographing the player is provided, and the display unit (4) is the player photographed by the photographing unit. This is a color recording apparatus characterized by displaying an image.
A third aspect of the present invention is the color recording apparatus (1) according to the second aspect, further comprising a voice detection unit (12) for detecting the voice received by the voice reception unit (2B), and the display unit (4). ) Is a color recording apparatus that displays an image of the player imaged by the imaging unit (5) in response to the audio detection unit detecting the audio.
According to a fourth aspect of the present invention, in the color recording apparatus (1) according to the second or third aspect, the display unit (4) is replaced with a partial area of the display unit or an image corresponding to the cast. A color recording apparatus characterized by displaying an image of the player.
According to a fifth aspect of the present invention, in the color recording apparatus (1) according to any one of the first to fourth aspects, the image of the image content is composed of a still image. Device.
The invention ofclaim 6 is the color recording apparatus (1) according to any one of claims 1 to 5, wherein the storage unit (6) stores the voice received by the voice reception unit (2B); A color recording apparatus comprising: a playback unit (13) that plays back the audio recorded in the storage unit together with the image of the image content and the other audio.
A seventh aspect of the present invention is the color recording apparatus (1) according to any one of the first to sixth aspects, wherein the voice received by the voice receiving unit (2B) is similar to the predetermined voice. A speech similarity determination unit (14) that determines the similarity based on at least one of voice quality, timing, and pronunciation content, and the display unit (4) visually determines the similarity determined by the speech similarity determination unit. This is a color recording device characterized by displaying on the screen.
The invention ofclaim 8 is the color recording apparatus (1) according to any one of claims 1 to 7, wherein the image content stored in the storage medium (26) or other connected via a communication network. A color recording apparatus using the image content downloaded from the apparatus.
The invention ofclaim 9 is the color recording apparatus (1) according to any one of claims 1 to 8, wherein the color recording apparatus is a portable terminal.
請求項３の発明は、請求項２に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声を検知する音声検知部（１２）を備え、前記表示部（４）は、前記音声検知部が前記音声を検知したことに応じて、前記撮影部（５）により撮影された前記プレイヤの画像を表示すること、を特徴とするカラレコ装置である。
請求項４の発明は、請求項２又は３に記載のカラレコ装置（１）において、前記表示部（４）は、前記表示部の一部領域に、又は前記配役に対応する画像に置き換えて、前記プレイヤの画像を表示すること、を特徴とするカラレコ装置である。
請求項５の発明は、請求項１から４のいずれか１項に記載のカラレコ装置（１）において、前記画像コンテンツの画像は、静止画により構成されるものであること、を特徴とするカラレコ装置である。
請求項６の発明は、請求項１から５のいずれか１項に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声を記憶する記憶部（６）と、前記記憶部に記録された前記音声を、前記画像コンテンツの画像と、前記他の音声と共に再生する再生部（１３）と、を備えること、を特徴とするカラレコ装置である。
請求項７の発明は、請求項１から６のいずれか１項に記載のカラレコ装置（１）において、前記音声受付部（２Ｂ）により受け付けられた前記音声と、前記所定の音声との類似度を、声質、タイミング、及び発音内容の少なくともいずれかに基づき判定する音声類似判定部（１４）を備え、前記表示部（４）は、前記音声類似判定部により判定された前記類似度を視覚的に表示すること、を特徴とするカラレコ装置である。
請求項８の発明は、請求項１から７のいずれか１項に記載のカラレコ装置（１）において、記憶媒体（２６）に記憶された前記画像コンテンツ、又は通信ネットワークを介して接続された他の装置からダウンロードされた前記画像コンテンツを用いること、を特徴とするカラレコ装置である。
請求項９の発明は、請求項１から８のいずれか１項に記載のカラレコ装置（１）において、このカラレコ装置は、携帯端末であること、を特徴とするカラレコ装置である。 According to a second aspect of the present invention, in the color recording apparatus (1) according to the first aspect, the photographing unit (5) for photographing the player is provided, and the display unit (4) is the player photographed by the photographing unit. This is a color recording apparatus characterized by displaying an image.
A third aspect of the present invention is the color recording apparatus (1) according to the second aspect, further comprising a voice detection unit (12) for detecting the voice received by the voice reception unit (2B), and the display unit (4). ) Is a color recording apparatus that displays an image of the player imaged by the imaging unit (5) in response to the audio detection unit detecting the audio.
According to a fourth aspect of the present invention, in the color recording apparatus (1) according to the second or third aspect, the display unit (4) is replaced with a partial area of the display unit or an image corresponding to the cast. A color recording apparatus characterized by displaying an image of the player.
According to a fifth aspect of the present invention, in the color recording apparatus (1) according to any one of the first to fourth aspects, the image of the image content is composed of a still image. Device.
The invention of
A seventh aspect of the present invention is the color recording apparatus (1) according to any one of the first to sixth aspects, wherein the voice received by the voice receiving unit (2B) is similar to the predetermined voice. A speech similarity determination unit (14) that determines the similarity based on at least one of voice quality, timing, and pronunciation content, and the display unit (4) visually determines the similarity determined by the speech similarity determination unit. This is a color recording device characterized by displaying on the screen.
The invention of
The invention of
請求項１０の発明は、コンピュータに、画像コンテンツ及び配役の選択を受け付けるステップと、受け付けられた前記画像コンテンツの画像に対応する音声のうち、前記配役に対応する所定の音声を出力しないように設定するステップと、前記設定に応じて、前記所定の音声を除く他の音声を出力するステップと、前記画像コンテンツの画像と、前記所定の音声に対応する文字とを表示するステップと、前記文字が表示されたことに応じてプレイヤの音声を受け付けるステップと、を実行させるためのコンピュータプログラムである。
The invention of claim 10 is set so that the computer receives the selection of the image content and the casting, and does not output a predetermined voice corresponding to the casting among the voices corresponding to the received images of the image content. A step of outputting other sounds excluding the predetermined sound according to the setting, a step of displaying an image of the image content and a character corresponding to the predetermined sound, and the character A computer program for executing a step of receiving the voice of the player in response to being displayed.
本発明によれば、以下の効果を奏することができる。
（１）本発明は、画像コンテンツの画像と、プレイヤが選択した配役以外の音声とを出力し、プレイヤが選択した配役の音声を出力しない。よって、画像コンテンツの画像に合わせて、プレイヤは、選択した配役のセリフを話すことができる。このように、誰でもが楽しめ、カラオケに代わる又はカラオケと共存する、新たなエンタテイメント性を提供することができる。 According to the present invention, the following effects can be obtained.
(1) The present invention outputs an image of an image content and sound other than the casting selected by the player, and does not output the voice of the casting selected by the player. Therefore, the player can speak the line of the selected casting according to the image of the image content. In this way, new entertainment can be provided that anyone can enjoy and can replace karaoke or coexist with karaoke.
（１）本発明は、画像コンテンツの画像と、プレイヤが選択した配役以外の音声とを出力し、プレイヤが選択した配役の音声を出力しない。よって、画像コンテンツの画像に合わせて、プレイヤは、選択した配役のセリフを話すことができる。このように、誰でもが楽しめ、カラオケに代わる又はカラオケと共存する、新たなエンタテイメント性を提供することができる。 According to the present invention, the following effects can be obtained.
(1) The present invention outputs an image of an image content and sound other than the casting selected by the player, and does not output the voice of the casting selected by the player. Therefore, the player can speak the line of the selected casting according to the image of the image content. In this way, new entertainment can be provided that anyone can enjoy and can replace karaoke or coexist with karaoke.
（２）本発明は、撮影部によって撮影されたプレイヤの姿を表示部に表示する。よって、選択した配役のセリフを話しているプレイヤの姿を、プレイヤはセリフを話しながら見ることができる。これにより、プレイヤのセリフを話す姿を見ながら、プレイヤと観客とが一体となって盛り上がることができるという、新たな楽しみを提供することができる。
(2) The present invention displays the appearance of the player photographed by the photographing unit on the display unit. Therefore, the player can see the figure of the player who is speaking the selected cast line while speaking the line. Accordingly, it is possible to provide a new enjoyment that the player and the audience can be excited while watching the player speaking the words.
（３）本発明は、音声が検知されたことに応じて撮影部によって撮影されたプレイヤの姿を表示部に表示する。よって、プレイヤがセリフを話す姿を、画面に表示することができる。
(3) The present invention displays on the display unit the appearance of the player photographed by the photographing unit in response to the sound being detected. Therefore, it is possible to display on the screen how the player speaks the dialogue.
（４）本発明は、撮影部によって撮影されたプレイヤの姿を、画像コンテンツと共に、又は画像コンテンツに代えて表示することができる。よって、画像コンテンツと共に表示する場合には、画像コンテンツとプレイヤとの表情を見ることができるので、両者の表情を比較して楽しむことができる。また、画像コンテンツに代えて表示する場合には、顔の表情等を含めて配役の役者になりきることができる。よって、更なるエンタテイメント性の向上が期待できる。
(4) The present invention can display the appearance of the player photographed by the photographing unit together with the image content or in place of the image content. Therefore, when displaying together with the image content, the expression of the image content and the player can be seen, so that the expressions of both can be compared and enjoyed. Further, when displaying instead of image content, it is possible to become a cast actor including facial expressions and the like. Therefore, further improvement in entertainment can be expected.
（５）本発明は、静止画の画像コンテンツを用いることができる。よって、画像コンテンツの制作を安価かつ短期間で行うことができる。また、動画の画像と比較して画像コンテンツの容量を小さくすることができるので、カラレコ装置のシステム負荷を軽減できる。
(5) The present invention can use still image content. Therefore, production of image content can be performed at a low cost and in a short period of time. In addition, since the capacity of the image content can be reduced as compared with a moving image, the system load of the color recording apparatus can be reduced.
（６）本発明は、記録されたプレイヤのカラレコを再生することができる。よって、他のプレイヤのカラレコを再生して見ることができ、また、自分のカラレコを他の者に見せることができる。また、後から自分のカラレコを再生して客観的に見ることができる。
(6) The present invention can reproduce the recorded player's color record. Therefore, the player's color record can be reproduced and viewed, and his own color record can be shown to others. In addition, you can reproduce your own color record later and see it objectively.
（７）本発明は、プレイヤの話したセリフに関する評価を行うことができる。よって、客観的に、セリフの話し方の良し悪しを判断する一手法を提供することができる。また、評価により、高得点を狙う等のプレイヤのモチベーションを向上させることができる。
(7) According to the present invention, it is possible to evaluate the speech spoken by the player. Therefore, it is possible to provide a method for objectively judging whether the speech is spoken or not. In addition, the evaluation can improve the player's motivation such as aiming for a high score.
（８）本発明は、記録媒体又は他の装置からダウンロードした画像コンテンツを用いる。よって、様々な画像コンテンツを用いることができるので、プレイヤに飽きられにくい画像コンテンツを提供できる。
(8) The present invention uses image content downloaded from a recording medium or another device. Therefore, since various image contents can be used, it is possible to provide image contents that are not easily bored by the player.
（９）本発明は、携帯端末で実現できるため、気軽かつ手軽にプレイヤがセリフを話して楽しむカラレコを行うことができる。
(9) Since the present invention can be realized by a portable terminal, it is possible to perform a color recording that allows a player to speak and enjoy a dialogue casually and easily.
１ カラレコ装置
２ 入力部
２Ａ 選択受付部
２Ｂ 音声受付部
３ 音声出力部
４ 表示部
５ 撮影部
６ 記憶部
７ 制御部
１１ 音声出力設定部
１２ 音声検知部
１３ 再生部
１４ 音声類似判定部
２２ マイク
２４ ディスプレイ
２５ ビデオカメラ DESCRIPTION OFSYMBOLS 1 Color recording apparatus 2 Input part 2A Selection reception part 2B Audio | voice reception part 3 Audio | voice output part 4 Display part 5 Image | photographing part 6 Memory | storage part 7 Control part 11 Audio | voice output setting part 12 Audio | voice detection part 13 Playback | regeneration part 14 Voice similarity determination part 22 Microphone 24 Display 25 video camera
２ 入力部
２Ａ 選択受付部
２Ｂ 音声受付部
３ 音声出力部
４ 表示部
５ 撮影部
６ 記憶部
７ 制御部
１１ 音声出力設定部
１２ 音声検知部
１３ 再生部
１４ 音声類似判定部
２２ マイク
２４ ディスプレイ
２５ ビデオカメラ DESCRIPTION OF
（実施形態）
以下、本発明を実施するための形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
図１は、本実施形態に係るカラレコ装置１を用いてプレイヤがカラレコをしている様子を示す図である。カラレコ装置１は、制御部７（図２参照）等を格納する本体部２０にマイク２２、スピーカ２３、ディスプレイ２４、ビデオカメラ２５等が接続されている。 (Embodiment)
Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings. This is merely an example, and the technical scope of the present invention is not limited to this.
FIG. 1 is a diagram showing a state in which a player is making a color record using thecolor record device 1 according to the present embodiment. In the color recording apparatus 1, a microphone 22, a speaker 23, a display 24, a video camera 25, and the like are connected to a main body unit 20 that stores a control unit 7 (see FIG. 2) and the like.
以下、本発明を実施するための形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
図１は、本実施形態に係るカラレコ装置１を用いてプレイヤがカラレコをしている様子を示す図である。カラレコ装置１は、制御部７（図２参照）等を格納する本体部２０にマイク２２、スピーカ２３、ディスプレイ２４、ビデオカメラ２５等が接続されている。 (Embodiment)
Hereinafter, embodiments for carrying out the present invention will be described with reference to the drawings. This is merely an example, and the technical scope of the present invention is not limited to this.
FIG. 1 is a diagram showing a state in which a player is making a color record using the
マイク２２は、男性Ａと女性Ｂとの声を入力する。この図１において、女性Ｂは、字幕部３１に表示された字幕に応じて、マイク２２に向かって女優Ｙになりきってセリフを話している。
スピーカ２３は、ディスプレイ２４の字幕部３１に表示されている文字以外のセリフや音楽等を出力する。また、スピーカ２３は、マイク２２により入力された女性Ｂが話しているセリフを出力する。 Themicrophone 22 inputs voices of male A and female B. In FIG. 1, woman B is speaking to the microphone 22 as an actress Y in response to the caption displayed in the caption section 31.
Thespeaker 23 outputs speech, music, and the like other than characters displayed on the subtitle portion 31 of the display 24. In addition, the speaker 23 outputs a speech spoken by the woman B inputted by the microphone 22.
スピーカ２３は、ディスプレイ２４の字幕部３１に表示されている文字以外のセリフや音楽等を出力する。また、スピーカ２３は、マイク２２により入力された女性Ｂが話しているセリフを出力する。 The
The
ディスプレイ２４は、画面中央の画像コンテンツ表示部３０、画面下方の字幕部３１及び画面左上方の撮影表示部３２を表示する。画像コンテンツ表示部３０には、男優Ｘと女優Ｙとの２名の役者による映画のワンシーンが表示されている。また、字幕部３１には、女優Ｙの会話である「ねえ、あなた・・・。お話したいことがあるの。」という文字が表示されている。撮影表示部３２には、ビデオカメラ２５で撮影した男性と女性との画像が表示されている。
The display 24 displays an image content display section 30 at the center of the screen, a caption section 31 at the bottom of the screen, and a shooting display section 32 at the top left of the screen. The image content display unit 30 displays a movie scene by two actors, an actor X and an actress Y. In the subtitle section 31, a character “Hey, you ... I have something to talk about” that is a conversation of the actress Y is displayed. In the photographing display unit 32, images of men and women photographed by the video camera 25 are displayed.
ビデオカメラ２５は、ディスプレイ２４の上部に取り付けられ、カラレコを行っているプレイヤである男性Ａと女性Ｂとを、正面から撮影するような位置に配置されている。そして、男性Ａと女性Ｂとがカラレコを行っている姿を撮影する。
The video camera 25 is attached to the upper part of the display 24, and is arranged at a position where the male A and the female B who are players are shooting from the front. Then, a picture of male A and female B performing a color recording is taken.
次に、カラレコ装置１の構成について説明する。
図２は、本実施形態に係るカラレコ装置１の機能ブロックを示す図である。カラレコ装置１は、主な構成として、入力部２、音声出力部３、表示部４、撮影部５、記憶部６、制御部７及び通信インタフェース部８を備え、それらが、バス９を介して接続されている。
入力部２は、プレイヤがリモコン２１を操作することで、プレイヤによる各種の選択を受け付ける選択受付部２Ａと、マイク２２からの音声を受け付ける音声受付部２Ｂとを有する。 Next, the configuration of thecolor recording apparatus 1 will be described.
FIG. 2 is a diagram illustrating functional blocks of thecolor recording apparatus 1 according to the present embodiment. The color recording apparatus 1 includes an input unit 2, an audio output unit 3, a display unit 4, a photographing unit 5, a storage unit 6, a control unit 7, and a communication interface unit 8, which are connected via a bus 9. It is connected.
Theinput unit 2 includes a selection receiving unit 2A that receives various selections by the player and a voice receiving unit 2B that receives sound from the microphone 22 when the player operates the remote controller 21.
図２は、本実施形態に係るカラレコ装置１の機能ブロックを示す図である。カラレコ装置１は、主な構成として、入力部２、音声出力部３、表示部４、撮影部５、記憶部６、制御部７及び通信インタフェース部８を備え、それらが、バス９を介して接続されている。
入力部２は、プレイヤがリモコン２１を操作することで、プレイヤによる各種の選択を受け付ける選択受付部２Ａと、マイク２２からの音声を受け付ける音声受付部２Ｂとを有する。 Next, the configuration of the
FIG. 2 is a diagram illustrating functional blocks of the
The
音声出力部３は、例えばスピーカ２３であり、マイク２２により入力された音声や、画像コンテンツに含まれる音声を出力する。
表示部４は、例えば液晶表示装置（ＬＣＤ）等のディスプレイ２４であり、画像コンテンツや、字幕等を表示する。 Theaudio output unit 3 is, for example, a speaker 23 and outputs audio input from the microphone 22 and audio included in the image content.
Thedisplay unit 4 is a display 24 such as a liquid crystal display (LCD), for example, and displays image content, subtitles, and the like.
表示部４は、例えば液晶表示装置（ＬＣＤ）等のディスプレイ２４であり、画像コンテンツや、字幕等を表示する。 The
The
撮影部５は、例えばビデオカメラ２５であり、カラレコを行っているプレイヤを撮影する。
記憶部６は、例えばＤＶＤ２６等の各種記録メディア（記録媒体）やＨＤＤ２７等のディスクであり、カラレコを行うためのコンピュータプログラムや、画像コンテンツを記憶する。また、後述で説明するカラレコ記録データを記憶する。 The photographingunit 5 is, for example, a video camera 25 and photographs a player who is performing a color recording.
Thestorage unit 6 is, for example, various recording media (recording media) such as a DVD 26 or a disk such as an HDD 27, and stores a computer program for performing color recording and image content. Further, color record recording data described later is stored.
記憶部６は、例えばＤＶＤ２６等の各種記録メディア（記録媒体）やＨＤＤ２７等のディスクであり、カラレコを行うためのコンピュータプログラムや、画像コンテンツを記憶する。また、後述で説明するカラレコ記録データを記憶する。 The photographing
The
制御部７は、音声出力設定部１１、音声検知部１２、再生部１３及び音声類似判定部１４を有する。音声出力設定部１１、音声検知部１２、再生部１３及び音声類似判定部１４の詳細は、後述する。制御部７は、情報の演算、及び処理を行う情報演算処理装置（ＣＰＵ）であり、当該カラレコ装置１全体を制御するものである。制御部７は、記憶部６に記憶された各種プログラムを適宜読み出して実行することにより、カラレコ装置１のハードウェアと協働し、本発明に係る各種機能を実現している。なお、本発明でいうコンピュータとは、制御部、記憶部等を備えた情報処理装置をいい、カラレコ装置１は、制御部７、記憶部６等を備えた情報処理装置であり、本発明のコンピュータの概念に含まれる。
The control unit 7 includes an audio output setting unit 11, an audio detection unit 12, a reproduction unit 13, and an audio similarity determination unit 14. Details of the audio output setting unit 11, the audio detection unit 12, the reproduction unit 13, and the audio similarity determination unit 14 will be described later. The control unit 7 is an information calculation processing device (CPU) that performs calculation and processing of information, and controls the entire color recording apparatus 1. The control unit 7 reads out and executes various programs stored in the storage unit 6 as appropriate, thereby realizing various functions according to the present invention in cooperation with the hardware of the color recording apparatus 1. The computer in the present invention refers to an information processing apparatus including a control unit, a storage unit, and the like, and the color recording apparatus 1 is an information processing apparatus including a control unit 7, a storage unit 6 and the like. Included in computer concept.
通信インタフェース部８は、通信ネットワーク（図示せず）を介して接続された他の装置が有する画像コンテンツをダウンロードしたり、カラレコ装置１の記憶部６に記憶されたカラレコ記録データを他の装置等に送信したりするための中継を行う。記憶部６に記憶された画像コンテンツ以外にも、他の装置からダウンロードした画像コンテンツを用いることで、プレイヤに飽きられにくい画像コンテンツを提供することができる。
The communication interface unit 8 downloads image content included in another device connected via a communication network (not shown), and records the color record data stored in the storage unit 6 of the color record device 1 to another device or the like. Or relay to send to. In addition to the image content stored in the storage unit 6, image content downloaded from another device can be used to provide image content that is less likely to be bored by the player.
次に、カラレコ装置１での処理について説明する。
図３は、本実施形態に係るカラレコ装置１のメイン処理のフローチャートである。
まず、ステップＳ１において、制御部７は、画像コンテンツと配役との選択画面を表示部４に表示する。ここで、画像コンテンツとは、例えば、ドラマや映画のワンシーン、ＣＭ等の動画や、４コマ漫画等の静止画をいう。ワンシーンとは、ドラマや映画に関する４、５分程度のダイジェストをいう。また、配役とは、画像コンテンツの中で、カラレコの対象となる役者をいう。なお、カラレコの対象となる役者は、１人でも複数人でもよい。 Next, processing in thecolor recording apparatus 1 will be described.
FIG. 3 is a flowchart of the main process of thecolor recording apparatus 1 according to this embodiment.
First, in step S <b> 1, thecontrol unit 7 displays a selection screen for image content and casting on the display unit 4. Here, the image content refers to, for example, one scene of a drama or movie, a moving image such as a CM, or a still image such as a four-frame cartoon. One scene is a digest of about 4 or 5 minutes about a drama or a movie. In addition, the term “casting” refers to an actor who is a target of color recording in the image content. Note that one or more actors may be subject to color recording.
図３は、本実施形態に係るカラレコ装置１のメイン処理のフローチャートである。
まず、ステップＳ１において、制御部７は、画像コンテンツと配役との選択画面を表示部４に表示する。ここで、画像コンテンツとは、例えば、ドラマや映画のワンシーン、ＣＭ等の動画や、４コマ漫画等の静止画をいう。ワンシーンとは、ドラマや映画に関する４、５分程度のダイジェストをいう。また、配役とは、画像コンテンツの中で、カラレコの対象となる役者をいう。なお、カラレコの対象となる役者は、１人でも複数人でもよい。 Next, processing in the
FIG. 3 is a flowchart of the main process of the
First, in step S <b> 1, the
次に、ステップＳ２では、画像コンテンツと配役との選択を、ステップＳ１において表示部４に表示された画面に従い、プレイヤが画像コンテンツの種類や配役を選択することで、選択受付部２Ａが受け付け、制御部７は、画像コンテンツと配役とに関する情報を受け付ける。
ステップＳ３では、制御部７（音声出力設定部１１）は、音声出力設定処理を行う。音声出力設定処理は、プレイヤにより選択された配役の音声を出力しないように設定する。例えば、画像コンテンツの作成時に画像と音声とを別々に作成し、さらに配役ごとに音声を分けることで設定することができる。 Next, in step S2, theselection accepting unit 2A accepts the selection of the image content and the casting by the player selecting the type and the casting of the image content according to the screen displayed on the display unit 4 in step S1, The control unit 7 receives information regarding image content and casting.
In step S3, the control unit 7 (audio output setting unit 11) performs an audio output setting process. The sound output setting process is set so that the sound of the casting selected by the player is not output. For example, it can be set by creating an image and sound separately when creating image content, and further dividing the sound for each cast.
ステップＳ３では、制御部７（音声出力設定部１１）は、音声出力設定処理を行う。音声出力設定処理は、プレイヤにより選択された配役の音声を出力しないように設定する。例えば、画像コンテンツの作成時に画像と音声とを別々に作成し、さらに配役ごとに音声を分けることで設定することができる。 Next, in step S2, the
In step S3, the control unit 7 (audio output setting unit 11) performs an audio output setting process. The sound output setting process is set so that the sound of the casting selected by the player is not output. For example, it can be set by creating an image and sound separately when creating image content, and further dividing the sound for each cast.
ステップＳ４では、制御部７は、選択した画像コンテンツの再生を開始する。画像コンテンツの再生を開始することで、表示部４には、例えば、図１に示す画像コンテンツの画像が表示される。この際、制御部７は、配役として設定した役者の音声を除く音声を、音声出力部３から出力させる。
このように、画像コンテンツの画像と、プレイヤが選択した配役以外の音声とを出力し、プレイヤが選択した配役の音声を出力しないので、画像コンテンツの画像に合わせて、プレイヤは、選択した配役のセリフを話すことができる。よって、誰でもが楽しめ、カラオケに代わる又はカラオケと共存する、新たなエンタテイメント性を提供することができる。 In step S4, thecontrol unit 7 starts playback of the selected image content. By starting the reproduction of the image content, for example, the image of the image content shown in FIG. 1 is displayed on the display unit 4. At this time, the control unit 7 causes the sound output unit 3 to output sound excluding the sound of the actor set as the cast.
As described above, the image of the image content and the sound other than the casting selected by the player are output, and the sound of the casting selected by the player is not output. Therefore, the player selects the selected casting according to the image of the image content. Can speak words. Therefore, anyone can enjoy new entertainment that can be replaced by karaoke or coexist with karaoke.
このように、画像コンテンツの画像と、プレイヤが選択した配役以外の音声とを出力し、プレイヤが選択した配役の音声を出力しないので、画像コンテンツの画像に合わせて、プレイヤは、選択した配役のセリフを話すことができる。よって、誰でもが楽しめ、カラオケに代わる又はカラオケと共存する、新たなエンタテイメント性を提供することができる。 In step S4, the
As described above, the image of the image content and the sound other than the casting selected by the player are output, and the sound of the casting selected by the player is not output. Therefore, the player selects the selected casting according to the image of the image content. Can speak words. Therefore, anyone can enjoy new entertainment that can be replaced by karaoke or coexist with karaoke.
ステップＳ５では、制御部７は、音声記録を開始する。具体的には、マイク２２から入力された音声を音声受付部２Ｂが受付可能な状態とする。そして、音声受付部２Ｂが受け付けた音声を記憶部６に記録する。
ステップＳ６では、制御部７は、表示部４に字幕を表示したか否かを判断する。表示部４に字幕を表示するとは、配役の役者がセリフを話すシーンが再生されることにより、配役の役者が話すセリフを、図１に示す字幕部３１に表示することをいう。表示部４に字幕を表示した場合（ステップＳ６：ＹＥＳ）には、制御部７は、処理をステップＳ７に移し、制御部７（音声検知部１２）は、マイク２２から入力されたプレイヤの音声を音声受付部２Ｂが受け付けることで、音声を検知する。他方、表示部４に字幕を表示しない場合（ステップＳ６：ＮＯ）には、制御部７は、処理をステップＳ６にとどめる。 In step S5, thecontrol unit 7 starts audio recording. Specifically, the voice input unit 2B is set in a state where the voice input from the microphone 22 can be received. Then, the voice received by the voice receiving unit 2B is recorded in the storage unit 6.
In step S <b> 6, thecontrol unit 7 determines whether subtitles are displayed on the display unit 4. Displaying subtitles on the display unit 4 means that the lines spoken by the casting actors are displayed on the subtitle unit 31 shown in FIG. 1 by reproducing the scene where the casting actors speak. When subtitles are displayed on the display unit 4 (step S6: YES), the control unit 7 moves the process to step S7, and the control unit 7 (voice detection unit 12) receives the player's voice input from the microphone 22. Is detected by the voice receiving unit 2B. On the other hand, when no subtitle is displayed on the display unit 4 (step S6: NO), the control unit 7 stops the process at step S6.
ステップＳ６では、制御部７は、表示部４に字幕を表示したか否かを判断する。表示部４に字幕を表示するとは、配役の役者がセリフを話すシーンが再生されることにより、配役の役者が話すセリフを、図１に示す字幕部３１に表示することをいう。表示部４に字幕を表示した場合（ステップＳ６：ＹＥＳ）には、制御部７は、処理をステップＳ７に移し、制御部７（音声検知部１２）は、マイク２２から入力されたプレイヤの音声を音声受付部２Ｂが受け付けることで、音声を検知する。他方、表示部４に字幕を表示しない場合（ステップＳ６：ＮＯ）には、制御部７は、処理をステップＳ６にとどめる。 In step S5, the
In step S <b> 6, the
次に、ステップＳ８では、制御部７は、撮影部５による撮影を開始する。これにより、カラレコを行うプレイヤの様子を撮影することができる。
ステップＳ９では、制御部７は、撮影部５により撮影されたプレイヤの画像を、表示部４に表示する。よって、選択した配役のセリフを話しているプレイヤの姿を、プレイヤはセリフを話しながら見ることができる。これにより、プレイヤのセリフを話す姿を見ながら、プレイヤと観客とが一体となって盛り上がることができるという、新たな楽しみを提供することができる。 Next, in step S <b> 8, thecontrol unit 7 starts photographing by the photographing unit 5. As a result, it is possible to photograph the state of the player who performs color recording.
In step S <b> 9, thecontrol unit 7 displays the image of the player photographed by the photographing unit 5 on the display unit 4. Therefore, the player can see the figure of the player who is speaking the selected cast line while speaking the line. Accordingly, it is possible to provide a new enjoyment that the player and the audience can be excited while watching the player speaking the words.
ステップＳ９では、制御部７は、撮影部５により撮影されたプレイヤの画像を、表示部４に表示する。よって、選択した配役のセリフを話しているプレイヤの姿を、プレイヤはセリフを話しながら見ることができる。これにより、プレイヤのセリフを話す姿を見ながら、プレイヤと観客とが一体となって盛り上がることができるという、新たな楽しみを提供することができる。 Next, in step S <b> 8, the
In step S <b> 9, the
ステップＳ１０では、制御部７は、画像コンテンツの再生が終了したか否かを判断する。画像コンテンツの再生が終了した場合（ステップＳ１０：ＹＥＳ）には、制御部７は、処理をステップＳ１１に移す。他方、画像コンテンツの再生が終了していない場合（ステップＳ１０：ＮＯ）には、制御部７は、処理をステップＳ９に戻す。
ステップＳ１１では、制御部７は、実行中の音声記録及び撮影部５による撮影を終了する。
そして、ステップＳ１２では、制御部７（音声類似判定部１４）は、音声の類似度を判定する。 In step S10, thecontrol unit 7 determines whether or not the reproduction of the image content has ended. When the reproduction of the image content is completed (step S10: YES), the control unit 7 moves the process to step S11. On the other hand, when the reproduction of the image content has not ended (step S10: NO), the control unit 7 returns the process to step S9.
In step S <b> 11, thecontrol unit 7 terminates the sound recording being performed and the photographing by the photographing unit 5.
In step S12, the control unit 7 (speech similarity determination unit 14) determines the similarity of speech.
ステップＳ１１では、制御部７は、実行中の音声記録及び撮影部５による撮影を終了する。
そして、ステップＳ１２では、制御部７（音声類似判定部１４）は、音声の類似度を判定する。 In step S10, the
In step S <b> 11, the
In step S12, the control unit 7 (speech similarity determination unit 14) determines the similarity of speech.
ここで、音声の類似度判定について説明する。
図４は、本実施形態に係る音声の類似判定方法を説明するための概念図である。
図４は、音声データを分析したグラフであって、時間を横軸に、音質量を縦軸にして、音声を分析した結果をグラフの形で示すものである。本実施形態では、音質量というパラメータを利用して評価を行っている。音質量が０とは、声を発していない状態をいう。また、音質量が大きい値であるほど、周波数の高い音質で発声していることを示す。また、時間を示す横軸では、発声タイミングのずれを認識できる。図４（ａ）は、画像コンテンツに含む配役の音声データを分析したグラフを、図４（ｂ）は、カラレコを行ったプレイヤの音声データを分析したグラフを示す。また、図４（ｃ）は、配役の音声データの分析グラフとプレイヤの音声データの分析グラフとを重ねた状態を示す。図４（ｃ）で重なり部３６は白く、外れ部３７は網掛けで示している。配役の音声データのグラフを基準として、この外れ部３７の面積が大きいほど、類似度が低く、プレイヤが配役になりきっていないことを示す。逆に、外れ部３７の面積が小さいほど、類似度が高く、プレイヤが配役になりきっていることを示す。 Here, speech similarity determination will be described.
FIG. 4 is a conceptual diagram for explaining the audio similarity determination method according to the present embodiment.
FIG. 4 is a graph obtained by analyzing voice data, and shows a result of voice analysis in the form of a graph with time on the horizontal axis and sound mass on the vertical axis. In this embodiment, evaluation is performed using a parameter called sound mass. A sound mass of 0 means a state where no voice is produced. In addition, the larger the sound mass, the higher the sound quality of the frequency. In addition, on the horizontal axis indicating time, it is possible to recognize a deviation in utterance timing. FIG. 4A shows a graph obtained by analyzing the voice data of the cast included in the image content, and FIG. 4B shows a graph obtained by analyzing the voice data of the player who performed the color recording. FIG. 4C shows a state in which the analysis graph of the voice data of the casting and the analysis graph of the voice data of the player are overlapped. In FIG. 4C, the overlappingportion 36 is white, and the detached portion 37 is shaded. Using the graph of the voice data of casting as a reference, the larger the area of the outlier 37 is, the lower the similarity is, indicating that the player has not been cast. On the contrary, the smaller the area of the disengaged portion 37, the higher the degree of similarity, indicating that the player has been cast.
図４は、本実施形態に係る音声の類似判定方法を説明するための概念図である。
図４は、音声データを分析したグラフであって、時間を横軸に、音質量を縦軸にして、音声を分析した結果をグラフの形で示すものである。本実施形態では、音質量というパラメータを利用して評価を行っている。音質量が０とは、声を発していない状態をいう。また、音質量が大きい値であるほど、周波数の高い音質で発声していることを示す。また、時間を示す横軸では、発声タイミングのずれを認識できる。図４（ａ）は、画像コンテンツに含む配役の音声データを分析したグラフを、図４（ｂ）は、カラレコを行ったプレイヤの音声データを分析したグラフを示す。また、図４（ｃ）は、配役の音声データの分析グラフとプレイヤの音声データの分析グラフとを重ねた状態を示す。図４（ｃ）で重なり部３６は白く、外れ部３７は網掛けで示している。配役の音声データのグラフを基準として、この外れ部３７の面積が大きいほど、類似度が低く、プレイヤが配役になりきっていないことを示す。逆に、外れ部３７の面積が小さいほど、類似度が高く、プレイヤが配役になりきっていることを示す。 Here, speech similarity determination will be described.
FIG. 4 is a conceptual diagram for explaining the audio similarity determination method according to the present embodiment.
FIG. 4 is a graph obtained by analyzing voice data, and shows a result of voice analysis in the form of a graph with time on the horizontal axis and sound mass on the vertical axis. In this embodiment, evaluation is performed using a parameter called sound mass. A sound mass of 0 means a state where no voice is produced. In addition, the larger the sound mass, the higher the sound quality of the frequency. In addition, on the horizontal axis indicating time, it is possible to recognize a deviation in utterance timing. FIG. 4A shows a graph obtained by analyzing the voice data of the cast included in the image content, and FIG. 4B shows a graph obtained by analyzing the voice data of the player who performed the color recording. FIG. 4C shows a state in which the analysis graph of the voice data of the casting and the analysis graph of the voice data of the player are overlapped. In FIG. 4C, the overlapping
図３に戻って、ステップＳ１３では、制御部７は、ステップＳ１２での判定結果を、表示部４に表示する。ここで、図５は、本実施形態に係る表示部４の表示例を示す図である。図５（ａ）に示すように、類似度を“なりきり度”としてパーセンテージで表示している。“なりきり度”は、図４で説明した音質量から計算された音質や感度、発声タイミングにより算出できる。また、図５（ｂ）に示すように、類似度を全国ランキングとして表示することができる。この判定結果は、後述で説明するように、後からでも見ることができる。また、他者が判定結果に対するコメントを投稿することができる。
このように、評価を指標等の数値で示すことにより、プレイヤの意欲を駆り立てることができる。 Returning to FIG. 3, in step S <b> 13, thecontrol unit 7 displays the determination result in step S <b> 12 on the display unit 4. Here, FIG. 5 is a diagram illustrating a display example of the display unit 4 according to the present embodiment. As shown in FIG. 5A, the degree of similarity is displayed as a percentage as a percentage. The “degree of perfection” can be calculated based on the sound quality, sensitivity, and utterance timing calculated from the sound mass described with reference to FIG. Further, as shown in FIG. 5B, the similarity can be displayed as a national ranking. This determination result can be seen later, as will be described later. Also, others can post comments on the determination results.
In this way, the player's motivation can be stimulated by indicating the evaluation as a numerical value such as an index.
このように、評価を指標等の数値で示すことにより、プレイヤの意欲を駆り立てることができる。 Returning to FIG. 3, in step S <b> 13, the
In this way, the player's motivation can be stimulated by indicating the evaluation as a numerical value such as an index.
ステップＳ１４では、制御部７は、音声記録を保存するか否かを判断する。音声記録を保存するとは、ステップＳ５で開始し、ステップＳ１１で終了した音声記録であるカラレコ記録データを保存するか否かを判断する。音声記録を保存する場合（ステップＳ１４：ＹＥＳ）には、制御部７は、処理をステップＳ１５に移す。他方、音声記録を保存しない場合（ステップＳ１４：ＮＯ）には、制御部７は、処理をステップＳ１６に移す。
In step S14, the control unit 7 determines whether or not to save the voice recording. Saving the voice recording is determined in step S5, and whether or not to save the color record recording data that is the voice recording finished in step S11. When the audio recording is stored (step S14: YES), the control unit 7 moves the process to step S15. On the other hand, when not storing the voice recording (step S14: NO), the control unit 7 moves the process to step S16.
ステップＳ１５では、制御部７は、記憶部６に音声記録を保存する。なお、保存場所として、例えば、通信インタフェース部８を介して、他の装置（図示せず）に音声記録を保存してもよい。また、音声記録と共に判定結果（評価）を保存してもよい。その後、制御部７は、本処理を終了する。
他方、ステップＳ１６では、制御部７は、音声記録を消去した後に、本処理を終了する。 In step S <b> 15, thecontrol unit 7 stores the audio recording in the storage unit 6. Note that, as the storage location, for example, the voice recording may be stored in another device (not shown) via the communication interface unit 8. Further, the determination result (evaluation) may be stored together with the voice recording. Then, the control part 7 complete | finishes this process.
On the other hand, in step S16, thecontrol unit 7 ends the present process after erasing the voice recording.
他方、ステップＳ１６では、制御部７は、音声記録を消去した後に、本処理を終了する。 In step S <b> 15, the
On the other hand, in step S16, the
次に、保存した音声記録を再生する場合の処理について説明する。
図６は、本実施形態に係るリプレイ処理のフローチャートである。
まず、ステップＳ３１において、制御部７は、リプレイ可能な画像コンテンツの一覧を表示部４に表示する。これは、例えば、プレイヤ自身が音声記録をした画像コンテンツの一覧を表示してもよいし、他者が音声記録したものを含んだ画像コンテンツの一覧を表示してもよい。 Next, a process for reproducing the stored audio recording will be described.
FIG. 6 is a flowchart of the replay process according to the present embodiment.
First, in step S31, thecontrol unit 7 displays a list of replayable image contents on the display unit 4. For example, a list of image contents recorded by the player himself / herself may be displayed, or a list of image contents including those recorded by the other person may be displayed.
図６は、本実施形態に係るリプレイ処理のフローチャートである。
まず、ステップＳ３１において、制御部７は、リプレイ可能な画像コンテンツの一覧を表示部４に表示する。これは、例えば、プレイヤ自身が音声記録をした画像コンテンツの一覧を表示してもよいし、他者が音声記録したものを含んだ画像コンテンツの一覧を表示してもよい。 Next, a process for reproducing the stored audio recording will be described.
FIG. 6 is a flowchart of the replay process according to the present embodiment.
First, in step S31, the
次に、ステップＳ３２では、制御部７は、入力部２からリプレイする画像コンテンツの選択を受け付け、ステップＳ３３において、制御部７（再生部１３）は、選択された画像コンテンツの再生を開始する。
ステップＳ３４では、制御部７は、ランキングの閲覧選択を受け付けたか否かを判断する。ランキングの閲覧選択を受け付けた場合（ステップＳ３４：ＹＥＳ）には、制御部７は、処理をステップＳ３５に移す。一方、ランキングの閲覧選択を受け付けていない場合（ステップＳ３４：ＮＯ）には、制御部７は、処理をステップＳ３６に移す。 Next, in step S32, thecontrol unit 7 accepts selection of image content to be replayed from the input unit 2, and in step S33, the control unit 7 (playing unit 13) starts playing the selected image content.
In step S34, thecontrol unit 7 determines whether or not a ranking browsing selection has been accepted. When the ranking browsing selection is accepted (step S34: YES), the control unit 7 moves the process to step S35. On the other hand, when the ranking browsing selection is not received (step S34: NO), the control unit 7 moves the process to step S36.
ステップＳ３４では、制御部７は、ランキングの閲覧選択を受け付けたか否かを判断する。ランキングの閲覧選択を受け付けた場合（ステップＳ３４：ＹＥＳ）には、制御部７は、処理をステップＳ３５に移す。一方、ランキングの閲覧選択を受け付けていない場合（ステップＳ３４：ＮＯ）には、制御部７は、処理をステップＳ３６に移す。 Next, in step S32, the
In step S34, the
ステップＳ３５では、制御部７は、上述の図５（ｂ）に示したような、ランキングを表示部４に表示する。
ステップＳ３６では、制御部７は、リプレイ処理を終了させるか否かを判断する。入力部２からリプレイを終了する信号を受け付け、リプレイ処理を終了させる場合（ステップＳ３６：ＹＥＳ）には、制御部７は、本処理を終了する。他方、リプレイ処理を終了させない場合（ステップＳ３６：ＮＯ）には、制御部７は、処理をステップＳ３３に戻す。そして、何度でもリプレイを行うことができる。 In step S35, thecontrol unit 7 displays the ranking on the display unit 4 as shown in FIG.
In step S36, thecontrol unit 7 determines whether or not to end the replay process. When receiving a signal for ending the replay from the input unit 2 and ending the replay process (step S36: YES), the control unit 7 ends this process. On the other hand, when the replay process is not terminated (step S36: NO), the control unit 7 returns the process to step S33. And you can replay as many times as you like.
ステップＳ３６では、制御部７は、リプレイ処理を終了させるか否かを判断する。入力部２からリプレイを終了する信号を受け付け、リプレイ処理を終了させる場合（ステップＳ３６：ＹＥＳ）には、制御部７は、本処理を終了する。他方、リプレイ処理を終了させない場合（ステップＳ３６：ＮＯ）には、制御部７は、処理をステップＳ３３に戻す。そして、何度でもリプレイを行うことができる。 In step S35, the
In step S36, the
このように、記録されたプレイヤのカラレコを再生することができるので、他のプレイヤのカラレコを再生して見ることができ、また、自分のカラレコを他の者に見せることができる。また、後から自分のカラレコを再生して客観的に見ることができる。
なお、通信インタフェース部８を介して、他の装置（図示せず）に音声記録と共に判定結果を保存した場合には、他のプレイヤの評価が保存される度にランキングが変動するため、よりリプレイを楽しむことができる。 Thus, since the recorded player's color record can be reproduced, the other player's color record can be reproduced and viewed, and his own color record can be shown to others. In addition, you can reproduce your own color record later and see it objectively.
Note that if the determination result is stored together with the audio recording in another device (not shown) via thecommunication interface unit 8, the ranking changes every time the evaluation of the other player is stored, so that the replay is more performed. Can enjoy.
なお、通信インタフェース部８を介して、他の装置（図示せず）に音声記録と共に判定結果を保存した場合には、他のプレイヤの評価が保存される度にランキングが変動するため、よりリプレイを楽しむことができる。 Thus, since the recorded player's color record can be reproduced, the other player's color record can be reproduced and viewed, and his own color record can be shown to others. In addition, you can reproduce your own color record later and see it objectively.
Note that if the determination result is stored together with the audio recording in another device (not shown) via the
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されるものではない。また、実施形態に記載した効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、実施形態に記載したものに限定されない。なお、上述した実施形態及び後述する変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。
As mentioned above, although embodiment of this invention was described, this invention is not limited to embodiment mentioned above. In addition, the effects described in the embodiments are merely a list of the most preferable effects resulting from the present invention, and the effects of the present invention are not limited to those described in the embodiments. In addition, although embodiment mentioned above and the deformation | transformation form mentioned later can also be used in combination as appropriate, detailed description is abbreviate | omitted.
（変形形態）
（１）本実施形態では、ドラマのワンシーンを例に、動画の画像コンテンツの場合について説明した。しかし、これに限らず、静止画の画像コンテンツでもよい。図７は、表示部に表示される画像コンテンツの他の表示例を示す図である。図７に示す４コマ漫画の場合において、表示部に漫画の１コマと、その状況を示す字幕とを表示し、所定のタイミングで次のコマに切り替えることで、静止画の画像コンテンツにおいても、プレイヤは、カラレコを行うことができる。 (Deformation)
(1) In the present embodiment, the case of moving image content has been described by taking a drama one scene as an example. However, the present invention is not limited to this, and still image content may be used. FIG. 7 is a diagram illustrating another display example of the image content displayed on the display unit. In the case of the four-frame comic shown in FIG. 7, one frame of the comic and a subtitle indicating the situation are displayed on the display unit, and by switching to the next frame at a predetermined timing, The player can perform color recording.
（１）本実施形態では、ドラマのワンシーンを例に、動画の画像コンテンツの場合について説明した。しかし、これに限らず、静止画の画像コンテンツでもよい。図７は、表示部に表示される画像コンテンツの他の表示例を示す図である。図７に示す４コマ漫画の場合において、表示部に漫画の１コマと、その状況を示す字幕とを表示し、所定のタイミングで次のコマに切り替えることで、静止画の画像コンテンツにおいても、プレイヤは、カラレコを行うことができる。 (Deformation)
(1) In the present embodiment, the case of moving image content has been described by taking a drama one scene as an example. However, the present invention is not limited to this, and still image content may be used. FIG. 7 is a diagram illustrating another display example of the image content displayed on the display unit. In the case of the four-frame comic shown in FIG. 7, one frame of the comic and a subtitle indicating the situation are displayed on the display unit, and by switching to the next frame at a predetermined timing, The player can perform color recording.
（２）本実施形態では、配役に応じてカラレコを行うものであった。しかし、これに限らず、配役の所定の言葉に応じてカラレコを行うものであってよい。例えば、「ワーァァ！！」という驚きの言葉や、「ウッフン」という吐息等、予め決めたキーワードのみの音声の出力を行わないようにして、驚き具合や色気具合を競い合うように楽しんでもよい。また、例えば、スポーツ中継のような画像コンテンツを出力し、セリフ部分を全て出力しないで実況中継の吹き替えを楽しんでもよい。
(2) In the present embodiment, color recording is performed according to casting. However, the present invention is not limited to this, and it may be performed in accordance with a predetermined word for casting. For example, it may be enjoyed so as to compete for the degree of surprise and the color tone by not outputting the voice of only a predetermined keyword such as a surprise word “Wow!” Or a sigh of “Uhfu”. In addition, for example, image content such as a sports broadcast may be output, and it may be possible to enjoy the dubbing of the live broadcast without outputting all the speech portions.
（３）本実施形態では、類似度の判定をカラレコが終了した後に行うものであった。しかし、これに限らず、セリフを話す都度、判定してもよい。そして、所定の基準を下回る場合に、途中でゲームオーバーとして、画像コンテンツの再生を終了する等、ゲーム性を持たせてもよい。
(3) In this embodiment, the similarity is determined after the end of the color recording. However, the present invention is not limited to this, and determination may be made every time a speech is spoken. And when it falls below a predetermined reference | standard, you may give game nature, such as complete | finishing reproduction | regeneration of an image content as a game over on the way.
（４）本実施形態では、カラレコを行うプレイヤの姿を、画面左上方に表示するものであったが、配役の画像上に重ねるようにカラレコを行うプレイヤの姿を表示させてもよい。また、配役の表情を捉えた画像と、撮影部により撮影されたカラレコを行うプレイヤの表情とから、類似性を判断してもよい。この場合、顔のパーツである眉毛の位置や形、口の形等を抽出して、類似を判断することで実現できる。
(4) In this embodiment, the figure of the player performing color recording is displayed at the upper left of the screen, but the figure of the player performing color recording may be displayed so as to be superimposed on the cast image. Further, similarity may be determined from an image that captures the facial expression of the cast and the facial expression of the player performing the color recording taken by the photographing unit. In this case, it can be realized by extracting the position and shape of the eyebrows, which are facial parts, the shape of the mouth, and the like and judging the similarity.
（５）本実施形態では、ビデオカメラ及びマイクが外付けされたカラレコ装置を用いたが、カラレコ装置に内蔵されていてもよい。また、図２で説明したカラレコ装置１の機能ブロックを携帯電話機等の携帯端末と見立てることで、携帯端末においても、カラレコ装置の機能を実現可能である。
(5) In the present embodiment, the color recording apparatus to which the video camera and the microphone are externally attached is used. However, the video recording apparatus may be built in the color recording apparatus. Further, by assuming that the functional block of the color recording apparatus 1 described with reference to FIG. 2 is a portable terminal such as a mobile phone, the function of the color recording apparatus can be realized also in the portable terminal.
（６）本実施形態では、配役のセリフを出力しないように制御した。しかし、出力可否を切り替えて、見本を見られるようにしてもよい。
(6) In the present embodiment, control is performed so as not to output the dialogue lines. However, the sample may be viewed by switching the output availability.
Claims (10)
- 画像コンテンツ及び配役の選択を受け付ける選択受付部と、
前記選択受付部により受け付けられた前記画像コンテンツの画像に対応する音声のうち、前記配役に対応する所定の音声を出力しないように設定する音声出力設定部と、
前記音声出力設定部の設定に応じて、前記所定の音声を除く他の音声を出力する音声出力部と、
前記画像コンテンツの画像と、前記所定の音声に対応する文字とを表示する表示部と、
前記表示部に前記文字が表示されている間プレイヤの音声を受け付ける音声受付部と、
を備えるカラレコ装置。 A selection receiving unit for receiving selection of image content and casting;
An audio output setting unit configured not to output a predetermined audio corresponding to the casting among audio corresponding to the image of the image content received by the selection receiving unit;
According to the setting of the audio output setting unit, an audio output unit that outputs other audio except the predetermined audio;
A display unit for displaying an image of the image content and characters corresponding to the predetermined sound;
A voice receiving unit that receives the voice of the player while the characters are displayed on the display unit;
Carreco device equipped with. - 請求項１に記載のカラレコ装置において、
プレイヤを撮影する撮影部を備え、
前記表示部は、前記撮影部により撮影された前記プレイヤの画像を表示すること、
を特徴とするカラレコ装置。 The color recording apparatus according to claim 1,
A shooting section for shooting the player;
The display unit displays an image of the player photographed by the photographing unit;
Color recording device characterized by. - 請求項２に記載のカラレコ装置において、
前記音声受付部により受け付けられた前記音声を検知する音声検知部を備え、
前記表示部は、前記音声検知部が前記音声を検知したことに応じて、前記撮影部により撮影された前記プレイヤの画像を表示すること、
を特徴とするカラレコ装置。 The color recording apparatus according to claim 2,
A voice detection unit that detects the voice received by the voice reception unit;
The display unit displays an image of the player imaged by the imaging unit in response to the audio detection unit detecting the audio;
Color recording device characterized by. - 請求項２又は３に記載のカラレコ装置において、
前記表示部は、前記表示部の一部領域に、又は前記配役に対応する画像に置き換えて、前記プレイヤの画像を表示すること、
を特徴とするカラレコ装置。 In the color recording apparatus according to claim 2 or 3,
The display unit displays an image of the player in a partial area of the display unit or replaced with an image corresponding to the casting;
Color recording device characterized by. - 請求項１から４のいずれか１項に記載のカラレコ装置において、
前記画像コンテンツの画像は、静止画により構成されるものであること、
を特徴とするカラレコ装置。 In the color recording apparatus according to any one of claims 1 to 4,
The image of the image content is composed of a still image;
Color recording device characterized by. - 請求項１から５のいずれか１項に記載のカラレコ装置において、
前記音声受付部により受け付けられた前記音声を記憶する記憶部と、
前記記憶部に記録された前記音声を、前記画像コンテンツの画像と、前記他の音声と共に再生する再生部と、
を備えること、
を特徴とするカラレコ装置。 The color recording apparatus according to any one of claims 1 to 5,
A storage unit for storing the voice received by the voice receiving unit;
A reproduction unit that reproduces the audio recorded in the storage unit together with the image of the image content and the other audio;
Providing
Color recording device characterized by. - 請求項１から６のいずれか１項に記載のカラレコ装置において、
前記音声受付部により受け付けられた前記音声と、前記所定の音声との類似度を、声質、タイミング、及び発音内容の少なくともいずれかに基づき判定する音声類似判定部を備え、
前記表示部は、前記音声類似判定部により判定された前記類似度を視覚的に表示すること、
を特徴とするカラレコ装置。 In the color recording apparatus according to any one of claims 1 to 6,
A voice similarity determination unit that determines the similarity between the voice received by the voice reception unit and the predetermined voice based on at least one of voice quality, timing, and pronunciation content;
The display unit visually displays the similarity determined by the audio similarity determination unit;
Color recording device characterized by. - 請求項１から７のいずれか１項に記載のカラレコ装置において、
記憶媒体に記憶された前記画像コンテンツ、又は通信ネットワークを介して接続された他の装置からダウンロードされた前記画像コンテンツを用いること、
を特徴とするカラレコ装置。 In the color record apparatus of any one of Claim 1 to 7,
Using the image content stored in a storage medium or the image content downloaded from another device connected via a communication network;
Color recording device characterized by. - 請求項１から８のいずれか１項に記載のカラレコ装置において、
このカラレコ装置は、携帯端末であること、
を特徴とするカラレコ装置。 In the color record apparatus of any one of Claim 1 to 8,
This color recording device is a portable terminal,
Color recording device characterized by. - コンピュータに、
画像コンテンツ及び配役の選択を受け付けるステップと、
受け付けられた前記画像コンテンツの画像に対応する音声のうち、前記配役に対応する所定の音声を出力しないように設定するステップと、
前記設定に応じて、前記所定の音声を除く他の音声を出力するステップと、
前記画像コンテンツの画像と、前記所定の音声に対応する文字とを表示するステップと、
前記文字が表示されたことに応じてプレイヤの音声を受け付けるステップと、
を実行させるためのコンピュータプログラム。 On the computer,
Receiving image content and cast selection;
A step of setting not to output a predetermined sound corresponding to the casting among the sounds corresponding to the received image content image;
Outputting other sounds excluding the predetermined sound according to the setting;
Displaying an image of the image content and characters corresponding to the predetermined sound;
Receiving a player's voice in response to the display of the character;
A computer program for running.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008-036055 | 2008-02-18 | ||
| JP2008036055A JP2009193001A (en) | 2008-02-18 | 2008-02-18 | Karareko device and computer program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2009104546A1 true WO2009104546A1 (en) | 2009-08-27 |
Family
ID=40985427
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2009/052525 WO2009104546A1 (en) | 2008-02-18 | 2009-02-16 | Karaoke recorder and computer program |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2009193001A (en) |
| WO (1) | WO2009104546A1 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5550248B2 (en) * | 2009-03-19 | 2014-07-16 | 株式会社ソニー・コンピュータエンタテインメント | Program, information storage medium, image processing apparatus, image processing method, and data structure |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002239221A (en) * | 2001-02-16 | 2002-08-27 | Namco Ltd | Game information, information storage medium, and game system |
| JP2002351489A (en) * | 2001-05-29 | 2002-12-06 | Namco Ltd | Game information, information storage medium, and game machine |
| JP2006071711A (en) * | 2004-08-31 | 2006-03-16 | Daiichikosho Co Ltd | Karaoke system |
| JP2006198135A (en) * | 2005-01-20 | 2006-08-03 | Aruze Corp | Game device |
| JP2007114561A (en) * | 2005-10-21 | 2007-05-10 | Taito Corp | Mobile phone-contained voice conversion system |
-
2008
- 2008-02-18 JP JP2008036055A patent/JP2009193001A/en active Pending
-
2009
- 2009-02-16 WO PCT/JP2009/052525 patent/WO2009104546A1/en active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002239221A (en) * | 2001-02-16 | 2002-08-27 | Namco Ltd | Game information, information storage medium, and game system |
| JP2002351489A (en) * | 2001-05-29 | 2002-12-06 | Namco Ltd | Game information, information storage medium, and game machine |
| JP2006071711A (en) * | 2004-08-31 | 2006-03-16 | Daiichikosho Co Ltd | Karaoke system |
| JP2006198135A (en) * | 2005-01-20 | 2006-08-03 | Aruze Corp | Game device |
| JP2007114561A (en) * | 2005-10-21 | 2007-05-10 | Taito Corp | Mobile phone-contained voice conversion system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2009193001A (en) | 2009-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2008294584A (en) | Digest reproducing apparatus and method | |
| KR20100055458A (en) | Contents reproducing device, and contents reproducing method | |
| JP2010118859A (en) | Information processor, information processing method, information processing program and imaging device | |
| US20080113326A1 (en) | Encoding and Decoding System for Making and Using Interactive Language Training and Entertainment Materials | |
| JP3872855B2 (en) | Music playback device | |
| JP2006346284A (en) | After-recording experience device and after-recording experience program | |
| JP2014219443A (en) | Karaoke system | |
| JP2012100798A (en) | Portable game machine | |
| WO2009104546A1 (en) | Karaoke recorder and computer program | |
| JP2006126300A (en) | Karaoke machine | |
| JP6196839B2 (en) | A communication karaoke system characterized by voice switching processing during communication duets | |
| JP3491833B2 (en) | Program, information storage medium and game device | |
| JP6170604B1 (en) | Speech generator | |
| JP5310682B2 (en) | Karaoke equipment | |
| JP4172655B2 (en) | GAME SYSTEM, PROGRAM, AND INFORMATION STORAGE MEDIUM | |
| JP4353084B2 (en) | Video reproduction method, apparatus and program | |
| KR100383061B1 (en) | A learning method using a digital audio with caption data | |
| JP2007163801A (en) | Content reproduction device | |
| JP2005352330A (en) | Speech division recording device | |
| JP3413765B2 (en) | Synchronization device for singing out karaoke equipment | |
| JP6601615B2 (en) | Movie processing system, movie processing program, and portable terminal | |
| JP2008022978A (en) | Game system, program and information storage medium | |
| JP3970080B2 (en) | Movie playback apparatus, movie playback method and computer program thereof | |
| KR102025903B1 (en) | Apparatus and method for language learning | |
| JP6134043B1 (en) | Voice generation program and game device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 09711617 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 09711617 Country of ref document: EP Kind code of ref document: A1 |