JP2011215347A - Timing designation device, music player, karaoke system, and timing designation method - Google Patents

Timing designation device, music player, karaoke system, and timing designation method Download PDF

Info

Publication number
JP2011215347A
JP2011215347A JP2010082967A JP2010082967A JP2011215347A JP 2011215347 A JP2011215347 A JP 2011215347A JP 2010082967 A JP2010082967 A JP 2010082967A JP 2010082967 A JP2010082967 A JP 2010082967A JP 2011215347 A JP2011215347 A JP 2011215347A
Authority
JP
Japan
Prior art keywords
timing
image
unit
data
designation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010082967A
Other languages
Japanese (ja)
Other versions
JP5394301B2 (en
Inventor
Nobuyasu Sone
暢泰 曽根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xing Inc
Original Assignee
Xing Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xing Inc filed Critical Xing Inc
Priority to JP2010082967A priority Critical patent/JP5394301B2/en
Publication of JP2011215347A publication Critical patent/JP2011215347A/en
Application granted granted Critical
Publication of JP5394301B2 publication Critical patent/JP5394301B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a timing designation device for designating timing of displaying an image within a reproduction period of music data, a music player, a Karaoke system, and a timing designation method.SOLUTION: A terminal device receives image designation information for designating an image selected by a user. The terminal device receives timing selected by the user by associating the timing with a position in music data. The terminal device associates the received image designation information with the received timing to transmit it to the Karaoke device, and designates the image and the timing to the Karaoke device. The Karaoke device displays, when a reproduction position of the music data roughly matches the position in the music data corresponding to the designated timing, the image designated by the image designation information associated with the position during the reproduction period of the music data.

Description

本発明は、画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定装置、曲再生装置、カラオケシステム及びタイミング指定方法に関する。   The present invention relates to a timing designating device, a music playing device, a karaoke system, and a timing designating method for designating timing for displaying an image within a music data playback period.

予め記憶された複数の演奏曲から選択された楽曲データを再生すると共に、再生する曲に応じた画像を表示する曲再生装置がある。このような曲再生装置として、カラオケ装置がある。カラオケ装置は、複数のカラオケ曲から選択されたカラオケ曲の楽曲データを再生すると共に、カラオケ楽曲データの再生に同期してカラオケ曲の歌詞及びカラオケ曲に関連する画像等を画面に表示する。カラオケ装置のユーザは、表示されている歌詞及び画像を見ながら、伴奏として再生されるカラオケ曲に従い、歌唱を楽しむことができる(例えば、特許文献1及び特許文献2参照)。   There is a music playback device that plays back music data selected from a plurality of performance songs stored in advance and displays an image corresponding to the music to be played back. As such a music reproducing device, there is a karaoke device. The karaoke apparatus reproduces the song data of the karaoke song selected from the plurality of karaoke songs, and displays the lyrics of the karaoke song and the image related to the karaoke song on the screen in synchronization with the reproduction of the karaoke song data. The user of the karaoke apparatus can enjoy singing according to the karaoke music reproduced as an accompaniment while viewing the displayed lyrics and images (see, for example, Patent Document 1 and Patent Document 2).

特開2004−246075号公報Japanese Patent Laid-Open No. 2004-246075 特開2007−94244号公報JP 2007-94244 A

しかしながら、従来技術では、画像を楽曲データの再生期間内に表示するタイミングをユーザが指定できないという問題があった。   However, the conventional technique has a problem that the user cannot specify the timing for displaying an image within the reproduction period of music data.

本願は、斯かる事情に鑑みてなされたものである。その目的は、画像を表示するタイミングを楽曲データ内の位置に対応付けて指定するタイミング指定部を備えることにより、画像を楽曲データの再生期間内に表示するタイミングをユーザが指定することが可能となるタイミング指定装置、曲再生装置、カラオケシステム及びタイミング指定方法を提供することにある。   The present application has been made in view of such circumstances. The purpose is to provide a timing designating unit that designates the timing for displaying an image in association with the position in the music data, so that the user can designate the timing for displaying the image within the reproduction period of the music data. It is providing the timing designation | designated apparatus, music reproduction apparatus, karaoke system, and timing designation | designated method which become.

本願に開示するタイミング指定装置は、画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定装置において、前記タイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定部を備える。   The timing designating device disclosed in the present application is a timing designating device for designating timing for displaying an image within a reproduction period of music data, and includes a timing designating unit for designating the timing in association with a position in the music data.

本願にあっては、画像を楽曲データの演奏期間内に表示するタイミングとして、楽曲データ内の位置がユーザにより選択される。   In the present application, the position in the music data is selected by the user as the timing for displaying the image within the performance period of the music data.

本願に開示するタイミング指定装置は、前記楽曲データに関連付けられた歌詞データを記憶する歌詞記憶部と、該歌詞記憶部により記憶した歌詞データを表示する表示部と、該表示部により表示した歌詞データの一部を受付ける一部受付部とを更に備え、前記タイミング指定部は、前記一部受付部により受付けた歌詞データの一部に対応するタイミングを指定する。   The timing specification device disclosed in the present application includes a lyrics storage unit that stores lyrics data associated with the music data, a display unit that displays lyrics data stored by the lyrics storage unit, and lyrics data displayed by the display unit The timing designation unit designates timing corresponding to a part of the lyrics data received by the partial reception unit.

本願にあっては、楽曲データに関連付けられた歌詞データが表示される。表示された歌詞データの一部がユーザにより選択されて、当該一部が画像を楽曲データの再生期間内に表示するタイミングとして指定される。   In the present application, lyrics data associated with music data is displayed. A part of the displayed lyrics data is selected by the user, and the part is designated as a timing for displaying the image within the reproduction period of the music data.

本願に開示するタイミング指定装置は、前記楽曲データは、少なくとも一つの楽器の複数の発音タイミングを含み、前記複数の発音タイミングを表示する表示部を備え、前記タイミング指定部は、前記表示部により表示した前記複数の発音タイミングの一部を指定する。   In the timing specifying device disclosed in the present application, the music data includes a plurality of sound generation timings of at least one musical instrument, and includes a display unit that displays the plurality of sound generation timings. The timing specification unit is displayed by the display unit. A part of the plurality of sound generation timings is designated.

本願にあっては、楽曲データに含まれるギター及びドラム等の楽器夫々の複数の発音タイミングが表示される。表示された複数の発音タイミングの一部が、ユーザにより選択され、当該一部が画像を楽曲データの再生期間内に表示するタイミングとして指定される。   In the present application, a plurality of sound generation timings of each of musical instruments such as guitars and drums included in the music data are displayed. A part of the displayed sound generation timings is selected by the user, and the part is designated as a timing for displaying an image within the reproduction period of the music data.

本願に開示するタイミング指定装置は、前記楽曲データに基づいて曲の特徴部分を抽出する抽出部と、該抽出部により抽出した特徴部分を表示する表示部と、該表示部により表示した特徴部分の一部を受付ける一部受付部とを更に備え、前記タイミング指定部は、前記一部受付部により受付けた特徴部分の一部に対応するタイミングを指定する。   The timing specification device disclosed in the present application includes an extraction unit that extracts a feature portion of a song based on the music data, a display unit that displays the feature portion extracted by the extraction unit, and a feature portion displayed by the display unit. A partial reception unit for receiving a part; and the timing specifying unit specifies a timing corresponding to a part of the feature portion received by the partial reception unit.

本願にあっては、楽曲データから抽出された曲の前奏部分、サビ部分及び間奏部分等の曲の特徴部分が表示される。表示された特徴部分のうち、一部の特徴部分がユーザにより選択され、当該一部の特徴部分が画像を再生期間内に表示するタイミングとして指定される。   In the present application, characteristic portions of a song such as a prelude portion, a chorus portion, and an interlude portion of the song extracted from the song data are displayed. Among the displayed feature parts, a part of the feature parts is selected by the user, and the part of the feature parts is designated as a timing for displaying the image within the reproduction period.

本願に開示するタイミング指定装置は、前記楽曲データから曲の主旋律を抽出する抽出部と、該抽出部により抽出した主旋律を表示する表示部と、該表示部により表示した主旋律の一部を受付ける一部受付部とを更に備え、前記タイミング指定部は、前記一部受付部により受付けた主旋律の一部に対応するタイミングを指定する。   A timing specifying device disclosed in the present application is an extraction unit that extracts a main melody of a song from the music data, a display unit that displays the main melody extracted by the extraction unit, and a part of the main melody displayed by the display unit. A timing reception unit that specifies a timing corresponding to a part of the main melody received by the partial reception unit.

本願にあっては、楽曲データに基づいて抽出された曲の主旋律が表示される。表示された主旋律の一部がユーザにより選択され、当該一部が画像を楽曲データの再生期間内に表示するタイミングとして指定される。   In the present application, the main melody of the music extracted based on the music data is displayed. A part of the displayed main melody is selected by the user, and the part is designated as a timing for displaying an image within the reproduction period of the music data.

本願に開示するタイミング指定装置は、前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、該画像指定情報受付部により受付けた画像指定情報を前記タイミング指定部により指定したタイミングに関連付けて記憶する記憶部と、該記憶部により前記タイミングに関連付けて記憶した前記画像指定情報を送信する送信部とを備える。   A timing designation device disclosed in the present application relates to an image designation information receiving unit that accepts image designation information that designates the image, and image designation information received by the image designation information receiving unit in association with a timing designated by the timing designation unit. A storage unit that stores the image designation information stored in association with the timing by the storage unit;

本願にあっては、ユーザにより選択された画像の画像データのファイル名等が画像を指定する画像指定情報としてタイミング指定装置により受付けられる。タイミング指定装置は、指定したタイミングに関連付けて画像指定情報を外部に送信する。   In the present application, the file name of the image data of the image selected by the user is received by the timing specifying device as image specifying information for specifying the image. The timing designation device transmits image designation information to the outside in association with the designated timing.

本願に開示するタイミング指定装置は、複数の画像の一覧を記憶する一覧記憶部を備え、前記画像指定情報は、前記一覧記憶部により記憶する前記一覧から選択された画像を指定する。   The timing specification device disclosed in the present application includes a list storage unit that stores a list of a plurality of images, and the image specification information specifies an image selected from the list stored by the list storage unit.

本願にあっては、予め記憶されている画像一覧から、楽曲データの再生期間内に表示する画像がユーザにより選択され、当該画像を指定する画像指定情報が受付けられる。   In the present application, an image to be displayed within a reproduction period of music data is selected by a user from an image list stored in advance, and image designation information for designating the image is received.

本願に開示する曲再生装置は、楽曲データを再生する再生部を備え、前記楽曲データの再生期間内に画像を表示する曲再生装置において、前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、前記画像を表示するタイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定付部と、前記画像指定情報受付部により受付けた画像指定情報を前記タイミング指定部により指定したタイミングに関連付けて記憶する記憶部と、前記再生部により前記楽曲データを再生している場合、前記記憶部に記憶したタイミングに基づいて、前記記憶部により該タイミングが関連付けて記憶されている画像指定情報が指定する画像を表示する表示部とを備える。   A music playback device disclosed in the present application includes a playback unit that plays back music data, and in a music playback device that displays an image within a playback period of the music data, accepts image designation information that designates the image. A timing designation unit that designates the timing for displaying the image in association with a position in the music data, and the timing that the image designation information received by the image designation information reception unit is designated by the timing designation unit. In the case where the music data is reproduced by the storage unit and the reproduction unit, the image designation information stored in association with the timing by the storage unit is stored based on the timing stored in the storage unit. A display unit that displays an image to be designated.

本願にあっては、楽曲データの再生期間内に表示する画像がユーザにより選択され、当該画像を指定する画像指定情報が受付けられる。選択された画像を表示するタイミングとして、楽曲データ内の位置が指定される。曲再生装置は、指定した楽曲データ内の位置に関連付けて画像指定情報を記憶する。曲再生装置は、楽曲データの再生期間内に、楽曲データを再生している位置に関連付けて記憶している画像指定情報を読出し、当該画像指定情報が指定する画像を表示する。   In the present application, an image to be displayed within a music data reproduction period is selected by the user, and image designation information for designating the image is received. The position in the music data is designated as the timing for displaying the selected image. The music reproducing device stores the image designation information in association with the designated position in the music data. The music reproducing device reads the image designation information stored in association with the position where the music data is reproduced within the reproduction period of the music data, and displays the image designated by the image designation information.

本願に開示するカラオケシステムは、楽曲データを再生する再生部を有し、該再生部により再生する楽曲データの再生期間内に画像を表示する曲再生装置と、前記画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定装置とを備えたカラオケシステムにおいて、前記タイミング指定装置は、前記画像を表示するタイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定部と、前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、前記タイミング指定部により指定したタイミングを、前記画像指定情報受付部により受付けた画像指定情報に関連付けて記憶するタイミング記憶部と、該タイミング記憶部により記憶した前記タイミング及び画像指定情報を前記曲再生装置に送信する送信部とを備え、前記曲再生装置は、前記送信部により送信されたタイミング及び画像指定情報を受信する受信部と、該受信部により受信した画像指定情報が指定する画像を受付ける画像受付部と、該画像受付部により受付けた画像を前記受信部により受信したタイミングに関連付けて記憶する画像記憶部と、前記再生部により前記楽曲データを再生している場合、前記画像記憶部により記憶したタイミングに基づいて、前記画像記憶部により該タイミングが関連付けて記憶されている画像を表示する表示部とを備える。   A karaoke system disclosed in the present application has a playback unit that plays back music data, displays a song within a playback period of the song data that is played back by the playback unit, and displays the image within the playback period of the song data. In a karaoke system comprising a timing designating device for designating the timing for displaying the timing, the timing designating device designates the timing for displaying the image in association with the position in the music data, and the image An image designation information accepting unit for accepting image designation information for designating, a timing storage unit for storing the timing designated by the timing designation unit in association with the image designation information accepted by the image designation information accepting unit, and the timing storage Transmitting the timing and image designation information stored by the unit to the music reproducing device The music reproducing device includes: a receiving unit that receives the timing and image designation information transmitted by the transmission unit; an image receiving unit that accepts an image designated by the image designation information received by the receiving unit; An image storage unit that stores an image received by the image reception unit in association with the timing received by the reception unit, and when the music data is played back by the playback unit, based on the timing stored by the image storage unit A display unit that displays an image stored in association with the timing by the image storage unit.

本願にあっては、楽曲データ内の位置がユーザにより選択され、当該位置が画像を楽曲データの演奏期間内に表示するタイミングとして、タイミング指定装置により指定される。また、タイミング指定装置は、ユーザ等により選択された画像を指定する画像指定情報を受付け、当該画像指定情報を楽曲データ内の位置に関連付けて記憶する。タイミング指定装置は、記憶した画像指定情報を楽曲データ内の位置と共に曲再生装置に送信する。曲再生装置は、タイミング指定装置から送られてきた画像指定情報を受信し、当該画像指定情報が指定する画像を受付ける。また、曲再生装置は、タイミング指定装置から画像指定情報と共に送られてきた楽曲データ内の位置を受信して、受付けた画像を当該楽曲データ内の位置に関連付けて記憶する。曲再生装置は、楽曲データの再生期間内に、再生している楽曲データ内の位置に関連付けて記憶している画像を表示する。ユーザは、再生された楽曲データを伴奏として、表示された画像を見ながら歌唱する。   In the present application, the position in the music data is selected by the user, and the position is designated by the timing designation device as the timing for displaying the image within the performance period of the music data. Further, the timing designation device accepts image designation information for designating an image selected by the user or the like, and stores the image designation information in association with the position in the music data. The timing designation device transmits the stored image designation information together with the position in the song data to the song reproduction device. The music reproducing device receives the image designation information sent from the timing designation device, and accepts the image designated by the image designation information. Further, the music reproducing device receives the position in the music data sent together with the image designation information from the timing designation device, and stores the received image in association with the position in the music data. The music playback device displays an image stored in association with a position in the music data being played back during the playback period of the music data. The user sings while viewing the displayed image with the reproduced music data as an accompaniment.

本願に開示するタイミング指定方法は、制御部を備えるタイミング指定装置に画像を楽曲データの再生期間内に表示するタイミングを指定させるタイミング指定方法において、前記タイミングを前記楽曲データ内の位置に対応付けて前記制御部により指定する。   The timing designation method disclosed in the present application is a timing designation method in which a timing designation device including a control unit designates a timing for displaying an image within a reproduction period of music data, and associates the timing with a position in the music data. It is designated by the control unit.

本願にあっては、画像を楽曲データの演奏期間内に表示するタイミングとして楽曲データ内の位置がユーザにより選択される。   In the present application, the position in the music data is selected by the user as the timing for displaying the image within the performance period of the music data.

当該装置の一観点によれば、画像を表示するタイミングを楽曲データ内の位置に対応付けて指定するタイミング指定部を備えることにより、画像を楽曲データの再生期間内に表示するタイミングをユーザが指定することが可能となる。   According to one aspect of the apparatus, the timing designation unit that designates the timing for displaying an image in association with the position in the music data is provided so that the user designates the timing for displaying the image within the reproduction period of the music data. It becomes possible to do.

カラオケシステムを示す模式図である。It is a schematic diagram which shows a karaoke system. 実施の形態1に係るカラオケ装置及び端末装置の内部ハードウェアを示すブロック図である。It is a block diagram which shows the internal hardware of the karaoke apparatus which concerns on Embodiment 1, and a terminal device. サーバ装置の内部ハードウェアを示すブロック図である。It is a block diagram which shows the internal hardware of a server apparatus. 実施の形態1に係る予約曲一覧画面及び位置選択画面夫々の例を示す模式図である。It is a schematic diagram which shows the example of each of the reservation music list screen and position selection screen which concern on Embodiment 1. FIG. 実施の形態1に係る位置選択画面の他の例と、ログイン画面の例とを示す模式図である。It is a schematic diagram which shows the other example of the position selection screen which concerns on Embodiment 1, and the example of a login screen. 画像選択画面及び画像表示画面の例を示す模式図である。It is a schematic diagram which shows the example of an image selection screen and an image display screen. 予約表のレコードレイアウト例を示す図表である。It is a chart which shows the example of a record layout of a reservation table. タイミング指定処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of a timing designation | designated process. 実施の形態1に係るデータ位置受付処理の手順を示すフローチャートである。4 is a flowchart illustrating a procedure of data position reception processing according to the first embodiment. 実施の形態1に係る画像受付処理の手順を示すフローチャートである。4 is a flowchart illustrating a procedure of image reception processing according to the first embodiment. 画像表示処理の手順を示すフローチャートである。It is a flowchart which shows the procedure of an image display process. 実施の形態2に係る位置選択画面の例を示す模式図である。6 is a schematic diagram illustrating an example of a position selection screen according to Embodiment 2. FIG. 実施の形態2に係るデータ位置受付処理の手順を示すフローチャートである。10 is a flowchart illustrating a procedure of data position reception processing according to the second embodiment. 波形を取得する方法を説明するための説明図である。It is explanatory drawing for demonstrating the method to acquire a waveform. 実施の形態2に係る位置選択画面の他の例を示す模式図である。12 is a schematic diagram illustrating another example of a position selection screen according to Embodiment 2. FIG. 波形を取得する他の方法を説明するための説明図である。It is explanatory drawing for demonstrating the other method of acquiring a waveform. 実施の形態2に係る位置選択画面の他の例を示す模式図である。12 is a schematic diagram illustrating another example of a position selection screen according to Embodiment 2. FIG. 実施の形態3に係る位置選択画面及びキーワード選択画面の例を示す模式図である。10 is a schematic diagram illustrating an example of a position selection screen and a keyword selection screen according to Embodiment 3. FIG. 実施の形態3に係るデータ位置受付処理の手順を示すフローチャートである。14 is a flowchart illustrating a procedure of data position reception processing according to the third embodiment. キーワード選択画面の他の例を示す模式図である。It is a schematic diagram which shows the other example of a keyword selection screen. 実施の形態4に係る端末装置の内部ハードウェアを示すブロック図である。FIG. 10 is a block diagram showing internal hardware of a terminal device according to Embodiment 4.

実施の形態1
以下、本発明をその実施の形態を示す図面を参照して具体的に説明する。本願に係るタイミング指定装置は、カラオケ装置、ゲーム機器及びPC( Personal Computer )等の楽曲データの再生及び画像の表示を行う曲再生装置である。タイミング指定装置は、表示する画像の選択と、楽曲データの再生期間内に当該画像を表示するタイミングとをユーザから受け付けて指定する。そして、タイミング指定装置は、楽曲データを再生すると共に、選択された画像を、指定したタイミングに従って表示する。また、タイミング指定装置は、曲再生装置を遠隔操作する端末装置でもよい。この場合、タイミング指定装置は、選択された画像を、受付けたタイミングに関連付けて曲再生装置へ送信することで、曲再生装置に指定する。本実施の形態1は、タイミング指定装置として、カラオケシステムに含まれるカラオケ装置(曲再生装置)を遠隔操作する端末装置を例に挙げて説明する。
Embodiment 1
Hereinafter, the present invention will be described in detail with reference to the drawings showing embodiments thereof. The timing designation device according to the present application is a music reproduction device that reproduces music data and displays an image, such as a karaoke device, a game machine, and a PC (Personal Computer). The timing designation device receives from the user and designates the selection of an image to be displayed and the timing for displaying the image within the reproduction period of the music data. Then, the timing designation device reproduces the music data and displays the selected image according to the designated timing. Further, the timing designation device may be a terminal device that remotely operates the music playback device. In this case, the timing designation device designates the selected image to the music reproduction device by transmitting the selected image to the music reproduction device in association with the received timing. The first embodiment will be described by taking as an example a terminal device that remotely operates a karaoke device (music playback device) included in a karaoke system as a timing designation device.

図1は、カラオケシステムを示す模式図である。カラオケシステムは、カラオケ曲を演奏するカラオケ装置(曲再生装置)1と、ネットワーク網Nを介してカラオケ装置1に接続されたサーバ装置4とを含む。カラオケ装置1は、カラオケ曲の楽曲データを再生して伴奏となる音声を放音することにより、カラオケ曲を演奏する。また、カラオケ装置1は、カラオケ曲の演奏期間内にカラオケ曲の歌詞及びカラオケ曲に関連する画像等を表示する。カラオケ装置1は、マイクロフォン1aが接続してあり、伴奏に従って歌唱するユーザの歌声をマイクロフォン1aにより音声に変換して出力することで、カラオケ機能を実現する。カラオケ装置1が再生する楽曲データは、サーバ装置4からカラオケ装置1へ歌詞データと共に送信される。   FIG. 1 is a schematic diagram showing a karaoke system. The karaoke system includes a karaoke device (song reproduction device) 1 that plays karaoke music, and a server device 4 connected to the karaoke device 1 via a network N. The karaoke apparatus 1 plays a karaoke song by reproducing the song data of the karaoke song and emitting an accompanying sound. Moreover, the karaoke apparatus 1 displays the lyrics of the karaoke song, the image related to the karaoke song, and the like during the performance period of the karaoke song. The karaoke apparatus 1 is connected to a microphone 1a, and realizes a karaoke function by converting a user's singing voice sung according to an accompaniment into a voice by the microphone 1a and outputting the voice. The music data reproduced by the karaoke device 1 is transmitted from the server device 4 to the karaoke device 1 together with the lyrics data.

また、カラオケ装置1には、端末装置(タイミング指定装置)3が赤外線又は無線通信波による通信を可能に接続してある。端末装置3は、操作画面等を表示し、前面にタッチパネルを有する表示部36を備える。端末装置3は、表示部36に表示する操作画面に応じた操作を、ユーザがスタイラス3aを用いて表示部36のタッチパネルに触れることにより受付ける。端末装置3は、楽曲データの再生期間内に表示する画像及び画像を表示するタイミングとしての楽曲データ内の位置(データ位置)夫々の選択をユーザから受付ける。端末装置3は、選択された画像を指定する画像指定情報に関連付けて、受付けたデータ位置をカラオケ装置1に送信することで、画像及びタイミングをカラオケ装置1に指定する。   In addition, a terminal device (timing designating device) 3 is connected to the karaoke device 1 so as to enable communication by infrared rays or wireless communication waves. The terminal device 3 includes an operation screen and the like, and includes a display unit 36 having a touch panel on the front surface. The terminal device 3 accepts an operation corresponding to an operation screen displayed on the display unit 36 when the user touches the touch panel of the display unit 36 using the stylus 3a. The terminal device 3 accepts, from the user, selection of an image to be displayed within the music data reproduction period and a position (data position) in the music data as a timing for displaying the image. The terminal device 3 designates the image and timing to the karaoke device 1 by transmitting the received data position to the karaoke device 1 in association with the image designation information for designating the selected image.

サーバ装置4は、カラオケ装置1が再生及び表示する楽曲データ及び歌詞データを記憶しており、ネットワーク網Nを介して楽曲データ及び歌詞データをカラオケ装置1に送信する。また、サーバ装置4は、インターネット等を介して図示しない携帯端末装置及びPC等が接続される。サーバ装置4は、ユーザが携帯端末装置及びPC等を用いて画像データをアップロードした場合、ユーザの識別情報であるユーザIDに関連付けて画像データを記憶する。   The server device 4 stores music data and lyrics data to be reproduced and displayed by the karaoke device 1, and transmits the music data and lyrics data to the karaoke device 1 via the network N. The server device 4 is connected to a mobile terminal device and a PC (not shown) via the Internet or the like. When the user uploads image data using a mobile terminal device, a PC, or the like, the server device 4 stores the image data in association with a user ID that is user identification information.

図2は、実施の形態1に係るカラオケ装置1及び端末装置3の内部ハードウェアを示すブロック図である。カラオケ装置1は、歌詞データ及び画像データ等を再生することにより、歌詞及び画像等の画像信号を出力する画像再生部15と、楽曲データを再生して音声信号を出力する音声再生部17とを備える。画像再生部15が出力する画像信号は、液晶パネル等からなる表示部16により表示される。音声再生部17が再生する音声は、スピーカ部19から放音される。音声再生部17及びスピーカ部19間には、ミキサアンプ18が介装されており、ミキサアンプ18には、マイク信号入力端子18aを介してマイクロフォン1aが接続してある。   FIG. 2 is a block diagram showing internal hardware of the karaoke device 1 and the terminal device 3 according to the first embodiment. The karaoke apparatus 1 includes an image reproducing unit 15 that outputs image signals such as lyrics and images by reproducing lyrics data and image data, and an audio reproducing unit 17 that reproduces music data and outputs audio signals. Prepare. The image signal output from the image reproduction unit 15 is displayed on the display unit 16 including a liquid crystal panel. The sound reproduced by the sound reproducing unit 17 is emitted from the speaker unit 19. A mixer amplifier 18 is interposed between the sound reproducing unit 17 and the speaker unit 19, and the microphone 1a is connected to the mixer amplifier 18 via a microphone signal input terminal 18a.

ミキサアンプ18は、音声再生部17及びマイクロフォン1a夫々から与えられた音声信号をミキシングしてスピーカ部19に出力する。例えば、ミキサアンプ18は、音声再生部17が再生して得た音声信号と、ユーザの歌声をマイクロフォン1aが変換して得た音声信号とをミキシングする。また、カラオケ装置1は、CPU( Central Processing Unit )10と、ROM( Read-Only Memory )11と、RAM( Random-Access Memory )12と、記憶部13とを含む。   The mixer amplifier 18 mixes the audio signals given from the audio reproducing unit 17 and the microphone 1 a and outputs the mixed audio signals to the speaker unit 19. For example, the mixer amplifier 18 mixes the audio signal obtained by the audio reproduction unit 17 and the audio signal obtained by converting the user's singing voice by the microphone 1a. The karaoke apparatus 1 includes a CPU (Central Processing Unit) 10, a ROM (Read-Only Memory) 11, a RAM (Random-Access Memory) 12, and a storage unit 13.

CPU10は、バス10aを介してカラオケ装置1の内部ハードウェア各部を制御するための制御部である。ROM11は、CPU10が実行するプログラム等を予め記憶している。RAM12は、CPU10がプログラムを実行する際に生じる変数等を記憶する。また、CPU10は、ROM11に記憶してあるプログラムをRAM12に読み出して実行する。記憶部13は、ハードディスク及びフラッシュメモリ等であり、予約曲の一覧を示す予約表131を記憶する。ここで、予約曲は、カラオケ装置1のユーザによりカラオケ装置1に対して演奏が予約されたカラオケ曲を示す。また、記憶部13は、端末装置3により指定されたタイミング及び画像を各記憶するタイミング記憶部及び画像記憶部としても機能する。カラオケ装置1は、ネットワーク網Nに接続するネットワーク通信部14aと、端末装置3との間で通信する端末装置通信部14bとを含む。   CPU10 is a control part for controlling each internal hardware part of karaoke apparatus 1 via bus 10a. The ROM 11 stores a program executed by the CPU 10 in advance. The RAM 12 stores variables and the like that are generated when the CPU 10 executes a program. Further, the CPU 10 reads out the program stored in the ROM 11 to the RAM 12 and executes it. The storage unit 13 is a hard disk, a flash memory, or the like, and stores a reservation table 131 that shows a list of reserved songs. Here, the reserved song indicates a karaoke song whose performance is reserved for the karaoke device 1 by the user of the karaoke device 1. The storage unit 13 also functions as a timing storage unit and an image storage unit that store timings and images specified by the terminal device 3. The karaoke apparatus 1 includes a network communication unit 14 a connected to the network N and a terminal device communication unit 14 b that communicates with the terminal device 3.

ネットワーク通信部14aは、サーバ装置4にデータ要求を送信し、サーバ装置4から送信されてきた楽曲データ及び歌詞データ等を受信する。また、ネットワーク通信部14aは、サーバ装置4から送られてきた画像データを受信することで画像を受付ける画像受付部としても機能する。記憶部13は、サーバ装置4から受信した楽曲データ、歌詞データ及び画像データを記憶する。端末装置通信部14bは、記憶部13に記憶してある予約表131を端末装置3からの要求に応じて端末装置3に送信し、画像を表示するタイミングを示すデータ位置及び表示する画像のファイル名が追加された予定表131を端末装置3から受信する。これにより、端末装置通信部14bは、端末装置3から送られてきたタイミング及び画像のファイル名(画像指定情報)を受信する受信部としても機能する。   The network communication unit 14 a transmits a data request to the server device 4 and receives music data, lyrics data, and the like transmitted from the server device 4. The network communication unit 14a also functions as an image receiving unit that receives an image by receiving the image data transmitted from the server device 4. The storage unit 13 stores music data, lyrics data, and image data received from the server device 4. The terminal device communication unit 14b transmits the reservation table 131 stored in the storage unit 13 to the terminal device 3 in response to a request from the terminal device 3, and the data position indicating the timing for displaying the image and the image file to be displayed. The schedule 131 with the name added is received from the terminal device 3. Thereby, the terminal device communication unit 14b also functions as a reception unit that receives the timing and the file name (image designation information) of the image sent from the terminal device 3.

端末装置3は、カラオケ装置1との間で通信する通信部34と、液晶パネル等からなる表示部36と、表示部36の表示面に設けられたタッチパネル部37とを含む。通信部34は、カラオケ装置1に指定するタイミング及び画像データのファイル名(画像指定情報)をカラオケ装置1へ送信する送信部として機能する。表示部36は、画像の選択及びデータ位置の選択を受付けるための各種画面を表示する。タッチパネル部37は、スタイラス3aの先端部又はユーザの指先による接触を検出し、表示部36に表示した操作画面等に応じたユーザによる操作を受付ける。これにより、タッチパネル部37は、歌詞等の一部を受付ける一部受付部と、表示する画像のファイル名(画像指定情報)を受付ける画像指定情報受付部として機能する。   The terminal device 3 includes a communication unit 34 that communicates with the karaoke device 1, a display unit 36 including a liquid crystal panel and the like, and a touch panel unit 37 provided on the display surface of the display unit 36. The communication unit 34 functions as a transmission unit that transmits the timing specified to the karaoke device 1 and the file name (image designation information) of the image data to the karaoke device 1. The display unit 36 displays various screens for accepting image selection and data position selection. The touch panel unit 37 detects contact by the tip of the stylus 3a or the user's fingertip and accepts an operation by the user according to an operation screen displayed on the display unit 36. Thereby, the touch panel unit 37 functions as a partial reception unit that receives a part of lyrics and the like, and an image designation information reception unit that receives a file name (image designation information) of an image to be displayed.

また、端末装置3は、バス30aを介して端末装置3の内部ハードウェア各部を制御するための制御部であるCPU30と、ROM31と、RAM32と、記憶部33とを含む。ROM31は、CPU30が実行するプログラム等を記憶してある。RAM32は、CPU30がプログラムを実行する際に生じる変数等を記憶する。CPU30は、プログラムを実行することにより、画像を表示するタイミングを指定するタイミング指定部として機能する。記憶部33は、ハードディスク及びフラッシュメモリ等であり、カラオケ装置1に要求して送られてきた予約表131を記憶する。記憶部33は、カラオケ装置1を介してサーバ装置4から送られてきた歌詞データ及び画像の一覧夫々を記憶する歌詞記憶部及び一覧記憶部としても機能する。   The terminal device 3 includes a CPU 30 that is a control unit for controlling each internal hardware unit of the terminal device 3 via the bus 30a, a ROM 31, a RAM 32, and a storage unit 33. The ROM 31 stores a program executed by the CPU 30 and the like. The RAM 32 stores variables that are generated when the CPU 30 executes the program. The CPU 30 functions as a timing designation unit that designates the timing for displaying an image by executing a program. The storage unit 33 is a hard disk, a flash memory, or the like, and stores the reservation table 131 sent to the karaoke apparatus 1 upon request. The storage unit 33 also functions as a lyrics storage unit and a list storage unit that store lyrics data and a list of images sent from the server device 4 via the karaoke device 1.

図3は、サーバ装置4の内部ハードウェアを示すブロック図である。サーバ装置4は、ログイン情報、楽曲データ、歌詞データ及び画像データ夫々を記憶するログイン情報DB(Data Base)43a、曲DB43b、歌詞DB43c及び画像DB43dを含む。また、サーバ装置4は、バス40aを介してサーバ装置4の内部ハードウェア各部を制御するための制御部であるCPU40と、ROM41と、RAM42とを含む。ROM41は、CPU40が実行するプログラム等を記憶してある。RAM42は、CPU40がプログラムを実行する際に生じる変数等を記憶する。CPU40は、ROM41に記憶してあるプログラムをRAM42に読み出して実行する。   FIG. 3 is a block diagram showing internal hardware of the server device 4. The server device 4 includes a login information DB (Data Base) 43a, a song DB 43b, a lyrics DB 43c, and an image DB 43d for storing login information, song data, lyrics data, and image data. The server device 4 also includes a CPU 40 that is a control unit for controlling each internal hardware unit of the server device 4 via the bus 40a, a ROM 41, and a RAM 42. The ROM 41 stores a program executed by the CPU 40 and the like. The RAM 42 stores variables and the like that are generated when the CPU 40 executes the program. The CPU 40 reads the program stored in the ROM 41 into the RAM 42 and executes it.

図4は、実施の形態1に係る予約曲一覧画面及び位置選択画面夫々の例を示す模式図である。図4A及び図4B夫々は、予約曲一覧画面及び位置選択画面を示す。予約曲一覧画面は、カラオケ装置1に予約されているカラオケ曲のうち、演奏期間内に画像を表示するカラオケ曲を選択するための画面である。端末装置3は、例えばタッチパネル部37によりユーザから予約曲の一覧を表示する操作を受付けた場合、予定表131をカラオケ装置1に要求する。端末装置3は、送られてきた予定表131を受信して記憶部33に記憶する。端末装置3は、記憶部33に記憶した予定表131に基づいて予約曲夫々の予約順番、曲名及び歌手名等を含む予約曲一覧画面を表示部36に表示する。   FIG. 4 is a schematic diagram illustrating an example of each of the reserved song list screen and the position selection screen according to the first embodiment. 4A and 4B respectively show a reserved song list screen and a position selection screen. The reserved song list screen is a screen for selecting a karaoke song for which an image is displayed during the performance period from karaoke songs reserved in the karaoke apparatus 1. For example, when the terminal device 3 accepts an operation for displaying a list of reserved songs from the user via the touch panel unit 37, the terminal device 3 requests the schedule table 131 from the karaoke device 1. The terminal device 3 receives the sent schedule 131 and stores it in the storage unit 33. The terminal device 3 displays a reserved song list screen including a reservation order, a song name, a singer name, and the like of each reserved song on the display unit 36 based on the schedule 131 stored in the storage unit 33.

図4Aに示す予約曲一覧画面の例では、例えば予約順番が3曲目の予約曲として、曲名「卒業の季節」と、歌手名「池田B子」とが表示されている。また、各予約曲には、演奏期間内に画像を表示する予約曲を選択するためのソフトウェアボタン「背景挿入」が表示されている。端末装置3は、ユーザが指先又はスタイラス3aの先端部を用いてソフトウェアボタン「背景挿入」を選択した場合、当該ソフトウェアボタンに対応付けられた予約曲を選択し、位置選択画面を表示部36に表示する。位置選択画面には、選択された予約曲の歌詞が表示される。   In the example of the reserved song list screen shown in FIG. 4A, for example, as the reserved song whose reservation order is the third song, the song name “Graduation Season” and the singer name “Ikeda Bko” are displayed. Each reserved song has a software button “insert background” for selecting a reserved song for displaying an image during the performance period. When the user selects the software button “insert background” using the fingertip or the tip of the stylus 3 a, the terminal device 3 selects the reserved song associated with the software button and displays the position selection screen on the display unit 36. indicate. On the position selection screen, the lyrics of the selected reserved song are displayed.

図4Bに示す例では、選択された曲名「卒業の季節」を有する曲の歌詞「夏の校舎・・・」が位置選択画面の略中央に表示され、位置選択画面の右側には、歌詞をスクロール表示するためのスクロールバーが表示されている。ユーザは、スタイラス3aの先端部を用いてタッチパネル部37をなぞることにより、表示部36に表示された歌詞の一部を選択する。端末装置3は、選択された歌詞の一部を囲む矩形状の枠を位置選択画面に表示する。また、端末装置3は、選択された歌詞の一部の表示色を変更して位置選択画面に表示してもよい。端末装置3は、歌詞の一部が選択された場合、演出効果の選択を受付ける効果選択画面を位置選択画面に重畳して表示部36に表示する。   In the example shown in FIG. 4B, the lyrics “Summer School Building ...” of the song having the selected song name “Graduation Season” are displayed in the approximate center of the position selection screen, and the lyrics are displayed on the right side of the position selection screen. A scroll bar for scroll display is displayed. The user selects a part of the lyrics displayed on the display unit 36 by tracing the touch panel unit 37 using the tip of the stylus 3a. The terminal device 3 displays a rectangular frame surrounding a part of the selected lyrics on the position selection screen. The terminal device 3 may change the display color of a part of the selected lyrics and display it on the position selection screen. When a part of the lyrics is selected, the terminal device 3 superimposes an effect selection screen for accepting selection of the effect on the position selection screen and displays it on the display unit 36.

図5は、実施の形態1に係る位置選択画面の他の例と、ログイン画面の例とを示す模式図である。図5A及び図5B夫々は、位置選択画面及びログイン画面を示す。図5Aに示す例では、歌詞の一部「卒業〜」が選択されており、歌詞の一部を囲む矩形状の枠が位置選択画面に表示されている。また、位置選択画面には、複数種類の演出効果を選択するための効果選択画面が重畳されている。効果選択画面には、演出効果「スライドイン」、「チェッカーボード」、「ひし形」、「ブラインド」及び「ボックス」が選択可能に表示されている。演出効果「スライドイン」は、表示内容を画面横方向又は縦方向にスクロール表示する演出効果である。   FIG. 5 is a schematic diagram illustrating another example of the position selection screen and an example of a login screen according to the first embodiment. 5A and 5B show a position selection screen and a login screen, respectively. In the example shown in FIG. 5A, a part of the lyrics “Graduation” is selected, and a rectangular frame surrounding the part of the lyrics is displayed on the position selection screen. In addition, an effect selection screen for selecting a plurality of types of effects is superimposed on the position selection screen. On the effect selection screen, production effects “slide-in”, “checkerboard”, “diamond”, “blind”, and “box” are displayed in a selectable manner. The effect “slide-in” is an effect that scrolls display content in the horizontal direction or vertical direction of the screen.

演出効果「ブラインド」は、表示内容に含まれる各行の輝度が、画面横方向又は縦方向に徐々に増大するよう表示内容を表示する演出効果である。演出効果「チェッカーボード」は、格子模様状に表示する演出効果である。演出効果「ひし形」及び「ボックス」夫々は、時間の経過と共に面積が変化するひし形及び矩形枠内に表示する演出効果である。ユーザは、スタイラス3aの先端部を用いてタッチパネル部37をタップ操作することにより、演出効果を選択する。端末装置3は、選択された歌詞の一部に対応する楽曲データ内のデータ位置を、選択された画像を表示するタイミングとして取得する。また、端末装置3は、選択された演出効果の効果名を取得する。   The effect “blind” is an effect that displays the display content so that the luminance of each row included in the display content gradually increases in the horizontal or vertical direction of the screen. The production effect “checkerboard” is a production effect displayed in a lattice pattern. The production effects “diamonds” and “boxes” are production effects displayed in a rhombus and a rectangular frame whose area changes with the passage of time. The user selects an effect by tapping the touch panel unit 37 using the tip of the stylus 3a. The terminal device 3 acquires the data position in the music data corresponding to a part of the selected lyrics as the timing for displaying the selected image. Moreover, the terminal device 3 acquires the effect name of the selected effect.

端末装置3は、位置選択画面で演出効果が選択された場合、ログイン画面を表示部36に表示する。ログイン画面は、ユーザが端末装置3を用いてサーバ装置4の画像DB43dにログインするために必要なログイン情報をユーザから受付けるための画面である。図5Bに示す例では、ユーザにログイン情報の入力を促すメッセージ「あなたのアルバムにログインしてください。」と、ユーザID及びパスワードを各入力するためのテキストボックスとがログイン画面に表示されている。   The terminal device 3 displays a login screen on the display unit 36 when the effect is selected on the position selection screen. The login screen is a screen for accepting login information necessary for the user to log in to the image DB 43d of the server device 4 using the terminal device 3 from the user. In the example shown in FIG. 5B, a message for prompting the user to input login information “Please log in to your album.” And a text box for entering a user ID and a password are displayed on the login screen. .

また、ログイン画面には、ユーザからログイン操作を受付けるためのソフトウェアボタン「ログイン」と、位置選択画面に戻るためのソフトウェアボタン「戻る」とが表示されている。端末装置3は、ログイン操作を受付けた場合、ユーザが入力したユーザID及びパスワードを含むログイン情報をカラオケ装置1を介してサーバ装置4へ送信する。サーバ装置4は、端末装置3から送信されてきたログイン情報を受信する。サーバ装置4は、受信したログイン情報がログイン情報DB43aに記憶されている場合、画像DB43dに記憶されている画像データのうち、受信したログイン情報に含まれるユーザIDが関連付けられた画像データを読み出して端末装置3に送信する。   In addition, a software button “Login” for accepting a login operation from the user and a software button “Return” for returning to the position selection screen are displayed on the login screen. When the terminal device 3 accepts the login operation, the terminal device 3 transmits login information including the user ID and the password input by the user to the server device 4 via the karaoke device 1. The server device 4 receives the login information transmitted from the terminal device 3. When the received login information is stored in the login information DB 43a, the server device 4 reads out the image data associated with the user ID included in the received login information from the image data stored in the image DB 43d. It transmits to the terminal device 3.

図6は、画像選択画面及び画像表示画面の例を示す模式図である。図6A及び図6B夫々は、画像選択画面及び画像表示画面を示す。画像選択画面は、位置選択画面で取得したデータ位置で表示する画像を選択するための画面である。端末装置3は、サーバ装置4から画像データが送られてきた場合、画像選択画面を表示部36に表示する。画像選択画面には、画像データの一覧がサムネイル表示される。図6Aに示す例では、ログイン操作を行ったユーザのユーザ名を含むメッセージ「Aさんのアルバム」と、画像の選択を促すメッセージ「画像を選択してください」が画像選択画面に表示されている。   FIG. 6 is a schematic diagram illustrating an example of an image selection screen and an image display screen. 6A and 6B show an image selection screen and an image display screen, respectively. The image selection screen is a screen for selecting an image to be displayed at the data position acquired on the position selection screen. When image data is sent from the server device 4, the terminal device 3 displays an image selection screen on the display unit 36. A list of image data is displayed as thumbnails on the image selection screen. In the example shown in FIG. 6A, a message “Mr. A's album” including the user name of the user who performed the login operation and a message “Please select an image” prompting selection of an image are displayed on the image selection screen. .

また、画像選択画面には、画像データの一覧がサムネイル表示されると共に、一覧をスクロール表示するためのスクロールバーが右側に表示されている。また、サーバ装置4の画像DB43dには、ユーザIDに関連付けられていない複数の画像データを登録画像データとして予め記憶しておいてもよい。この場合、端末装置3は、位置選択画面で演出効果が選択された場合、ログイン画面を表示することなく、サーバ装置4へ画像データを要求するとよい。そして、サーバ装置4は、要求に応じて登録画像データを端末装置3に送信する。   On the image selection screen, a list of image data is displayed as thumbnails, and a scroll bar for scrolling the list is displayed on the right side. The image DB 43d of the server device 4 may store a plurality of image data not associated with the user ID as registered image data in advance. In this case, the terminal device 3 may request the image data from the server device 4 without displaying the login screen when the effect is selected on the position selection screen. Then, the server device 4 transmits the registered image data to the terminal device 3 in response to the request.

ユーザは、スタイラス3aの先端部又は指先を用いて一覧から画像を仮選択する。更に、画像選択画面には、仮選択した画像に決定する操作をユーザから受付けるためのソフトウェアボタン「追加」と、画像選択画面を終了するためのソフトウェアボタン「終了」とが表示されている。端末装置3は、仮選択した画像に決定する操作を受付けた場合、選択された画像のファイル名(画像指定情報)を、位置選択画面を用いて取得したデータ位置及び効果名に関連付けて、記憶部33に記憶してある予約表131に追加する。そして端末装置3は、画像のファイル名を追加した予約表131をカラオケ装置1に送信する。これにより、端末装置3は、楽曲データの再生期間内に表示する画像と、画像を表示するタイミングとをカラオケ装置1に対して指定する。カラオケ装置1は、端末装置3から送られてきた予約表131を受信し、予約表131を用いて記憶部13に記憶されている予約表131を書き換える。   The user temporarily selects an image from the list using the tip of the stylus 3a or the fingertip. Further, a software button “Add” for accepting an operation for determining a temporarily selected image from the user and a software button “End” for ending the image selection screen are displayed on the image selection screen. When the terminal device 3 accepts an operation for determining the temporarily selected image, the terminal device 3 stores the file name (image designation information) of the selected image in association with the data position and the effect name acquired using the position selection screen. It is added to the reservation table 131 stored in the section 33. Then, the terminal device 3 transmits the reservation table 131 to which the image file name is added to the karaoke device 1. Thereby, the terminal device 3 designates, for the karaoke device 1, an image to be displayed within the reproduction period of the music data and a timing for displaying the image. The karaoke apparatus 1 receives the reservation table 131 sent from the terminal device 3 and rewrites the reservation table 131 stored in the storage unit 13 using the reservation table 131.

カラオケ装置1は、記憶部13に記憶してある予約表131に基づいて楽曲データを再生し、カラオケ曲を演奏する。また、カラオケ装置1は、再生している楽曲データに関連付けて予約表131に記憶されているデータ位置を読み出す。そして、カラオケ装置1は、再生している楽曲データの再生位置が、読み出したデータ位置と略一致した場合、当該データ位置に関連付けて記憶されている画像のファイル名を有する画像データを表示部16に表示する。図6Bに示す例では、歌詞「新たな世界に向けて卒業〜」が表示画面に表示されている。また、表示画面には、カラオケ装置1が歌詞の一部「卒業〜」に対応する再生位置に同期して、ユーザが「卒業〜」に対して選択した画像が表示されている。   The karaoke apparatus 1 reproduces music data based on the reservation table 131 stored in the storage unit 13 and plays karaoke music. Further, the karaoke apparatus 1 reads out the data position stored in the reservation table 131 in association with the music data being reproduced. When the reproduction position of the music data being reproduced substantially coincides with the read data position, the karaoke apparatus 1 displays the image data having the file name of the image stored in association with the data position on the display unit 16. To display. In the example shown in FIG. 6B, the lyrics “Graduated towards a new world” are displayed on the display screen. In addition, on the display screen, an image selected by the user for “Graduation” is displayed in synchronization with the reproduction position corresponding to a part of the lyrics “Graduation” by the karaoke apparatus 1.

図7は、予約表131のレコードレイアウト例を示す図表である。図7に示す例では、予約を受付けた各カラオケ曲の予約順番、楽曲データの識別情報である曲ID、曲名及び歌手名が予約表131に含まれている。例えば、3曲目の予約曲が有する曲ID「A45678」、曲名「卒業の季節」及び歌手名「池田B子」が予約表131に記憶されている。また、予約表131には、3曲目のカラオケ曲の演奏期間内に表示部16に表示する一つ目の画像のファイル名「A004」と、当該画像を表示するタイミングを示すデータ位置「01:24:00」とが記憶されている。データ位置「01:24:00」は、楽曲データの再生開始から1分24秒経過した時点に対応するデータ位置を示す。   FIG. 7 is a chart showing a record layout example of the reservation table 131. In the example shown in FIG. 7, the reservation table 131 includes the reservation order of each karaoke song that has received a reservation, the song ID that is the identification information of the song data, the song name, and the singer name. For example, the song ID “A45678”, the song title “Graduation Season” and the singer name “Ikeda Bko” of the third reserved song are stored in the reservation table 131. In the reservation table 131, the file name “A004” of the first image displayed on the display unit 16 during the performance period of the third karaoke song and the data position “01: 24:00 "is stored. The data position “01:24:00” indicates a data position corresponding to the time when 1 minute and 24 seconds have elapsed from the start of reproduction of the music data.

図7に示す例では、データ位置が、楽曲データの先頭から再生した場合に要する経過時間を用いて示したが、これに限るものではなく楽曲データ内のアドレスを用いて示してもよい。1つの楽曲データの再生期間内に表示する画像が複数選択された場合、予定表131には、複数のファイル名夫々が対応するデータ位置に関連付けて記憶される。図7に示す例では、2曲目の予約曲の演奏期間内に表示する1つ目の画像のファイル名「B002」にデータ位置「00:15:50」が関連付けられ、2つ目の画像のファイル名「B006」にデータ位置「05:03:50」が関連付けられて記憶されている。   In the example shown in FIG. 7, the data position is shown using the elapsed time required for reproduction from the beginning of the music data. However, the present invention is not limited to this, and the data position may be shown using an address in the music data. When a plurality of images to be displayed within the reproduction period of one piece of music data are selected, the schedule table 131 stores a plurality of file names in association with the corresponding data positions. In the example shown in FIG. 7, the data position “00:15:50” is associated with the file name “B002” of the first image displayed during the performance period of the second reserved song, and the second image The data position “05:03:50” is stored in association with the file name “B006”.

図8は、タイミング指定処理の手順を示すフローチャートである。タイミング指定処理は、カラオケ曲の演奏期間内に表示する画像及び画像を表示するタイミングとしてのデータ位置夫々の選択を共にユーザから受付けてカラオケ装置1に対して指定するために端末装置3のCPU30により実行される。CPU30は、予約表131を要求する予約表要求を通信部34によりカラオケ装置1へ送信する(ステップS11)。カラオケ装置1のCPU10は、端末装置3から送られてきた予約表要求を、端末装置通信部14bにより受信する(ステップS12)。CPU10は、記憶部13に記憶されている予約表131を読み出す(ステップS13)。   FIG. 8 is a flowchart showing the procedure of the timing designation process. The timing designating process is performed by the CPU 30 of the terminal device 3 in order to accept from the user both the image displayed during the performance period of the karaoke song and the selection of the data position as the timing for displaying the image from the user. Executed. CPU30 transmits the reservation table request | requirement which requests | requires the reservation table 131 to the karaoke apparatus 1 by the communication part 34 (step S11). CPU10 of karaoke apparatus 1 receives the reservation table request | requirement sent from the terminal device 3 by the terminal device communication part 14b (step S12). CPU10 reads the reservation table 131 memorize | stored in the memory | storage part 13 (step S13).

CPU10は、読み出した予約表131を予約表要求に応じて端末装置3へ端末装置通信部14bにより送信する(ステップS14)。端末装置3のCPU30は、カラオケ装置1から送られてきた予約表131を通信部34により受信し、記憶部33に記憶する(ステップS15)。CPU10は、受信した予約表131に基づいて予約曲一覧画面を表示部36に表示し(ステップS16)、予約曲一覧画面に応じたユーザの操作をタッチパネル部37により受付ける(ステップS17)。CPU10は、受付けた操作が、演奏期間内に画像を表示するカラオケ曲を選択する曲選択操作であるか否かを判定する(ステップS18)。   The CPU 10 transmits the read reservation table 131 to the terminal device 3 through the terminal device communication unit 14b in response to the reservation table request (step S14). The CPU 30 of the terminal device 3 receives the reservation table 131 sent from the karaoke device 1 by the communication unit 34 and stores it in the storage unit 33 (step S15). The CPU 10 displays a reserved music list screen on the display unit 36 based on the received reservation table 131 (step S16), and accepts a user operation corresponding to the reserved music list screen via the touch panel unit 37 (step S17). The CPU 10 determines whether or not the accepted operation is a song selection operation for selecting a karaoke song for displaying an image within the performance period (step S18).

CPU10は、曲選択操作でないと判定した場合(ステップS18でNO)、ステップS17に処理を戻す。CPU30は、曲選択操作であると判定した場合(ステップS18でYES)、選択された曲の歌詞データをサーバ装置4に要求し、送られてきた歌詞データを通信部34により受信して記憶部33に記憶する(ステップS19)。CPU30は、データ位置をユーザから受付けるための後述のデータ位置受付処理を実行する(ステップS20)。CPU30は、表示する画像の選択を受付けて、当該画像のファイル名(画像指定情報)を受付けるための後述の画像受付処理を実行する(ステップS21)。   If the CPU 10 determines that it is not a song selection operation (NO in step S18), it returns the process to step S17. If the CPU 30 determines that the operation is a song selection operation (YES in step S18), the CPU 30 requests the server device 4 for the lyrics data of the selected song, receives the sent lyrics data by the communication unit 34, and stores it. 33 (step S19). CPU30 performs the below-mentioned data position reception process for receiving a data position from a user (step S20). The CPU 30 receives the selection of the image to be displayed, and executes an image receiving process to be described later for receiving the file name (image designation information) of the image (step S21).

CPU30は、受付けた画像データのファイル名をデータ位置及び効果名に関連付けて、ステップS15で記憶部33に記憶した予約表131に追加する(ステップS22)。CPU30は、演奏期間内に表示する画像及び画像を表示するタイミングを指定すべく、記憶部33に記憶してある予約表131をカラオケ装置1へ通信部34により送信して(ステップS23)、タイミング指定処理を終了する。カラオケ装置1のCPU10は、端末装置3から送られてきた予約表131を端末装置通信部14bにより受信する(ステップS24)。CPU10は、受信した予約表131を用いて記憶部13に記憶してある予約表131を書換えて(ステップS25)、タイミング指定処理を終了する。   The CPU 30 associates the file name of the received image data with the data position and the effect name and adds them to the reservation table 131 stored in the storage unit 33 in step S15 (step S22). The CPU 30 transmits the reservation table 131 stored in the storage unit 33 to the karaoke apparatus 1 by the communication unit 34 in order to designate the image to be displayed within the performance period and the timing for displaying the image (step S23). The specified process is terminated. The CPU 10 of the karaoke device 1 receives the reservation table 131 sent from the terminal device 3 by the terminal device communication unit 14b (step S24). The CPU 10 rewrites the reservation table 131 stored in the storage unit 13 using the received reservation table 131 (step S25), and ends the timing designation process.

図9は、実施の形態1に係るデータ位置受付処理の手順を示すフローチャートである。データ位置受付処理は、図8で示したタイミング指定処理のステップS20で端末装置3のCPU30により実行される。CPU30は、歌詞データを記憶部33から読み出す(ステップS31)。CPU30は、読み出した歌詞データに基づいて位置選択画面を表示部36に表示する(ステップS32)。CPU30は、位置選択画面に応じたユーザによる操作をタッチパネル部37により受付ける(ステップS33)。CPU30は、受付けた操作が、歌詞の一部を選択する位置選択操作であるか否かを判定する(ステップS34)。   FIG. 9 is a flowchart illustrating a procedure of data position reception processing according to the first embodiment. The data position receiving process is executed by the CPU 30 of the terminal device 3 in step S20 of the timing specifying process shown in FIG. CPU30 reads lyrics data from the memory | storage part 33 (step S31). The CPU 30 displays a position selection screen on the display unit 36 based on the read lyrics data (step S32). CPU30 receives operation by the user according to a position selection screen by touch panel part 37 (Step S33). The CPU 30 determines whether or not the accepted operation is a position selection operation for selecting a part of the lyrics (step S34).

CPU30は、位置選択操作でないと判定した場合(ステップS34でNO)、ステップS33に処理を戻す。CPU30は、位置選択操作であると判定した場合(ステップS34でYES)、選択された歌詞の一部に対応するデータ位置を取得する(ステップS35)。CPU30は、演出効果を選択するための効果選択画面を表示部36に表示する(ステップS36)。CPU30は、効果選択画面に応じたユーザによる操作をタッチパネル部37により受付ける(ステップS37)。   If the CPU 30 determines that the operation is not a position selection operation (NO in step S34), the process returns to step S33. If the CPU 30 determines that the operation is a position selection operation (YES in step S34), the CPU 30 acquires a data position corresponding to a part of the selected lyrics (step S35). CPU30 displays the effect selection screen for selecting an effect on the display part 36 (step S36). The CPU 30 receives an operation by the user according to the effect selection screen through the touch panel unit 37 (step S37).

CPU30は、受付けた操作が、演出効果を選択する効果選択操作であるか否かを判定する(ステップS38)。CPU30は、効果選択操作でないと判定した場合(ステップS38でNO)、ステップS37に処理を戻す。CPU30は、効果選択操作であると判定した場合(ステップS38でYES)、選択された演出効果の効果名を取得して(ステップS39)、データ位置受付処理を終了する。   The CPU 30 determines whether or not the accepted operation is an effect selection operation for selecting a production effect (step S38). If it is determined that the operation is not an effect selection operation (NO in step S38), the CPU 30 returns the process to step S37. If the CPU 30 determines that the operation is an effect selection operation (YES in step S38), the CPU 30 acquires the effect name of the selected effect (step S39), and ends the data position receiving process.

図10は、実施の形態1に係る画像受付処理の手順を示すフローチャートである。画像受付処理は、図8で示したタイミング指定処理のステップS21で端末装置3のCPU30により実行される。CPU30は、ログイン画面を表示部36に表示し(ステップS51)、タッチパネル部37により受付けたユーザの操作に基づいてログイン情報を受付ける(ステップS52)。CPU30は、受付けたログイン情報を通信部34によりカラオケ装置1を介してサーバ装置4に送信する(ステップS53)。サーバ装置4のCPU40は、端末装置3から送られてきたログイン情報を通信部44により受信する(ステップS54)。   FIG. 10 is a flowchart illustrating a procedure of image reception processing according to the first embodiment. The image reception process is executed by the CPU 30 of the terminal device 3 in step S21 of the timing designation process shown in FIG. CPU30 displays a login screen on the display part 36 (step S51), and receives login information based on the user's operation received by the touch panel part 37 (step S52). CPU30 transmits the accepted login information to server apparatus 4 via karaoke apparatus 1 by communication unit 34 (step S53). The CPU 40 of the server device 4 receives the login information sent from the terminal device 3 through the communication unit 44 (step S54).

CPU40は、受信したログイン情報を用いてユーザを画像DB43dにログインさせる(ステップS55)。CPU40は、画像DB43dからユーザIDに関連付けて記憶されている画像データを読み出して(ステップS56)、画像データをカラオケ装置1を介して端末装置3へ通信部44により送信する(ステップS57)。CPU40は、ユーザを画像DB43dからログアウトさせて(ステップS58)、画像受付処理を終了する。端末装置3のCPU30は、サーバ装置4からカラオケ装置1を介して送られてきた画像データを通信部34により受信する(ステップS59)。   The CPU 40 logs the user into the image DB 43d using the received login information (step S55). The CPU 40 reads out the image data stored in association with the user ID from the image DB 43d (step S56), and transmits the image data to the terminal device 3 via the karaoke device 1 by the communication unit 44 (step S57). The CPU 40 logs the user out of the image DB 43d (step S58) and ends the image reception process. The CPU 30 of the terminal device 3 receives the image data sent from the server device 4 via the karaoke device 1 by the communication unit 34 (step S59).

CPU30は、受信した画像データに基づいて画像選択画面を表示部36に表示する(ステップS60)。CPU30は、画像選択画面に応じたユーザによる操作をタッチパネル部37により受付ける(ステップS61)。CPU30は、受付けた操作が、画像を選択する画像選択操作であるか否かを判定する(ステップS62)。CPU30は、画像選択操作でないと判定した場合(ステップS62でNO)、ステップS61に処理を戻す。CPU30は、画像選択操作であると判定した場合(ステップS62でYES)、選択された画像のファイル名(画像指定情報)を取得して(ステップS63)、画像受付処理を終了する。   The CPU 30 displays an image selection screen on the display unit 36 based on the received image data (step S60). The CPU 30 receives an operation by the user according to the image selection screen through the touch panel unit 37 (step S61). The CPU 30 determines whether or not the accepted operation is an image selection operation for selecting an image (step S62). If the CPU 30 determines that the operation is not an image selection operation (NO in step S62), the process returns to step S61. If the CPU 30 determines that the operation is an image selection operation (YES in step S62), the CPU 30 acquires the file name (image designation information) of the selected image (step S63), and ends the image reception process.

図11は、画像表示処理の手順を示すフローチャートである。カラオケ装置1は、記憶部13が記憶する予約表131に従って、順次演奏するカラオケ曲の予約順番をインクリメントする。画像表示処理は、予約順番がインクリメントされた場合、当該予約順番のカラオケ曲を演奏すると共に、演奏期間内に画像を表示するためにカラオケ装置1のCPU10により実行される。CPU10は、予約順番に対応する曲IDと、曲IDに関連付けられたデータ位置、画像のファイル名及び効果名とを、記憶部13が記憶する予約表131から読み出す(ステップS71)。   FIG. 11 is a flowchart showing a procedure of image display processing. The karaoke apparatus 1 increments the reservation order of the karaoke songs to be played sequentially according to the reservation table 131 stored in the storage unit 13. When the reservation order is incremented, the image display process is executed by the CPU 10 of the karaoke apparatus 1 to play the karaoke songs in the reservation order and display an image within the performance period. The CPU 10 reads the song ID corresponding to the reservation order, the data position associated with the song ID, the file name of the image, and the effect name from the reservation table 131 stored in the storage unit 13 (step S71).

CPU10は、曲IDに対応する楽曲データ及び歌詞データと、読み出したファイル名を有する画像データとを要求するデータ要求をネットワーク通信部14aによりサーバ装置4に送信する(ステップS72)。サーバ装置4のCPU40は、カラオケ装置1から送られてきたデータ要求を通信部44により受信する(ステップS73)。CPU40は、曲DB43b、歌詞DB43c及び画像DB43d夫々から楽曲データ、歌詞データ及び画像データを読み出す(ステップS74)。CPU40は、読み出した楽曲データ、歌詞データ及び画像データを、データ要求に応じて通信部44によりカラオケ装置1に送信する(ステップS75)。   CPU10 transmits the data request | requirement which requests | requires the music data and lyrics data corresponding to music ID, and the image data which has the read file name to the server apparatus 4 by the network communication part 14a (step S72). The CPU 40 of the server device 4 receives the data request sent from the karaoke device 1 through the communication unit 44 (step S73). The CPU 40 reads music data, lyrics data, and image data from the music DB 43b, the lyrics DB 43c, and the image DB 43d (step S74). The CPU 40 transmits the read music data, lyrics data, and image data to the karaoke apparatus 1 by the communication unit 44 in response to the data request (step S75).

カラオケ装置1のCPU10は、サーバ装置4から送られてきた楽曲データ、歌詞データ及び画像データをネットワーク通信部14aにより受信し、記憶部13に記憶する(ステップS76)。CPU10は、記憶部13に記憶した楽曲データを音声再生部17により再生開始する(ステップ77)。CPU10は、楽曲データの再生位置を取得する(ステップS78)。CPU10は、取得した再生位置が記憶部13に記憶したデータ位置と略一致するか否かを判定する(ステップS79)。CPU10は、データ位置と略一致しないと判定した場合(ステップS79でNO)、ステップS78に処理を戻す。   The CPU 10 of the karaoke device 1 receives the music data, lyrics data, and image data sent from the server device 4 by the network communication unit 14a and stores them in the storage unit 13 (step S76). The CPU 10 starts reproduction of the music data stored in the storage unit 13 by the audio reproduction unit 17 (step 77). CPU10 acquires the reproduction | regeneration position of music data (step S78). The CPU 10 determines whether or not the acquired reproduction position substantially matches the data position stored in the storage unit 13 (step S79). If the CPU 10 determines that the data position does not substantially match (NO in step S79), the process returns to step S78.

CPU10は、データ位置と略一致すると判定した場合(ステップS79でYES)、当該データ位置に関連付けられたファイル名を有する画像データを記憶部13から読み出す(ステップS80)。CPU10は、ステップS71で読み出した効果名を有する演出効果を用いて画像再生部15により画像データを再生し、画像を表示部16に表示する(ステップS81)。CPU10は、楽曲データの再生を終了したか否かを判定する(ステップS82)。CPU10は、楽曲データの再生を終了していないと判定した場合(ステップS82でNO)、ステップS78に処理を戻す。CPU10は、楽曲データの再生を終了したと判定した場合(ステップS82でYES)、画像表示処理を終了する。   If the CPU 10 determines that the data position substantially coincides (YES in step S79), the CPU 10 reads out the image data having the file name associated with the data position from the storage unit 13 (step S80). CPU10 reproduces | regenerates image data by the image reproduction part 15 using the effect which has the effect name read by step S71, and displays an image on the display part 16 (step S81). CPU10 determines whether reproduction | regeneration of music data was complete | finished (step S82). If the CPU 10 determines that the reproduction of the music data has not ended (NO in step S82), the process returns to step S78. If the CPU 10 determines that the reproduction of the music data has ended (YES in step S82), the image display process ends.

本実施の形態1では、ユーザが選択した画像を、当該ユーザが選択したデータ位置に関連付けて記憶することにより、演奏期間内に表示する画像及びタイミングを指定することが可能となる。また、端末装置3は、ユーザにより選択された歌詞の一部に対応するデータ位置を受付けることにより、ユーザが容易に画像を表示するタイミングを指定することが可能となる。   In the first embodiment, by storing the image selected by the user in association with the data position selected by the user, it is possible to specify the image and timing to be displayed within the performance period. Also, the terminal device 3 can easily specify the timing for displaying an image by receiving a data position corresponding to a part of the lyrics selected by the user.

実施の形態2
本実施の形態2は、実施の形態1が位置選択画面に歌詞のみを表示するのに対して、歌詞と共に特定の楽器の発音タイミング等を表示する。端末装置3のCPU30は、図9で示したデータ位置受付処理のステップS31で歌詞データを記憶部33から読み出すと共に、記憶部33から楽曲データを読み出し、更に楽曲データから特定の楽器の発音タイミングを抽出する。楽曲データは、図8で示したタイミング指定処理のステップS19で歌詞データと共にサーバ装置4に要求し、送られてきた楽曲データを受信して記憶部33に記憶するとよい。
Embodiment 2
In the second embodiment, while only the lyrics are displayed on the position selection screen in the first embodiment, the sound generation timing of a specific instrument is displayed together with the lyrics. The CPU 30 of the terminal device 3 reads out the lyrics data from the storage unit 33 in step S31 of the data position reception process shown in FIG. 9, reads out the music data from the storage unit 33, and further determines the sounding timing of a specific instrument from the music data. Extract. The music data is requested to the server device 4 together with the lyrics data in step S19 of the timing designation process shown in FIG. 8, and the received music data is received and stored in the storage unit 33.

カラオケ曲の楽曲データは、複数の楽器夫々の発音タイミングと、各発音タイミングにおける音程、音量及び音の長さとを含む演奏データであり、例えば、MIDI( Musical Instrument Digital Interface )データである。特定の楽器の発音タイミングとして、例えばMIDIデータに含まれるドラムの発音タイミングを抽出するとよい。また、CPU30は、楽曲データから特徴部分を抽出する。特徴部分は、曲のタイトル部分、前奏部分、Aメロ部分、サビ部分及び間奏部分等であり、楽曲データには当該特徴部分を示す識別子が含まれている。これにより、CPU30は、曲の特徴部分を抽出する抽出部として機能する。そして、CPU30は、図9で示したデータ位置受付処理のステップS32で歌詞、特定の楽器の発音タイミング及び曲の特徴部分が示された位置選択画面を表示部36に表示する。   The music data of the karaoke music is performance data including the sound generation timing of each of a plurality of musical instruments and the pitch, volume and sound length at each sound generation timing, for example, MIDI (Musical Instrument Digital Interface) data. As the sound generation timing of a specific instrument, for example, the sound generation timing of the drum included in the MIDI data may be extracted. Further, the CPU 30 extracts a feature portion from the music data. The characteristic portions are a title portion, a prelude portion, an A melody portion, a chorus portion, an interlude portion, and the like of the song, and the music data includes an identifier indicating the characteristic portion. Thereby, CPU30 functions as an extraction part which extracts the characteristic part of a music. Then, the CPU 30 displays on the display unit 36 a position selection screen on which the lyrics, the pronunciation timing of the specific musical instrument, and the characteristic part of the song are shown in step S32 of the data position receiving process shown in FIG.

図12は、実施の形態2に係る位置選択画面の例を示す模式図である。位置選択画面には、選択された予約曲の歌詞と、予約曲の楽曲データから抽出された曲の特徴部分及び特定の楽器の発音タイミングとが表示される。図12に示す例では、選択された曲名「卒業の季節」を有する曲の歌詞「夏の校舎・・・」が位置選択画面の略中央に表示され、位置選択画面の右側には、歌詞をスクロール表示するためのスクロールバーが表示されている。また、楽曲データに含まれるドラムの発音タイミングが、ドラムを示すアイコンを用いて位置選択画面に表示されている。特定の楽器として、例えば、ドラムに含まれるクラッシュシンバル(サイドシンバル)を用いてもよい。   FIG. 12 is a schematic diagram illustrating an example of a position selection screen according to the second embodiment. The position selection screen displays the lyrics of the selected reserved song, the characteristic portion of the song extracted from the song data of the reserved song, and the sounding timing of the specific instrument. In the example shown in FIG. 12, the lyrics “Summer School Building ...” of the song having the selected song name “Graduation Season” is displayed in the approximate center of the position selection screen, and the lyrics are displayed on the right side of the position selection screen. A scroll bar for scroll display is displayed. In addition, the sound generation timing of the drum included in the music data is displayed on the position selection screen using an icon indicating the drum. As a specific instrument, for example, a crush cymbal (side cymbal) included in a drum may be used.

楽曲データに設定されている各発音タイミングにおけるドラムの音量に基づいて位置選択画面に表示されるアイコンの大きさが変更される。例えば、音量が大きい場合には、より大きなアイコンを表示するとよい。また、全ての発音タイミングを表示する場合に限るものではなく、所定の音量を超えるドラムの発音タイミングのみを、アイコンを用いて表示してもよい。位置選択画面には、楽曲データから抽出された各特徴部分を示す「(タイトル表示)」、「(前奏)」、「(Aメロ)」、「(サビ)」及び「(間奏)」が各特徴部分の先頭に表示されている。ユーザは、スタイラス3aの先端部を用いてタッチパネル部37をなぞることにより、表示部36に表示された歌詞の一部を選択する。   The size of the icon displayed on the position selection screen is changed based on the volume of the drum at each sound generation timing set in the music data. For example, when the volume is high, a larger icon may be displayed. Further, the present invention is not limited to displaying all sound generation timings, and only the sound generation timings of drums exceeding a predetermined volume may be displayed using icons. On the position selection screen, “(title display)”, “(prelude)”, “(A melody)”, “(chorus)”, and “(interlude)” indicating each feature portion extracted from the music data are displayed. It is displayed at the beginning of the feature part. The user selects a part of the lyrics displayed on the display unit 36 by tracing the touch panel unit 37 using the tip of the stylus 3a.

これにより、ユーザは、表示されたドラムの発音タイミング及び曲の特徴部分を参照して、高揚感を与える曲の盛り上がり部分又はユーザが記憶している曲の一部範囲に対応するタイミングを選択することが可能となる。また、端末装置3は、位置選択画面に表示している曲の各特徴部分、又は発音タイミングを示すアイコンから、特徴部分又は発音タイミングの選択をユーザから受付けてもよい。この場合、端末装置3は、選択された曲の特徴部分又は発音タイミングに対応するデータ位置を指定する。   Accordingly, the user refers to the sound generation timing of the displayed drum and the characteristic portion of the song, and selects the timing corresponding to the rising portion of the song that gives a sense of elevation or the partial range of the song stored by the user. It becomes possible. Further, the terminal device 3 may accept the selection of the feature portion or the sound generation timing from the user from each feature portion of the song displayed on the position selection screen or an icon indicating the sound generation timing. In this case, the terminal device 3 designates a data position corresponding to the feature portion or the sound generation timing of the selected song.

また、特徴部分又は発音タイミングの選択は、ユーザが指先又はスタイラス3aの先端部を用いて、位置選択画面に表示された特徴部分又は発音タイミングをクリックすることにより受付けるとよい。尚、図12に示す例では、前奏部分に歌詞に含まれない擬声語「ちゃらら〜」が表示されているが、これに限るものではなく当該擬声語を表示しなくてもよい。また、音程が短時間に上昇するデータ位置等を、曲の盛り上がり部分として抽出し、当該盛り上がり部分を示すアイコンを位置選択画面に表示してもよい。また、楽曲データに予め盛り上がり部分を示す識別子を含めてもよい。   The selection of the feature portion or the sound generation timing may be accepted by the user clicking on the feature portion or the sound generation timing displayed on the position selection screen using the fingertip or the tip of the stylus 3a. In the example shown in FIG. 12, the onomatopoeia “Charara” not included in the lyrics is displayed in the prelude, but the present invention is not limited to this, and the onomatopoeia may not be displayed. Alternatively, a data position or the like where the pitch rises in a short time may be extracted as a climax part of the song, and an icon indicating the climax part may be displayed on the position selection screen. Moreover, you may include the identifier which shows a climax part beforehand in music data.

図13は、実施の形態2に係るデータ位置受付処理の手順を示すフローチャートである。データ位置受付処理は、図8で示したタイミング指定処理のステップS20で端末装置3のCPU30により実行される。CPU30は、歌詞データを記憶部33から読み出す(ステップS91)。CPU30は、楽曲データを記憶部33から読み出す(ステップS92)。CPU30は、楽曲データから所定の楽器の発音タイミングを抽出する(ステップS93)。CPU30は、楽曲データから曲の特徴部分を抽出する(ステップS94)。   FIG. 13 is a flowchart showing a procedure of data position reception processing according to the second embodiment. The data position receiving process is executed by the CPU 30 of the terminal device 3 in step S20 of the timing specifying process shown in FIG. CPU30 reads lyrics data from the memory | storage part 33 (step S91). CPU30 reads music data from the memory | storage part 33 (step S92). The CPU 30 extracts the sound generation timing of a predetermined musical instrument from the music data (step S93). CPU30 extracts the characteristic part of a music from music data (step S94).

CPU30は、歌詞データ、発音タイミング及び曲の特徴部分に基づいて位置選択画面を表示部36に表示する(ステップS95)。CPU30は、位置選択画面に応じたユーザによる操作をタッチパネル部37により受付ける(ステップS96)。CPU30は、受付けた操作が、歌詞の一部、発音タイミング又は曲の特徴部分を選択する位置選択操作であるか否かを判定する(ステップS97)。CPU30は、位置選択操作でないと判定した場合(ステップS97でNO)、ステップS96に処理を戻す。   The CPU 30 displays a position selection screen on the display unit 36 based on the lyrics data, the sound generation timing, and the characteristic part of the song (step S95). CPU30 accepts operation by the user according to a position selection screen by touch panel part 37 (Step S96). The CPU 30 determines whether or not the accepted operation is a position selection operation for selecting a part of the lyrics, a pronunciation timing, or a characteristic part of the song (step S97). If it is determined that the position selection operation is not performed (NO in step S97), the CPU 30 returns the process to step S96.

CPU30は、位置選択操作であると判定した場合(ステップS97でYES)、選択された歌詞の一部、発音タイミング又は曲の特徴部分に対応するデータ位置を取得する(ステップS98)。ステップS98の後の手順は、図9に示したデータ位置受付処理のステップS36からの手順と同様であるので説明を省略する。   If the CPU 30 determines that the operation is a position selection operation (YES in step S97), the CPU 30 acquires a data position corresponding to a part of the selected lyrics, pronunciation timing, or a characteristic part of the song (step S98). The procedure after step S98 is the same as the procedure from step S36 of the data position receiving process shown in FIG.

位置選択画面に歌詞、発音タイミング及び曲の特徴部分を表示する場合を示したが、これに限るものではなく、各データ位置における音量等を示す波形を表示してもよい。図14は、波形を取得する方法を説明するための説明図である。図14中点線は、取得された波形を示す。端末装置3のCPU30は、データ位置を示す横軸及び音量を示す縦軸を有する座標面上で各データ位置の音量をプロットし、各音量を繋ぐ近似曲線を取得する。近似曲線は、例えばベージェ曲線及びスプライン曲線等で近似するとよい。CPU30は、近似曲線を音量を示す波形として位置選択画面に歌詞と共に表示する。図14に示す例では、座標面にプロットした各データ位置の音量を繋ぐ近似曲線が取得されている。   Although the case where lyrics, pronunciation timing, and a characteristic part of a song are displayed on the position selection screen is shown, the present invention is not limited to this, and a waveform indicating the volume at each data position may be displayed. FIG. 14 is an explanatory diagram for explaining a method of acquiring a waveform. The dotted line in FIG. 14 shows the acquired waveform. The CPU 30 of the terminal device 3 plots the volume of each data position on a coordinate plane having a horizontal axis indicating the data position and a vertical axis indicating the volume, and obtains an approximate curve connecting the volumes. The approximate curve may be approximated by, for example, a Bezier curve or a spline curve. The CPU 30 displays the approximate curve as a waveform indicating the volume along with the lyrics on the position selection screen. In the example illustrated in FIG. 14, an approximate curve that connects the volume of each data position plotted on the coordinate plane is acquired.

図15は、実施の形態2に係る位置選択画面の他の例を示す模式図である。図15に示す例では、各データ位置に対応する歌詞及び波形が、歌詞に沿って位置選択画面に表示されている。これにより、ユーザは、表示された波形を参照して曲の盛り上がり部分を判断し、当該盛り上がり部分又は盛り上がり部分に対応する歌詞を、画像を表示するタイミングとして選択することが可能となる。また、端末装置3は、位置選択画面に表示している波形の一部の選択をユーザから受付けてもよい。例えば、図15に示す如くユーザがスタイラス3aの先端部を用いて波形の一部をなぞることにより、波形の一部を選択する。   FIG. 15 is a schematic diagram illustrating another example of the position selection screen according to the second embodiment. In the example shown in FIG. 15, lyrics and waveforms corresponding to each data position are displayed on the position selection screen along the lyrics. Thereby, the user can determine the climax part of the song with reference to the displayed waveform, and can select the climax part or the lyrics corresponding to the climax part as the timing for displaying the image. Further, the terminal device 3 may accept a selection of a part of the waveform displayed on the position selection screen from the user. For example, as shown in FIG. 15, the user selects a part of the waveform by tracing the part of the waveform using the tip of the stylus 3a.

この場合、端末装置3のCPU30は、例えば、スタイラス3aの先端部が位置選択画面上で描く軌跡と、波形とが交差する点をデータ位置として指定する。また、端末装置3のCPU30は、例えば、スタイラス3aの先端部が位置選択画面上で描く軌跡が波形に対して2点で交差する場合、当該2点を結ぶ線の中点に対応するデータ位置を指定するとよい。図16は、波形を取得する他の方法を説明するための説明図である。図16中点線は、取得される波形を示す。   In this case, for example, the CPU 30 of the terminal device 3 designates, as the data position, a point where the trajectory drawn by the tip of the stylus 3a on the position selection screen and the waveform intersect. For example, when the locus drawn by the tip of the stylus 3a on the position selection screen intersects the waveform at two points, the CPU 30 of the terminal device 3 performs the data position corresponding to the midpoint of the line connecting the two points. Should be specified. FIG. 16 is an explanatory diagram for explaining another method of acquiring a waveform. The dotted line in FIG. 16 shows the acquired waveform.

端末装置3のCPU30は、主旋律に対応する特定の楽器の演奏データを楽曲データから抽出し、主旋律を示す波形を位置選択画面に表示してもよい。CPU30は、主旋律に対応する特定の楽器の演奏データに基づいて、データ位置を示す横軸及び音程を示す縦軸を有する座標面上に、各データ位置の音程情報が示す音程をプロットし、各音程を繋ぐ近似曲線を取得する。図16に示す例では、主旋律を演奏する特定の楽器の演奏データに基づいて、楽譜上の各音符を繋ぐ近似曲線が取得されている。   The CPU 30 of the terminal device 3 may extract performance data of a specific musical instrument corresponding to the main melody from the music data and display a waveform indicating the main melody on the position selection screen. The CPU 30 plots the pitch indicated by the pitch information at each data position on the coordinate plane having the horizontal axis indicating the data position and the vertical axis indicating the pitch based on the performance data of the specific instrument corresponding to the main melody, Get approximate curve connecting pitches. In the example shown in FIG. 16, an approximate curve connecting the notes on the score is acquired based on performance data of a specific instrument that plays the main melody.

図17は、実施の形態2に係る位置選択画面の他の例を示す模式図である。位置選択画面には、近似曲線からなる波形を表示する場合に限るものではなく、各データ位置における音量又は音程を表示してもよい。図17に示す例では、各データ位置に対応する歌詞及び音量が、歌詞に沿って位置選択画面に表示されている。また、歌詞に沿って主旋律等を示す楽譜を位置選択画面に表示してもよい。この場合、曲の盛り上がり部分に対応する音符の表示色を変更してもよい。   FIG. 17 is a schematic diagram illustrating another example of the position selection screen according to the second embodiment. The position selection screen is not limited to displaying a waveform composed of approximate curves, but may display a volume or a pitch at each data position. In the example shown in FIG. 17, the lyrics and the volume corresponding to each data position are displayed on the position selection screen along the lyrics. Further, a score indicating the main melody or the like along the lyrics may be displayed on the position selection screen. In this case, the display color of the note corresponding to the rising part of the song may be changed.

また、特定の楽器に含まれる複数のパート部夫々の発音タイミングに基づいてアイコンを表示するデータ位置を決定してもよい。例えば、ドラムに含まれるハイハット、スネア、バス及びフロアタム等の複数種類のパート部が同時に発音する発音タイミングをアイコンを表示する位置として取得してもよい。位置選択画面では、予め設定された特定の楽器の発音タイミングを表示する場合を示したが、例えば、ギター及びキーボード等のユーザが選択した楽器の発音タイミングを表示してもよい。   Further, the data position for displaying the icon may be determined based on the sound generation timing of each of the plurality of part parts included in the specific instrument. For example, the sound generation timing at which a plurality of types of parts such as hi-hat, snare, bass, and floor tom included in the drum simultaneously generate sound may be acquired as the position for displaying the icon. In the position selection screen, the case where the preset sounding timing of a specific musical instrument is displayed is shown, but the sounding timing of a musical instrument selected by a user such as a guitar and a keyboard may be displayed.

本実施の形態2では、曲の特徴部分又は特定の楽器の発音タイミングを選択することにより、歌詞の無い前奏部分及び間奏部分等に含まれるタイミングをユーザが指定することが可能となる。また、ユーザが曲を知らない場合でも、曲の特徴部分をユーザが認識して当該特徴部分に対応するタイミングをユーザが指定することが可能となる。   In the second embodiment, the user can specify the timing included in the prelude part, the interlude part, etc. without lyrics by selecting the characteristic part of the song or the sound generation timing of a specific instrument. Further, even when the user does not know the music, the user can recognize the characteristic part of the music and specify the timing corresponding to the characteristic part.

本実施の形態2は以上の如きであり、その他は実施の形態1と同様であるので対応する部分には同一の符号及び処理名を付してその詳細な説明を省略する。   The second embodiment is as described above, and the other parts are the same as those of the first embodiment. Therefore, the corresponding parts are denoted by the same reference numerals and processing names, and detailed description thereof is omitted.

実施の形態3
本実施の形態3は、実施の形態1が表示された歌詞の一部を選択するのに対して、キーワードに関連付けられた歌詞の一部を選択するようにしてある。端末装置3は、キーワードに関連付けられた歌詞の一部の選択を受付ける場合、歌詞データからキーワードを抽出する。キーワードは、予め決定して端末装置3の記憶部33に記憶しておくとよい。端末装置3は、抽出したキーワードの一覧を示す位置選択画面を表示する。端末装置3は、位置選択画面に示したキーワードの一覧からキーワードの選択を受付けて、当該キーワードに対応するデータ位置を指定する。
Embodiment 3
In the third embodiment, a part of the lyrics displayed in the first embodiment is selected, whereas a part of the lyrics associated with the keyword is selected. When the terminal device 3 accepts selection of a part of the lyrics associated with the keyword, the terminal device 3 extracts the keyword from the lyrics data. The keywords may be determined in advance and stored in the storage unit 33 of the terminal device 3. The terminal device 3 displays a position selection screen showing a list of extracted keywords. The terminal device 3 accepts the selection of a keyword from the keyword list shown on the position selection screen and designates the data position corresponding to the keyword.

図18は、実施の形態3に係る位置選択画面及びキーワード選択画面の例を示す模式図である。図18A及び図18B夫々は、位置選択画面及びキーワード選択画面の例を示す。端末装置3は、図9で示したデータ位置受付処理のステップS32で、歌詞からキーワードを抽出するためのソフトウェアボタンを備える位置選択画面を表示部36に表示する。図18Aに示す例では、歌詞からキーワードを抽出するためのソフトウェアボタン「注目ワード抽出」が位置選択画面に表示されている。   FIG. 18 is a schematic diagram illustrating an example of a position selection screen and a keyword selection screen according to the third embodiment. 18A and 18B show examples of a position selection screen and a keyword selection screen, respectively. The terminal device 3 displays a position selection screen including software buttons for extracting keywords from the lyrics on the display unit 36 in step S32 of the data position reception process shown in FIG. In the example shown in FIG. 18A, a software button “extract attention word” for extracting a keyword from lyrics is displayed on the position selection screen.

端末装置3は、キーワードの抽出が選択された場合、記憶部33に予め記憶しているキーワードを歌詞データから抽出する。そして、端末装置3は、歌詞データから抽出したキーワードがある場合、当該キーワードを示すキーワード選択画面を表示部36に表示する。端末装置3は、キーワード選択画面に表示したキーワードから、キーワードの選択を受付けた場合、選択されたキーワードの歌詞に対応するデータ位置を受付ける。図18Bは、図18Aで示す位置選択画面のソフトウェアボタン「注目ワード抽出」が選択された場合に表示部36に表示されるキーワード選択画面を示す。   When the keyword extraction is selected, the terminal device 3 extracts keywords stored in advance in the storage unit 33 from the lyrics data. When there is a keyword extracted from the lyrics data, the terminal device 3 displays a keyword selection screen indicating the keyword on the display unit 36. When the terminal device 3 accepts selection of a keyword from the keywords displayed on the keyword selection screen, the terminal device 3 accepts a data position corresponding to the lyrics of the selected keyword. FIG. 18B shows a keyword selection screen displayed on the display unit 36 when the software button “extract word of interest” on the position selection screen shown in FIG. 18A is selected.

図18Bに示す例では、曲名「卒業の季節」を有する曲の歌詞データから抽出されたキーワード「卒業」、「真っ青な空」及び「春が来る」がキーワード選択画面に表示されている。また、スタイラス3aの先端部を用いてユーザによりキーワード「卒業」が選択されている。   In the example shown in FIG. 18B, the keywords “graduation”, “pure blue sky”, and “spring come” extracted from the lyrics data of the song having the song name “graduation season” are displayed on the keyword selection screen. Further, the keyword “graduation” is selected by the user using the tip of the stylus 3a.

図19は、実施の形態3に係るデータ位置受付処理の手順を示すフローチャートである。CPU30は、歌詞データを記憶部33から読み出す(ステップS111)。CPU30は、読み出した歌詞データに基づいて位置選択画面を表示部36に表示する(ステップS112)。CPU30は、ユーザによる操作をタッチパネル部37により受付ける(ステップS113)。CPU30は、受付けた操作が、キーワードを抽出する抽出操作であるか否かを判定する(ステップS114)。CPU30は、抽出操作であると判定した場合(ステップS114でYES)、予め記憶してあるキーワードを歌詞データから抽出する(ステップS115)。   FIG. 19 is a flowchart illustrating a procedure of data position reception processing according to the third embodiment. CPU30 reads lyrics data from the memory | storage part 33 (step S111). The CPU 30 displays a position selection screen on the display unit 36 based on the read lyrics data (step S112). CPU30 receives operation by a user with touch panel part 37 (Step S113). CPU30 determines whether received operation is extraction operation which extracts a keyword (step S114). When CPU 30 determines that the operation is an extraction operation (YES in step S114), CPU 30 extracts keywords stored in advance from the lyrics data (step S115).

CPU30は、抽出したキーワードがあるか否かを判定する(ステップS116)。CPU30は、抽出したキーワードがないと判定した場合(ステップS116でNO)、ステップS113に処理を戻す。CPU30は、抽出したキーワードがあると判定した場合(ステップS116でYES)、抽出したキーワードに基づいてキーワード選択画面を表示部36に表示し(ステップS117)、ステップS113に処理を戻す。CPU30は、ステップS114で、抽出操作でないと判定した場合(ステップS114でNO)、位置選択画面に表示された歌詞の一部又はキーワード選択画面に表示されたキーワードを選択する位置選択操作を受付けたか否かを判定する(ステップS118)。   The CPU 30 determines whether there is an extracted keyword (step S116). If CPU 30 determines that there is no extracted keyword (NO in step S116), it returns the process to step S113. When determining that there is an extracted keyword (YES in step S116), the CPU 30 displays a keyword selection screen on the display unit 36 based on the extracted keyword (step S117), and returns the process to step S113. If the CPU 30 determines in step S114 that it is not an extraction operation (NO in step S114), has it received a position selection operation for selecting a part of the lyrics displayed on the position selection screen or the keyword displayed on the keyword selection screen? It is determined whether or not (step S118).

CPU30は、位置選択操作を受付けていないと判定した場合(ステップS118でNO)、ステップS113に処理を戻す。CPU30は、位置選択操作を受付けたと判定した場合(ステップS118でYES)、選択された歌詞の一部又はキーワードに対応するデータ位置を取得する(ステップS119)。ステップS119の後の手順は、図9で示したデータ位置受付処理のステップS36以降の手順と同様であるので説明を省略する。画像データは、画像選択画面により選択する場合に限るものではない。例えば、端末装置3は、サーバ装置4に要求して受信した画像データの一覧をキーワード選択画面に表示して、キーワードの選択と、画像データの選択とを受付けるようにしてもよい。   If it is determined that the position selection operation has not been accepted (NO in step S118), CPU 30 returns the process to step S113. When it is determined that the position selection operation has been accepted (YES in step S118), the CPU 30 acquires a data position corresponding to a part of the selected lyrics or a keyword (step S119). The procedure after step S119 is the same as the procedure after step S36 of the data position receiving process shown in FIG. The image data is not limited to being selected on the image selection screen. For example, the terminal device 3 may display a list of image data requested and received from the server device 4 on the keyword selection screen, and accept the keyword selection and the image data selection.

図20は、キーワード選択画面の他の例を示す模式図である。キーワード選択画面の左側には、抽出されたキーワードの一覧が表示されている。また、キーワード選択画面の右側には、ユーザIDに関連付けてサーバ装置4に記憶されている画像データの一覧が表示されている。この場合、端末装置3は、ユーザがスタイラス3aの先端部を用いて選択したキーワード及び画像データのファイル名を受付けることにより、選択されたキーワードに対応付けられたデータ位置及び画像を指定する。   FIG. 20 is a schematic diagram illustrating another example of the keyword selection screen. On the left side of the keyword selection screen, a list of extracted keywords is displayed. A list of image data stored in the server device 4 in association with the user ID is displayed on the right side of the keyword selection screen. In this case, the terminal device 3 specifies the data position and the image associated with the selected keyword by receiving the keyword selected by the user using the tip of the stylus 3a and the file name of the image data.

本実施の形態3では、データ位置を受付ける場合に歌詞から抽出したキーワードをユーザが選択することにより、歌詞全体からユーザが歌詞の一部を探し出して選択する手間を低減することが可能となる。   In the third embodiment, when the user selects a keyword extracted from the lyrics when accepting the data position, it is possible to reduce time and effort for the user to search and select a part of the lyrics from the entire lyrics.

本実施の形態3は以上の如きであり、その他は実施の形態1又は実施の形態2と同様であるので対応する部分には同一の符号及び処理名を付してその詳細な説明を省略する。   The third embodiment is as described above, and the other parts are the same as those in the first or second embodiment. Therefore, corresponding parts are denoted by the same reference numerals and processing names, and detailed description thereof is omitted. .

実施の形態4
図21は、実施の形態4に係る端末装置の内部ハードウェアを示すブロック図である。本実施の形態4は、実施の形態1がROM31から読み出したプログラムを実行するのに対して、記録媒体に記録してあるプログラムを読み出して実行する。端末装置5は、記録媒体読込部55を含む。端末装置5の他のハードウェアは、実施の形態1の端末装置3と同様であり、符号の相違を記載するに留め、詳細な説明を省略する。端末装置5は、スタイラス5aと、CPU50と、ROM51と、RAM52と、記憶部53と、通信部54と、表示部56と、タッチパネル部57とを含む。
Embodiment 4
FIG. 21 is a block diagram illustrating internal hardware of the terminal device according to the fourth embodiment. In the fourth embodiment, the program read from the ROM 31 is executed in the first embodiment, but the program recorded in the recording medium is read and executed. The terminal device 5 includes a recording medium reading unit 55. Other hardware of the terminal device 5 is the same as that of the terminal device 3 of the first embodiment, and only a difference in reference numerals is described, and detailed description thereof is omitted. The terminal device 5 includes a stylus 5a, a CPU 50, a ROM 51, a RAM 52, a storage unit 53, a communication unit 54, a display unit 56, and a touch panel unit 57.

CPU50は、記録媒体550に記録してあるプログラム551を記録媒体読込部55により読み出して記憶部53にインストールする。CPU50は、記憶部53からプログラム551をRAM52に読み出して実行することにより、画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定部として機能する。   The CPU 50 reads the program 551 recorded in the recording medium 550 by the recording medium reading unit 55 and installs it in the storage unit 53. The CPU 50 functions as a timing designating unit that designates the timing for displaying an image within the reproduction period of music data by reading the program 551 from the storage unit 53 into the RAM 52 and executing it.

本実施の形態4は以上の如きであり、その他は実施の形態1から実施の形態3までと同様であるので対応する部分には同一の符号及び処理名を付してその詳細な説明を省略する。   The fourth embodiment is as described above, and the others are the same as those in the first to third embodiments. Therefore, the corresponding parts are denoted by the same reference numerals and processing names, and detailed description thereof is omitted. To do.

1 カラオケ装置(曲再生装置)
1a マイクロフォン
3、5 端末装置(タイミング指定装置)
3a、5a スタイラス
4 サーバ装置
N ネットワーク網
1040 CPU
30、50 CPU(タイミング指定部、抽出部)
10a、30a、40a、40a バス
11、31、41、51 ROM
12、32、42、52 RAM
13 記憶部(タイミング記憶部、画像記憶部)
33、53 記憶部(歌詞記憶部、一覧記憶部)
131 予約表
14a ネットワーク通信部(画像受付部)
14b 端末装置通信部(受信部)
15 画像再生部
16、36 表示部
17 音声再生部
18 ミキサアンプ
18a マイク信号入力端子
19 スピーカ部
34 通信部(送信部)
44、54 通信部
37、57 タッチパネル部(一部受付部、画像指定情報受付部)
23 操作端末装置通信部
34、54 通信部
55 記録媒体読込部
550 記録媒体
551 プログラム
1 Karaoke device (music playback device)
1a Microphone 3, 5 Terminal device (timing designation device)
3a, 5a Stylus 4 Server device N Network network 1040 CPU
30, 50 CPU (timing designation unit, extraction unit)
10a, 30a, 40a, 40a Bus 11, 31, 41, 51 ROM
12, 32, 42, 52 RAM
13 storage unit (timing storage unit, image storage unit)
33, 53 Storage unit (lyrics storage unit, list storage unit)
131 Reservation table 14a Network communication unit (image reception unit)
14b Terminal device communication unit (receiving unit)
DESCRIPTION OF SYMBOLS 15 Image reproduction part 16, 36 Display part 17 Audio | voice reproduction part 18 Mixer amplifier 18a Microphone signal input terminal 19 Speaker part 34 Communication part (transmission part)
44, 54 Communication unit 37, 57 Touch panel unit (partial reception unit, image designation information reception unit)
23 Operation Terminal Device Communication Unit 34, 54 Communication Unit 55 Recording Medium Reading Unit 550 Recording Medium 551 Program

Claims (10)

画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定装置において、
前記タイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定部
を備えるタイミング指定装置。
In a timing designating device for designating a timing for displaying an image within a reproduction period of music data,
A timing designation device comprising: a timing designation unit that designates the timing in association with a position in the music data.
前記楽曲データに関連付けられた歌詞データを記憶する歌詞記憶部と、
該歌詞記憶部により記憶した歌詞データを表示する表示部と、
該表示部により表示した歌詞データの一部を受付ける一部受付部と
を更に備え、
前記タイミング指定部は、前記一部受付部により受付けた歌詞データの一部に対応するタイミングを指定する請求項1に記載のタイミング指定装置。
A lyrics storage unit for storing lyrics data associated with the music data;
A display unit for displaying lyrics data stored in the lyrics storage unit;
A partial reception unit for receiving a part of the lyrics data displayed by the display unit;
The timing designation device according to claim 1, wherein the timing designation unit designates timing corresponding to a part of the lyrics data received by the partial reception unit.
前記楽曲データは、少なくとも一つの楽器の複数の発音タイミングを含み、
前記複数の発音タイミングを表示する表示部を備え、
前記タイミング指定部は、前記表示部により表示した前記複数の発音タイミングの一部を指定する請求項1に記載のタイミング指定装置。
The music data includes a plurality of pronunciation timings of at least one musical instrument,
A display unit for displaying the plurality of pronunciation timings;
The timing designation device according to claim 1, wherein the timing designation unit designates some of the plurality of sound generation timings displayed by the display unit.
前記楽曲データに基づいて曲の特徴部分を抽出する抽出部と、
該抽出部により抽出した特徴部分を表示する表示部と、
該表示部により表示した特徴部分の一部を受付ける一部受付部と
を更に備え、
前記タイミング指定部は、前記一部受付部により受付けた特徴部分の一部に対応するタイミングを指定する請求項1に記載のタイミング指定装置。
An extraction unit that extracts a characteristic portion of a song based on the song data;
A display unit for displaying the feature portion extracted by the extraction unit;
A part receiving part for receiving a part of the characteristic part displayed by the display part, and
The timing designation device according to claim 1, wherein the timing designation unit designates timing corresponding to a part of the characteristic portion received by the partial reception unit.
前記楽曲データから曲の主旋律を抽出する抽出部と、
該抽出部により抽出した主旋律を表示する表示部と、
該表示部により表示した主旋律の一部を受付ける一部受付部と
を更に備え、
前記タイミング指定部は、前記一部受付部により受付けた主旋律の一部に対応するタイミングを指定する請求項1に記載のタイミング指定装置。
An extraction unit for extracting the main melody of the song from the song data;
A display unit for displaying the main melody extracted by the extraction unit;
A partial reception unit for receiving a part of the main melody displayed by the display unit,
The timing designation device according to claim 1, wherein the timing designation unit designates timing corresponding to a part of the main melody received by the partial reception unit.
前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、
該画像指定情報受付部により受付けた画像指定情報を前記タイミング指定部により指定したタイミングに関連付けて記憶する記憶部と、
該記憶部により前記タイミングに関連付けて記憶した前記画像指定情報を送信する送信部と
を備える請求項1から請求項5までのいずれか一つに記載のタイミング指定装置。
An image designation information receiving unit for receiving image designation information for designating the image;
A storage unit for storing the image designation information received by the image designation information receiving unit in association with the timing designated by the timing designation unit;
The timing designation device according to claim 1, further comprising: a transmission unit that transmits the image designation information stored in association with the timing by the storage unit.
複数の画像の一覧を記憶する一覧記憶部を備え、
前記画像指定情報は、前記一覧記憶部により記憶する前記一覧から選択された画像を指定する
請求項6に記載のタイミング指定装置。
A list storage unit for storing a list of a plurality of images is provided.
The timing designation device according to claim 6, wherein the image designation information designates an image selected from the list stored by the list storage unit.
楽曲データを再生する再生部を備え、前記楽曲データの再生期間内に画像を表示する曲再生装置において、
前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、
前記画像を表示するタイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定部と、
前記画像指定情報受付部により受付けた画像指定情報を前記タイミング指定部により指定したタイミングに関連付けて記憶する記憶部と、
前記再生部により前記楽曲データを再生している場合、前記記憶部に記憶したタイミングに基づいて、前記記憶部により該タイミングが関連付けて記憶されている画像指定情報が指定する画像を表示する表示部と
を備える曲再生装置。
In a music playback device that includes a playback unit that plays back music data, and that displays an image within the playback period of the music data,
An image designation information receiving unit for receiving image designation information for designating the image;
A timing designating unit for designating the timing for displaying the image in association with the position in the music data;
A storage unit for storing the image designation information received by the image designation information receiving unit in association with the timing designated by the timing designation unit;
When the music data is reproduced by the reproduction unit, a display unit that displays an image designated by the image designation information stored in association with the timing by the storage unit based on the timing stored in the storage unit A music playback device comprising:
楽曲データを再生する再生部を有し、該再生部により再生する楽曲データの再生期間内に画像を表示する曲再生装置と、前記画像を楽曲データの再生期間内に表示するタイミングを指定するタイミング指定装置とを備えたカラオケシステムにおいて、
前記タイミング指定装置は、
前記画像を表示するタイミングを前記楽曲データ内の位置に対応付けて指定するタイミング指定部と、
前記画像を指定する画像指定情報を受付ける画像指定情報受付部と、
前記タイミング指定部により指定したタイミングを、前記画像指定情報受付部により受付けた画像指定情報に関連付けて記憶するタイミング記憶部と、
該タイミング記憶部により記憶した前記タイミング及び画像指定情報を前記曲再生装置に送信する送信部と
を備え、
前記曲再生装置は、
前記送信部により送信されたタイミング及び画像指定情報を受信する受信部と、
該受信部により受信した画像指定情報が指定する画像を受付ける画像受付部と、
該画像受付部により受付けた画像を前記受信部により受信したタイミングに関連付けて記憶する画像記憶部と、
前記再生部により前記楽曲データを再生している場合、前記画像記憶部により記憶したタイミングに基づいて、前記画像記憶部により該タイミングが関連付けて記憶されている画像を表示する表示部と
を備える
カラオケシステム。
A music playback device that has a playback unit that plays back music data, displays an image within the playback period of the music data that is played back by the playback unit, and a timing that specifies the timing for displaying the image within the playback period of the music data In a karaoke system equipped with a designated device,
The timing designation device includes:
A timing designating unit for designating the timing for displaying the image in association with the position in the music data;
An image designation information receiving unit for receiving image designation information for designating the image;
A timing storage unit that stores the timing designated by the timing designation unit in association with the image designation information received by the image designation information reception unit;
A transmission unit that transmits the timing and image designation information stored by the timing storage unit to the music reproducing device;
The music playback device
A receiver for receiving the timing and image designation information transmitted by the transmitter;
An image receiving unit for receiving an image designated by the image designation information received by the receiving unit;
An image storage unit for storing the image received by the image receiving unit in association with the timing received by the receiving unit;
A display unit that displays an image stored in association with the timing by the image storage unit based on the timing stored by the image storage unit when the music data is being reproduced by the reproduction unit; system.
制御部を備えるタイミング指定装置に画像を楽曲データの再生期間内に表示するタイミングを指定させるタイミング指定方法において、
前記タイミングを前記楽曲データ内の位置に対応付けて前記制御部により指定する
タイミング指定方法。
In a timing designation method for causing a timing designation device including a control unit to designate a timing for displaying an image within a reproduction period of music data,
A timing designation method in which the control unit designates the timing in association with a position in the music data.
JP2010082967A 2010-03-31 2010-03-31 Timing designation device, music playback device, karaoke system, and timing designation method Active JP5394301B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010082967A JP5394301B2 (en) 2010-03-31 2010-03-31 Timing designation device, music playback device, karaoke system, and timing designation method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010082967A JP5394301B2 (en) 2010-03-31 2010-03-31 Timing designation device, music playback device, karaoke system, and timing designation method

Publications (2)

Publication Number Publication Date
JP2011215347A true JP2011215347A (en) 2011-10-27
JP5394301B2 JP5394301B2 (en) 2014-01-22

Family

ID=44945138

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010082967A Active JP5394301B2 (en) 2010-03-31 2010-03-31 Timing designation device, music playback device, karaoke system, and timing designation method

Country Status (1)

Country Link
JP (1) JP5394301B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2015014738A (en) * 2013-07-05 2015-01-22 株式会社エクシング Karaoke system, karaoke device, and communication program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10207476A (en) * 1997-01-17 1998-08-07 Yamaha Corp Karaoke device
JP2003099035A (en) * 2001-09-20 2003-04-04 Yamaha Corp Automatic playing device, information distributing server device, and program used for them
JP2006003843A (en) * 2004-06-21 2006-01-05 Xing Inc Karaoke device and karaoke system
JP2007202025A (en) * 2006-01-30 2007-08-09 Olympus Imaging Corp Music image transmission device, camera, and transmission control method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10207476A (en) * 1997-01-17 1998-08-07 Yamaha Corp Karaoke device
JP2003099035A (en) * 2001-09-20 2003-04-04 Yamaha Corp Automatic playing device, information distributing server device, and program used for them
JP2006003843A (en) * 2004-06-21 2006-01-05 Xing Inc Karaoke device and karaoke system
JP2007202025A (en) * 2006-01-30 2007-08-09 Olympus Imaging Corp Music image transmission device, camera, and transmission control method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2015014738A (en) * 2013-07-05 2015-01-22 株式会社エクシング Karaoke system, karaoke device, and communication program

Also Published As

Publication number Publication date
JP5394301B2 (en) 2014-01-22

Similar Documents

Publication Publication Date Title
WO2017028686A1 (en) Information processing method, terminal device and computer storage medium
JP6452229B2 (en) Karaoke sound effect setting system
JP5163581B2 (en) Instrument sound posting system, instrument sound posting device
JP5394301B2 (en) Timing designation device, music playback device, karaoke system, and timing designation method
JP5842383B2 (en) Karaoke system and karaoke device
JP5109426B2 (en) Electronic musical instruments and programs
JP6316099B2 (en) Karaoke equipment
JP2012247558A (en) Information processing device, information processing method, and information processing program
KR100841047B1 (en) Portable player having music data editing function and MP3 player function
JP6474292B2 (en) Karaoke equipment
JP6310769B2 (en) Program, karaoke device and karaoke system
JP5551983B2 (en) Karaoke performance control system
JP6991620B1 (en) Electronic musical instruments, control methods and programs for electronic musical instruments
JP5240840B2 (en) Karaoke equipment
JP6394366B2 (en) Karaoke device and karaoke program
JP2014071215A (en) Musical performance device, musical performance system, and program
JP6196571B2 (en) Performance device and program
JP4429244B2 (en) Karaoke equipment
JP6611633B2 (en) Karaoke system server
KR100652902B1 (en) Electronic music device
JP5387031B2 (en) Electronic music apparatus and program
JP2004354803A (en) Music playback device
JP5387032B2 (en) Electronic music apparatus and program
KR20130125333A (en) Terminal device and controlling method thereof
JP5609912B2 (en) Karaoke equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130604

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131008

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131016

R150 Certificate of patent or registration of utility model

Ref document number: 5394301

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150