JP2011145492A - Karaoke terminal, mobile terminal, data associating method and data associating program - Google Patents

Karaoke terminal, mobile terminal, data associating method and data associating program Download PDF

Info

Publication number
JP2011145492A
JP2011145492A JP2010006232A JP2010006232A JP2011145492A JP 2011145492 A JP2011145492 A JP 2011145492A JP 2010006232 A JP2010006232 A JP 2010006232A JP 2010006232 A JP2010006232 A JP 2010006232A JP 2011145492 A JP2011145492 A JP 2011145492A
Authority
JP
Japan
Prior art keywords
data
image data
time information
karaoke
song
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2010006232A
Other languages
Japanese (ja)
Inventor
Kazuaki Ishikawa
和明 石川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2010006232A priority Critical patent/JP2011145492A/en
Publication of JP2011145492A publication Critical patent/JP2011145492A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a Karaoke terminal, a data associating method and a data associating program, capable of associating an image data with a singing recording data, and managing them so as to be visually understood. <P>SOLUTION: The Karaoke terminal 60, which associates the singing recording data with the image data, includes: a singing data-recording unit for recording the singing recording data with time information of a predetermined range; an image database (DB) control unit for acquiring an image data with time information of a predetermined time point or a predetermined range; an association determining unit for determining whether or not the recorded singing recording data is associated with the acquired image data, depending on whether or not time information of each data is duplicate; and an association data control unit for associating pieces of data of determination objects with each other, when it is determined that the time information is duplicate. Thus, the singing recording data is associated with the image data, and the singing recording data is managed so as to be visually understood. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、音声データと画像データとを関連付けるカラオケ端末、携帯端末、データ関連付け方法およびデータ関連付けプログラムに関する。   The present invention relates to a karaoke terminal, a portable terminal, a data association method, and a data association program that associate audio data and image data.

近年、録音した自分の歌声を着信メロディとして利用できるサービスや備え付けのカメラの前で歌唱しているカラオケユーザの動画をＷｅｂサーバにアップロードして公開するサービスが増加している。例えば、業務用カラオケ・コンテンツ関連の会社が提供する通信カラオケと連動したソーシャル・ネットワーキング・サービス（ＳＮＳ）が挙げられる（たとえば非特許文献１、２参照）。このように今後、カラオケのサービスとして歌唱音声を録音した音楽データ（以下、歌唱録音データ）が１つのコミュニケーションツールとして普及することが見込まれる。   In recent years, services that can use recorded singing voices as incoming melody and services that upload and publish videos of karaoke users who are singing in front of a built-in camera to a Web server are increasing. For example, there is a social networking service (SNS) linked with a communication karaoke provided by a company related to commercial karaoke contents (for example, see Non-Patent Documents 1 and 2). Thus, it is expected that music data (hereinafter referred to as singing recording data) in which singing voice is recorded as a karaoke service will spread as one communication tool.

また、歌唱を録音したカラオケ端末から通信網を介して録音データをユーザのコンピュータにダウンロードさせる歌唱録音データ販売システム（たとえば特許文献１参照）や、カラオケボックス等を利用して歌唱を録音した歌唱録音データおよび備え付けのカメラで撮像した画像を手軽にメール配信するカラオケ音声画像送信システム（たとえば特許文献２参照）などが開示されている。現在デジタルカメラ、カメラ付き携帯電話機は一般に広く普及しており、カラオケボックス内で静止画、動画を撮像する機会が増加することが想定される。   In addition, a song recording data sales system (for example, see Patent Document 1) that downloads recording data from a karaoke terminal that records a song to a user's computer via a communication network, or a song recording that records a song using a karaoke box or the like. A karaoke audio image transmission system (for example, see Patent Document 2) that easily distributes data and images captured by an attached camera by e-mail is disclosed. At present, digital cameras and camera-equipped mobile phones are generally widely used, and it is assumed that opportunities to capture still images and moving images in a karaoke box will increase.

第一興商、“ＤＡＭ★とも”、右枠“ＤＡＭ★ともってなに？”、［online］、［平成２１年３月３０日検索］、インターネット＜URL: http://www.clubdam.com/app/damtomo/index.do?type=damtomo&source=index＞Daiichi Kosho, “DAM ★ Tomo”, right frame “What is DAM ★ Too?”, [Online], [Search March 30, 2009], Internet <URL: http: //www.clubdam. com / app / damtomo / index.do? type = damtomo & source = index> 株式会社エクシング、“うたスキ動画”、中央下段のＱ＆Ａ、［online］、［平成２１年３月３０日検索］、インターネット＜URL:http://joysound.com/ex/st/utasuki/help/movie/index.htm;jsessionid=36A783FA2F357A10BE69CEDD4D75A9F6.s3#Q1＞XING Inc., “Utaski Video”, Q & A in the lower center, [online], [March 30, 2009 search], Internet <URL: http://joysound.com/ex/st/utasuki/help/ movie / index.htm; jsessionid = 36A783FA2F357A10BE69CEDD4D75A9F6.s3 # Q1>

特開２００４−３０１８８４号公報JP 2004-301844 A 特開２００４−６９９２３号公報JP 2004-69923 A

そこで自身または他人が撮った複数の画像に歌唱録音データを関連付けることができれば歌唱録音データを視覚的に分かりやすく管理することが可能となる。しかし特許文献１、２記載のシステムでは、カラオケ端末とは別の装置で撮った画像に歌唱録音データを関連付けて保存することができないため、自身の機器で作成したコンテンツを重視するユーザにとっては不便である。   Therefore, if the song recording data can be associated with a plurality of images taken by itself or others, it becomes possible to manage the song recording data in an easily understandable manner. However, in the systems described in Patent Documents 1 and 2, since it is not possible to store the song recording data in association with an image taken by a device different from the karaoke terminal, it is inconvenient for users who place importance on content created by their own devices It is.

本発明は、このような事情に鑑みてなされたものであり、画像データと歌唱録音データを関連付け、視覚的に分かりやすく管理できるカラオケ端末、携帯端末、データ関連付け方法およびデータ関連付けプログラムを提供することを目的とする。   The present invention has been made in view of such circumstances, and provides a karaoke terminal, a portable terminal, a data association method, and a data association program that associate image data and song recording data and can be managed visually in an easy-to-understand manner. With the goal.

（１）上記の目的を達成するため、本発明のカラオケ端末は、歌唱録音データと画像データとを関連付けるカラオケ端末であって、所定範囲の時刻情報が付属する歌唱録音データを記録する歌唱データ記録部と、所定時点または所定範囲の時刻情報が付属する画像データを取得する画像ＤＢ制御部と、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する関連判定部と、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける関連付けデータ制御部と、を備えることを特徴としている。これにより、画像データに歌唱録音データを関連付け、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (1) In order to achieve the above object, a karaoke terminal of the present invention is a karaoke terminal that associates song recording data with image data, and records song recording data to which a predetermined range of time information is attached. A data DB controller for acquiring image data to which time information of a predetermined time point or a predetermined range is attached, presence / absence of relevance between the recorded song recording data and the acquired image data, An association determination unit that determines whether there is duplication of time information, and an association data control unit that associates the data that is the object of the determination when it is determined that there is duplication of the time information. It is a feature. This makes it possible to associate the song recording data with the image data and manage the song recording data visually and easily.

（２）また、本発明のカラオケ端末は、前記取得された画像データの取得元に対して、前記取得された画像データに関連付けられた歌唱録音データを送信するデータ送信制御部を更に備えることを特徴としている。歌唱録音データを画像データの取得元に送信することにより、画像を表示しながら、それと関連付けられた歌唱録音データを取得元でも鑑賞できる。   (2) Moreover, the karaoke terminal of the present invention further includes a data transmission control unit that transmits song recording data associated with the acquired image data to the acquisition source of the acquired image data. It is a feature. By transmitting the song recording data to the image data acquisition source, the song recording data associated therewith can be viewed at the acquisition source while displaying the image.

（３）また、本発明のカラオケ端末は、前記記録された歌唱録音データに関する情報を表示するデータ表示制御部を更に備え、前記データ表示制御部は、前記歌唱録音データに関連付けられた画像データを表示することを特徴としている。これにより、簡単な操作で視覚的に分かりやすく歌唱録音データを管理することができる。   (3) Moreover, the karaoke terminal of the present invention further includes a data display control unit that displays information related to the recorded song recording data, and the data display control unit stores image data associated with the song recording data. It is characterized by displaying. Thereby, it is possible to manage the singing recording data visually and easily by a simple operation.

（４）また、本発明の携帯端末は、上記のカラオケ端末からデータを受信し、歌唱録音データと画像データとを関連付けて出力する携帯端末であって、前記カラオケ端末に送信した画像データと関連付けられた歌唱録音データを、前記カラオケ端末から受信する通信入出力制御部と、前記受信された歌唱録音データを前記画像データと関連付けて出力させる関連付けデータ管理部とを備えることを特徴としている。   (4) Moreover, the portable terminal of the present invention is a portable terminal that receives data from the karaoke terminal and outputs the song recording data and the image data in association with each other, and is associated with the image data transmitted to the karaoke terminal. A communication input / output control unit that receives the recorded song recording data from the karaoke terminal, and an association data management unit that outputs the received song recording data in association with the image data.

これにより、画像データと関連付けられた歌唱録音データを携帯端末にダウンロードすることができる。これによりカラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを携帯端末に取得したくなった際にも対応できる。また、携帯端末で画像を表示しながら歌唱録音データを聴くことができる。   Thereby, the song recording data linked | related with image data can be downloaded to a portable terminal. Thus, no special operation is required at the time of karaoke song reservation, and it is possible to cope with the case where it is desired to obtain the singing recording data currently singing in the portable terminal. In addition, it is possible to listen to the song recording data while displaying an image on the mobile terminal.

（５）また、本発明のデータ関連付け方法は、カラオケ端末を用いて歌唱録音データと画像データとを関連付けるデータ関連付け方法であって、所定範囲の時刻情報が付属する歌唱録音データを記録するステップと、所定時点または所定範囲の時刻情報が付属する画像データを取得するステップと、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定するステップと、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付けるステップと、を含むことを特徴としている。これにより、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (5) The data association method of the present invention is a data association method for associating song recording data and image data using a karaoke terminal, and recording song recording data to which a predetermined range of time information is attached. A step of acquiring image data to which time information of a predetermined time point or a predetermined range is attached, and whether or not the recorded song recording data and the acquired image data are related to each other. And a step of associating the data to be determined when it is determined that the time information is duplicated. Thereby, it becomes possible to manage song recording data visually and intelligibly.

（６）また、本発明のデータ関連付けプログラムは、カラオケ端末に歌唱録音データと画像データとの関連付けを実行させるデータ関連付けプログラムであって、所定範囲の時刻情報が付属する歌唱録音データを記録する処理と、所定時点または所定範囲の時刻情報が付属する画像データを取得する処理と、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する処理と、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける処理と、を含むことを特徴としている。これにより、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (6) Moreover, the data correlation program of this invention is a data correlation program which makes a karaoke terminal perform correlation with song recording data and image data, Comprising: The process which records song recording data to which the time information of a predetermined range is attached A process of acquiring image data to which time information of a predetermined time point or a predetermined range is attached, and whether or not the recorded song recording data and the acquired image data are related to each other. And a process for determining whether there is duplication of the time information, and a process for associating the data to be subjected to the determination when it is determined that there is an overlap. Thereby, it becomes possible to manage song recording data visually and intelligibly.

本発明によれば、画像データと歌唱録音データを時刻情報のマッチングにより関連付けることができる。   According to the present invention, image data and song recording data can be associated by matching time information.

カラオケシステムを示す概略図である。It is the schematic which shows a karaoke system. カラオケ端末の構成を示すブロック図である。It is a block diagram which shows the structure of a karaoke terminal. 歌唱履歴データのテーブルを示す図である。It is a figure which shows the table of song history data. ＸＭＬファイルの一例を示す図である。It is a figure which shows an example of an XML file. 携帯端末の構成を示すブロック図である。It is a block diagram which shows the structure of a portable terminal. カラオケ端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a karaoke terminal. カラオケ端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a karaoke terminal. ディスプレイ装置による表示例を示す図である。It is a figure which shows the example of a display by a display apparatus. ディスプレイ装置による表示例を示す図である。It is a figure which shows the example of a display by a display apparatus. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. 携帯端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a portable terminal.

次に、本発明の実施の形態について、図面を参照しながら説明する。説明の理解を容易にするため、各図面において同一の構成要素に対しては同一の参照番号を付し、重複する説明は省略する。   Next, embodiments of the present invention will be described with reference to the drawings. In order to facilitate understanding of the description, the same reference numerals are given to the same components in the respective drawings, and duplicate descriptions are omitted.

（システム構成）
図１は、カラオケシステム１を示す概略図である。カラオケシステム１により、画像を関連付けた歌唱録音データが配信される。図１に示す例では、カラオケシステム１は、カラオケ端末６０、リモコン端末４、近距離無線通信ネットワーク６、ディスプレイ装置７、スピーカ８、マイク５、カラオケＤＢ９、近距離無線通信ポート１０、携帯端末１００および近距離無線通信ポート２で構成されている。 (System configuration)
FIG. 1 is a schematic diagram showing a karaoke system 1. The karaoke system 1 distributes song recording data associated with images. In the example shown in FIG. 1, the karaoke system 1 includes a karaoke terminal 60, a remote control terminal 4, a short-range wireless communication network 6, a display device 7, a speaker 8, a microphone 5, a karaoke DB 9, a short-range wireless communication port 10, and a portable terminal 100. And a short-range wireless communication port 2.

携帯端末１００は、ＣＣＤまたはＣＭＯＳ等のカメラデバイスと近距離無線通信ポート２を備えた通信端末である。近距離無線通信ポート２の例には、たとえばＴｒａｎｓｆｅｒＪｅｔ（登録商標）のポートが挙げられる。携帯端末１００の例には、例えば、カメラ機能を有する携帯電話機または通信可能なＰＤＡが挙げられる。近距離無線通信ポート２は近距離無線通信可能なものであればよく、これに代えて無線ＬＡＮや赤外線通信、Ｂｌｕｅｔｏｏｔｈでもよい。   The portable terminal 100 is a communication terminal provided with a camera device such as a CCD or CMOS and a short-range wireless communication port 2. Examples of the short-range wireless communication port 2 include a TransferJet (registered trademark) port. Examples of the mobile terminal 100 include a mobile phone having a camera function or a PDA capable of communication. The short-range wireless communication port 2 only needs to be capable of short-range wireless communication, and instead may be a wireless LAN, infrared communication, or Bluetooth.

カラオケ端末６０は、コンピュータ応用機器としてハード構成され、歌唱録音データと画像データとを関連付けることができる。画像データには、静止画および動画のデータを含む。カラオケ端末６０は、例えばＨＤＤのような大容量の記憶部を備え、歌唱曲を予約するためのリモコン端末４、歌唱時の歌声を入力するためのマイク５、カラオケ楽曲映像データを表示するためのディスプレイ装置７、カラオケ楽曲音楽データを出力するためのスピーカ８、カラオケ楽曲データを記録しているカラオケＤＢ（データベース）９、および近距離無線通信ポート１０の各々と接続されている。また、カラオケ端末６０は、音量調整ダイヤル、テンキー、予約ボタン、演奏終了ボタンなどのユーザインターフェースを備えていてもよい。   The karaoke terminal 60 is hardware-configured as a computer application device, and can associate song recording data with image data. The image data includes still image data and moving image data. The karaoke terminal 60 includes a large-capacity storage unit such as an HDD, for example, a remote control terminal 4 for reserving a song, a microphone 5 for inputting a singing voice at the time of singing, and displaying karaoke song video data. The display device 7 is connected to each of a speaker 8 for outputting karaoke music data, a karaoke DB (database) 9 for recording karaoke music data, and a short-range wireless communication port 10. The karaoke terminal 60 may include a user interface such as a volume adjustment dial, a numeric keypad, a reservation button, and a performance end button.

近距離無線通信ポート２の例には、たとえばＴｒａｎｓｆｅｒＪｅｔ（登録商標）のポートが挙げられる。近距離無線通信ポート１０は近距離無線通信可能なものであればよく、無線ＬＡＮや赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）であってもよい。なお、これらの各装置とカラオケ端末６０との接続は、有線でも無線でもよく複数台接続されていてもよい。   Examples of the short-range wireless communication port 2 include a TransferJet (registered trademark) port. The short-range wireless communication port 10 only needs to be capable of short-range wireless communication, and may be a wireless LAN, infrared communication, or Bluetooth (registered trademark). The connection between each of these devices and the karaoke terminal 60 may be wired or wireless, or a plurality of devices may be connected.

リモコン端末４は、カラオケ端末６０と近距離無線通信ネットワーク６で接続され、カラオケ端末６０をリモートコントロールできるユーザインターフェースを備えている。リモコン端末４は、例えば、カラオケ端末専用のリモコン、カラオケリモコンのアプリケーションを備えた携帯端末などである。カラオケ端末６０側の近距離無線通信ポート１０は複数あってもよい。   The remote control terminal 4 is connected to the karaoke terminal 60 via the short-range wireless communication network 6 and includes a user interface that can remotely control the karaoke terminal 60. The remote control terminal 4 is, for example, a remote control dedicated to a karaoke terminal, a portable terminal equipped with a karaoke remote control application, or the like. There may be a plurality of short-range wireless communication ports 10 on the karaoke terminal 60 side.

ディスプレイ装置７は、カラオケ端末６０から出力される映像信号を入力し、入力された映像信号を画面に表示する。カラオケＤＢ９は、ローカルエリアネットワークケーブルなどの通信ケーブルでカラオケ端末６０と接続され、映像データ、音楽データ、歌詞データを含むカラオケ楽曲データを記憶している。   The display device 7 inputs the video signal output from the karaoke terminal 60 and displays the input video signal on the screen. The karaoke DB 9 is connected to the karaoke terminal 60 via a communication cable such as a local area network cable, and stores karaoke song data including video data, music data, and lyrics data.

（カラオケ端末の構成）
次に、カラオケ端末６０の構成を説明する。図２は、カラオケ端末の構成を示すブロック図である。図２に示すように、カラオケ端末６０は、ディスプレイ出力部６１、スピーカ出力部６２、マイク入力部６３、視聴制御部６４、関連付けデータ制御部６５、状態制御部７９、データ表示制御部６７、データ送信制御部６８、合成映像作成部６９、カラオケＤＢ入力部７０、合成音楽作成部７１、歌唱録音制御部７２、歌唱データ記録部７３、歌唱履歴データ時刻情報取得部７４、関連判定部７５、受信画像データ時刻情報取得部７６、画像ＤＢ制御部７７および通信入出力制御部７８を備えている。 (Composition of karaoke terminal)
Next, the configuration of the karaoke terminal 60 will be described. FIG. 2 is a block diagram showing the configuration of the karaoke terminal. As shown in FIG. 2, the karaoke terminal 60 includes a display output unit 61, a speaker output unit 62, a microphone input unit 63, a viewing control unit 64, an association data control unit 65, a state control unit 79, a data display control unit 67, data Transmission control unit 68, composite video creation unit 69, karaoke DB input unit 70, synthetic music creation unit 71, song recording control unit 72, song data recording unit 73, song history data time information acquisition unit 74, association determination unit 75, reception An image data time information acquisition unit 76, an image DB control unit 77, and a communication input / output control unit 78 are provided.

通信入出力制御部７８は、近距離無線通信ポートの入出力を制御する。近距離無線通信ポートは複数あってもよく、携帯端末と接続可能である。近距離無線通信は、無線ＬＡＮや赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）であってもよい。   The communication input / output control unit 78 controls input / output of the short-range wireless communication port. There may be a plurality of short-range wireless communication ports, which can be connected to a portable terminal. The short-range wireless communication may be wireless LAN, infrared communication, or Bluetooth (registered trademark).

カラオケＤＢ入力部７０は、カラオケＤＢ９からカラオケ楽曲データを読み込む。合成映像作成部６９は、カラオケ楽曲映像データと歌詞データを合成処理させる。ディスプレイ出力部６１は、ディスプレイ装置７に映像信号を出力する。スピーカ出力部６２は、合成音楽作成部７１から入力される合成音楽データを、アンプを通して出力する。マイク入力部６３は、マイクからの音声入力を制御する。合成音楽作成部７１は、カラオケＤＢ入力部７０から入力されたカラオケ楽曲音楽データとマイク入力部６３から入力された歌唱者の音声データを合成処理する。   The karaoke DB input unit 70 reads karaoke song data from the karaoke DB 9. The synthesized video creation unit 69 synthesizes the karaoke song video data and the lyrics data. The display output unit 61 outputs a video signal to the display device 7. The speaker output unit 62 outputs the synthetic music data input from the synthetic music creation unit 71 through an amplifier. The microphone input unit 63 controls voice input from the microphone. The synthesized music creation unit 71 synthesizes the karaoke music data input from the karaoke DB input unit 70 and the voice data of the singer input from the microphone input unit 63.

歌唱録音制御部７２は、合成された音楽データの録音を制御する。録音する際の保存形式は、ＭＰ３やＭＩＤＩなど携帯端末１００で再生できるフォーマットなら何でもよい。歌唱データ記録部７３は、歌唱データ（歌唱録音データと歌唱履歴データ）を保存することで、所定範囲の時刻情報が付属する歌唱録音データを記録する。所定範囲の時刻情報とは、演奏の開始時刻と終了時刻で特定される情報である。歌唱録音データはカラオケ端末の記憶領域に蓄積されており、ユニークなＵＲＩを持つ。歌唱履歴データについては後述する。視聴制御部６４は、歌唱録音データの試聴を制御する。歌唱履歴データ時刻情報取得部７４は、歌唱データＤＢ（図示せず）から歌唱履歴データを読み込み、演奏開始時刻と演奏終了時刻情報を取得する。   The song recording control unit 72 controls the recording of the synthesized music data. The storage format for recording may be any format that can be played back by the mobile terminal 100, such as MP3 or MIDI. The singing data recording unit 73 stores singing data (singing recording data and singing history data) to record singing recording data to which time information within a predetermined range is attached. The time information within a predetermined range is information specified by the start time and end time of the performance. The song recording data is stored in the storage area of the karaoke terminal and has a unique URI. The singing history data will be described later. The viewing control unit 64 controls the trial listening of the song recording data. The singing history data time information acquisition unit 74 reads singing history data from a singing data DB (not shown), and acquires performance start time and performance end time information.

画像ＤＢ制御部７７は、所定時点または所定範囲の時刻情報が付属する画像データを取得する。所定時点の時刻情報とは、静止画データの撮影時刻情報であり、所定範囲の時刻情報とは、動画データの撮影開始時刻と撮影終了時刻とで特定される情報である。画像ＤＢ制御部７７は、通信入出力制御部７８から受信してきた、作成時刻情報を含む画像データと新着受信画像データ数を保存する。受信画像データ時刻情報取得部７６は、受信画像ＤＢから画像データを読み込みその画像データの作成時刻情報を取得する。   The image DB control unit 77 acquires image data to which time information of a predetermined time point or a predetermined range is attached. The time information at the predetermined time is the shooting time information of the still image data, and the time information of the predetermined range is information specified by the shooting start time and the shooting end time of the moving image data. The image DB control unit 77 stores the image data including the creation time information and the number of newly received image data received from the communication input / output control unit 78. The received image data time information acquisition unit 76 reads image data from the received image DB and acquires creation time information of the image data.

関連判定部７５は、記録された歌唱録音データと、取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する。関連判定部７５は、受信画像データ時刻情報取得部７６で得られた画像データ時刻情報と歌唱履歴データ時刻情報取得部７４で得られた演奏開始終了の時刻情報を比較する。演奏開始から演奏終了までの時間に画像データの撮影時間が重複していれば関連ありと判定する。   The association determination unit 75 determines whether or not the recorded song recording data is associated with the acquired image data based on whether or not the time information of each data overlaps. The association determination unit 75 compares the image data time information obtained by the received image data time information acquisition unit 76 with the performance start / end time information obtained by the singing history data time information acquisition unit 74. If the imaging time of image data overlaps the time from the start of performance to the end of performance, it is determined that there is a relationship.

関連付けデータ制御部６５は、時刻情報の重複が有ると判定された場合に、判定の対象とされたデータ間を関連付ける。関連付けデータ制御部６５は、ＸＭＬファイルを作成する。これにより、歌唱録音データと受信画像データとが関連付けられる。なお、ＸＭＬファイルについては後述する。   When it is determined that the time information is duplicated, the association data control unit 65 associates the data to be determined. The association data control unit 65 creates an XML file. Thereby, song recording data and reception image data are linked | related. The XML file will be described later.

関連付けデータ制御部６５は、関連付けした画像データと歌唱録音データの関連付け情報を管理するファイルを作成し保存する。これにより、自身または他人が撮った複数の画像に歌唱録音データを関連付けることができる。そして、関連付けた表示等により歌唱録音データを視覚的に分かりやすく管理することが可能となる。   The association data control unit 65 creates and stores a file for managing association information between the associated image data and song recording data. Thereby, song recording data can be associated with a plurality of images taken by itself or others. Then, it becomes possible to manage the song recording data visually and easily by the associated display or the like.

状態制御部７９は、カラオケ端末が演奏中か否かを判定する。また、画像ＤＢ制御部で保存している新着受信画像データ数を読み込み、新着受信画像データ数が１枚以上であるかを判定する。データ表示制御部６７は、関連付けデータＤＢから関連付けデータを読み込み、画面レイアウトを作成しディスプレイ出力部６１に出力する。   The state control unit 79 determines whether or not the karaoke terminal is playing. In addition, the number of newly received image data stored in the image DB control unit is read to determine whether the number of newly received image data is one or more. The data display control unit 67 reads association data from the association data DB, creates a screen layout, and outputs the screen layout to the display output unit 61.

（データ、ファイル）
図３は、歌唱履歴データのテーブルを示す図である。歌唱履歴データは、図３に示すようなテーブル形式で保存されており、ＵＲＩ９０、曲名９１、アーティスト名９２、演奏開始時刻９３、演奏終了時刻９４、点数９５などの情報で構成されている。 (data file)
FIG. 3 is a diagram showing a table of singing history data. The singing history data is stored in a table format as shown in FIG. 3 and includes information such as a URI 90, a song title 91, an artist name 92, a performance start time 93, a performance end time 94, and a score 95.

図４は、ＸＭＬファイルの一例を示す図である。なお、図４に示すようなＸＭＬファイルのフォーマットはあくまで実施の1例であり、これに限定されるものではない。基本的に、画像データと録音データが関連づけられることが最低限必須であるが、付随する楽曲に関連する情報を関連づけても構わない。   FIG. 4 is a diagram illustrating an example of an XML file. Note that the format of the XML file as shown in FIG. 4 is merely an example of implementation, and the present invention is not limited to this. Basically, it is essential that image data and recording data be associated with each other, but information related to the accompanying music may be associated.

（携帯端末の構成）
次に、携帯端末１００の構成を説明する。図５は、携帯端末１００の構成を示すブロック図である。携帯端末１００は、カラオケ端末６０に画像データを送信し、その後、カラオケ端末６０からデータを受信し、歌唱録音データと画像データとを関連付けて出力する。図５に示すように、携帯端末１００は、通信入出力制御部１０１、画像ＤＢ制御部１０２、カメラ制御部１０３、関連付けデータ管理部１０４、歌唱データ記録部１０５、歌唱録音データ再生部１０６、データ表示制御部１０７およびディスプレイ出力部１０８を備えている。 (Configuration of mobile device)
Next, the configuration of the mobile terminal 100 will be described. FIG. 5 is a block diagram illustrating a configuration of the mobile terminal 100. The portable terminal 100 transmits image data to the karaoke terminal 60, then receives data from the karaoke terminal 60, and outputs the song recording data and the image data in association with each other. As shown in FIG. 5, the mobile terminal 100 includes a communication input / output control unit 101, an image DB control unit 102, a camera control unit 103, an association data management unit 104, a song data recording unit 105, a song recording data reproduction unit 106, data A display control unit 107 and a display output unit 108 are provided.

カメラ制御部１０３は、携帯端末に搭載されているＣＣＤまたはＣＭＯＳ等のカメラデバイスを使用して画像データを取得する。画像ＤＢ制御部１０２は、カメラ制御部１０３により取得した画像データ、または近距離無線通信から入力された画像データを保存する。   The camera control unit 103 acquires image data using a camera device such as a CCD or a CMOS mounted on the mobile terminal. The image DB control unit 102 stores image data acquired by the camera control unit 103 or image data input from near field communication.

通信入出力制御部１０１は、近距離無線通信ポート、本実施形態ではＴｒａｎｓｆｅｒＪｅｔ（登録商標）ポートの入出を制御する。近距離無線通信は、ＴｒａｎｓｆｅｒＪｅｔに限らず無線ＬＡＮや赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）であってもよい。また、通信入出力制御部１０１は、カラオケ端末６０に送信した画像データと関連付けられた歌唱録音データを、カラオケ端末６０から受信する。   The communication input / output control unit 101 controls entry / exit of a short-distance wireless communication port, in this embodiment, a TransferJet (registered trademark) port. The short-range wireless communication is not limited to TransferJet, but may be wireless LAN, infrared communication, or Bluetooth (registered trademark). In addition, the communication input / output control unit 101 receives from the karaoke terminal 60 the song recording data associated with the image data transmitted to the karaoke terminal 60.

データ表示制御部１０７は、関連付けデータ管理部１０４から関連付けデータを読み込み、画面レイアウトを作成しディスプレイ出力部６１に出力する。ディスプレイ出力部１０８は、ディスプレイ（図示せず）に映像信号を出力する。   The data display control unit 107 reads the association data from the association data management unit 104, creates a screen layout, and outputs the screen layout to the display output unit 61. The display output unit 108 outputs a video signal to a display (not shown).

関連付けデータ管理部１０４は、カラオケ端末６０から受信した関連付けデータを保存する。関連付けデータ管理部１０４は、受信された歌唱録音データを画像データと関連付けて歌唱録音データ再生部１０６およびディスプレイ出力部１０８に出力させる。これにより、画像と関連付けられた歌唱録音データを携帯端末１００にダウンロードすることができる。そして、カラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを携帯端末１００に取得したくなった際にも対応できる。また、携帯端末１００で画像を表示しながら歌唱録音データを聴くことができる。   The association data management unit 104 stores association data received from the karaoke terminal 60. The association data management unit 104 associates the received song recording data with the image data and causes the song recording data reproduction unit 106 and the display output unit 108 to output the associated song recording data. Thereby, the song recording data linked | related with the image can be downloaded to the portable terminal 100. FIG. And, when a karaoke song reservation is not required, a special operation is not required, and it is possible to cope with a case where the mobile terminal 100 wants to acquire the singing recording data currently being sung. In addition, it is possible to listen to the song recording data while displaying an image on the mobile terminal 100.

歌唱データ記録部１０５は、カラオケ端末６０から受信した歌唱データを保存する。歌唱録音データ再生部１０６は、歌唱データ記録部１０５から歌唱録音データを読み込み、指定された歌唱録音データを再生する。データ形式はＭＰ３やＭＩＤＩなどの音楽データであればよい。   The song data recording unit 105 stores the song data received from the karaoke terminal 60. The song recording data reproducing unit 106 reads the song recording data from the song data recording unit 105 and reproduces the designated song recording data. The data format may be music data such as MP3 or MIDI.

（カラオケ端末の動作）
次に、カラオケ端末６０が画像データを受信したときの処理を説明する。図６は、カラオケ端末６０の動作を示すフローチャートである。 (Karaoke terminal operation)
Next, processing when the karaoke terminal 60 receives image data will be described. FIG. 6 is a flowchart showing the operation of the karaoke terminal 60.

この処理はユーザが携帯端末１００上にある画像を選択してカラオケ端末６０に送信した時に開始される。カラオケ端末６０の通信入出力制御部７８が携帯端末１００から近距離無線通信ポート経由で画像データを受信する。画像データ受信後、画像ＤＢ制御部７７はカラオケ端末６０の内部にある記憶領域に画像データを保存する（ステップＳ１０１）。その後、新着受信画像データ数をインクリメントする（ステップＳ１０２）。   This process is started when the user selects an image on the portable terminal 100 and transmits it to the karaoke terminal 60. The communication input / output control unit 78 of the karaoke terminal 60 receives image data from the portable terminal 100 via the short-range wireless communication port. After receiving the image data, the image DB control unit 77 stores the image data in a storage area inside the karaoke terminal 60 (step S101). Thereafter, the number of newly received image data is incremented (step S102).

受信画像データ時刻情報取得部７６は、受信画像データの撮影時刻情報を受信画像データのメタ情報から取得する（ステップＳ１０３）。歌唱履歴データ時刻情報取得部７４は、歌唱関連データから演奏開始時間と演奏終了時間を取得する（ステップＳ１０４）。   The reception image data time information acquisition unit 76 acquires the photographing time information of the reception image data from the meta information of the reception image data (step S103). The singing history data time information acquisition unit 74 acquires a performance start time and a performance end time from the singing related data (step S104).

その後、関連判定部７５は受信画像データの時刻情報と歌唱履歴データの時刻情報を比較する（ステップＳ１０５）。受信画像データの撮影時刻がある１つの歌唱履歴データの演奏開始から演奏終了までの時刻である場合、その曲中に画像が撮影されたと判断して１つの歌唱録音データと受信画像データが関連付けられる。また受信画像データの撮影時刻がある１つの歌唱関連データの演奏終了から次曲の歌唱関連データの演奏開始までの時刻である場合、２つの歌唱録音データと受信画像データとを関連付ける。   Thereafter, the association determination unit 75 compares the time information of the received image data with the time information of the singing history data (step S105). If it is the time from the start to the end of the performance of one singing history data with the shooting time of the received image data, it is determined that an image has been shot in the song, and one song recording data and the received image data are associated with each other. . Further, when the reception image data is photographed at a time from the end of the performance of one song related data to the start of performance of the next song related data, the two song recording data and the received image data are associated with each other.

関連付けデータ制御部６５は、図４のようなファイルフォーマットのＸＭＬファイルを作成する（ステップＳ１０６）。関連付けデータ制御部６５は、作成されたＸＭＬファイルをカラオケ端末内部の記憶領域に保存する（ステップＳ１０７）。   The association data control unit 65 creates an XML file having a file format as shown in FIG. 4 (step S106). The association data control unit 65 stores the created XML file in the storage area inside the karaoke terminal (step S107).

以上の処理を終えた後、状態制御部７９がカラオケ演奏中であるかどうかを判定する（ステップＳ１０８）。演奏中であればそのまま処理を終了する。カラオケ演奏中でなければデータ表示制御部６７が関連付けデータＤＢに保存されているＸＭＬファイル（関連付けデータ）を読み込む（ステップＳ１０９）。読み込み終了後、関連付けデータに基づいて必要なデータを読み込み、画面レイアウトを作成してディスプレイ出力部６１に歌唱録音データのリストを出力する（ステップＳ１１０）。   After completing the above processing, the state control unit 79 determines whether or not the karaoke performance is being performed (step S108). If it is being played, the process is terminated. If the karaoke performance is not being performed, the data display control unit 67 reads the XML file (association data) stored in the association data DB (step S109). After the reading is completed, necessary data is read based on the association data, a screen layout is created, and a list of song recording data is output to the display output unit 61 (step S110).

なお、携帯端末１００からカラオケ端末６０に画像データを転送し関連付け処理を行った歌唱録音データをリスト表示せず、そのまま携帯端末に転送してもよい。その場合には、１回のタッチのみで歌唱録音データが取得できる。   In addition, you may transfer to the portable terminal as it is, without displaying the list of the song recording data which transferred image data from the portable terminal 100 to the karaoke terminal 60, and performed the association process. In that case, singing recording data can be acquired by only one touch.

以上の処理で、携帯端末１００から送信された画像を受信して、時刻情報に基づいてカラオケ端末６０内に記憶されている歌唱録音データと受信した画像を関係づけさせ、関連付けた歌唱録音データをリスト表示する。   With the above processing, the image transmitted from the portable terminal 100 is received, the song recording data stored in the karaoke terminal 60 is related to the received image based on the time information, and the associated song recording data is obtained. List display.

次に、演奏終了時の動作を説明する。図７は、カラオケ端末の動作を示すフローチャートである。   Next, the operation at the end of the performance will be described. FIG. 7 is a flowchart showing the operation of the karaoke terminal.

まず、カラオケ演奏が終了した時点で状態制御部７９新着受信画像データ数が１枚以上か否かを判定する（ステップＳ２０１）。新着受信画像データ数が０枚の場合は、何もせず通常通りの処理を行う。新着受信画像データ数が１枚以上の場合はデータ表示制御部６７が関連付けデータＤＢに保存されているＸＭＬファイル（関連付けデータ）を読み込む（ステップＳ２０２）。   First, when the karaoke performance is completed, it is determined whether or not the number of newly received image data is one or more in the state control unit 79 (step S201). When the number of newly received image data is 0, the normal processing is performed without doing anything. If the number of newly received image data is one or more, the data display control unit 67 reads an XML file (association data) stored in the association data DB (step S202).

読み込み終了後、関連付けデータに基づいて必要なデータを読み込み、画面レイアウトを作成してディスプレイ出力部６１に歌唱録音データのリストを出力する（ステップＳ２０３）。リスト表示した後、画像ＤＢ制御部７７が新着受信画像データ数を０枚にリセットする（ステップＳ２０４）。   After the reading is completed, necessary data is read based on the association data, a screen layout is created, and a list of song recording data is output to the display output unit 61 (step S203). After displaying the list, the image DB control unit 77 resets the number of newly received image data to 0 (step S204).

なお、以上の動作は、カラオケ端末６０のコンピュータにプログラムを実行させることで行われる。   The above operation is performed by causing the computer of the karaoke terminal 60 to execute a program.

（ユースケース）
次に、カラオケシステム１の使用について説明する。カラオケシステム１は、簡単な操作で視覚的に分かりやすく歌唱録音データを取得することができる。歌唱録音データは、カラオケの伴奏と歌唱者の歌声を合成して録音した音楽ファイルである。音楽ファイルの保存形式はＭＰ３やＭＩＤＩなど携帯端末１００で再生できるフォーマットなら何でもよい。 (Use Case)
Next, use of the karaoke system 1 will be described. The karaoke system 1 can acquire the singing recording data visually and easily by a simple operation. The song recording data is a music file recorded by synthesizing the accompaniment of karaoke and the singing voice of the singer. The music file can be saved in any format that can be played back on the portable terminal 100, such as MP3 or MIDI.

この歌唱録音データを取得するための操作として、ユーザの携帯端末１００で撮影した画像を近距離無線通信ポート２経由でカラオケ端末６０に送信することでカラオケ端末６０内にある歌唱録音データを携帯端末１００にダウンロードすることができる。これによりカラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを取得したくなった際にも対応できる。実際にはディスプレイ装置７に画像が撮像された際に歌唱していた歌唱録音データのリストを表示し、リストから所望の歌唱録音データを選択した状態でユーザが課金を承認すると画像と共に歌唱録音データをユーザの携帯端末１００に送信する。以下にユーザの手順を説明する。   As an operation for acquiring the song recording data, the image recorded by the user's portable terminal 100 is transmitted to the karaoke terminal 60 via the short-range wireless communication port 2 so that the song recording data in the karaoke terminal 60 is transmitted to the portable terminal. 100 can be downloaded. Thus, no special operation is required at the time of karaoke song reservation, and it is possible to cope with the case where it is desired to obtain the singing recording data currently sung. Actually, a list of singing recording data that was sung when the image was picked up on the display device 7 is displayed, and when the user approves charging with the desired singing recording data selected from the list, the singing recording data together with the image is displayed. Is transmitted to the mobile terminal 100 of the user. The user procedure will be described below.

図８Ａおよび図８Ｂは、ディスプレイ装置による表示例を示す図である。図８Ａに示すように、カラオケ歌唱中に表示される通常時において、ユーザが何も操作せず歌唱のみを行っている場合には、ディスプレイ装置７は背景映像２０と歌詞テロップ２１を合成した映像を表示する。   8A and 8B are diagrams illustrating examples of display by the display device. As shown in FIG. 8A, in the normal time displayed during karaoke singing, when the user performs only singing without any operation, the display device 7 synthesizes the background video 20 and the lyrics telop 21. Is displayed.

ユーザは、カラオケ利用時間中に自由に携帯端末１００を使用して画像を撮像する。ただし所望の歌唱録音データを取得したい場合は、まず前曲演奏終了後から次曲演奏開始までの間に画像を撮像する。その後、ユーザが撮像した画像を、携帯端末１００を操作することで選択し、カラオケ端末６０上の近距離無線通信ポート１０に携帯端末１００の近距離無線通信ポート２を接触させ画像データを送信する。   The user captures an image freely using the mobile terminal 100 during the karaoke use time. However, when it is desired to acquire desired song recording data, an image is first captured between the end of the previous song performance and the start of the next song performance. Thereafter, an image picked up by the user is selected by operating the portable terminal 100, and the short-range wireless communication port 2 of the portable terminal 100 is brought into contact with the short-range wireless communication port 10 on the karaoke terminal 60 to transmit image data. .

カラオケ端末６０は画像の受信を完了すると、図８Ｂに示すようにディスプレイ装置７に受信画像２２と受信が成功した旨を伝えるテロップ２３を表示する。なお、携帯端末１００で撮像した画像データをカラオケ端末６０に送信するタイミングはいつでもよいが、現実的にはカラオケサービスを受けている時間内が好ましい。   When the reception of the image is completed, the karaoke terminal 60 displays the received image 22 and the telop 23 indicating that the reception has been successful on the display device 7 as shown in FIG. 8B. In addition, although the timing which transmits the image data imaged with the portable terminal 100 to the karaoke terminal 60 may be anytime, it is actually preferable to be within the time of receiving the karaoke service.

ユーザがカラオケ演奏中に画像データを送信し演奏が終了した場合または演奏時間外に画像データを送信した場合には、ディスプレイ装置７に送信した画像と関連付けられた歌唱録音データのリストが表示される。   When the user transmits image data during karaoke performance and the performance ends or when image data is transmitted outside the performance time, a list of song recording data associated with the transmitted image is displayed on the display device 7. .

図９は、カラオケ端末６０の画面表示例を示す図である。図９に示すように、カラオケ端末６０の画面は、歌唱録音データのリストを表示する。具体的にはユーザが一度に複数枚をカラオケ端末６０へ送信した場合、歌唱録音データのリストが図９のように複数の歌唱録音データが並列して表示される。このようにリスト表示は、画像データと歌唱録音データが関連付けられた分だけ複数表示できる。   FIG. 9 is a diagram illustrating a screen display example of the karaoke terminal 60. As shown in FIG. 9, the screen of the karaoke terminal 60 displays a list of song recording data. Specifically, when the user transmits a plurality of pieces at once to the karaoke terminal 60, a list of song recording data is displayed in parallel as shown in FIG. As described above, a plurality of lists can be displayed by the amount associated with the image data and the song recording data.

リスト表示された歌唱録音データは、リモコンにより選択可能である。選択は、リモコン操作説明部３４により指示される。画像表示エリア３０は、関連付けられた画像が４つ以上ある場合スライドショーのように画像を右から左へ順々にスライド表示する。歌唱関連情報表示エリア３１〜３３は、それぞれ曲名、アーティスト名、点数を表示する。   The song recording data displayed in the list can be selected by the remote controller. The selection is instructed by the remote control operation explanation unit 34. When there are four or more images associated with each other, the image display area 30 slides the images sequentially from right to left as in a slide show. The singing related information display areas 31 to 33 display a song name, an artist name, and a score, respectively.

また、リスト表示の具体的な遷移例を説明する。図１０〜図１２は、カラオケ端末の画面表示例を示す図である。図に示すように画面はリストを表示している。ユーザはカラオケ演奏中に携帯端末１００で取得した画像データの１枚をカラオケ端末６０に転送する。カラオケ演奏終了後、歌唱録音データのリストでは、図１０のように歌唱録音データの表示枠２９内にユーザが転送した画像データに対応する１つの画像表示エリア３０が表示される。   A specific transition example of the list display will be described. 10-12 is a figure which shows the example of a screen display of a karaoke terminal. As shown in the figure, the screen displays a list. The user transfers one piece of image data acquired by the portable terminal 100 to the karaoke terminal 60 during the karaoke performance. After the end of the karaoke performance, in the song recording data list, one image display area 30 corresponding to the image data transferred by the user is displayed in the song recording data display frame 29 as shown in FIG.

次に、別のその後になされた歌唱中に撮影したもう１枚の画像データをカラオケ端末６０に転送すると、歌唱録音データのリストには図１１のように２つの歌唱録音データが表示される。さらに、１、２枚目に送信した画像データとは別の画像データで、かつ１枚目と同じ曲の歌唱時に撮影された画像データを転送すると、歌唱録音データのリストは図１２のように、１曲目の歌唱録音データの表示枠２９内に３枚目の画像データに対応する画像表示エリア３０が表示される。   Next, when another piece of image data taken during another subsequent song is transferred to the karaoke terminal 60, two song recording data are displayed in the song recording data list as shown in FIG. Furthermore, when image data that is different from the image data transmitted to the first and second images and is captured when the same song as the first image is sung, the list of song recording data is as shown in FIG. An image display area 30 corresponding to the third image data is displayed in the display frame 29 of the first song recording data.

次に、課金画面の一例を説明する。図１３は、カラオケ端末の画面表示例を示す図である。リスト表示からリモコン操作で１つの歌唱録音データを選択すると、画面表示が図１３のような課金画面に遷移する。課金画面には、メッセージエリア４０、前画面に戻るボタン４１、試聴ボタン４２がある。メッセージエリア４０には、ユーザに対して課金を促す旨のメッセージを表示される。前画面に戻るボタン４１は、選択されると前画面であるリスト表示に戻る。試聴ボタン４２は、選択されると選択した歌唱録音データを再生する。   Next, an example of a billing screen will be described. FIG. 13 is a diagram illustrating a screen display example of the karaoke terminal. When one song recording data is selected by remote control operation from the list display, the screen display changes to a billing screen as shown in FIG. The billing screen includes a message area 40, a button 41 for returning to the previous screen, and a preview button 42. In the message area 40, a message prompting the user to charge is displayed. When the button 41 for returning to the previous screen is selected, it returns to the list display as the previous screen. When the audition button 42 is selected, the selected song recording data is reproduced.

図１４は、カラオケ端末６０の画面表示例を示す図である。試聴ボタン４２が押され試聴が開始されると、図１４のような試聴画面に遷移する。試聴画面には、映像表示画面４５、操作説明表示画面４６がある。映像表示画面４５は、試聴用の映像が表示される。試聴用に再生される映像としては、関連付けられた画像をそのまま表示する映像、複数枚の関連付けられた画像を一定間隔毎に切り替えて表示する映像、基本的にはカラオケ時の映像を流し関連付けられた画像の取得時刻になったらその画像をエフェクト付きで表示させる映像等が考えられる。試聴中に携帯端末１００から画像データを転送してもよい。操作説明表示画面４６は、早送り、巻き戻し、再生／一時停止、キャンセルなどのボタンが表示される。   FIG. 14 is a diagram illustrating a screen display example of the karaoke terminal 60. When the audition button 42 is pressed and the audition is started, a transition to the audition screen as shown in FIG. 14 is made. The preview screen includes a video display screen 45 and an operation explanation display screen 46. The video display screen 45 displays a video for trial listening. As a video to be played for trial listening, a video that displays the associated image as it is, a video that displays a plurality of related images switched at regular intervals, and basically a video at the time of karaoke can be streamed and associated. For example, a video that displays an image with an effect when the image acquisition time comes can be considered. Image data may be transferred from the portable terminal 100 during the trial listening. The operation explanation display screen 46 displays buttons such as fast forward, rewind, playback / pause, and cancel.

図１５は、携帯端末１００の画面表示例を示す図である。課金画面表示中にユーザがカラオケ端末６０上にある近距離無線通信ポート１０に携帯端末１００の近距離無線通信ポート２を接触させると、ユーザが選択した歌唱録音データ、画像データ、歌唱録音データと画像の関連付けを管理するデータが携帯端末１００に送信される。携帯端末１００上でリスト表示を指示すると、携帯端末１００は、携帯端末１００内にある記憶領域から必要なデータを読み込み、図１５のように画像エリア５０、歌唱関連情報表示エリア５１〜５４を表示する。画像エリア５０は、１枚の画像を表示するだけのスペースがあり、関連付けられた画像が複数ある場合は一定間隔毎に画像を切り替え、それを繰り返して画像表示を行う。歌唱関連情報表示エリア５１〜５４は、それぞれ曲名、アーティスト名、点数、日付を表示する。   FIG. 15 is a diagram illustrating a screen display example of the mobile terminal 100. When the user brings the short-range wireless communication port 2 of the portable terminal 100 into contact with the short-range wireless communication port 10 on the karaoke terminal 60 while the billing screen is displayed, the song recording data, image data, and song recording data selected by the user are displayed. Data for managing image association is transmitted to the mobile terminal 100. When the list display is instructed on the portable terminal 100, the portable terminal 100 reads necessary data from the storage area in the portable terminal 100 and displays the image area 50 and the singing related information display areas 51 to 54 as shown in FIG. To do. The image area 50 has a space for displaying one image, and when there are a plurality of associated images, the images are switched at regular intervals, and the images are displayed repeatedly. The singing related information display areas 51 to 54 display the song name, artist name, score, and date, respectively.

１ カラオケシステム
２ 近距離無線通信ポート
４ リモコン端末
５ マイク
６ 近距離無線通信ネットワーク
７ ディスプレイ装置
８ スピーカ
９ カラオケＤＢ
１０ 近距離無線通信ポート
２９ 歌唱録音データ表示枠
３０ 画像表示エリア
３１−３３ 歌唱関連情報表示エリア
３４ リモコン操作説明部
４０ メッセージエリア
４５ 映像表示画面
４６ 操作説明表示画面
５０ 画像エリア
５１−５４ 歌唱関連情報表示エリア
６０ カラオケ端末
６１ ディスプレイ出力部
６２ スピーカ出力部
６３ マイク入力部
６４ 視聴制御部
６５ 関連付けデータ制御部
６７ データ表示制御部
６８ データ送信制御部
６９ 合成映像作成部
７０ カラオケＤＢ入力部
７１ 合成音楽作成部
７２ 歌唱録音制御部
７３ 歌唱データ記録部
７４ 歌唱履歴データ時刻情報取得部
７５ 関連判定部
７６ 受信画像データ時刻情報取得部
７７ 画像ＤＢ制御部
７８ 通信入出力制御部
７９ 状態制御部
９１ 曲名
９２ アーティスト名
９３ 演奏開始時刻
９４ 演奏終了時刻
９５ 点数
１００ 携帯端末
１０１ 通信入出力制御部
１０２ 画像ＤＢ制御部
１０３ カメラ制御部
１０４ 関連付けデータ管理部
１０５ 歌唱データ記録部
１０６ 歌唱録音データ再生部
１０７ データ表示制御部
１０８ ディスプレイ出力部 1 karaoke system 2 short-range wireless communication port 4 remote control terminal 5 microphone 6 short-range wireless communication network 7 display device 8 speaker 9 karaoke DB
10 Short-range wireless communication port 29 Song recording data display frame 30 Image display area 31-33 Song related information display area 34 Remote control operation explanation section 40 Message area 45 Video display screen 46 Operation explanation display screen 50 Image area 51-54 Song related information Display area 60 Karaoke terminal 61 Display output unit 62 Speaker output unit 63 Microphone input unit 64 Viewing control unit 65 Association data control unit 67 Data display control unit 68 Data transmission control unit 69 Composite video creation unit 70 Karaoke DB input unit 71 Synthetic music creation Unit 72 Singing recording control unit 73 Singing data recording unit 74 Singing history data time information acquisition unit 75 Relevance determination unit 76 Received image data time information acquisition unit 77 Image DB control unit 78 Communication input / output control unit 79 Status control unit 91 Song name 92 Artist Name 93 Performance start time 94 Kanade end time 95 points 100 mobile terminal 101 communication output control unit 102 the image DB control unit 103 the camera controller 104 associates the data management unit 105 singing data recording unit 106 singing recording data reproduction unit 107 data display control unit 108 display output section

Claims (6)

歌唱録音データと画像データとを関連付けるカラオケ端末であって、
所定範囲の時刻情報が付属する歌唱録音データを記録する歌唱データ記録部と、
所定時点または所定範囲の時刻情報が付属する画像データを取得する画像ＤＢ制御部と、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する関連判定部と、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける関連付けデータ制御部と、を備えることを特徴とするカラオケ端末。 A karaoke terminal that associates song recording data with image data,
A singing data recording unit for recording singing recording data to which time information of a predetermined range is attached;
An image DB control unit for acquiring image data to which time information of a predetermined time point or a predetermined range is attached;
A relevance determination unit that determines the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
A karaoke terminal comprising: an association data control unit for associating data to be determined when it is determined that the time information is duplicated. 前記取得された画像データの取得元に対して、前記取得された画像データに関連付けられた歌唱録音データを送信するデータ送信制御部を更に備えることを特徴とする請求項１記載のカラオケ端末。   The karaoke terminal according to claim 1, further comprising a data transmission control unit configured to transmit song recording data associated with the acquired image data to an acquisition source of the acquired image data. 前記記録された歌唱録音データに関する情報を表示するデータ表示制御部を更に備え、
前記データ表示制御部は、前記歌唱録音データに関連付けられた画像データを表示することを特徴とする請求項１または請求項２記載のカラオケ端末。 A data display control unit for displaying information on the recorded song recording data;
The karaoke terminal according to claim 1, wherein the data display control unit displays image data associated with the song recording data. 請求項２記載のカラオケ端末からデータを受信し、歌唱録音データと画像データとを関連付けて出力する携帯端末であって、
前記カラオケ端末に送信した画像データと関連付けられた歌唱録音データを、前記カラオケ端末から受信する通信入出力制御部と、
前記受信された歌唱録音データを前記画像データと関連付けて出力させる関連付けデータ管理部とを備えることを特徴とする携帯端末。 A portable terminal that receives data from the karaoke terminal according to claim 2 and outputs the song recording data and the image data in association with each other,
A communication input / output control unit for receiving song recording data associated with image data transmitted to the karaoke terminal, from the karaoke terminal,
A portable terminal comprising: an association data management unit that outputs the received song recording data in association with the image data. カラオケ端末を用いて歌唱録音データと画像データとを関連付けるデータ関連付け方法であって、
所定範囲の時刻情報が付属する歌唱録音データを記録するステップと、
所定時点または所定範囲の時刻情報が付属する画像データを取得するステップと、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定するステップと、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付けるステップと、を含むことを特徴とするデータ関連付け方法。 A data association method for associating song recording data and image data using a karaoke terminal,
Recording song recording data to which a predetermined range of time information is attached;
Acquiring image data to which time information of a predetermined time point or a predetermined range is attached;
Determining the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
And a step of associating the data to be determined when it is determined that there is an overlap of the time information. カラオケ端末に歌唱録音データと画像データとの関連付けを実行させるデータ関連付けプログラムであって、
所定範囲の時刻情報が付属する歌唱録音データを記録する処理と、
所定時点または所定範囲の時刻情報が付属する画像データを取得する処理と、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する処理と、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける処理と、を含むことを特徴とするデータ関連付けプログラム。 A data association program for causing a karaoke terminal to associate song recording data with image data,
A process of recording song recording data to which time information of a predetermined range is attached;
Processing for acquiring image data with time information of a predetermined time point or a predetermined range;
A process of determining the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
And a process for associating the data to be determined when it is determined that there is duplication of the time information.
JP2010006232A 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program Withdrawn JP2011145492A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010006232A JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010006232A JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Publications (1)

Publication Number Publication Date
JP2011145492A true JP2011145492A (en) 2011-07-28

Family

ID=44460398

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010006232A Withdrawn JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Country Status (1)

Country Link
JP (1) JP2011145492A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012211105A1 (en) 2011-06-30 2013-01-03 Fuji Electric Co., Ltd PROCESS FOR PRODUCING A BACKWARD LOCKING BIPOLAR TRANSISTOR WITH INSULATED GATE
JP2013210464A (en) * 2012-03-30 2013-10-10 Xing Inc Karaoke system
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2016080922A (en) * 2014-10-19 2016-05-16 株式会社エクシング Karaoke management system, program, and karaoke system
JP2016131268A (en) * 2015-01-13 2016-07-21 Ｎｅｃプラットフォームズ株式会社 Remote control device and method
JP2016212424A (en) * 2011-09-18 2016-12-15 タッチチューンズ ミュージック コーポレーション Digital jukebox device comprising karaoke and/or photo booth that prints out cards and stickers of the resulting photograph, and related method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012211105A1 (en) 2011-06-30 2013-01-03 Fuji Electric Co., Ltd PROCESS FOR PRODUCING A BACKWARD LOCKING BIPOLAR TRANSISTOR WITH INSULATED GATE
JP2016212424A (en) * 2011-09-18 2016-12-15 タッチチューンズ ミュージック コーポレーション Digital jukebox device comprising karaoke and/or photo booth that prints out cards and stickers of the resulting photograph, and related method
JP2013210464A (en) * 2012-03-30 2013-10-10 Xing Inc Karaoke system
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2016080922A (en) * 2014-10-19 2016-05-16 株式会社エクシング Karaoke management system, program, and karaoke system
JP2016131268A (en) * 2015-01-13 2016-07-21 Ｎｅｃプラットフォームズ株式会社 Remote control device and method

Similar Documents

Publication Publication Date Title
JP4708128B2 (en) Mobile terminal and content continuous viewing system
CN101529867B (en) Sharing multimedia content in a peer-to-peer configuration
US8543141B2 (en) Portable communication device and method for media-enhanced messaging
JP5020135B2 (en) Portable terminal device and computer program
US20090132924A1 (en) System and method to create highlight portions of media content
WO2009154267A1 (en) Data output device, data providing device, data output system, data output device control method, and data providing device control method
KR20160011613A (en) Method and device for information acquisition
US20080114805A1 (en) Play list creator
JP2011145492A (en) Karaoke terminal, mobile terminal, data associating method and data associating program
JP2004177586A (en) Mobile communication terminal, and device and system for content reproduction
JP2010146661A (en) Terminal device and content data processing method
JP2014085644A (en) Karaoke system
CN106128440A (en) A kind of lyrics display processing method, device, terminal unit and system
CN104486295B (en) Audio frequency playing method and device
JP2007089025A (en) Information processing apparatus for viewing content during speech, information processing method and program therefor
JP6533108B2 (en) Background image support system when playing karaoke music
TW201324178A (en) Method and system for sharing data
JP2009130644A (en) Communication equipment, communication method, program, and storage medium
JP2010004403A (en) Data output device, data providing device, data output system, control method of data output device, and control method of data providing device
JP2020077922A (en) Image editing device, image editing method, and program
JP5643149B2 (en) Portable terminal device and program
JP2013182073A (en) Collaboration singing video recording system
JP6426809B2 (en) Transmitter, transmitter control method, and program
JP6435439B1 (en) Imaging moving image service system, server device, imaging moving image management method, and computer program
JP2009267634A (en) Terminal device and transmission control method

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130402