JP2011145492A - Karaoke terminal, mobile terminal, data associating method and data associating program - Google Patents

Karaoke terminal, mobile terminal, data associating method and data associating program Download PDF

Info

Publication number
JP2011145492A
JP2011145492A JP2010006232A JP2010006232A JP2011145492A JP 2011145492 A JP2011145492 A JP 2011145492A JP 2010006232 A JP2010006232 A JP 2010006232A JP 2010006232 A JP2010006232 A JP 2010006232A JP 2011145492 A JP2011145492 A JP 2011145492A
Authority
JP
Japan
Prior art keywords
data
image data
time information
karaoke
song
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2010006232A
Other languages
Japanese (ja)
Inventor
Kazuaki Ishikawa
和明 石川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2010006232A priority Critical patent/JP2011145492A/en
Publication of JP2011145492A publication Critical patent/JP2011145492A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a Karaoke terminal, a data associating method and a data associating program, capable of associating an image data with a singing recording data, and managing them so as to be visually understood. <P>SOLUTION: The Karaoke terminal 60, which associates the singing recording data with the image data, includes: a singing data-recording unit for recording the singing recording data with time information of a predetermined range; an image database (DB) control unit for acquiring an image data with time information of a predetermined time point or a predetermined range; an association determining unit for determining whether or not the recorded singing recording data is associated with the acquired image data, depending on whether or not time information of each data is duplicate; and an association data control unit for associating pieces of data of determination objects with each other, when it is determined that the time information is duplicate. Thus, the singing recording data is associated with the image data, and the singing recording data is managed so as to be visually understood. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、音声データと画像データとを関連付けるカラオケ端末、携帯端末、データ関連付け方法およびデータ関連付けプログラムに関する。   The present invention relates to a karaoke terminal, a portable terminal, a data association method, and a data association program that associate audio data and image data.

近年、録音した自分の歌声を着信メロディとして利用できるサービスや備え付けのカメラの前で歌唱しているカラオケユーザの動画をWebサーバにアップロードして公開するサービスが増加している。例えば、業務用カラオケ・コンテンツ関連の会社が提供する通信カラオケと連動したソーシャル・ネットワーキング・サービス(SNS)が挙げられる(たとえば非特許文献1、2参照)。このように今後、カラオケのサービスとして歌唱音声を録音した音楽データ(以下、歌唱録音データ)が1つのコミュニケーションツールとして普及することが見込まれる。   In recent years, services that can use recorded singing voices as incoming melody and services that upload and publish videos of karaoke users who are singing in front of a built-in camera to a Web server are increasing. For example, there is a social networking service (SNS) linked with a communication karaoke provided by a company related to commercial karaoke contents (for example, see Non-Patent Documents 1 and 2). Thus, it is expected that music data (hereinafter referred to as singing recording data) in which singing voice is recorded as a karaoke service will spread as one communication tool.

また、歌唱を録音したカラオケ端末から通信網を介して録音データをユーザのコンピュータにダウンロードさせる歌唱録音データ販売システム(たとえば特許文献1参照)や、カラオケボックス等を利用して歌唱を録音した歌唱録音データおよび備え付けのカメラで撮像した画像を手軽にメール配信するカラオケ音声画像送信システム(たとえば特許文献2参照)などが開示されている。現在デジタルカメラ、カメラ付き携帯電話機は一般に広く普及しており、カラオケボックス内で静止画、動画を撮像する機会が増加することが想定される。   In addition, a song recording data sales system (for example, see Patent Document 1) that downloads recording data from a karaoke terminal that records a song to a user's computer via a communication network, or a song recording that records a song using a karaoke box or the like. A karaoke audio image transmission system (for example, see Patent Document 2) that easily distributes data and images captured by an attached camera by e-mail is disclosed. At present, digital cameras and camera-equipped mobile phones are generally widely used, and it is assumed that opportunities to capture still images and moving images in a karaoke box will increase.

第一興商、“DAM★とも”、右枠“DAM★ともってなに?”、[online]、[平成21年3月30日検索]、インターネット<URL: http://www.clubdam.com/app/damtomo/index.do?type=damtomo&source=index>Daiichi Kosho, “DAM ★ Tomo”, right frame “What is DAM ★ Too?”, [Online], [Search March 30, 2009], Internet <URL: http: //www.clubdam. com / app / damtomo / index.do? type = damtomo & source = index> 株式会社エクシング、“うたスキ動画”、中央下段のQ&A、[online]、[平成21年3月30日検索]、インターネット<URL:http://joysound.com/ex/st/utasuki/help/movie/index.htm;jsessionid=36A783FA2F357A10BE69CEDD4D75A9F6.s3#Q1>XING Inc., “Utaski Video”, Q & A in the lower center, [online], [March 30, 2009 search], Internet <URL: http://joysound.com/ex/st/utasuki/help/ movie / index.htm; jsessionid = 36A783FA2F357A10BE69CEDD4D75A9F6.s3 # Q1>

特開2004−301884号公報JP 2004-301844 A 特開2004−69923号公報JP 2004-69923 A

そこで自身または他人が撮った複数の画像に歌唱録音データを関連付けることができれば歌唱録音データを視覚的に分かりやすく管理することが可能となる。しかし特許文献1、2記載のシステムでは、カラオケ端末とは別の装置で撮った画像に歌唱録音データを関連付けて保存することができないため、自身の機器で作成したコンテンツを重視するユーザにとっては不便である。   Therefore, if the song recording data can be associated with a plurality of images taken by itself or others, it becomes possible to manage the song recording data in an easily understandable manner. However, in the systems described in Patent Documents 1 and 2, since it is not possible to store the song recording data in association with an image taken by a device different from the karaoke terminal, it is inconvenient for users who place importance on content created by their own devices It is.

本発明は、このような事情に鑑みてなされたものであり、画像データと歌唱録音データを関連付け、視覚的に分かりやすく管理できるカラオケ端末、携帯端末、データ関連付け方法およびデータ関連付けプログラムを提供することを目的とする。   The present invention has been made in view of such circumstances, and provides a karaoke terminal, a portable terminal, a data association method, and a data association program that associate image data and song recording data and can be managed visually in an easy-to-understand manner. With the goal.

(1)上記の目的を達成するため、本発明のカラオケ端末は、歌唱録音データと画像データとを関連付けるカラオケ端末であって、所定範囲の時刻情報が付属する歌唱録音データを記録する歌唱データ記録部と、所定時点または所定範囲の時刻情報が付属する画像データを取得する画像DB制御部と、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する関連判定部と、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける関連付けデータ制御部と、を備えることを特徴としている。これにより、画像データに歌唱録音データを関連付け、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (1) In order to achieve the above object, a karaoke terminal of the present invention is a karaoke terminal that associates song recording data with image data, and records song recording data to which a predetermined range of time information is attached. A data DB controller for acquiring image data to which time information of a predetermined time point or a predetermined range is attached, presence / absence of relevance between the recorded song recording data and the acquired image data, An association determination unit that determines whether there is duplication of time information, and an association data control unit that associates the data that is the object of the determination when it is determined that there is duplication of the time information. It is a feature. This makes it possible to associate the song recording data with the image data and manage the song recording data visually and easily.

(2)また、本発明のカラオケ端末は、前記取得された画像データの取得元に対して、前記取得された画像データに関連付けられた歌唱録音データを送信するデータ送信制御部を更に備えることを特徴としている。歌唱録音データを画像データの取得元に送信することにより、画像を表示しながら、それと関連付けられた歌唱録音データを取得元でも鑑賞できる。   (2) Moreover, the karaoke terminal of the present invention further includes a data transmission control unit that transmits song recording data associated with the acquired image data to the acquisition source of the acquired image data. It is a feature. By transmitting the song recording data to the image data acquisition source, the song recording data associated therewith can be viewed at the acquisition source while displaying the image.

(3)また、本発明のカラオケ端末は、前記記録された歌唱録音データに関する情報を表示するデータ表示制御部を更に備え、前記データ表示制御部は、前記歌唱録音データに関連付けられた画像データを表示することを特徴としている。これにより、簡単な操作で視覚的に分かりやすく歌唱録音データを管理することができる。   (3) Moreover, the karaoke terminal of the present invention further includes a data display control unit that displays information related to the recorded song recording data, and the data display control unit stores image data associated with the song recording data. It is characterized by displaying. Thereby, it is possible to manage the singing recording data visually and easily by a simple operation.

(4)また、本発明の携帯端末は、上記のカラオケ端末からデータを受信し、歌唱録音データと画像データとを関連付けて出力する携帯端末であって、前記カラオケ端末に送信した画像データと関連付けられた歌唱録音データを、前記カラオケ端末から受信する通信入出力制御部と、前記受信された歌唱録音データを前記画像データと関連付けて出力させる関連付けデータ管理部とを備えることを特徴としている。   (4) Moreover, the portable terminal of the present invention is a portable terminal that receives data from the karaoke terminal and outputs the song recording data and the image data in association with each other, and is associated with the image data transmitted to the karaoke terminal. A communication input / output control unit that receives the recorded song recording data from the karaoke terminal, and an association data management unit that outputs the received song recording data in association with the image data.

これにより、画像データと関連付けられた歌唱録音データを携帯端末にダウンロードすることができる。これによりカラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを携帯端末に取得したくなった際にも対応できる。また、携帯端末で画像を表示しながら歌唱録音データを聴くことができる。   Thereby, the song recording data linked | related with image data can be downloaded to a portable terminal. Thus, no special operation is required at the time of karaoke song reservation, and it is possible to cope with the case where it is desired to obtain the singing recording data currently singing in the portable terminal. In addition, it is possible to listen to the song recording data while displaying an image on the mobile terminal.

(5)また、本発明のデータ関連付け方法は、カラオケ端末を用いて歌唱録音データと画像データとを関連付けるデータ関連付け方法であって、所定範囲の時刻情報が付属する歌唱録音データを記録するステップと、所定時点または所定範囲の時刻情報が付属する画像データを取得するステップと、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定するステップと、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付けるステップと、を含むことを特徴としている。これにより、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (5) The data association method of the present invention is a data association method for associating song recording data and image data using a karaoke terminal, and recording song recording data to which a predetermined range of time information is attached. A step of acquiring image data to which time information of a predetermined time point or a predetermined range is attached, and whether or not the recorded song recording data and the acquired image data are related to each other. And a step of associating the data to be determined when it is determined that the time information is duplicated. Thereby, it becomes possible to manage song recording data visually and intelligibly.

(6)また、本発明のデータ関連付けプログラムは、カラオケ端末に歌唱録音データと画像データとの関連付けを実行させるデータ関連付けプログラムであって、所定範囲の時刻情報が付属する歌唱録音データを記録する処理と、所定時点または所定範囲の時刻情報が付属する画像データを取得する処理と、前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する処理と、前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける処理と、を含むことを特徴としている。これにより、歌唱録音データを視覚的に分かりやすく管理することが可能となる。   (6) Moreover, the data correlation program of this invention is a data correlation program which makes a karaoke terminal perform correlation with song recording data and image data, Comprising: The process which records song recording data to which the time information of a predetermined range is attached A process of acquiring image data to which time information of a predetermined time point or a predetermined range is attached, and whether or not the recorded song recording data and the acquired image data are related to each other. And a process for determining whether there is duplication of the time information, and a process for associating the data to be subjected to the determination when it is determined that there is an overlap. Thereby, it becomes possible to manage song recording data visually and intelligibly.

本発明によれば、画像データと歌唱録音データを時刻情報のマッチングにより関連付けることができる。   According to the present invention, image data and song recording data can be associated by matching time information.

カラオケシステムを示す概略図である。It is the schematic which shows a karaoke system. カラオケ端末の構成を示すブロック図である。It is a block diagram which shows the structure of a karaoke terminal. 歌唱履歴データのテーブルを示す図である。It is a figure which shows the table of song history data. XMLファイルの一例を示す図である。It is a figure which shows an example of an XML file. 携帯端末の構成を示すブロック図である。It is a block diagram which shows the structure of a portable terminal. カラオケ端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a karaoke terminal. カラオケ端末の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a karaoke terminal. ディスプレイ装置による表示例を示す図である。It is a figure which shows the example of a display by a display apparatus. ディスプレイ装置による表示例を示す図である。It is a figure which shows the example of a display by a display apparatus. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. カラオケ端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a karaoke terminal. 携帯端末の画面表示例を示す図である。It is a figure which shows the example of a screen display of a portable terminal.

次に、本発明の実施の形態について、図面を参照しながら説明する。説明の理解を容易にするため、各図面において同一の構成要素に対しては同一の参照番号を付し、重複する説明は省略する。   Next, embodiments of the present invention will be described with reference to the drawings. In order to facilitate understanding of the description, the same reference numerals are given to the same components in the respective drawings, and duplicate descriptions are omitted.

(システム構成)
図1は、カラオケシステム1を示す概略図である。カラオケシステム1により、画像を関連付けた歌唱録音データが配信される。図1に示す例では、カラオケシステム1は、カラオケ端末60、リモコン端末4、近距離無線通信ネットワーク6、ディスプレイ装置7、スピーカ8、マイク5、カラオケDB9、近距離無線通信ポート10、携帯端末100および近距離無線通信ポート2で構成されている。
(System configuration)
FIG. 1 is a schematic diagram showing a karaoke system 1. The karaoke system 1 distributes song recording data associated with images. In the example shown in FIG. 1, the karaoke system 1 includes a karaoke terminal 60, a remote control terminal 4, a short-range wireless communication network 6, a display device 7, a speaker 8, a microphone 5, a karaoke DB 9, a short-range wireless communication port 10, and a portable terminal 100. And a short-range wireless communication port 2.

携帯端末100は、CCDまたはCMOS等のカメラデバイスと近距離無線通信ポート2を備えた通信端末である。近距離無線通信ポート2の例には、たとえばTransferJet(登録商標)のポートが挙げられる。携帯端末100の例には、例えば、カメラ機能を有する携帯電話機または通信可能なPDAが挙げられる。近距離無線通信ポート2は近距離無線通信可能なものであればよく、これに代えて無線LANや赤外線通信、Bluetoothでもよい。   The portable terminal 100 is a communication terminal provided with a camera device such as a CCD or CMOS and a short-range wireless communication port 2. Examples of the short-range wireless communication port 2 include a TransferJet (registered trademark) port. Examples of the mobile terminal 100 include a mobile phone having a camera function or a PDA capable of communication. The short-range wireless communication port 2 only needs to be capable of short-range wireless communication, and instead may be a wireless LAN, infrared communication, or Bluetooth.

カラオケ端末60は、コンピュータ応用機器としてハード構成され、歌唱録音データと画像データとを関連付けることができる。画像データには、静止画および動画のデータを含む。カラオケ端末60は、例えばHDDのような大容量の記憶部を備え、歌唱曲を予約するためのリモコン端末4、歌唱時の歌声を入力するためのマイク5、カラオケ楽曲映像データを表示するためのディスプレイ装置7、カラオケ楽曲音楽データを出力するためのスピーカ8、カラオケ楽曲データを記録しているカラオケDB(データベース)9、および近距離無線通信ポート10の各々と接続されている。また、カラオケ端末60は、音量調整ダイヤル、テンキー、予約ボタン、演奏終了ボタンなどのユーザインターフェースを備えていてもよい。   The karaoke terminal 60 is hardware-configured as a computer application device, and can associate song recording data with image data. The image data includes still image data and moving image data. The karaoke terminal 60 includes a large-capacity storage unit such as an HDD, for example, a remote control terminal 4 for reserving a song, a microphone 5 for inputting a singing voice at the time of singing, and displaying karaoke song video data. The display device 7 is connected to each of a speaker 8 for outputting karaoke music data, a karaoke DB (database) 9 for recording karaoke music data, and a short-range wireless communication port 10. The karaoke terminal 60 may include a user interface such as a volume adjustment dial, a numeric keypad, a reservation button, and a performance end button.

近距離無線通信ポート2の例には、たとえばTransferJet(登録商標)のポートが挙げられる。近距離無線通信ポート10は近距離無線通信可能なものであればよく、無線LANや赤外線通信、Bluetooth(登録商標)であってもよい。なお、これらの各装置とカラオケ端末60との接続は、有線でも無線でもよく複数台接続されていてもよい。   Examples of the short-range wireless communication port 2 include a TransferJet (registered trademark) port. The short-range wireless communication port 10 only needs to be capable of short-range wireless communication, and may be a wireless LAN, infrared communication, or Bluetooth (registered trademark). The connection between each of these devices and the karaoke terminal 60 may be wired or wireless, or a plurality of devices may be connected.

リモコン端末4は、カラオケ端末60と近距離無線通信ネットワーク6で接続され、カラオケ端末60をリモートコントロールできるユーザインターフェースを備えている。リモコン端末4は、例えば、カラオケ端末専用のリモコン、カラオケリモコンのアプリケーションを備えた携帯端末などである。カラオケ端末60側の近距離無線通信ポート10は複数あってもよい。   The remote control terminal 4 is connected to the karaoke terminal 60 via the short-range wireless communication network 6 and includes a user interface that can remotely control the karaoke terminal 60. The remote control terminal 4 is, for example, a remote control dedicated to a karaoke terminal, a portable terminal equipped with a karaoke remote control application, or the like. There may be a plurality of short-range wireless communication ports 10 on the karaoke terminal 60 side.

ディスプレイ装置7は、カラオケ端末60から出力される映像信号を入力し、入力された映像信号を画面に表示する。カラオケDB9は、ローカルエリアネットワークケーブルなどの通信ケーブルでカラオケ端末60と接続され、映像データ、音楽データ、歌詞データを含むカラオケ楽曲データを記憶している。   The display device 7 inputs the video signal output from the karaoke terminal 60 and displays the input video signal on the screen. The karaoke DB 9 is connected to the karaoke terminal 60 via a communication cable such as a local area network cable, and stores karaoke song data including video data, music data, and lyrics data.

(カラオケ端末の構成)
次に、カラオケ端末60の構成を説明する。図2は、カラオケ端末の構成を示すブロック図である。図2に示すように、カラオケ端末60は、ディスプレイ出力部61、スピーカ出力部62、マイク入力部63、視聴制御部64、関連付けデータ制御部65、状態制御部79、データ表示制御部67、データ送信制御部68、合成映像作成部69、カラオケDB入力部70、合成音楽作成部71、歌唱録音制御部72、歌唱データ記録部73、歌唱履歴データ時刻情報取得部74、関連判定部75、受信画像データ時刻情報取得部76、画像DB制御部77および通信入出力制御部78を備えている。
(Composition of karaoke terminal)
Next, the configuration of the karaoke terminal 60 will be described. FIG. 2 is a block diagram showing the configuration of the karaoke terminal. As shown in FIG. 2, the karaoke terminal 60 includes a display output unit 61, a speaker output unit 62, a microphone input unit 63, a viewing control unit 64, an association data control unit 65, a state control unit 79, a data display control unit 67, data Transmission control unit 68, composite video creation unit 69, karaoke DB input unit 70, synthetic music creation unit 71, song recording control unit 72, song data recording unit 73, song history data time information acquisition unit 74, association determination unit 75, reception An image data time information acquisition unit 76, an image DB control unit 77, and a communication input / output control unit 78 are provided.

通信入出力制御部78は、近距離無線通信ポートの入出力を制御する。近距離無線通信ポートは複数あってもよく、携帯端末と接続可能である。近距離無線通信は、無線LANや赤外線通信、Bluetooth(登録商標)であってもよい。   The communication input / output control unit 78 controls input / output of the short-range wireless communication port. There may be a plurality of short-range wireless communication ports, which can be connected to a portable terminal. The short-range wireless communication may be wireless LAN, infrared communication, or Bluetooth (registered trademark).

カラオケDB入力部70は、カラオケDB9からカラオケ楽曲データを読み込む。合成映像作成部69は、カラオケ楽曲映像データと歌詞データを合成処理させる。ディスプレイ出力部61は、ディスプレイ装置7に映像信号を出力する。スピーカ出力部62は、合成音楽作成部71から入力される合成音楽データを、アンプを通して出力する。マイク入力部63は、マイクからの音声入力を制御する。合成音楽作成部71は、カラオケDB入力部70から入力されたカラオケ楽曲音楽データとマイク入力部63から入力された歌唱者の音声データを合成処理する。   The karaoke DB input unit 70 reads karaoke song data from the karaoke DB 9. The synthesized video creation unit 69 synthesizes the karaoke song video data and the lyrics data. The display output unit 61 outputs a video signal to the display device 7. The speaker output unit 62 outputs the synthetic music data input from the synthetic music creation unit 71 through an amplifier. The microphone input unit 63 controls voice input from the microphone. The synthesized music creation unit 71 synthesizes the karaoke music data input from the karaoke DB input unit 70 and the voice data of the singer input from the microphone input unit 63.

歌唱録音制御部72は、合成された音楽データの録音を制御する。録音する際の保存形式は、MP3やMIDIなど携帯端末100で再生できるフォーマットなら何でもよい。歌唱データ記録部73は、歌唱データ(歌唱録音データと歌唱履歴データ)を保存することで、所定範囲の時刻情報が付属する歌唱録音データを記録する。所定範囲の時刻情報とは、演奏の開始時刻と終了時刻で特定される情報である。歌唱録音データはカラオケ端末の記憶領域に蓄積されており、ユニークなURIを持つ。歌唱履歴データについては後述する。視聴制御部64は、歌唱録音データの試聴を制御する。歌唱履歴データ時刻情報取得部74は、歌唱データDB(図示せず)から歌唱履歴データを読み込み、演奏開始時刻と演奏終了時刻情報を取得する。   The song recording control unit 72 controls the recording of the synthesized music data. The storage format for recording may be any format that can be played back by the mobile terminal 100, such as MP3 or MIDI. The singing data recording unit 73 stores singing data (singing recording data and singing history data) to record singing recording data to which time information within a predetermined range is attached. The time information within a predetermined range is information specified by the start time and end time of the performance. The song recording data is stored in the storage area of the karaoke terminal and has a unique URI. The singing history data will be described later. The viewing control unit 64 controls the trial listening of the song recording data. The singing history data time information acquisition unit 74 reads singing history data from a singing data DB (not shown), and acquires performance start time and performance end time information.

画像DB制御部77は、所定時点または所定範囲の時刻情報が付属する画像データを取得する。所定時点の時刻情報とは、静止画データの撮影時刻情報であり、所定範囲の時刻情報とは、動画データの撮影開始時刻と撮影終了時刻とで特定される情報である。画像DB制御部77は、通信入出力制御部78から受信してきた、作成時刻情報を含む画像データと新着受信画像データ数を保存する。受信画像データ時刻情報取得部76は、受信画像DBから画像データを読み込みその画像データの作成時刻情報を取得する。   The image DB control unit 77 acquires image data to which time information of a predetermined time point or a predetermined range is attached. The time information at the predetermined time is the shooting time information of the still image data, and the time information of the predetermined range is information specified by the shooting start time and the shooting end time of the moving image data. The image DB control unit 77 stores the image data including the creation time information and the number of newly received image data received from the communication input / output control unit 78. The received image data time information acquisition unit 76 reads image data from the received image DB and acquires creation time information of the image data.

関連判定部75は、記録された歌唱録音データと、取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する。関連判定部75は、受信画像データ時刻情報取得部76で得られた画像データ時刻情報と歌唱履歴データ時刻情報取得部74で得られた演奏開始終了の時刻情報を比較する。演奏開始から演奏終了までの時間に画像データの撮影時間が重複していれば関連ありと判定する。   The association determination unit 75 determines whether or not the recorded song recording data is associated with the acquired image data based on whether or not the time information of each data overlaps. The association determination unit 75 compares the image data time information obtained by the received image data time information acquisition unit 76 with the performance start / end time information obtained by the singing history data time information acquisition unit 74. If the imaging time of image data overlaps the time from the start of performance to the end of performance, it is determined that there is a relationship.

関連付けデータ制御部65は、時刻情報の重複が有ると判定された場合に、判定の対象とされたデータ間を関連付ける。関連付けデータ制御部65は、XMLファイルを作成する。これにより、歌唱録音データと受信画像データとが関連付けられる。なお、XMLファイルについては後述する。   When it is determined that the time information is duplicated, the association data control unit 65 associates the data to be determined. The association data control unit 65 creates an XML file. Thereby, song recording data and reception image data are linked | related. The XML file will be described later.

関連付けデータ制御部65は、関連付けした画像データと歌唱録音データの関連付け情報を管理するファイルを作成し保存する。これにより、自身または他人が撮った複数の画像に歌唱録音データを関連付けることができる。そして、関連付けた表示等により歌唱録音データを視覚的に分かりやすく管理することが可能となる。   The association data control unit 65 creates and stores a file for managing association information between the associated image data and song recording data. Thereby, song recording data can be associated with a plurality of images taken by itself or others. Then, it becomes possible to manage the song recording data visually and easily by the associated display or the like.

状態制御部79は、カラオケ端末が演奏中か否かを判定する。また、画像DB制御部で保存している新着受信画像データ数を読み込み、新着受信画像データ数が1枚以上であるかを判定する。データ表示制御部67は、関連付けデータDBから関連付けデータを読み込み、画面レイアウトを作成しディスプレイ出力部61に出力する。   The state control unit 79 determines whether or not the karaoke terminal is playing. In addition, the number of newly received image data stored in the image DB control unit is read to determine whether the number of newly received image data is one or more. The data display control unit 67 reads association data from the association data DB, creates a screen layout, and outputs the screen layout to the display output unit 61.

(データ、ファイル)
図3は、歌唱履歴データのテーブルを示す図である。歌唱履歴データは、図3に示すようなテーブル形式で保存されており、URI90、曲名91、アーティスト名92、演奏開始時刻93、演奏終了時刻94、点数95などの情報で構成されている。
(data file)
FIG. 3 is a diagram showing a table of singing history data. The singing history data is stored in a table format as shown in FIG. 3 and includes information such as a URI 90, a song title 91, an artist name 92, a performance start time 93, a performance end time 94, and a score 95.

図4は、XMLファイルの一例を示す図である。なお、図4に示すようなXMLファイルのフォーマットはあくまで実施の1例であり、これに限定されるものではない。基本的に、画像データと録音データが関連づけられることが最低限必須であるが、付随する楽曲に関連する情報を関連づけても構わない。   FIG. 4 is a diagram illustrating an example of an XML file. Note that the format of the XML file as shown in FIG. 4 is merely an example of implementation, and the present invention is not limited to this. Basically, it is essential that image data and recording data be associated with each other, but information related to the accompanying music may be associated.

(携帯端末の構成)
次に、携帯端末100の構成を説明する。図5は、携帯端末100の構成を示すブロック図である。携帯端末100は、カラオケ端末60に画像データを送信し、その後、カラオケ端末60からデータを受信し、歌唱録音データと画像データとを関連付けて出力する。図5に示すように、携帯端末100は、通信入出力制御部101、画像DB制御部102、カメラ制御部103、関連付けデータ管理部104、歌唱データ記録部105、歌唱録音データ再生部106、データ表示制御部107およびディスプレイ出力部108を備えている。
(Configuration of mobile device)
Next, the configuration of the mobile terminal 100 will be described. FIG. 5 is a block diagram illustrating a configuration of the mobile terminal 100. The portable terminal 100 transmits image data to the karaoke terminal 60, then receives data from the karaoke terminal 60, and outputs the song recording data and the image data in association with each other. As shown in FIG. 5, the mobile terminal 100 includes a communication input / output control unit 101, an image DB control unit 102, a camera control unit 103, an association data management unit 104, a song data recording unit 105, a song recording data reproduction unit 106, data A display control unit 107 and a display output unit 108 are provided.

カメラ制御部103は、携帯端末に搭載されているCCDまたはCMOS等のカメラデバイスを使用して画像データを取得する。画像DB制御部102は、カメラ制御部103により取得した画像データ、または近距離無線通信から入力された画像データを保存する。   The camera control unit 103 acquires image data using a camera device such as a CCD or a CMOS mounted on the mobile terminal. The image DB control unit 102 stores image data acquired by the camera control unit 103 or image data input from near field communication.

通信入出力制御部101は、近距離無線通信ポート、本実施形態ではTransferJet(登録商標)ポートの入出を制御する。近距離無線通信は、TransferJetに限らず無線LANや赤外線通信、Bluetooth(登録商標)であってもよい。また、通信入出力制御部101は、カラオケ端末60に送信した画像データと関連付けられた歌唱録音データを、カラオケ端末60から受信する。   The communication input / output control unit 101 controls entry / exit of a short-distance wireless communication port, in this embodiment, a TransferJet (registered trademark) port. The short-range wireless communication is not limited to TransferJet, but may be wireless LAN, infrared communication, or Bluetooth (registered trademark). In addition, the communication input / output control unit 101 receives from the karaoke terminal 60 the song recording data associated with the image data transmitted to the karaoke terminal 60.

データ表示制御部107は、関連付けデータ管理部104から関連付けデータを読み込み、画面レイアウトを作成しディスプレイ出力部61に出力する。ディスプレイ出力部108は、ディスプレイ(図示せず)に映像信号を出力する。   The data display control unit 107 reads the association data from the association data management unit 104, creates a screen layout, and outputs the screen layout to the display output unit 61. The display output unit 108 outputs a video signal to a display (not shown).

関連付けデータ管理部104は、カラオケ端末60から受信した関連付けデータを保存する。関連付けデータ管理部104は、受信された歌唱録音データを画像データと関連付けて歌唱録音データ再生部106およびディスプレイ出力部108に出力させる。これにより、画像と関連付けられた歌唱録音データを携帯端末100にダウンロードすることができる。そして、カラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを携帯端末100に取得したくなった際にも対応できる。また、携帯端末100で画像を表示しながら歌唱録音データを聴くことができる。   The association data management unit 104 stores association data received from the karaoke terminal 60. The association data management unit 104 associates the received song recording data with the image data and causes the song recording data reproduction unit 106 and the display output unit 108 to output the associated song recording data. Thereby, the song recording data linked | related with the image can be downloaded to the portable terminal 100. FIG. And, when a karaoke song reservation is not required, a special operation is not required, and it is possible to cope with a case where the mobile terminal 100 wants to acquire the singing recording data currently being sung. In addition, it is possible to listen to the song recording data while displaying an image on the mobile terminal 100.

歌唱データ記録部105は、カラオケ端末60から受信した歌唱データを保存する。歌唱録音データ再生部106は、歌唱データ記録部105から歌唱録音データを読み込み、指定された歌唱録音データを再生する。データ形式はMP3やMIDIなどの音楽データであればよい。   The song data recording unit 105 stores the song data received from the karaoke terminal 60. The song recording data reproducing unit 106 reads the song recording data from the song data recording unit 105 and reproduces the designated song recording data. The data format may be music data such as MP3 or MIDI.

(カラオケ端末の動作)
次に、カラオケ端末60が画像データを受信したときの処理を説明する。図6は、カラオケ端末60の動作を示すフローチャートである。
(Karaoke terminal operation)
Next, processing when the karaoke terminal 60 receives image data will be described. FIG. 6 is a flowchart showing the operation of the karaoke terminal 60.

この処理はユーザが携帯端末100上にある画像を選択してカラオケ端末60に送信した時に開始される。カラオケ端末60の通信入出力制御部78が携帯端末100から近距離無線通信ポート経由で画像データを受信する。画像データ受信後、画像DB制御部77はカラオケ端末60の内部にある記憶領域に画像データを保存する(ステップS101)。その後、新着受信画像データ数をインクリメントする(ステップS102)。   This process is started when the user selects an image on the portable terminal 100 and transmits it to the karaoke terminal 60. The communication input / output control unit 78 of the karaoke terminal 60 receives image data from the portable terminal 100 via the short-range wireless communication port. After receiving the image data, the image DB control unit 77 stores the image data in a storage area inside the karaoke terminal 60 (step S101). Thereafter, the number of newly received image data is incremented (step S102).

受信画像データ時刻情報取得部76は、受信画像データの撮影時刻情報を受信画像データのメタ情報から取得する(ステップS103)。歌唱履歴データ時刻情報取得部74は、歌唱関連データから演奏開始時間と演奏終了時間を取得する(ステップS104)。   The reception image data time information acquisition unit 76 acquires the photographing time information of the reception image data from the meta information of the reception image data (step S103). The singing history data time information acquisition unit 74 acquires a performance start time and a performance end time from the singing related data (step S104).

その後、関連判定部75は受信画像データの時刻情報と歌唱履歴データの時刻情報を比較する(ステップS105)。受信画像データの撮影時刻がある1つの歌唱履歴データの演奏開始から演奏終了までの時刻である場合、その曲中に画像が撮影されたと判断して1つの歌唱録音データと受信画像データが関連付けられる。また受信画像データの撮影時刻がある1つの歌唱関連データの演奏終了から次曲の歌唱関連データの演奏開始までの時刻である場合、2つの歌唱録音データと受信画像データとを関連付ける。   Thereafter, the association determination unit 75 compares the time information of the received image data with the time information of the singing history data (step S105). If it is the time from the start to the end of the performance of one singing history data with the shooting time of the received image data, it is determined that an image has been shot in the song, and one song recording data and the received image data are associated with each other. . Further, when the reception image data is photographed at a time from the end of the performance of one song related data to the start of performance of the next song related data, the two song recording data and the received image data are associated with each other.

関連付けデータ制御部65は、図4のようなファイルフォーマットのXMLファイルを作成する(ステップS106)。関連付けデータ制御部65は、作成されたXMLファイルをカラオケ端末内部の記憶領域に保存する(ステップS107)。   The association data control unit 65 creates an XML file having a file format as shown in FIG. 4 (step S106). The association data control unit 65 stores the created XML file in the storage area inside the karaoke terminal (step S107).

以上の処理を終えた後、状態制御部79がカラオケ演奏中であるかどうかを判定する(ステップS108)。演奏中であればそのまま処理を終了する。カラオケ演奏中でなければデータ表示制御部67が関連付けデータDBに保存されているXMLファイル(関連付けデータ)を読み込む(ステップS109)。読み込み終了後、関連付けデータに基づいて必要なデータを読み込み、画面レイアウトを作成してディスプレイ出力部61に歌唱録音データのリストを出力する(ステップS110)。   After completing the above processing, the state control unit 79 determines whether or not the karaoke performance is being performed (step S108). If it is being played, the process is terminated. If the karaoke performance is not being performed, the data display control unit 67 reads the XML file (association data) stored in the association data DB (step S109). After the reading is completed, necessary data is read based on the association data, a screen layout is created, and a list of song recording data is output to the display output unit 61 (step S110).

なお、携帯端末100からカラオケ端末60に画像データを転送し関連付け処理を行った歌唱録音データをリスト表示せず、そのまま携帯端末に転送してもよい。その場合には、1回のタッチのみで歌唱録音データが取得できる。   In addition, you may transfer to the portable terminal as it is, without displaying the list of the song recording data which transferred image data from the portable terminal 100 to the karaoke terminal 60, and performed the association process. In that case, singing recording data can be acquired by only one touch.

以上の処理で、携帯端末100から送信された画像を受信して、時刻情報に基づいてカラオケ端末60内に記憶されている歌唱録音データと受信した画像を関係づけさせ、関連付けた歌唱録音データをリスト表示する。   With the above processing, the image transmitted from the portable terminal 100 is received, the song recording data stored in the karaoke terminal 60 is related to the received image based on the time information, and the associated song recording data is obtained. List display.

次に、演奏終了時の動作を説明する。図7は、カラオケ端末の動作を示すフローチャートである。   Next, the operation at the end of the performance will be described. FIG. 7 is a flowchart showing the operation of the karaoke terminal.

まず、カラオケ演奏が終了した時点で状態制御部79新着受信画像データ数が1枚以上か否かを判定する(ステップS201)。新着受信画像データ数が0枚の場合は、何もせず通常通りの処理を行う。新着受信画像データ数が1枚以上の場合はデータ表示制御部67が関連付けデータDBに保存されているXMLファイル(関連付けデータ)を読み込む(ステップS202)。   First, when the karaoke performance is completed, it is determined whether or not the number of newly received image data is one or more in the state control unit 79 (step S201). When the number of newly received image data is 0, the normal processing is performed without doing anything. If the number of newly received image data is one or more, the data display control unit 67 reads an XML file (association data) stored in the association data DB (step S202).

読み込み終了後、関連付けデータに基づいて必要なデータを読み込み、画面レイアウトを作成してディスプレイ出力部61に歌唱録音データのリストを出力する(ステップS203)。リスト表示した後、画像DB制御部77が新着受信画像データ数を0枚にリセットする(ステップS204)。   After the reading is completed, necessary data is read based on the association data, a screen layout is created, and a list of song recording data is output to the display output unit 61 (step S203). After displaying the list, the image DB control unit 77 resets the number of newly received image data to 0 (step S204).

なお、以上の動作は、カラオケ端末60のコンピュータにプログラムを実行させることで行われる。   The above operation is performed by causing the computer of the karaoke terminal 60 to execute a program.

(ユースケース)
次に、カラオケシステム1の使用について説明する。カラオケシステム1は、簡単な操作で視覚的に分かりやすく歌唱録音データを取得することができる。歌唱録音データは、カラオケの伴奏と歌唱者の歌声を合成して録音した音楽ファイルである。音楽ファイルの保存形式はMP3やMIDIなど携帯端末100で再生できるフォーマットなら何でもよい。
(Use Case)
Next, use of the karaoke system 1 will be described. The karaoke system 1 can acquire the singing recording data visually and easily by a simple operation. The song recording data is a music file recorded by synthesizing the accompaniment of karaoke and the singing voice of the singer. The music file can be saved in any format that can be played back on the portable terminal 100, such as MP3 or MIDI.

この歌唱録音データを取得するための操作として、ユーザの携帯端末100で撮影した画像を近距離無線通信ポート2経由でカラオケ端末60に送信することでカラオケ端末60内にある歌唱録音データを携帯端末100にダウンロードすることができる。これによりカラオケ曲予約時に特別な操作を必要とせず、急遽現在歌唱している歌唱録音データを取得したくなった際にも対応できる。実際にはディスプレイ装置7に画像が撮像された際に歌唱していた歌唱録音データのリストを表示し、リストから所望の歌唱録音データを選択した状態でユーザが課金を承認すると画像と共に歌唱録音データをユーザの携帯端末100に送信する。以下にユーザの手順を説明する。   As an operation for acquiring the song recording data, the image recorded by the user's portable terminal 100 is transmitted to the karaoke terminal 60 via the short-range wireless communication port 2 so that the song recording data in the karaoke terminal 60 is transmitted to the portable terminal. 100 can be downloaded. Thus, no special operation is required at the time of karaoke song reservation, and it is possible to cope with the case where it is desired to obtain the singing recording data currently sung. Actually, a list of singing recording data that was sung when the image was picked up on the display device 7 is displayed, and when the user approves charging with the desired singing recording data selected from the list, the singing recording data together with the image is displayed. Is transmitted to the mobile terminal 100 of the user. The user procedure will be described below.

図8Aおよび図8Bは、ディスプレイ装置による表示例を示す図である。図8Aに示すように、カラオケ歌唱中に表示される通常時において、ユーザが何も操作せず歌唱のみを行っている場合には、ディスプレイ装置7は背景映像20と歌詞テロップ21を合成した映像を表示する。   8A and 8B are diagrams illustrating examples of display by the display device. As shown in FIG. 8A, in the normal time displayed during karaoke singing, when the user performs only singing without any operation, the display device 7 synthesizes the background video 20 and the lyrics telop 21. Is displayed.

ユーザは、カラオケ利用時間中に自由に携帯端末100を使用して画像を撮像する。ただし所望の歌唱録音データを取得したい場合は、まず前曲演奏終了後から次曲演奏開始までの間に画像を撮像する。その後、ユーザが撮像した画像を、携帯端末100を操作することで選択し、カラオケ端末60上の近距離無線通信ポート10に携帯端末100の近距離無線通信ポート2を接触させ画像データを送信する。   The user captures an image freely using the mobile terminal 100 during the karaoke use time. However, when it is desired to acquire desired song recording data, an image is first captured between the end of the previous song performance and the start of the next song performance. Thereafter, an image picked up by the user is selected by operating the portable terminal 100, and the short-range wireless communication port 2 of the portable terminal 100 is brought into contact with the short-range wireless communication port 10 on the karaoke terminal 60 to transmit image data. .

カラオケ端末60は画像の受信を完了すると、図8Bに示すようにディスプレイ装置7に受信画像22と受信が成功した旨を伝えるテロップ23を表示する。なお、携帯端末100で撮像した画像データをカラオケ端末60に送信するタイミングはいつでもよいが、現実的にはカラオケサービスを受けている時間内が好ましい。   When the reception of the image is completed, the karaoke terminal 60 displays the received image 22 and the telop 23 indicating that the reception has been successful on the display device 7 as shown in FIG. 8B. In addition, although the timing which transmits the image data imaged with the portable terminal 100 to the karaoke terminal 60 may be anytime, it is actually preferable to be within the time of receiving the karaoke service.

ユーザがカラオケ演奏中に画像データを送信し演奏が終了した場合または演奏時間外に画像データを送信した場合には、ディスプレイ装置7に送信した画像と関連付けられた歌唱録音データのリストが表示される。   When the user transmits image data during karaoke performance and the performance ends or when image data is transmitted outside the performance time, a list of song recording data associated with the transmitted image is displayed on the display device 7. .

図9は、カラオケ端末60の画面表示例を示す図である。図9に示すように、カラオケ端末60の画面は、歌唱録音データのリストを表示する。具体的にはユーザが一度に複数枚をカラオケ端末60へ送信した場合、歌唱録音データのリストが図9のように複数の歌唱録音データが並列して表示される。このようにリスト表示は、画像データと歌唱録音データが関連付けられた分だけ複数表示できる。   FIG. 9 is a diagram illustrating a screen display example of the karaoke terminal 60. As shown in FIG. 9, the screen of the karaoke terminal 60 displays a list of song recording data. Specifically, when the user transmits a plurality of pieces at once to the karaoke terminal 60, a list of song recording data is displayed in parallel as shown in FIG. As described above, a plurality of lists can be displayed by the amount associated with the image data and the song recording data.

リスト表示された歌唱録音データは、リモコンにより選択可能である。選択は、リモコン操作説明部34により指示される。画像表示エリア30は、関連付けられた画像が4つ以上ある場合スライドショーのように画像を右から左へ順々にスライド表示する。歌唱関連情報表示エリア31〜33は、それぞれ曲名、アーティスト名、点数を表示する。   The song recording data displayed in the list can be selected by the remote controller. The selection is instructed by the remote control operation explanation unit 34. When there are four or more images associated with each other, the image display area 30 slides the images sequentially from right to left as in a slide show. The singing related information display areas 31 to 33 display a song name, an artist name, and a score, respectively.

また、リスト表示の具体的な遷移例を説明する。図10〜図12は、カラオケ端末の画面表示例を示す図である。図に示すように画面はリストを表示している。ユーザはカラオケ演奏中に携帯端末100で取得した画像データの1枚をカラオケ端末60に転送する。カラオケ演奏終了後、歌唱録音データのリストでは、図10のように歌唱録音データの表示枠29内にユーザが転送した画像データに対応する1つの画像表示エリア30が表示される。   A specific transition example of the list display will be described. 10-12 is a figure which shows the example of a screen display of a karaoke terminal. As shown in the figure, the screen displays a list. The user transfers one piece of image data acquired by the portable terminal 100 to the karaoke terminal 60 during the karaoke performance. After the end of the karaoke performance, in the song recording data list, one image display area 30 corresponding to the image data transferred by the user is displayed in the song recording data display frame 29 as shown in FIG.

次に、別のその後になされた歌唱中に撮影したもう1枚の画像データをカラオケ端末60に転送すると、歌唱録音データのリストには図11のように2つの歌唱録音データが表示される。さらに、1、2枚目に送信した画像データとは別の画像データで、かつ1枚目と同じ曲の歌唱時に撮影された画像データを転送すると、歌唱録音データのリストは図12のように、1曲目の歌唱録音データの表示枠29内に3枚目の画像データに対応する画像表示エリア30が表示される。   Next, when another piece of image data taken during another subsequent song is transferred to the karaoke terminal 60, two song recording data are displayed in the song recording data list as shown in FIG. Furthermore, when image data that is different from the image data transmitted to the first and second images and is captured when the same song as the first image is sung, the list of song recording data is as shown in FIG. An image display area 30 corresponding to the third image data is displayed in the display frame 29 of the first song recording data.

次に、課金画面の一例を説明する。図13は、カラオケ端末の画面表示例を示す図である。リスト表示からリモコン操作で1つの歌唱録音データを選択すると、画面表示が図13のような課金画面に遷移する。課金画面には、メッセージエリア40、前画面に戻るボタン41、試聴ボタン42がある。メッセージエリア40には、ユーザに対して課金を促す旨のメッセージを表示される。前画面に戻るボタン41は、選択されると前画面であるリスト表示に戻る。試聴ボタン42は、選択されると選択した歌唱録音データを再生する。   Next, an example of a billing screen will be described. FIG. 13 is a diagram illustrating a screen display example of the karaoke terminal. When one song recording data is selected by remote control operation from the list display, the screen display changes to a billing screen as shown in FIG. The billing screen includes a message area 40, a button 41 for returning to the previous screen, and a preview button 42. In the message area 40, a message prompting the user to charge is displayed. When the button 41 for returning to the previous screen is selected, it returns to the list display as the previous screen. When the audition button 42 is selected, the selected song recording data is reproduced.

図14は、カラオケ端末60の画面表示例を示す図である。試聴ボタン42が押され試聴が開始されると、図14のような試聴画面に遷移する。試聴画面には、映像表示画面45、操作説明表示画面46がある。映像表示画面45は、試聴用の映像が表示される。試聴用に再生される映像としては、関連付けられた画像をそのまま表示する映像、複数枚の関連付けられた画像を一定間隔毎に切り替えて表示する映像、基本的にはカラオケ時の映像を流し関連付けられた画像の取得時刻になったらその画像をエフェクト付きで表示させる映像等が考えられる。試聴中に携帯端末100から画像データを転送してもよい。操作説明表示画面46は、早送り、巻き戻し、再生/一時停止、キャンセルなどのボタンが表示される。   FIG. 14 is a diagram illustrating a screen display example of the karaoke terminal 60. When the audition button 42 is pressed and the audition is started, a transition to the audition screen as shown in FIG. 14 is made. The preview screen includes a video display screen 45 and an operation explanation display screen 46. The video display screen 45 displays a video for trial listening. As a video to be played for trial listening, a video that displays the associated image as it is, a video that displays a plurality of related images switched at regular intervals, and basically a video at the time of karaoke can be streamed and associated. For example, a video that displays an image with an effect when the image acquisition time comes can be considered. Image data may be transferred from the portable terminal 100 during the trial listening. The operation explanation display screen 46 displays buttons such as fast forward, rewind, playback / pause, and cancel.

図15は、携帯端末100の画面表示例を示す図である。課金画面表示中にユーザがカラオケ端末60上にある近距離無線通信ポート10に携帯端末100の近距離無線通信ポート2を接触させると、ユーザが選択した歌唱録音データ、画像データ、歌唱録音データと画像の関連付けを管理するデータが携帯端末100に送信される。携帯端末100上でリスト表示を指示すると、携帯端末100は、携帯端末100内にある記憶領域から必要なデータを読み込み、図15のように画像エリア50、歌唱関連情報表示エリア51〜54を表示する。画像エリア50は、1枚の画像を表示するだけのスペースがあり、関連付けられた画像が複数ある場合は一定間隔毎に画像を切り替え、それを繰り返して画像表示を行う。歌唱関連情報表示エリア51〜54は、それぞれ曲名、アーティスト名、点数、日付を表示する。   FIG. 15 is a diagram illustrating a screen display example of the mobile terminal 100. When the user brings the short-range wireless communication port 2 of the portable terminal 100 into contact with the short-range wireless communication port 10 on the karaoke terminal 60 while the billing screen is displayed, the song recording data, image data, and song recording data selected by the user are displayed. Data for managing image association is transmitted to the mobile terminal 100. When the list display is instructed on the portable terminal 100, the portable terminal 100 reads necessary data from the storage area in the portable terminal 100 and displays the image area 50 and the singing related information display areas 51 to 54 as shown in FIG. To do. The image area 50 has a space for displaying one image, and when there are a plurality of associated images, the images are switched at regular intervals, and the images are displayed repeatedly. The singing related information display areas 51 to 54 display the song name, artist name, score, and date, respectively.

1 カラオケシステム
2 近距離無線通信ポート
4 リモコン端末
5 マイク
6 近距離無線通信ネットワーク
7 ディスプレイ装置
8 スピーカ
9 カラオケDB
10 近距離無線通信ポート
29 歌唱録音データ表示枠
30 画像表示エリア
31−33 歌唱関連情報表示エリア
34 リモコン操作説明部
40 メッセージエリア
45 映像表示画面
46 操作説明表示画面
50 画像エリア
51−54 歌唱関連情報表示エリア
60 カラオケ端末
61 ディスプレイ出力部
62 スピーカ出力部
63 マイク入力部
64 視聴制御部
65 関連付けデータ制御部
67 データ表示制御部
68 データ送信制御部
69 合成映像作成部
70 カラオケDB入力部
71 合成音楽作成部
72 歌唱録音制御部
73 歌唱データ記録部
74 歌唱履歴データ時刻情報取得部
75 関連判定部
76 受信画像データ時刻情報取得部
77 画像DB制御部
78 通信入出力制御部
79 状態制御部
91 曲名
92 アーティスト名
93 演奏開始時刻
94 演奏終了時刻
95 点数
100 携帯端末
101 通信入出力制御部
102 画像DB制御部
103 カメラ制御部
104 関連付けデータ管理部
105 歌唱データ記録部
106 歌唱録音データ再生部
107 データ表示制御部
108 ディスプレイ出力部
1 karaoke system 2 short-range wireless communication port 4 remote control terminal 5 microphone 6 short-range wireless communication network 7 display device 8 speaker 9 karaoke DB
10 Short-range wireless communication port 29 Song recording data display frame 30 Image display area 31-33 Song related information display area 34 Remote control operation explanation section 40 Message area 45 Video display screen 46 Operation explanation display screen 50 Image area 51-54 Song related information Display area 60 Karaoke terminal 61 Display output unit 62 Speaker output unit 63 Microphone input unit 64 Viewing control unit 65 Association data control unit 67 Data display control unit 68 Data transmission control unit 69 Composite video creation unit 70 Karaoke DB input unit 71 Synthetic music creation Unit 72 Singing recording control unit 73 Singing data recording unit 74 Singing history data time information acquisition unit 75 Relevance determination unit 76 Received image data time information acquisition unit 77 Image DB control unit 78 Communication input / output control unit 79 Status control unit 91 Song name 92 Artist Name 93 Performance start time 94 Kanade end time 95 points 100 mobile terminal 101 communication output control unit 102 the image DB control unit 103 the camera controller 104 associates the data management unit 105 singing data recording unit 106 singing recording data reproduction unit 107 data display control unit 108 display output section

Claims (6)

歌唱録音データと画像データとを関連付けるカラオケ端末であって、
所定範囲の時刻情報が付属する歌唱録音データを記録する歌唱データ記録部と、
所定時点または所定範囲の時刻情報が付属する画像データを取得する画像DB制御部と、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する関連判定部と、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける関連付けデータ制御部と、を備えることを特徴とするカラオケ端末。
A karaoke terminal that associates song recording data with image data,
A singing data recording unit for recording singing recording data to which time information of a predetermined range is attached;
An image DB control unit for acquiring image data to which time information of a predetermined time point or a predetermined range is attached;
A relevance determination unit that determines the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
A karaoke terminal comprising: an association data control unit for associating data to be determined when it is determined that the time information is duplicated.
前記取得された画像データの取得元に対して、前記取得された画像データに関連付けられた歌唱録音データを送信するデータ送信制御部を更に備えることを特徴とする請求項1記載のカラオケ端末。   The karaoke terminal according to claim 1, further comprising a data transmission control unit configured to transmit song recording data associated with the acquired image data to an acquisition source of the acquired image data. 前記記録された歌唱録音データに関する情報を表示するデータ表示制御部を更に備え、
前記データ表示制御部は、前記歌唱録音データに関連付けられた画像データを表示することを特徴とする請求項1または請求項2記載のカラオケ端末。
A data display control unit for displaying information on the recorded song recording data;
The karaoke terminal according to claim 1, wherein the data display control unit displays image data associated with the song recording data.
請求項2記載のカラオケ端末からデータを受信し、歌唱録音データと画像データとを関連付けて出力する携帯端末であって、
前記カラオケ端末に送信した画像データと関連付けられた歌唱録音データを、前記カラオケ端末から受信する通信入出力制御部と、
前記受信された歌唱録音データを前記画像データと関連付けて出力させる関連付けデータ管理部とを備えることを特徴とする携帯端末。
A portable terminal that receives data from the karaoke terminal according to claim 2 and outputs the song recording data and the image data in association with each other,
A communication input / output control unit for receiving song recording data associated with image data transmitted to the karaoke terminal, from the karaoke terminal,
A portable terminal comprising: an association data management unit that outputs the received song recording data in association with the image data.
カラオケ端末を用いて歌唱録音データと画像データとを関連付けるデータ関連付け方法であって、
所定範囲の時刻情報が付属する歌唱録音データを記録するステップと、
所定時点または所定範囲の時刻情報が付属する画像データを取得するステップと、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定するステップと、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付けるステップと、を含むことを特徴とするデータ関連付け方法。
A data association method for associating song recording data and image data using a karaoke terminal,
Recording song recording data to which a predetermined range of time information is attached;
Acquiring image data to which time information of a predetermined time point or a predetermined range is attached;
Determining the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
And a step of associating the data to be determined when it is determined that there is an overlap of the time information.
カラオケ端末に歌唱録音データと画像データとの関連付けを実行させるデータ関連付けプログラムであって、
所定範囲の時刻情報が付属する歌唱録音データを記録する処理と、
所定時点または所定範囲の時刻情報が付属する画像データを取得する処理と、
前記記録された歌唱録音データと、前記取得された画像データとの関連性の有無を、各データの時刻情報の重複の有無により判定する処理と、
前記時刻情報の重複が有ると判定された場合に、前記判定の対象とされたデータ間を関連付ける処理と、を含むことを特徴とするデータ関連付けプログラム。
A data association program for causing a karaoke terminal to associate song recording data with image data,
A process of recording song recording data to which time information of a predetermined range is attached;
Processing for acquiring image data with time information of a predetermined time point or a predetermined range;
A process of determining the presence or absence of relevance between the recorded song recording data and the acquired image data based on the presence or absence of duplication of time information of each data;
And a process for associating the data to be determined when it is determined that there is duplication of the time information.
JP2010006232A 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program Withdrawn JP2011145492A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010006232A JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010006232A JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Publications (1)

Publication Number Publication Date
JP2011145492A true JP2011145492A (en) 2011-07-28

Family

ID=44460398

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010006232A Withdrawn JP2011145492A (en) 2010-01-14 2010-01-14 Karaoke terminal, mobile terminal, data associating method and data associating program

Country Status (1)

Country Link
JP (1) JP2011145492A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012211105A1 (en) 2011-06-30 2013-01-03 Fuji Electric Co., Ltd PROCESS FOR PRODUCING A BACKWARD LOCKING BIPOLAR TRANSISTOR WITH INSULATED GATE
JP2013210464A (en) * 2012-03-30 2013-10-10 Xing Inc Karaoke system
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2016080922A (en) * 2014-10-19 2016-05-16 株式会社エクシング Karaoke management system, program, and karaoke system
JP2016131268A (en) * 2015-01-13 2016-07-21 Necプラットフォームズ株式会社 Remote control device and method
JP2016212424A (en) * 2011-09-18 2016-12-15 タッチチューンズ ミュージック コーポレーション Digital jukebox device comprising karaoke and/or photo booth that prints out cards and stickers of the resulting photograph, and related method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012211105A1 (en) 2011-06-30 2013-01-03 Fuji Electric Co., Ltd PROCESS FOR PRODUCING A BACKWARD LOCKING BIPOLAR TRANSISTOR WITH INSULATED GATE
JP2016212424A (en) * 2011-09-18 2016-12-15 タッチチューンズ ミュージック コーポレーション Digital jukebox device comprising karaoke and/or photo booth that prints out cards and stickers of the resulting photograph, and related method
JP2013210464A (en) * 2012-03-30 2013-10-10 Xing Inc Karaoke system
JP2014199282A (en) * 2013-03-29 2014-10-23 株式会社第一興商 Singing motion picture data generation device capable of using still picture imaged by user camera
JP2016080922A (en) * 2014-10-19 2016-05-16 株式会社エクシング Karaoke management system, program, and karaoke system
JP2016131268A (en) * 2015-01-13 2016-07-21 Necプラットフォームズ株式会社 Remote control device and method

Similar Documents

Publication Publication Date Title
JP4708128B2 (en) Mobile terminal and content continuous viewing system
CN101529867B (en) Sharing multimedia content in a peer-to-peer configuration
KR101664754B1 (en) Method, device, program and recording medium for information acquisition
US8543141B2 (en) Portable communication device and method for media-enhanced messaging
JP5020135B2 (en) Portable terminal device and computer program
US20090132924A1 (en) System and method to create highlight portions of media content
US20080114805A1 (en) Play list creator
JP2011145492A (en) Karaoke terminal, mobile terminal, data associating method and data associating program
JP5964722B2 (en) Karaoke system
JP2010146661A (en) Terminal device and content data processing method
CN104486295B (en) Audio frequency playing method and device
JP6533108B2 (en) Background image support system when playing karaoke music
JP2007089025A (en) Information processing apparatus for viewing content during speech, information processing method and program therefor
TW201324178A (en) Method and system for sharing data
JP2009130644A (en) Communication equipment, communication method, program, and storage medium
JP2010004403A (en) Data output device, data providing device, data output system, control method of data output device, and control method of data providing device
JP2020077922A (en) Image editing device, image editing method, and program
JP5643149B2 (en) Portable terminal device and program
JP2013182073A (en) Collaboration singing video recording system
JP6426809B2 (en) Transmitter, transmitter control method, and program
JP2009267634A (en) Terminal device and transmission control method
JP2008310697A (en) Content processing system, content management device, content processor, and processing method and program therefor
JP2014199282A (en) Singing motion picture data generation device capable of using still picture imaged by user camera
KR20060124448A (en) System and method for providing multi image service using camera phone
JP6156923B2 (en) Karaoke system, karaoke device, and communication program

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130402