JP6145077B2 - 歌詞同期データ作成システム - Google Patents

Description

本発明は、コンピュータネットワークを利用した歌詞同期データ作成システムに関し、特に手作業によって音楽と歌詞とを精緻に同期させるための構成を有する歌詞同期データ作成システムに関する。

歌詞同期データ作成システムは、カラオケなどで利用することを目的として、コンピュータ上で再生される音楽と表示されている歌詞を同期させるための時間データを作成し、歌詞データと時間データを一体化した歌詞同期データとして保存可能なシステムである。このようなシステムでは、いわゆるスマートフォンやタブレット・コンピュータなど、歌詞を表示する画面が小さいシステムでも入力できるようにした様々な発明がなされている。

図１２は、従来技術に係る歌詞同期データ作成システムの構成を示すフロー図である。図１２は、特開２００６−２２７０８２公報において開示されている発明である。この発明では、音楽データを再生する再生部と歌詞データを表示する表示部とを備えて、音楽に連動した歌詞表示を行わせるための音楽と歌詞との同期データ作成装置であって、１行の歌詞データを解析して表示部に表示するのに適した歌詞データの表示単位を決定する（ＳＴ２０３）。また、制御部１０６は、ユーザ入力部１０７からボタン等の操作があったことを示す通知を待ち続ける（ＳＴ２０４）。ユーザ入力部１０７から、歌詞の各フレーズと音楽とを同期させるための表示時間情報を記録するように通知が来た場合、ステップＳＴ２０５に進む。さらに、歌詞データの表示単位毎に表示時間情報を付加して音楽と歌詞との同期データを作成する（ＳＴ２０６）。また、歌詞データの表示単位を決定する歌詞データ解析部を設け、歌詞データ解析部は、歌詞データを文節に分解し、表示部に表示可能であって且つ１つ又は複数の文節からなる文節のまとまりを表示単位として決定する構成としている。

以上の構成によれば、小型ディスプレイなど、画面が非常に小さい場合でも、文節のまとまりの文字数が少なく、ユーザがボタンを押す時間間隔が短い場合でも、音楽データの再生スピードが遅く設定できるので、ユーザは十分な時間間隔を持って同期処理を行うことができる。ところで、楽曲によっては、スマートフォンの仮想的ボタンの操作などによって、例えばフレーズの冒頭部分の表示時間情報を精確に記録しにくいものが存在する。再生されている音楽と表示されている歌詞とが完全に同期するように表示時間情報が精確に記録されていないと、再生している音楽に対して歌詞の文字色の変化などのタイミングが遅すぎる又は早すぎることを利用者が感知して違和感を持ち、そのシステムを使用しているサービスの質が低いという印象を利用者に与えることがある。このシステムにおいて歌詞同期データが精確か否かを確認する場合には、音楽データを再生しながら表示する歌詞データを順次入れ替えて行く必要がある。しかしながら、ある行から次の行に表示を切り替えた瞬間に次の行の冒頭の文字が再生している音楽データに対して精確に同期しているか否かを確認することは、次の行に表示を切り替えた瞬間から冒頭の文字を凝視しないと難しい。また、このシステムにおいて歌詞同期データを修正する場合、修正する行まで戻り、戻った行の冒頭から表示時間情報を上書きして修正するが、この方法では修正対象が必要な歌詞同期データが最後に記録した表示時間情報のみであっても、表示している行全体の表示時間情報を記録し直さなければならず、修正作業が容易でないという問題がある。

特開２００６−２２７０８２公報

本発明は、上記課題を解決するために、歌詞同期データ作成システムにおいてコンピュータ上で音楽と歌詞とを同期させるための歌詞同期データが精確に記録できると共に、時間データの修正作業も容易にできる歌詞同期データ作成システムを提供することを目的とする。

請求項１に記載の発明は、音楽データを再生する再生手段と、表示装置の画面に歌詞データを表示する表示手段と、前記再生手段が前記音楽データを再生し、かつ、前記表示手段が前記歌詞データを表示しているときに、前記入力装置において入力があると、表示している前記歌詞データを前記音楽データに同期させるための時間情報を記録する時間情報記録手段を備えた歌詞同期データ作成システムであって、前記表示手段は、前記画面に、前記歌詞データを冒頭の文字からあらかじめ指定された範囲内の文字数の文字列に区切って順次表示し、前記再生手段は、前記表示手段が次の文字列を表示したときに、前記音楽データの前記文字列に対応する部分より指定秒数遡ったところから再生することを特徴とする歌詞同期データ作成システムである。

請求項２に記載の発明は、請求項１に記載の発明において、前記表示手段は、前記第１の境界線の前記第２の境界線と反対側に位置する前記画面の端部から前記第１の境界線までの領域の幅を前記第１の境界の境界線と前記第２の境界線との間の領域の幅より大きくすると共に、前記画面の前記端部と前記第１の境界線との間に配置されると共に、矩形形状の開始余剰領域をさらに表示し、前記再生手段は、前記開始余剰領域を選択したことを示す選択入力があったときに、前記音楽データの再生を開始することを特徴とする歌詞同期データ作成システムである。

請求項３に記載の発明は、請求項１又は請求項２に記載の発明において、前記時間情報記録手段は、前記入力装置において、前記画面に表示されている前記文字列の中の特定の文字を選択したことを示す選択入力があったときに、該領域選択入力があった時刻から前記音楽データの再生開始からの経過時間を算出し、該経過時間を前記特定の文字に対応する表示時間情報として記録すると共に、前記特定の文字を再び選択したことを示す再選択入力があったときに、前記特定の文字に対応する前記表示時間情報、及び、前記特定の文字への前記選択入力の後に選択された文字に対応する表示時間情報を消去することを特徴とする歌詞同期データ作成システムである。

請求項１に記載の発明によれば、再生開始から１行目の入力作業を終えるまでの経過時間を次の行の文字列に対する入力作業開始時にそのまま適用するのではなく、少し遡ったところから再生する、又は、遡らずに再生することが任意に設定できるので、作業者が次の行の最初の文字に対する入力を精神的な余裕を持って行うことができ、表示時間情報を精確に記録することが可能となる。

請求項２に記載の発明によれば、歌詞データを構成する文字列の近傍に表示されている開始余剰領域を選択したときから音楽が再生されることによって、音楽データの再生開始時に歌詞データを構成する文字列から目を離すことがないので、表示時間情報を精確に記録することが可能となる。

請求項３に記載の発明によれば、同じ文字を再度選択することによって、その文字に対する表示時間情報を消去されるので、修正作業を非常に容易に行うことができる。
できる。

本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンと周辺機器の構成の一例を示すブロック図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したタブレット・コンピュータを示す図であり、（ａ）は歌詞を横方向に配置した状態の正面図、（ｂ）は縦方向に配置した状態の正面図である。 タブレット・コンピュータにおける表示範囲と１行分の文字列の関係を示す正面図である。 タブレット・コンピュータにおける表示範囲の変更方法を示す正面図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムの文字選択領域の説明図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける第１の入力方法を示す説明図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける第２の入力方法を示す説明図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける巻き戻し再生の説明図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける修正（再入力）方法の説明図（１）である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける修正（再入力）方法の説明図（２）である。 本発明の第２の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンの正面図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンの構成を示すブロック図である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（１）である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（２）である。 本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（３）である。 従来技術に係る歌詞同期データ作成システムの構成を示すフロー図である。

まず、本発明の第１の実施の形態に係る歌詞同期データ作成システムの概要について説明する。図１は、本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンと周辺機器の構成の一例を示すブロック図である。図１において、１０はスマートフォン、２９はタッチパネル・ディスプレイ、３１ａ、３１ｂ、３１ｃ及び３１ｄはそれぞれ第１、第２、第３及び第４の文字選択領域、３２ａ、３２ｂ、３２ｃ及び３２ｄはそれぞれ第１、第２、第３及び第４の文字選択マーク線、３３は操作アイコン、３６は無線通信網、３７はインターネット、３８は歌詞同期データ管理サーバ、３８ａは歌詞同期データベース、３９ａ、３９ｂ、３９ｃ及び３９ｄはそれぞれ第１、第２、第３及び第４の文字である。

本発明の第１の実施の形態に係る歌詞同期データ作成システムは、スマートフォン、タブレット・コンピュータ、ラップトップ・コンピュータ、デスクトップ・コンピュータなど各種のコンピュータに適用することができるが、タッチパネル・ディスプレイを採用したスマートフォン又はタブレット・コンピュータなど、小型のコンピュータに特に好適である。すなわち、図１に示すように、小型のスマートフォン１０のタッチパネル・ディスプレイ２９に歌詞を構成する第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ及び第４の文字３９ｄなどの文字を表示しながら、操作アイコン３３で歌詞を同期する音楽データを再生し、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ及び第４の文字３９ｄを順次選択する。

ところで、再生されている音楽と表示されている歌詞とが完全に同期するように、表示時間情報を精確に記録するためには、再生中の音楽データを非常に注意深く聞きながら、文字や文字選択領域をタップなどの方法で必要がある。ここで、「表示時間情報」は、音楽データを再生するときに歌詞を同期させながら表示するときに必要となる時間データであり、歌詞を構成する各々の文字に対して、当該文字を歌唱すべきタイミングに差し掛かったことを表示するための２つの時刻、つまり当該文字に対する発声開始時刻と発声終了時刻を設定した情報である、と定義する。具体的事例に沿って言い換えると、カラオケシステムにおいて、音楽データを再生しながら歌詞を構成する文字列を表示しているときに、歌唱すべき文字の表示色を変えるための時間データが表示時間情報であり、音楽データの再生開始時刻から文字の表示色を変え始める時刻と、文字の表示色を変え終わる時刻文字の表示色を変え始める時刻である。カラオケシステムによっては、文字の表示色を変える方法によらずに当該文字を歌唱すべきタイミングを示す技術もあるが、いずれにせよ、特定の１つの文字に対する発声開始時刻と発声終了時刻を歌唱する者に知らせるための情報が本発明の表示時間情報に該当する。

ところで、表示時間に情報意識を強く集中することは、あまり長い時間継続できないので、１つの楽曲に対する作業は何回かに切り分けて実行する方が表示時間情報の入力を精確に行うことができる。そこで、詳細については後述するが、この実施の形態に係る歌詞同期データ作成システムは、歌詞データを複数の行に分割して表示し、音楽データそれぞれの文字を同期させるための表示時間情報、つまり、歌詞を構成する各々の文字に対する音楽再生からの経過時刻をタッチパネル・ディスプレイ２９の画面に表示されている文字などをタップする（指先を軽く打ち付けるようにすばやく触れる）、ロングタップ（指先でしばらく触れ続ける）、又は、ことによって入力するものである。歌詞データを構成する文字列を複数の行に分割して表示する際の設定画面の記載は省略するが、例えば画面の幅に合わせて７〜８文字程度、又は、２０文字、３０文字に設定する、あるいは、文字列を全く分割せずに歌詞全体を表示するなど様々な表示設定が可能である。

さらに、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ及び第４の文字３９ｄの表示サイズが小さいと、音楽の聴取に集中しながら特定の文字にタップすることは、文字のみに集中している場合に比べて難しい。そこで、この実施の形態に係る歌詞同期データ作成システムでは、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ及び第４の文字３９ｄを第１の文字選択領域３１ａ、第２の文字選択領域３１ｂ、第３の文字選択領域及び３１ｃ及び第４の文字選択領域３１ｄ内にそれぞれ配置している。くわえて、第１、第２、第３又は第４の文字選択領域にタップすると、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ又は第４の文字３９ｄを直接選択した場合と同様に動作するように構成されている。さらに、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ及び第４の文字３９ｄと重なり合うと共に、これらの文字の上下方向に延在する第１の文字選択マーク線３２ａ、第２の文字選択マーク線３２ｂ、第３の文字選択マーク線３２ｃ及び第４の文字選択マーク線３２ｄを表示している。第１の文字選択マーク線、第２の文字選択マーク線、第３の文字選択マーク線及び第４の文字選択マーク線は、これらのいずれかをタップすると、第１の文字３９ａ、第２の文字３９ｂ、第３の文字３９ｃ又は第４の文字３９ｄを直接選択した場合と同様に動作するように構成されている。

また、この実施の形態に係る歌詞同期データ作成システムは、スマートフォン１０の電話としての機能を利用して無線通信網３６に接続し、さらに無線通信網３６を介してインターネット３７に接続し、歌詞同期データ管理サーバ３８の歌詞同期データベース３８ａに音楽と歌詞との同期データをアップロードする構成となっている。くわえて、この実施の形態に係る歌詞同期データ作成システムは、ラップトップ・コンピュータや、デスクトップ・コンピュータにも適用でき、さらにマウスやペンタブレットなど他の入力装置にも適用することが可能である。なお、本発明の歌詞同期データ作成システムは、歌詞同期データ管理サーバ３８を設けずに、スマートフォン又はタブレット・コンピュータ自体が元々備えているメモリに歌詞同期データを作成して保管する構成、すなわち、スマートフォン又はタブレット・コンピュータに記憶されているコンピュータ・ソフトウェアだけで構成してもよい。また、歌詞同期データの作成に係るコンピュータ・ソフトウェアの一部又は全部を専用メモリに記憶させ、かつ、専用ＩＣでデータ処理を行う構成、つまり、ハードウェアを中心とする構成であってもよい。さらに、デスクトップ・コンピュータに適用する場合には、ハードディスクドライブに歌詞同期データ作成システムと歌詞データを記憶させる構成としてもよい。言い換えると、本発明において、歌詞同期データ管理サーバ３８のような歌詞同期データを作成するコンピュータ以外のものは、必須のものではない。また、音楽データも、スマートフォン又はタブレット・コンピュータ自体が元々備えているメモリに記憶されていてもよく、その他の機器に記憶されている音楽データを利用するものであってもよい。

図２は、本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したタブレット・コンピュータを示す図であり、（ａ）は歌詞を横方向に配置した状態の正面図、（ｂ）は縦方向に配置した状態の正面図である。図２において、１１はタブレット・コンピュータ、１２はタッチパネル・ディスプレイ、１３は文字列、１６は操作アイコンである。

この実施の形態に係る歌詞同期データ作成システムは、図２に示すタブレット・コンピュータ１１やスマートフォンのように、横長に配置する、又は、縦長に配置することのいずれにも対応できる機器において、歌詞データも横方向、縦方向のいずれの方向にも配置できるように構成されている。すなわち、タブレット・コンピュータ１１を横長方向に配置すると、図２（ａ）に示すように、歌詞を構成する文字列１３もタッチパネル・ディスプレイ１２に横方向に配列され、縦長方向に配置すると、図２（ｂ）に示すように、歌詞を構成する文字列１３もタッチパネル・ディスプレイ１２に縦方向に配列される。くわえて、この実施の形態に係る歌詞同期データ作成システムの操作アイコン１６も、横長に配置する、又は、縦長に配置することに応じて配列が変更される。

図１２は、本発明の第１の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンの構成を示すブロック図である。図１２において、２０はメモリ、２１は再生手段、２２は表示手段、２３は表示文字数設定手段、２４は時間情報記録手段、２５は巻き戻し設定手段、２６は情報通信手段、２７はＣＰＵ、２８は一時記憶用メモリ、３０は通信装置であり、その他の符号は図１と同じものを示す。

スマートフォン１０は、メモリ２０にアプリケーション・ソフトウェアである再生手段２１、表示手段２２、表示文字数設定手段２３、時間情報記録手段２４、巻き戻し設定手段２５、情報通信手段２６に記憶されており、ＣＰＵ２７において実行される。さらに、一時記憶用メモリ２８、タッチパネル・ディスプレイ１２及び通信装置３０を備えている。再生手段２１は、指定された楽曲を巻き戻し設定手段２５の設定に従って自動的に、又は、タッチパネル・ディスプレイ１２からの手動操作によって再生する手段である。なお、表示手段２２は、歌詞を構成する文字列と、第１の文字選択領域３１ａ、第２の文字選択領域３１ｂ、第３の文字選択領域３１ｃ及び第４の文字選択領域３１ｄなどの文字選択領域と、第１の文字選択マーク線３２ａ、第２の文字選択マーク線３２ｂ、第３の文字選択マーク線３２ｃ及び第４の文字選択マーク線３２ｄなどの文字選択マーク線、並びに、操作アイコン３３をタッチパネル・ディスプレイ２９の画面に表示する手段である。表示文字数設定手段２３は、歌詞を構成する文字列を表示する際に、表示する文字数、つまり１行当たりの文字数の指定を受け付けてメモリ２０に記憶させると共に、表示手段に指定された文字数毎に表示させるための手段である。

時間情報記録手段２４は、タッチパネル・ディスプレイ１２からの第１の文字選択領域３１ａ、第２の文字選択領域３１ｂ、第３の文字選択領域３１ｃ及び第４の文字選択領域３１ｄなどの文字選択領域、又は、第１の文字選択マーク線３２ａ、第２の文字選択マーク線３２ｂ、第３の文字選択マーク線３２ｃ及び第４の文字選択マーク線３２ｄなどの文字選択マーク線からの入力があったときに、音楽データの再生開始からの経過時間を特定の文字の時刻として一時記憶用メモリに記憶する、又は、図７に示した方法によって音楽データの再生開始からの経過時間に相当する時刻を算出して当該時刻を一時記憶用メモリに記憶する手段である。つまり、文字表示情報となる時刻に対する記録を最初から実行するのではなく、この時刻をまず一時記憶用メモリに一時的に記憶させ、後述するように、１つの行に対する作業が完了してから記録される構成となっている。さらに、終了余剰領域のタップによって入力終了が通知されたときに、情報通信手段２６を介して歌詞同期データ管理サーバ３８に歌詞同期データを送信する手段である。巻き戻し設定手段２５は、タッチパネル・ディスプレイ１２の画面で表示している文字列を次の行へ切り替えた後に、前の行を表示中に再生した最後のところから所定時間巻き戻して音楽データを再生するためのものであり、巻き戻し時刻の設定を受け付けると共に、再生手段２１に音楽データの所定時刻から再生させる手段である。情報通信手段２６は、歌詞同期データ管理サーバ３８に対するユーザ認証や、歌詞同期データの送信などを行うための手段である。

一時記憶用メモリ２８は、歌詞を構成する文字に対する表示時間情報を一時的に記憶するためのキャッシュメモリである。タッチパネル・ディスプレイ１２は、歌詞を構成する文字列などを表示する表示装置であると共に、表示時間情報などの入力装置である。通信装置３０は、無線通信網３６に対して通信接続を行う装置である。なお、図１２は、図１に示したスマートフォン１０について記載したものであるが、図２に示したタブレット・コンピュータ１１においても、第１の文字選択マーク線３２ａ、第２の文字選択マーク線３２ｂ、第３の文字選択マーク線３２ｃ及び第４の文字選択マーク線３２ｄを除いて同じ構成を備えている。

図３は、タブレット・コンピュータにおける表示範囲と１行分の文字列の関係を示す正面図である。図３において、１４は表示範囲、１５ａ〜１５ｍはそれぞれ第１〜１３の文字選択領域、１７ａは開始余剰領域、１７ｂは終了余剰領域、１８ａ〜１８ｍはそれぞれ第１〜１３の文字である。また、図４は、タブレット・コンピュータにおける表示範囲の変更方法を示す正面図である。図４において、４０は指であり、その他の符号は図３と同じものを示す。さらに、図１１は、本発明の第２の実施の形態に係る歌詞同期データ作成システムを適用したスマートフォンの正面図である。図１１において、３４ａは第１の非選択領域、３４ｂは第２の非選択領域、３４ｃは第３の非選択領域、３４ｄは第４の非選択領域、３４ｅは第５の非選択領域、３５ａは第１の文字選択領域、３５ｂは第２の文字選択領域、３５ｃは第３の文字選択領域、３５ｄは第４の文字選択領域であり、その他の符号は図１と同じものを示す。

前述のように、この実施の形態に係る歌詞同期データ作成システムでは、スマートフォン又はタブレット・コンピュータなど小型のコンピュータに好適なものであるので、表示する文字を相当に少なくする場合を除いて、表示時間情報の入力対象としている文字列の一部だけを表示している状態となる。例えば、図３（ａ）に示すように、第１の文字１８ａの「ほ」から第１３の文字１８ｍの「お」までの文字列１３のうち、表示範囲１４にある第１の文字１８ａの「ほ」から第９の文字１８ｉの「み」が現れている。そこで、第１０の文字１８ｊの「の」以降の文字を表示する場合には、スクロール又はスワイプ（画面を動かす方向に向けて画面に触れた指を滑らせる）、又は、フリック（画面を動かす方向に向けて画面に触れた指をはじくように素早く動かす）によって、図３（ｂ）又は図３に示す状態にする。なお、前述のように、タブレット・コンピュータ１１もスマートフォン１０と同様に、図１２にした各種の手段を備えており、表示文字数設定手段で設定された文字数を表示手段によって表示している。

また、この実施の形態に係る歌詞同期データ作成システムでは、縦長の矩形形状に表示される第１〜１３の文字選択領域１５ａ〜１５ｍに囲まれた領域の中に、第１の文字１８ａの「ほ」から第１３の文字１８ｍの「お」までの文字がそれぞれ配置されている。第１〜１３の文字選択領域１５ａ〜１５ｍは、タッチパネル・ディスプレイ１２の画面上で第１の文字１８ａの「ほ」から第１３の文字１８ｍの「お」までの文字をタップ等で選択するのと同じ作用を有する。第１の文字１８ａから第１３の文字１８ｍまでを直接タップしようとすると、これらの文字の表示面積（サイズ）が小さいので、タップし損なうことがある。これに対して、第１〜１３の文字選択領域１５ａ〜１５ｍの表示面積は、第１の文字１８ａから第１３の文字１８ｍの表示面積よりもはるかに大きく、かつ、互いの間に間隙をおいて配置されているので、確実にタップすることが可能である。

さらに、第１〜１３の文字選択領域１５ａ〜１５ｍは、縦長の矩形形状であり、第１の文字１８ａから第１３の文字１８ｍの各文字は、上方に偏って配置されている。したがって、いずれかの文字に対して表示時間情報を入力しようとするときに、その文字を視認しながらタップすることが可能なので、誤って異なる文字をタップすることを防止することができる。もちろん、図１に示すように、第１の文字選択領域３１ａ、第２の文字選択領域３１ｂ、第３の文字選択領域３１ｃ及び第４の文字選択領域３１ｄを正方形に表示し、文字を視認しながらタップできるように、第１の文字選択マーク線３２ａ、第２の文字選択マーク線３２ｂ、第３の文字選択マーク線３２ｃ及び第４の文字選択マーク線３２ｄという別の図形を表示してもよい。

くわえて、第１〜１３の文字選択領域１５ａ〜１５ｍは、長円形や楕円形など他の形状で表示してもよい。また、四方を境界線で囲まれた形状でなく、左右のみ境界線を上下の端部がタッチパネル・ディスプレイ１２の画面の周縁部に達するように表示してもよい。例えば、図１１に示すように、スマートフォン１０のタッチパネル・ディスプレイ２９に、第１の非選択領域３４ａ、第２の非選択領域３４ｂ、第３の非選択領域３４ｃ、第４の非選択領域３４ｄ及び第５の非選択領域３４ｅの明度を低くして暗く見えるように表示し、相対的に第１の文字選択領域３５ａ、第２の文字選択領域３５ｂ、第３の文字選択領域３５ｃ及び第４の文字選択領域３５ｄの明度を高くして明るく見えるように表示している。このように、発明の第２の実施の形態に係る歌詞同期データ作成システムでは、非選択領域と文字選択領域との境界線を明確にしている。言い換えれば、文字列の各文字の数倍以上の表示面積がある、又は、各文字から所定方向に長く延びていることによって、選択する文字を視認しながら入力できる領域を持つ図形であれば、形状は特に問わない。なお、図１１に示した本発明の第２の実施の形態に係る歌詞同期データ作成システムは、文字選択領域以外の構成について、第１の実施の形態に係る歌詞同期データ作成システムと同一に構成しているので、詳細な説明を省略する。

さらに、この実施の形態に係る歌詞同期データ作成システムでは、図３及び図４に示すように、文字列１３の先頭側、つまり左方に開始余剰領域１７ａが表示されており、さらに文字列１３の終端側、つまり右方に終了余剰領域１７ｂが表示されている。開始余剰領域１７ａは、タッチパネル・ディスプレイ１２が表示している画面の左側端部付近に配置された図形であり、前述の再生手段で音楽データを再生するときに、再生開始スイッチとして機能するものである。すなわち、図４（ａ）に示している状態のままでは、音楽は再生されない。この状態において指４０で開始余剰領域１７ａにタップすると、前述の再生手段が音楽データを再生する。同時に、前述の時間情報記録手段が第１の文字選択領域１５ａなどを順次タップして行くと、それぞれをタップした時刻をスマートフォン又はタブレット・コンピュータのキャッシュメモリに一時的に記憶して行く。そして、第１３の文字選択領域１５ｍまでタップした後に、終了余剰領域１７ｂをタップすると、前述の情報通信手段が歌詞同期データ管理サーバ３８の歌詞同期データベース３８ａに記憶させる。

図５は、本発明の第１の実施の形態に係る歌詞同期データ作成システムの文字選択領域の説明図である。図５において用いた符号は、すべて図４と同じものを示す。図６は、本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける第１の入力方法を示す説明図である。また、図６において、１５ａａは開始側境界線、１５ａｂは終了側境界線、１５ｂａは開始側境界線、１５ｂｂは終了側境界線、１５ｃａは開始側境界線、１５ｃｂは終了側境界線、１５ｄａは開始側境界線、１５ｄｂは終了側境界線であり、その他の符号は図４と同じものを示す。さらに、図７は、本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける第２の入力方法を示す説明図である。図７において用いた符号は、すべて図６と同じものを示す。

この実施の形態に係る歌詞同期データ作成システムの文字選択領域の構成について詳細に説明する。図５に示すように、開始余剰領域１７ａ及び終了余剰領域１７ｂと、第１〜１３の文字選択領域１５ａ〜１５ｍとの間には、これらの領域の幅よりも狭い間隙を設けており、隣接する領域を誤ってタップすることを低減できるようにしている。さらにこのように構成したことによって、指先を開始余剰領域１７ａから終了余剰領域１７ｂに向かってスライドさせる場合、開始余剰領域１７ａの境界線Ｌ２を超えたときに、この歌詞同期データ作成システムでは、入力装置であるタッチパネル・ディスプレイ２９からの入力がなくなったと判断する。第１の文字選択領域１５ａまで到達すると、第１の文字選択領域１５ａにおいて、第１の文字１８ａを歌唱すべきタイミングに差し掛かったことを表示するための表示開始時刻Ｓ１の入力があったと判断し、第１の文字１８ａに対する表示時間情報の１つである開始時刻Ｓ１を一時的に記憶する。さらに、指先をスライドさせて、第１の文字選択領域１５ａから離脱すると、第１の文字１８ａを歌唱すべきタイミングが終わったことを表示するための終了時刻Ｅ１の入力があったと判断し、第１の文字１８ａに対する表示時間情報の１つである終了時刻Ｅ１を一時的に記憶する。なお、実際には、タッチパネル・ディスプレイ２９は、指先が文字選択領域内に位置している間、入力があることを示す信号を発し続けているが、本発明では、後述する図７に示す入力を行う場合を除いて、文字選択領域への到達時刻と文字選択領域からの離脱時刻のみが記憶対象となる。

さらに指先をスライドさせて、第２の文字選択領域１５ｂの境界線Ｓ２に達すると、第２の文字選択領域１５ｂにおいて、第２の文字１８ｂを歌唱すべきタイミングに差し掛かったことを表示するための表示開始時刻Ｓ２の入力があったと判断し、第１の文字１８ａに対する表示時間情報の１つである開始時刻Ｓ２を一時的に記憶する。以下同様に、第１３の文字選択領域１５ｍまで同様に入力することができる。したがって、再生中の音楽に合わせて図６に示すように指先をスライドさせて行くと、第１の文字選択領域１５ａの開始側境界線１５ａａに到達したときに開始時刻Ｓ１を一時的に記憶し、終了側境界線１５ａｂに到達したときに終了時刻Ｅ１を一時的に記憶する。同様に、第２の文字選択領域１５ｂの開始側境界線１５ｂａと終了側境界線１５ｂｂ、第３の文字選択領域１５ｃの１５開始側境界線ｃａと終了側境界線１５ｃｂ、並びに、第４の文字選択領域１５ｄの開始側境界線１５ｄａと終了側境界線１５ｄｂも指先が到達したときに、第２の文字１８ｂの開始時刻Ｓ２と終了時刻Ｅ２、第３の文字１８ｃの開始時刻Ｓ３と終了時刻Ｅ３、並びに、第４の文字１８ｄの開始時刻Ｓ４と終了時刻Ｅ４をそれぞれ一時的に記憶する。第５の文字１８ｅ以降の各文字についても同じである。これは、この実施の形態に係る歌詞同期データ作成システムの文字選択領域における特徴の１つである。

また、この実施の形態に係る歌詞同期データ作成システムでは、文字選択領域の非連続的な選択にも対応している。例えば、図７に示すように、第１の文字選択領域１５ａをタップした後に、第２の文字選択領域１５ｂ及び第３の文字選択領域１５ｃを飛ばして第４の文字選択領域１５ｄをタップすると、前述の時間情報記録手段は、第１の文字選択領域１５ａがタップされた時刻を第１の文字の開始時刻と終了時刻の中間時刻ｍ１とし、第４の文字選択領域１５ｄがタップされた時刻を第４の文字の開始時刻と終了時刻の中間時刻ｍ４として一時的に記憶する。そして、中間時刻ｍ４と中間時刻ｍ１との差分の時間（ｍ４−ｍ１）を選択した文字の順番（序列）の差３（＝４−１）で除した数値Δｔｓを算出する。そして、第２の文字１８ｂに対する中間時刻ｍ２としてｍ１＋Δｔｓ、第３の文字１８ｃに対する時刻ｍ３としてｍ２＋Δｔｓ、第４の文字１８ｄに対する中間時刻ｍ４としてｍ３＋Δｔｓを算出する。次に、この実施の形態に係る歌詞同期データ作成システムにおいて、作業者が設定している文字選択領域と、それに続く非選択領域（文字選択領域の間の領域）との時間比率を読み出す。この時間比率は、文字選択領域とそれに続く非選択領域を１組とし、これらに１単位時間を割り当て、その文字を歌唱すべきタイミングに差し掛かったことを表示している時間の長さと、次の文字の表示を行うまでのインターバルの時間の長さの比率である。すなわち、音楽の種類によっては、発声と発声との間に短いインターバルが繰り返し生じるものが少なくない。そこで、この実施の形態に係る歌詞同期データ作成システムでは、１単位時間に対して、その文字を歌唱すべきタイミングに差し掛かったことを表示している時間比率αを１．０〜０．５で設定できるようにしている。さらに、タッチパネル・ディスプレイ２９などの表示装置における、文字選択領域とそれに続く非選択領域の表示幅もこの時間比率を反映するように構成されている。例えば、時間比率αを１．０と設定すると、次の文字の表示を行うまでのインターバルの時間は０．０となる。つまり、文字選択領域の間の非選択領域は表示されず、文字選択領域が連接して表示された状態になる。また、時間比率αを０．５と設定すると、文字選択領域とそれに続く非選択領域との時間比率と表示幅の比率が０．５ずつとなり、文字選択領域と非選択領域とが同一幅で交互に表示された状態になる。なお、この時間比率は、１．０〜０．３で設定可能とするなど、他の比率にしてもよい。

Δｔｓと読み出した時間比率αとの積Δｔｓ＊αが第１、第２、第３及び第４の文字１８ａ、１８ｂ、１８ｃ及び１８ｄを歌唱すべきタイミングに差し掛かったことを表示している時間の長さとなる。そこで、中間時刻ｍ１から時間Δｔｓ＊α／２を遡った時刻がＳ１に相当する時刻となるので、この時刻を開始時刻Ｓ１として一時的に記憶する。また、中間時刻ｍ１から時間Δｔｓ＊α／２だけ経過した時刻が終了時刻Ｅ１に相当する時刻となるので、この時刻をＥ１として一時的に記憶する。その後、文字を選択していない時間、つまり非選択領域への割当時間Δｔｓ＊（１−α）を経過した時刻を第２の文字１８ｂの開始時刻Ｓ２とし、開始時刻Ｓ２から時間Δｔｓ＊αを経過した時刻を終了時刻Ｅ２とする。第３文字１８ｃの開始時刻Ｓ３及び終了時刻Ｅ３、並びに、第４の文字１８ｄの開始時刻Ｓ４及び終了時刻Ｅ４も同様に算出できるので、これらの時刻をすべて一時的に記憶する。なお、飛ばす文字選択領域が異なる場合にも同様の方法で算出する。したがって、この方法で入力した場合には、それぞれの文字の開始時刻及び終了時刻は実際に入力された時間ではなく、タップされた２つの時刻を利用して算出された同じ長さの時間を一律に割り当てるので、ラップなどのように歌詞の文字列をほぼ同じ時間間隔で歌唱するジャンルの音楽に好適と言える。なお、各文字における開始時刻及び終了時刻の算出方法は、別の計算式を用いてもよい。

以上のように、この実施の形態に係る歌詞同期データ作成システムにおいては、図６に示した方法と図７に示した方法の双方で表示時間情報を入力できる点に大きな特徴があるが、本発明においては、いずれか１つの方法のみを提供するものであってもよい。なお、この実施の形態に係る歌詞同期データ作成システムをデスクトップ・コンピュータに適用する場合には、主としてマウスによって入力するので、指先をスライドさせて入力するのではなく、各文字選択領域をマウスの左ボタンをクリックすることによって入力することになる。

図８は、本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける巻き戻し再生の説明図である。図８において用いた符号は、すべて図３と同じものを示す。

次に、この実施の形態に係る歌詞同期データ作成システムの巻き戻し機能について説明する。図８（ａ）に示すように、第１の文字選択領域１５ａから第１３の文字選択領域１５ｍまでの表示時間情報である時刻ｔ１からｔ１３をキャッシュメモリに一時的に記憶した後、終了余剰領域１７ｂをタップすると、前述のように、情報通信手段が歌詞同期データ管理サーバ３８の歌詞同期データベース３８ａに記憶させる。そうすると、タッチパネル・ディスプレイ１２の画面に、次の行の文字列である第１４の文字１８ｎから第２６の文字１８ｚまでの文字と、第１４の文字選択領域１５ｎから第２６の文字選択領域１５ｚまでを表示する。これらの文字を表示するのと同時に音楽データの再生が始まるが、前の行の最後の文字である第１３の文字１８ｍに対応する時刻ｔ１３から再生されるのではなく図８（ｂ）に示すように、時刻ｔ１３よりΔｔｎだけ遡った時刻から再生される。遡る時間であるΔｔｎは、歌詞同期データを作成する作業者が予め設定した時間（秒）であり、この実施の形態に係る歌詞同期データ作成システムでは、作業者がｔ０を超えて遡らない任意の秒数に設定でき、Δｔｎを０秒とすることもできる。このように構成することによって、作業者が精神的な余裕を持って第１４の文字１８ｎに対応する時刻ｔ１４を入力することができ、表示時間情報を精確に記録することが可能となる。

図９は、本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける修正（再入力）方法の説明図（１）である。図９において用いた符号は、すべて図３と同じものを示す。また、図１０は、本発明の第１の実施の形態に係る歌詞同期データ作成システムにおける修正（再入力）方法の説明図（２）である。図１０において用いた符号は、すべて図３と同じものを示す。

さらに、この実施の形態に係る歌詞同期データ作成システムの表示時間情報の修正（再入力）方法について説明する。図９（ａ）に示すように、指４０を第１３の文字選択領域１５ｍまでスライドさせて、第１３の文字１８ｍの時刻ｔ１３まで一時的に記憶させた後に、例えば図９（ｂ）に示すように、指４０を第６の文字選択領域１５ｆまでスライドさせると、時間情報記録手段は第１３の文字１８ｍの時刻ｔ１３から第６の文字１８ｆの時刻ｔ６までの一時的記憶を消去する。次に、図１０（ｃ）に示すように、指４０を第６の文字選択領域１５ｆから第１３の文字選択領域１５ｍまで再びスライドさせると、時間情報記録手段が時刻ｔ６から時刻ｔ１３までを一時的に記憶させる。図１０（ｄ）に示すように、指４０で終了余剰領域１７ｂをタップすると、修正がない場合と同様に時刻ｔ１から時刻ｔ１３までが歌詞同期データベース３８ａに記憶される。

図１３は、本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（１）である。また、図１４は、本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（２）である。さらに、図１５は、本発明の第１の実施の形態に係る歌詞同期データ作成システムの動作を示すフロー図（３）である。

さらに、この実施の形態に係る歌詞同期データ作成システムの主要な動作について説明する。なお、以下の説明は、タブレット・コンピュータ１１に関するものであるが、スマートフォン１０においても同様に動作する。まず、図１３に示すように、最初に１行目の文字列をタッチパネル・ディスプレイ１２の画面に表示する（Ｓ２）。そして、作業者が開始余剰領域１７ａをタップしたかどうかを判断し（Ｓ３）、タップされたときには音楽データを再生する（Ｓ４）。そして、第ｎの文字の開始時刻Ｓｎ又は終了時刻Ｅｎの入力があったら（Ｓ６）、その時点における再生開始からの時刻を時刻Ｓ１（ｎ＝１）として時間情報記録手段２４が一時記憶用メモリ２８に一時的に記憶させる（Ｓ７）。次の入力が連番となる文字のものか否か判断し（Ｓ８）、連番である場合にはＳ１０に進んでその文字の時刻を一時的に記憶する。連番でない場合には図１４（ａ）に進み、図７において説明した算出方法によって前述の１単位時間を算出し（Ｓ１８）、１単位時間から飛ばした文字の開始時刻と終了時刻を順次算出して一時的に記録して行く（Ｓ１９）。飛ばした全ての文字に対して記憶し終えたら（Ｓ２０）、さらに新たな文字に対する入力を判断するためにＳ８まで戻る。また、Ｓ１０の処理を終えた場合は、メモリ２０から行毎の文字数設定を読み出し（Ｓ１１）、その行の最後の文字に到達したか判断する（Ｓ１２）。

最後の文字に到達している場合には、終了余剰領域１７ｂに対する入力を待ち、最後の文字に到達していない場合にはＳ８に戻る（Ｓ１２）。次に、終了余剰領域１７ｂに対する入力があるかどうか判断し（Ｓ１３）、終了余剰領域１７ｂに対する入力がないままで、最後の文字よりも前の文字の開始時刻又は終了時刻に対する入力があるかどうか判断し（Ｓ２２）、入力があったときにはその時刻の一時的記憶を消去し、さらにその時刻よりも順番（序列）が後になる時刻があればそれも消去してＳ８に戻る（Ｓ２３）。Ｓ１３で終了余剰領域１７ｂに対する入力があったときには、情報通信手段２６を介してその行の全ての文字の時刻を歌詞同期データ管理サーバ３８に送り（Ｓ１４）、音楽データの再生を停止する（Ｓ１５）。次に、メモリ２０から最終行数を読み出し（Ｓ１６）、最終行数まで時刻の入力が終わったか判断し（Ｓ１７）、終わった場合には全ての処理を終了し、終わっていない場合には、次の行を表示し（Ｓ２５）、音楽の巻き戻し秒数を読み出す（Ｓ２６）。そして、開始余剰領域１７ａに対する入力があるかどうか判断し（Ｓ２７）、入力があった場合には、音楽データを設定されたところまで遡って再生し（Ｓ２８）、次の行における冒頭の文字の開始時刻又は終了時刻の入力があるかどうか判断し（Ｓ３０）、入力があった場合にはその時刻を記憶し（Ｓ３１）、さらにＳ８に戻る。

以上のように、本発明の歌詞同期データ作成システムは、再生開始から１行目の入力作業を終えるまでの経過時間を次の行の文字列に対する入力作業開始時にそのまま適用するのではなく、少し遡ったところから再生するので、作業者が次の行の最初の文字に対する入力を精神的な余裕を持って行うことができ、表示時間情報を精確に記録することが可能となる。また、歌詞データを構成する文字列の近傍に表示されている開始余剰領域を選択したときから音楽が再生されることによって、音楽データの再生開始時に歌詞データを構成する文字列から目を離すことがないので、表示時間情報を精確に記録することが可能となる。さらに、同じ文字を再度選択することによって、その文字に対する表示時間情報を消去されるので、修正作業を非常に容易に行うことができる。
できる。

本発明は以上に説明した内容に限定されるものではなく、例えば、開始余剰領域と終了余剰領域とのいずれか一方、又は、これらの双方を設けずに、操作アイコンとして開始余剰領域又は終了余剰領域に相当するものを設けてもよい。また、デスクトップ・コンピュータにおいて本発明の歌詞同期データ作成システムを適用する場合には、歌詞全てを改行なく表示するものとし、改行に関する機能を持たないシステムとしてもよい。くわえて、入力はタッチペンや顎などを使ってもよい。このように、各請求項に記載した範囲を逸脱しない限りにおいて種々の変形を加えることが可能である。

１０ スマートフォン
１１ タブレット・コンピュータ
１２ タッチパネル・ディスプレイ
１３ 文字列
１４ 表示範囲
１５ａ 第１の文字選択領域
１５ａａ 開始側境界線
１５ａｂ 終了側境界線
１５ｂ 第２の文字選択領域
１５ｂａ 開始側境界線
１５ｂｂ 終了側境界線
１５ｃ 第３の文字選択領域
１５ｃａ 開始側境界線
１５ｃｂ 終了側境界線
１５ｄ 第４の文字選択領域
１５ｄａ 開始側境界線
１５ｄｂ 終了側境界線
１５ｅ 第５の文字選択領域
１５ｆ 第６の文字選択領域
１５ｇ 第７の文字選択領域
１５ｈ 第８の文字選択領域
１５ｉ 第９の文字選択領域
１５ｊ 第１０の文字選択領域
１５ｋ 第１１の文字選択領域
１５ｌ 第１２の文字選択領域
１５ｍ 第１３の文字選択領域
１５ｎ 第１４の文字選択領域
１５ｏ 第１５の文字選択領域
１５ｐ 第１６の文字選択領域
１５ｑ 第１７の文字選択領域
１５ｒ 第１８の文字選択領域
１５ｓ 第１９の文字選択領域
１５ｔ 第２０の文字選択領域
１５ｕ 第２１の文字選択領域
１５ｖ 第２２の文字選択領域
１５ｗ 第２３の文字選択領域
１５ｘ 第２４の文字選択領域
１５ｙ 第２５の文字選択領域
１５ｚ 第２６の文字選択領域
１６ 操作アイコン
１７ａ 開始余剰領域
１７ｂ 終了余剰領域
１８ａ 第１の文字
１８ｂ 第２の文字
１８ｃ 第３の文字
１８ｄ 第４の文字
１８ｅ 第５の文字
１８ｆ 第６の文字
１８ｇ 第７の文字
１８ｈ 第８の文字
１８ｉ 第９の文字
１８ｊ 第１０の文字
１８ｋ 第１１の文字
１８ｌ 第１２の文字
１８ｍ 第１３の文字
１８ｎ 第１４の文字
１８ｏ 第１５の文字
１８ｐ 第１６の文字
１８ｑ 第１７の文字
１８ｒ 第１８の文字
１８ｓ 第１９の文字
１８ｔ 第２０の文字
１８ｕ 第２１の文字
１８ｖ 第２２の文字
１８ｗ 第２３の文字
１８ｘ 第２４の文字
１８ｙ 第２５の文字
１８ｚ 第２６の文字
２０ メモリ
２１ 再生手段
２２ 表示手段
２３ 表示文字数設定手段
２４ 時間情報記録手段
２５ 巻き戻し設定手段
２６ 情報通信手段
２７ ＣＰＵ
２８ 一時記憶用メモリ
２９ タッチパネル・ディスプレイ
３０ 通信装置
３１ａ 第１の文字選択領域
３１ｂ 第２の文字選択領域
３１ｃ 第３の文字選択領域
３１ｄ 第４の文字選択領域
３２ａ 第１の文字選択マーク線
３２ｂ 第２の文字選択マーク線
３２ｃ 第３の文字選択マーク線
３２ｄ 第４の文字選択マーク線
３３ 操作アイコン
３４ａ 第１の非選択領域
３４ｂ 第２の非選択領域
３４ｃ 第３の非選択領域
３４ｄ 第４の非選択領域
３４ｅ 第５の非選択領域
３５ａ 第１の文字選択領域
３５ｂ 第２の文字選択領域
３５ｃ 第３の文字選択領域
３５ｄ 第４の文字選択領域
３６ 無線通信網
３７ インターネット
３８ 歌詞同期データ管理サーバ
３８ａ 歌詞同期データベース
３９ａ 第１の文字
３９ｂ 第２の文字
３９ｃ 第３の文字
３９ｄ 第４の文字
４０ 指

Claims (2)

1. 音楽データを再生する再生手段と、表示装置の画面に歌詞データを表示する表示手段と、前記再生手段が前記音楽データを再生し、かつ、前記表示手段が前記歌詞データを表示しているときに、入力装置において入力があると、表示している前記歌詞データを前記音楽データに同期させるための時間情報を記録する時間情報記録手段を備えた歌詞同期データ作成システムであって、
   前記表示手段は、前記画面に、前記歌詞データを冒頭の文字からあらかじめ指定された範囲内の文字数の文字列に区切って順次表示し、
   前記再生手段は、前記表示手段が次の文字列を表示したときに、前記音楽データの前記文字列に対応する部分より指定秒数遡ったところから再生することを特徴とする歌詞同期データ作成システム。
2. 前記時間情報記録手段は、前記入力装置において、前記画面に表示されている前記文字列の中の特定の文字を選択したことを示す選択入力があったときに、該選択入力があった時刻から前記音楽データの再生開始からの経過時間を算出し、該経過時間を前記特定の文字に対応する表示時間情報として記録すると共に、前記特定の文字を再び選択したことを示す再選択入力があったときに、前記特定の文字に対応する前記表示時間情報、及び、前記特定の文字への前記選択入力の後に選択された文字に対応する表示時間情報を消去することを特徴とする請求項１に記載の歌詞同期データ作成システム。

Images