JP4656780B2 - Information input distribution system - Google Patents

Information input distribution system Download PDF

Info

Publication number
JP4656780B2
JP4656780B2 JP2001270324A JP2001270324A JP4656780B2 JP 4656780 B2 JP4656780 B2 JP 4656780B2 JP 2001270324 A JP2001270324 A JP 2001270324A JP 2001270324 A JP2001270324 A JP 2001270324A JP 4656780 B2 JP4656780 B2 JP 4656780B2
Authority
JP
Japan
Prior art keywords
information
input
distribution
processing server
conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001270324A
Other languages
Japanese (ja)
Other versions
JP2003085057A (en
Inventor
清 田中
明人 阿久津
佳伸 外村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2001270324A priority Critical patent/JP4656780B2/en
Publication of JP2003085057A publication Critical patent/JP2003085057A/en
Application granted granted Critical
Publication of JP4656780B2 publication Critical patent/JP4656780B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Communication Control (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は,時々刻々と変化する情報を入力し,配信する情報入力配信システムに関するものであり,特にライブ会場の状況を示す情報を入力し配信するための入力システムとして利用可能であり,さらにライブ中継での現場の状況情報を配信映像のインデクスとして入力し配信するシステムとしても利用可能なものである。
【0002】
【従来の技術】
従来のこの種の情報入力配信システムは,情報入力装置と配信サーバとから構成されており,配信する情報は,情報入力装置での入力時に決定されていた。
【0003】
図8は,従来の情報入力配信システムの構成図である。情報入力装置100は,入力源からの情報を入力する装置であり,端末として配置されることもある。情報入力装置100への入力は通常,決まったフォーマットに従い,そのフォーマット通りに情報入力が行われる。例えば,特定の文字配列によるフォーマット化やXML(extensible markup language)などの記述言語を用いたフォーマット化が用いられる。入力された情報は,配信サーバ200へ送られる。配信サーバ200は,情報を利用する利用者のクライアントへ配信するサーバであり,入力されるフォーマット済情報を配信する。
【0004】
【発明が解決しようとする課題】
従来のライブ情報等の情報入力配信システムは,配信するための情報をそのまま入力していたので,入力する情報と配信する情報が同じである必要があった。そのため,入力者は型通りの入力しかできなかった。また,画像,音声,文字など,種類の異なる情報を同じシステムで入力することはできなかった。
【0005】
入力する情報と配信する情報とが対応しているため,複数の入力者が同じ対象に関する情報を入力することはなかった。したがって,複数の情報が入力されるときの処理は存在しなかった。
【0006】
また,入力情報に誤りがある場合,情報の正否を判定する手段が存在しなかった。さらに,現在配信されている情報を入力者が確認する手段が存在しなかった。
【0007】
本発明は,ライブ情報等の情報入力配信システムにおいて,柔軟性,融通性,さらに確実性のある情報の入力・配信を可能にする手段を提供することを目的とする。
【0008】
【課題を解決するための手段】
図1は,本発明による情報入力配信システムの基本的なシステム構成を示した図である。以下,図1を用いて本発明の概要を説明する。図1で,1−1,1−2,…,1−nは情報入力クライアント,2は入力情報処理サーバ,3は配信サーバ,4−1,4−2,…,4−mは利用者端末を表す。
【0009】
情報入力クライアント1−1,…,1−nは,入力源からの情報を入力する装置であり,入力端末として配置されることもある。情報入力クライアント1−1,…,1−nから入力される情報は,そのまま,入力情報処理サーバ2へ送られる。入力情報処理サーバ2は,入力された情報を配信できる情報の形式に加工する。加工された情報は,配信サーバ3から情報を利用するクライアントである利用者端末4−1,…,4−mへ配信される。また,情報入力クライアント1−1,…,1−nは,配信サーバ3から配信される情報を取得し,配信されている情報を入力者へ提示する。
【0010】
入力情報処理サーバ2は,複数の情報変換アルゴリズムと複数の情報の変換用テーブルとを持つことができ,この場合には,選択された情報変換アルゴリズムと情報の変換用テーブルとを用いて入力された情報を変換する。また,入力情報処理サーバ2は,複数の情報入力クライアント1−1,…,1−nから入力される情報を集約する手段,入力情報の誤りを検出する手段,入力情報の誤りを訂正する手段を備える。
【0011】
本発明では,情報入力クライアント1と配信サーバ3との間に,入力情報処理サーバ2が存在する。これにより,情報入力クライアント1で入力される情報と配信サーバ3が配信する情報の形式が異なっていても,入力情報処理サーバ2が情報の形式を変換し,問題なく入力と配信とを遂行することができる。したがって,入力情報処理サーバ2が,情報を変換できる範囲内で,入力者が自由な形式で情報入力をすることが可能となる。また,画像,音声,文字などの種類の異なる情報も入力情報処理サーバ2が形式を変換して,配信する情報に加工するので,同じシステムで入力することが可能である。
【0012】
また,複数の情報入力クライアント1から情報が入力されても,入力情報処理サーバ2が,複数の情報を集約したり,多数決処理することが可能であり,複数の情報入力に対して対応が可能となる。複数の情報を集約するとは,互いに不足する情報を補ったりして一つの情報にまとめることなどをいう。
【0013】
さらに,入力情報処理サーバ2が入力される情報の誤り検出や誤り訂正をすることが可能であるため,入力情報の正否を判定することが可能である。
【0014】
また,配信サーバから配信されている情報を情報入力クライアント1へ入力し,その情報を入力者へ提示することができるので,入力者は配信されている情報を知ることができ,その結果入力しなければならない情報を見つけ出し,その入力をすることが可能となる。さらにその際に入力者が配信情報に誤りを見つけ,当該情報を訂正することも可能である。
【0015】
【発明の実施の形態】
図2は,本発明の実施の形態に係る情報入力配信システムの構成図である。図中,図1と同符号のものは図1に示すものに対応する。11は情報送信器,12は情報入力器であり,各情報入力クライアント1−1,…,1−nに設けられる。13〜15は入力源の例を示し,13はキーボードやマウスなどの人手による入力インタフェース,14は音声を入力するマイクロホン,15は画像を入力するカメラである。
【0016】
入力情報処理サーバ2は,受信器21,解析器22,記述生成器23,送信器24,解析用データベース(DB)25,記述定義データベース(DB)26,記述データベース(DB)27を持つ。
【0017】
5はネットワークであり,例えばインターネット,電話回線などである。情報入力クライアント1,入力情報処理サーバ2,配信サーバ3,利用者端末4は,それぞれ同一または異なるネットワークで接続される。利用者端末4は,配信サーバ3が配信する情報を無線放送により受信するような端末でもよい。
【0018】
図2を用いて,情報入力クライアント1−1から入力された情報を入力情報処理サーバ2が配信する記述に変換して,それを複数のクライアントへ情報配信する配信サーバ3へ送信する動作について説明する。
【0019】
まず,情報入力クライアント1−1で,情報入力器12は入力源13,14,15から入力される情報を受け取る。キーボードやマウスなどの入力インタフェース13は,人手によって情報を入力する入力源の例である。ここでの入力方法は,自然言語による文字入力であってもよく,また,GUI(Graphical User Interface)を用いて,入力する状況に一番近いものを複数の選択肢から選択するボタンやリストなどによる選択形式の入力であっても構わない。
【0020】
ボタンとリストによる入力GUIの例を図3に示す。図3において,加算ボタン50は得点を加算するボタン,減算ボタン51は得点を減算するボタンで,これらの押下によって得点の数値を上下することができる。リスト52は,時刻を選択するリスト,リスト53は,イベントを選択するリストである。また,ボタン54は,特定の選手を選択するボタンであり,ボタン55は,入力した情報を入力情報処理サーバ2へ送信するかキャンセルするかを指定するボタンである。このGUIのためのスクリプト等は,あらかじめ情報入力クライアント1−1が持つものでよく,入力情報処理サーバ2から情報入力クライアント1−1に送付したものでもよい。
【0021】
また,入力源として,マイクロホン14から音声を入力することもできる。音声による情報としては,人が言葉を発する場合にはその音声波形を用いたり,ライブ会場での観客の歓声の大きさを計る場合には音声レベルを用いたりする。
【0022】
さらに,入力源としてカメラ15で動画像や静止画像を入力し,それらから情報を取得してもよい。カメラ15で入力される情報には,例えばライブ会場の映像そのものや,野球でストライク,ボールの判定時には主審の腕の動きを映すなど,特定の意図を持ってカメラワークされた一連のカメラ映像などがある。また,状況を示す絵や言葉が書かれた説明ボードをカメラに提示し,静止画像として入力する場合もある。
【0023】
入力源として複数のメディアを組み合わせることもでき,これらを情報入力クライアント1−1側で任意に選択できるようにすることも可能である。図4は,情報入力クライアントにおける入力方法の設定画面の例を示す。図4の入力方法の設定画面において,ボタン60は,文字テキスト,音声,画像などの入力源の種類を選択するボタンである。これらの各入力源に対して,リスト61から情報変換アルゴリズムを選択することもできる。情報変換アルゴリズムの指定がない場合には,入力情報処理サーバ2においてあらかじめディフォルトとして定められた入力源ごとの情報変換アルゴリズムが用いられる。
【0024】
入力源として文字テキストが選択された場合,キーボードなどの入力インタフェース13から文字テキスト入力画面63に入力された文字テキストが入力情報処理サーバ2へ送信される。入力情報が入力情報処理サーバ2へ送信される場合,入力源の種類を示す情報と選択された情報変換アルゴリズムの情報とが,例えば入力情報のヘッダ部に付加されて送信される。なお,図4は自由フォーマットの入力例であるが,他に電子メールを利用した入力,WWWの電子掲示板を利用した入力などを用いることもできる。また,図3で説明したように,所定のGUIを利用した入力も可能であることは前述したとおりである。
【0025】
以上のようにして,情報入力クライアント1−1において情報入力器12に入力された情報は,情報送信器11に送られ,情報送信器11は,ネットワーク5を通して入力情報処理サーバ2の受信器21へ転送する。ここでネットワーク5は,例えばワイヤレスLANとインターネットを組み合わせたものであったり,PHSと電話網を経由した電話回線であったり,あるいは携帯電話のiモードとインターネットを組み合わせたものであったりしてよく,無線と有線を組み合わせたものであってもよい。もちろん,無線だけであっても,有線だけであってもよい。
【0026】
入力情報処理サーバ2の受信器21へは,一つもしくは複数の情報入力クライアント1−1,1−2,…,1−nからの情報が入力される。
【0027】
入力情報処理サーバ2の受信器21に入力された情報は,解析器22に送られる。解析器22では,入力された情報を解析するためのアルゴリズムと情報の変換用テーブルを解析用DB25から取り出す。取り出されるのは,形態素解析アルゴリズムと抽出する情報テーブルの組,音声データのフォーマット解析アルゴリズムと抽出する情報テーブルのリストの組,画像認識のためのアルゴリズムと画像から認識する情報テーブルの組などである。
【0028】
図5に,解析用DBの内容の例を示す。解析用DB25には,入力情報種別に応じた各種の情報変換アルゴリズムと,情報変換に用いる情報テーブルの組の情報が格納されている。複数の情報変換アルゴリズムを組み合わせて用いることもでき,複数の情報変換アルゴリズムが同じ情報テーブルを利用するような組み合わせも可能である。解析器22が利用する情報変換アルゴリズムは,入力情報種別に応じて入力情報処理サーバ2が一意に決定する方法,情報入力クライアント1−1,…,1−nがそれぞれ図4に示したような入力設定画面から指定したものを利用する方法,入力情報処理サーバ2から情報入力クライアント1−1,…,1−nへ送信した図3に示すGUIのようなインタフェースに応じて決定する方法などがある。一般には,配信サーバ3が利用者端末4−1,…,4−mによって配信する情報に応じて利用する情報変換アルゴリズムまたは情報テーブルが変更されるが,図5に示すような解析用DB25を,サッカー,野球,音楽演奏,…というような配信情報の内容に応じて,複数用意しておいてもよい。
【0029】
また,複数の情報入力クライアント1−1,…,1−nから情報が入力される場合,それらの情報に矛盾があるときに多数決を用いて記述を決定するためのアルゴリズムなども解析用DB25に蓄えられている。解析器22は,これらのアルゴリズムとテーブルを用いて,入力された情報が何であるのかを判定する。
【0030】
例えば,サッカーの試合会場から入力された情報が自然言語の文字列であり,「中田がフリーキックをした」というものであったとき,解析用DB25からは,形態素解析アルゴリズム(プログラム)とサッカーにおける情報テーブルが解析器22へ読み込まれる。解析器22では,読み込まれた形態素解析アルゴリズムと情報テーブルを用いて形態素解析を行い,サッカーでの情報であるプレイヤーが「中田」であり,動作が「フリーキック」であるという情報を得る。
【0031】
また,入力された情報が,例えば文字を書かれたボードの画像であったとき,解析用DB25からは画像認識用アルゴリズムと情報テーブルが解析器22へ読み込まれる。情報テーブルには,例えばボードに書かれる文字列のリストが記述されている。解析器22では,例えば入力された画像を用いて文字認識を行い,入力された文字列を得て,情報テーブルの文字列と参照し,選手名や起こったイベント名を得る。
【0032】
例えば,入力された情報としてカメラワークされた動画像であったとき,解析用DB25からは,画像認識用アルゴリズムと情報テーブルが解析器22へ読み込まれる。例えば,画像認識用アルゴリズムには,オプティカルフロー検出アルゴリズムが,情報テーブルには審判の動作パターンとイベントの組が記述されている。解析器22では,動画像中から審判の動き認識を行って,入力された審判の動作パターンを得,得られた動作パターンを情報テーブルを用いてイベント名に変換する。
【0033】
また,入力された情報が音声であったとき,解析用DB25からは音声認識用アルゴリズムと情報テーブルが解析器22へ読み込まれる。解析器22では,音声認識用アルゴリズムに従って音声認識を行い,情報テーブルに記載された選手の名前と照合して選手名を得る。
【0034】
別の情報として,音声レベルそのものを盛り上がり度として定義して配信する場合には,解析用DB25からは音声レベルを分析するアルゴリズムと数値レベルを配信する数値情報と対応させる情報テーブルを解析器22へ読み込み,解析器22は音声レベルを分析して,分析結果を情報テーブルと照合し,配信する数値情報を決定する。
【0035】
さらに別の例として,入力に誤りがあった場合について説明する。「中田がフリーキッキをした」という文字入力があった場合,解析用DB25からは,形態素解析アルゴリズムとサッカーにおける情報テーブルが解析器22へ読み込まれる。このとき,解析器22では形態素解析を行った後,情報テーブルを参照するが,サッカーでの動作に「フリーキッキ」は存在しない。そこで,解析器22では,情報の入力誤りがあったと判定する。その後の動作として,誤った情報を捨てるようにしても構わないし,「フリーキッキ」に最も近い語である「フリーキック」が入力されたと判定し,サッカーでの情報であるプレイヤーが「中田」であり,動作が「フリーキック」であるという情報を得る場合もある。
【0036】
さらに,別の例として複数の情報入力クライアント1−1,…,1−nから入力される情報が矛盾するときには,多数決によるアルゴリズムを解析器22が解析用DB25から読み出し,多数決による解決を図る。例えば,ある一定の時間に「中田がフリーキックした」という情報が2件と,「中田がゴールキックした」という情報が1件入力された場合,同じ選手がフリーキックとゴールキックはできないという矛盾が生じるので,多数決により,「中田がフリーキックした」という情報が優先され,解析結果としてはプレイヤーが「中田」であり,動作が「フリーキック」であるという情報を得る。
【0037】
解析器22が解析した結果は,記述生成器23へ送られる。記述生成器23は,入力情報処理サーバ2から配信サーバ3へ出力する記述形式を記述定義DB26から取り出す。記述生成器23は,入力された情報を配信情報の形式に合った記述に当てはめる。
【0038】
記述形式としては,例えばXML(extensible markup language)があり,タグで記述される。それぞれのタグにはタグの中身の意味に当たる単語が記述でき,例えばサッカー中継の情報配信に用いられるXMLで<player>タグで囲まれた部分には選手の名前を,<action>タグで囲まれた部分には動作の種類を入れるなどの定義ができる。その記述定義は,XMLスキーマやDTD(Document Type Definition)といったもので行われる。
【0039】
ここで,情報が例えばプレイヤーが「中田」で動作が「フリーキック」であって,XMLで記述した場合の例を図6に示す。記述生成器23は,図6に示すように,XML記述の<player>タグ中の文字列を「中田」,<action>タグ中の文字列を「フリーキック」と決定すればよい。
【0040】
記述生成器23により生成された記述は,記述DB27に蓄えられる。記述DB27は,クライアントへ送信する単位の情報を,送信器24の要求に基づき送信器24へ送る。送信器24は,ネットワーク5を通して,配信サーバ3へ情報の記述を送る。配信サーバ3からは,情報利用者のクライアントである一般の利用者端末4−1,…,4−mへ情報が配信される。ここで,送信器24が配信サーバ3の機能を包含していても構わない。その場合,送信器24が直接情報利用者のクライアントへ情報を配信する。
【0041】
また,情報入力クライアント1−1,1−2,…,1−nは,現在配信サーバ3から配信されている情報を受けることにより,最新の配信情報を把握することも可能である。これにより,例えば図3に示すようなボタンとリストによるGUIで情報入力器12のユーザインタフェースが構成されているとき,配信情報を入力者に提示することによって,現場の状況との不一致を入力者に的確に把握させ,修正を早期に行わせることができる。
【0042】
また,複数の情報入力クライアント1−1,…,1−nから情報が入力されている場合,他の情報入力クライアントから入力された情報を把握でき,自ら入力しなければいけない情報が把握できる。特に,図3のような入力を簡便にするユーザインタフェースを作成した場合には,現在の配信情報から,各チームの点数を表示し,入力のディフォルト値とすることにより,点数が入ったときに1つだけ加算ボタン50を押すことで点数入力が可能となる。また,点数の表示部に入力者が誤りを発見したとき,加算ボタン50あるいは減算ボタン51を押して,訂正を簡易な操作で行うことが可能となる。
【0043】
図7は,図2に示す入力情報処理サーバ2の処理フローチャートである。ステップS1では,情報入力クライアント1からの入力情報を待つ。情報入力クライアント1からの入力情報を受信したならば,ステップS2において,利用する情報変換アルゴリズムと情報テーブルを選択する。情報変換アルゴリズムと情報テーブルは,例えばサッカー中継,野球中継というような配信サーバ3が配信する情報に応じて入力情報処理サーバ2があらかじめ定めたものでもよいし,受信した入力情報が文字であるか音声であるか静止画像または動画像であるかなどによって選択してもよいし,入力情報の送信元の情報入力クライアント1が指定したものを選択してもよい。
【0044】
ステップS3では,選択した情報変換アルゴリズム(プログラム)と,情報テーブルを解析DB25から読み込む。複数の情報変換アルゴリズムおよび複数の情報テーブルを組み合わせて利用することもできる。情報テーブルは,一般には選手名,イベント名,得点といった入力対象となる項目に関する情報の一覧表であるが,必ずしもこれらに限られるわけではなく,情報変換アルゴリズムに応じて任意のテーブルを用いることができる。
【0045】
ステップS4では,読み込んだ情報変換アルゴリズムと情報テーブルとを用いて入力情報を解析する。ここで情報変換アルゴリズムに応じて,形態素解析,音声認識,音声レベル分析,文字認識,画像認識などを行い,情報テーブルから該当する解析結果の情報を取得する。
【0046】
ステップS5では,誤り検出を行うかどうか,また誤り検出を行う場合には,入力情報を解析した結果に誤りがあったかどうかを判定する。例えば情報テーブルから該当する解析結果が得られなかった場合に誤りがあると判断する。また,複数の情報入力クライアント1−1,…,1−nからの入力情報に矛盾があった場合には,誤りがあると判断する。
【0047】
ステップS6では,入力情報の解析結果に誤りがあった場合に,それを自動訂正するかどうかを判定する。訂正しない場合には,解析結果にその旨の表示を行い,ステップS8へ進む。または,入力情報を棄却して,次の入力情報の受信を待つ。
【0048】
ステップS7では,ステップS6において自動訂正すると判断された場合に,解析した結果に最も近い情報テーブル中の情報を選択するなどの誤り訂正を行う。また,複数の情報入力クライアント1−1,…,1−nからの入力情報の多数決論理で最も数の多い解析結果を選択することによって誤りを訂正することもできる。
【0049】
ステップS8では,記述定義DB26から配信する情報の記述形式に関する情報を読み出す。この記述形式は,あらかじめ記述定義DB26に複数種類用意しておき,例えば中継内容などによってどの記述形式を用いるかを選択するようにしてもよい。
【0050】
ステップS9では,入力情報の解析結果について,記述定義DB26から読み出した記述形式に従って配信する情報の記述を生成する。なお,情報変換アルゴリズムがフォーマット済の記述生成機能を持つ場合には,ステップS8,S9の処理を省略し,ステップS4またはS7の結果をそのまま配信する情報としてもよい。
【0051】
ステップS10では,生成した記述を配信サーバ3へ送信する。ここで,複数の情報入力クライアント1−1,…,1−nからの入力情報を集約する必要がある場合には,入力情報から得た記述をまとめて配信サーバ3へ送信する。この集約処理は,ステップS4の入力情報の解析時に行ってもよい。配信サーバ3へ送信された情報は,配信サーバ3から利用者端末4−1,…,4−mへ配信されるとともに,情報入力クライアント1−1,…,1−nへも配信される。利用者端末4または情報入力クライアント1において所定のフォーマットに従って配信された情報を表示出力する方法は,利用者端末4等のブラウザその他のアプリケーションプログラムに依存する。配信する情報の提示方法は,利用者端末4と情報入力クライアント1とで同じであっても異なっていてもよい。また,配信サーバ3から利用者端末4へ配信する情報は,利用者端末4において,ライブ中継などの配信映像のインデクスとしての利用も可能である。
【0052】
ステップS11では,情報配信の終了指示があったかどうかを判定し,継続する場合には,ステップS1から同様に処理を繰り返す。終了指示があれば処理を終了する。
【0053】
【発明の効果】
以上のように,本発明によれば,情報入力クライアントと配信サーバとの間に,入力情報処理サーバが存在し,情報入力クライアントで入力される情報を,入力情報処理サーバが形式変換するので,入力される情報と配信サーバが配信する情報の形式が異なっていても問題なく,入力情報処理サーバが形式を変換できる範囲内で,入力者が自由な形式で情報入力をすることが可能となる。
【0054】
また,複数の情報入力クライアントから情報が入力されても,入力情報処理サーバが,複数の情報を集約したり,多数決処理することが可能であり,複数の情報入力に対して対応が可能となる。
【0055】
さらに,入力情報処理サーバが入力される情報の誤り検出や誤り訂正をすることが可能であるため,入力情報の正否を判定することが可能となる。また,配信サーバから配信されている情報を情報入力クライアントへ入力し,その情報を入力者へ提示することができるので,入力者に入力すべき情報や配信情報の誤りを見つけさせ,さらなる情報入力を促すことも可能となる。
【図面の簡単な説明】
【図1】本発明による情報入力配信システムの基本的なシステム構成を示した図である。
【図2】本発明の実施の形態に係る情報入力配信システムの構成図である。
【図3】本発明の実施の形態における入力インタフェースの例を示した図である。
【図4】情報入力クライアントにおける入力方法の設定画面の例を示した図である。
【図5】解析用DBの内容の例を示した図である。
【図6】本発明の実施の形態における配信記述の例を示した図である。
【図7】入力情報処理サーバの処理フローチャートである。
【図8】従来の情報入力配信システムの構成図である。
【符号の説明】
1−1,1−2,…,1−n 情報入力クライアント
2 入力情報処理サーバ
3 配信サーバ
4−1,4−2,…,4−m 利用者端末
5 ネットワーク
11 情報送信器
12 情報入力器
13 人手による入力インタフェース
14 マイクロホン
15 カメラ
21 受信器
22 解析器
23 記述生成器
24 送信器
25 解析用DB
26 記述定義DB
27 記述DB
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information input / distribution system that inputs and distributes information that changes from moment to moment, and is particularly usable as an input system for inputting and distributing information indicating the status of a live venue. It can also be used as a system that inputs and distributes situation information on the site as a distribution video index.
[0002]
[Prior art]
A conventional information input / distribution system of this type includes an information input device and a distribution server, and information to be distributed is determined at the time of input by the information input device.
[0003]
FIG. 8 is a configuration diagram of a conventional information input distribution system. The information input device 100 is a device for inputting information from an input source, and may be arranged as a terminal. Input to the information input device 100 is normally performed according to a predetermined format according to the format. For example, formatting using a specific character arrangement or formatting using a description language such as XML (extensible markup language) is used. The input information is sent to the distribution server 200. The distribution server 200 is a server that distributes to the client of the user who uses the information, and distributes the formatted information that is input.
[0004]
[Problems to be solved by the invention]
The conventional information input / distribution system such as live information inputs the information for distribution as it is, so that the information to be input and the information to be distributed need to be the same. Therefore, the input person could only input according to the pattern. Also, it was not possible to input different types of information such as images, sounds, and characters using the same system.
[0005]
Since the information to be input corresponds to the information to be distributed, a plurality of input persons did not input information on the same target. Therefore, there is no processing when a plurality of pieces of information are input.
[0006]
In addition, when there is an error in the input information, there is no means for determining whether the information is correct. Furthermore, there was no means for the input person to confirm the information currently distributed.
[0007]
An object of the present invention is to provide means for enabling input / distribution of information with flexibility, flexibility, and certainty in an information input / distribution system such as live information.
[0008]
[Means for Solving the Problems]
FIG. 1 is a diagram showing a basic system configuration of an information input distribution system according to the present invention. The outline of the present invention will be described below with reference to FIG. In FIG. 1, 1-1, 1-2,..., 1-n are information input clients, 2 is an input information processing server, 3 is a distribution server, 4-1, 4-2,. Represents a terminal.
[0009]
The information input clients 1-1,..., 1-n are devices that input information from an input source, and may be arranged as input terminals. Information input from the information input clients 1-1,..., 1-n is sent to the input information processing server 2 as it is. The input information processing server 2 processes the input information into an information format that can be distributed. The processed information is distributed from the distribution server 3 to user terminals 4-1,..., 4-m, which are clients that use the information. Further, the information input clients 1-1,..., 1-n acquire information distributed from the distribution server 3, and present the distributed information to the input person.
[0010]
The input information processing server 2 can have a plurality of information conversion algorithms and a plurality of information conversion tables. In this case, the input information processing server 2 is input using the selected information conversion algorithm and the information conversion table. Convert information. Further, the input information processing server 2 includes means for aggregating information input from a plurality of information input clients 1-1,..., 1-n, means for detecting input information errors, and means for correcting input information errors. Is provided.
[0011]
In the present invention, the input information processing server 2 exists between the information input client 1 and the distribution server 3. As a result, even if the information input by the information input client 1 and the format of information distributed by the distribution server 3 are different, the input information processing server 2 converts the information format and performs input and distribution without any problem. be able to. Therefore, it is possible for the input information input server 2 to input information in a free format as long as the input information processing server 2 can convert the information. Also, different types of information such as images, sounds, and characters can be input in the same system because the input information processing server 2 converts the format and processes the information to be distributed.
[0012]
In addition, even if information is input from a plurality of information input clients 1, the input information processing server 2 can aggregate a plurality of information or perform majority processing, and can handle a plurality of information inputs. It becomes. Aggregating a plurality of pieces of information means making up a piece of information by making up for missing information.
[0013]
Furthermore, since the input information processing server 2 can detect and correct errors in the input information, it is possible to determine whether the input information is correct.
[0014]
Also, since information distributed from the distribution server can be input to the information input client 1 and the information can be presented to the input person, the input person can know the information being distributed and input the result. It is possible to find out information that must be entered and input it. Further, at that time, the input person can find an error in the distribution information and correct the information.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 2 is a configuration diagram of the information input distribution system according to the embodiment of the present invention. In the figure, the same reference numerals as those in FIG. 1 correspond to those shown in FIG. Reference numeral 11 denotes an information transmitter, and reference numeral 12 denotes an information input device, which is provided in each information input client 1-1,. 13 to 15 show examples of input sources, 13 is a manual input interface such as a keyboard and mouse, 14 is a microphone for inputting sound, and 15 is a camera for inputting images.
[0016]
The input information processing server 2 has a receiver 21, an analyzer 22, a description generator 23, a transmitter 24, an analysis database (DB) 25, a description definition database (DB) 26, and a description database (DB) 27.
[0017]
Reference numeral 5 denotes a network, such as the Internet or a telephone line. The information input client 1, the input information processing server 2, the distribution server 3, and the user terminal 4 are connected by the same or different networks. The user terminal 4 may be a terminal that receives information distributed by the distribution server 3 by wireless broadcasting.
[0018]
The operation of converting information input from the information input client 1-1 into a description to be distributed by the input information processing server 2 and transmitting it to the distribution server 3 for distributing information to a plurality of clients will be described with reference to FIG. To do.
[0019]
First, in the information input client 1-1, the information input device 12 receives information input from the input sources 13, 14, and 15. The input interface 13 such as a keyboard and a mouse is an example of an input source for inputting information manually. The input method here may be a natural language character input, or by using a GUI (Graphical User Interface), a button or list for selecting the closest to the input situation from a plurality of options It may be a selection type input.
[0020]
An example of an input GUI using buttons and a list is shown in FIG. In FIG. 3, an addition button 50 is a button for adding a score, and a subtraction button 51 is a button for subtracting a score. By pressing these buttons, the numerical value of the score can be increased or decreased. A list 52 is a list for selecting a time, and a list 53 is a list for selecting an event. The button 54 is a button for selecting a specific player, and the button 55 is a button for designating whether the input information is transmitted to the input information processing server 2 or cancelled. The script or the like for the GUI may be previously stored in the information input client 1-1 or may be sent from the input information processing server 2 to the information input client 1-1.
[0021]
Further, voice can be input from the microphone 14 as an input source. As voice information, the voice waveform is used when a person utters a word, or the voice level is used when the audience cheers at the live venue are measured.
[0022]
Further, a moving image or a still image may be input with the camera 15 as an input source, and information may be acquired from them. Information input by the camera 15 includes, for example, a video of a live venue itself, a series of camera images that are camera-worked with a specific intention, such as a baseball strike or a ball movement when the referee's arm moves. There is. In some cases, an explanation board on which pictures and words indicating the situation are written is presented to the camera and input as a still image.
[0023]
A plurality of media can be combined as input sources, and these can be arbitrarily selected on the information input client 1-1 side. FIG. 4 shows an example of an input method setting screen in the information input client. In the input method setting screen of FIG. 4, a button 60 is a button for selecting the type of input source such as character text, sound, and image. An information conversion algorithm can also be selected from the list 61 for each of these input sources. When the information conversion algorithm is not designated, the information conversion algorithm for each input source that is determined in advance as a default in the input information processing server 2 is used.
[0024]
When character text is selected as the input source, the character text input to the character text input screen 63 from the input interface 13 such as a keyboard is transmitted to the input information processing server 2. When the input information is transmitted to the input information processing server 2, the information indicating the type of the input source and the information of the selected information conversion algorithm are added to the header portion of the input information, for example, and transmitted. FIG. 4 shows an example of input in a free format, but input using an electronic mail, input using a WWW electronic bulletin board, and the like can also be used. As described above with reference to FIG. 3, as described above, it is possible to input using a predetermined GUI.
[0025]
As described above, the information input to the information input device 12 in the information input client 1-1 is sent to the information transmitter 11, and the information transmitter 11 receives the receiver 21 of the input information processing server 2 through the network 5. Forward to. Here, the network 5 may be, for example, a combination of a wireless LAN and the Internet, a telephone line via a PHS and a telephone network, or a combination of i-mode of a mobile phone and the Internet. , It may be a combination of wireless and wired. Of course, it may be wireless or wired.
[0026]
Information from one or a plurality of information input clients 1-1, 1-2,..., 1-n is input to the receiver 21 of the input information processing server 2.
[0027]
Information input to the receiver 21 of the input information processing server 2 is sent to the analyzer 22. The analyzer 22 takes out from the analysis DB 25 an algorithm for analyzing the input information and an information conversion table. What is extracted is a set of morphological analysis algorithms and extracted information tables, a set of audio data format analysis algorithms and extracted information table lists, a set of image recognition algorithms and information tables recognized from images, etc. .
[0028]
FIG. 5 shows an example of the contents of the analysis DB. The analysis DB 25 stores various information conversion algorithms corresponding to the input information type and information of information table sets used for information conversion. A plurality of information conversion algorithms can also be used in combination, and a combination in which a plurality of information conversion algorithms use the same information table is also possible. The information conversion algorithm used by the analyzer 22 is a method in which the input information processing server 2 uniquely determines according to the type of input information, and the information input clients 1-1,. A method of using what is specified from the input setting screen, a method of determining according to an interface such as the GUI shown in FIG. 3 transmitted from the input information processing server 2 to the information input clients 1-1,. is there. In general, the information conversion algorithm or information table used by the distribution server 3 according to the information distributed by the user terminals 4-1,..., 4-m is changed, but the analysis DB 25 as shown in FIG. , Soccer, baseball, music performance,...
[0029]
In addition, when information is input from a plurality of information input clients 1-1,..., 1 -n, an algorithm for determining a description using a majority vote when the information is inconsistent is also stored in the analysis DB 25. It is stored. The analyzer 22 uses these algorithms and tables to determine what the input information is.
[0030]
For example, when the information input from the soccer game venue is a natural language character string and “Nakada did a free kick”, the analysis DB 25 will use the morphological analysis algorithm (program) and soccer The information table is read into the analyzer 22. The analyzer 22 performs morphological analysis using the read morpheme analysis algorithm and information table, and obtains information that the player who is the information in soccer is “Nakada” and the action is “free kick”.
[0031]
When the input information is, for example, an image of a board on which characters are written, an image recognition algorithm and an information table are read from the analysis DB 25 into the analyzer 22. In the information table, for example, a list of character strings written on the board is described. The analyzer 22 performs character recognition using, for example, the input image, obtains the input character string, refers to the character string in the information table, and obtains the player name and the name of the event that occurred.
[0032]
For example, when the input information is a moving image camera-worked, an image recognition algorithm and an information table are read into the analyzer 22 from the analysis DB 25. For example, an optical flow detection algorithm is described in the image recognition algorithm, and a set of a referee operation pattern and an event is described in the information table. The analyzer 22 recognizes the motion of the referee from the moving image, obtains the input referee motion pattern, and converts the obtained motion pattern into an event name using the information table.
[0033]
When the input information is speech, the speech recognition algorithm and information table are read from the analysis DB 25 into the analyzer 22. The analyzer 22 performs voice recognition according to a voice recognition algorithm, and obtains a player name by collating with the player name described in the information table.
[0034]
As another information, when the audio level itself is defined as a degree of excitement and distributed, the analysis DB 25 sends an algorithm for analyzing the audio level and an information table corresponding to the numerical information for distributing the numerical level to the analyzer 22. The reading / analyzer 22 analyzes the voice level, compares the analysis result with the information table, and determines the numerical information to be distributed.
[0035]
As another example, a case where there is an error in input will be described. When there is a character input that “Nakada did a free kick”, the analysis DB 25 reads the morpheme analysis algorithm and the soccer information table into the analyzer 22. At this time, the analyzer 22 refers to the information table after performing morphological analysis, but there is no “free kick” in the operation in soccer. Therefore, the analyzer 22 determines that an information input error has occurred. As a subsequent action, it may be possible to discard incorrect information, and it is determined that “free kick”, which is the word closest to “free kick”, is input, and the player who is the information in soccer is “Nakada” Yes, you may get information that the action is a “free kick”.
[0036]
Furthermore, as another example, when information input from a plurality of information input clients 1-1,..., 1-n is contradictory, the analyzer 22 reads out the algorithm based on the majority vote from the analysis DB 25 to solve the problem by the majority vote. For example, if two pieces of information that “Nakada did a free kick” and one piece of information that “Nakada made a goal kick” were entered at a certain time, the contradiction that the same player could not make a free kick and a goal kick. Therefore, by the majority vote, the information that “Nakada has free kicked” is given priority, and the analysis result is that the player is “Nakada” and the action is “free kick”.
[0037]
The result analyzed by the analyzer 22 is sent to the description generator 23. The description generator 23 extracts the description format to be output from the input information processing server 2 to the distribution server 3 from the description definition DB 26. The description generator 23 applies the input information to a description that matches the format of the distribution information.
[0038]
As a description format, for example, there is XML (extensible markup language), which is described by tags. Each tag can describe a word that corresponds to the meaning of the contents of the tag. For example, in the XML used for information distribution of soccer relay, the part surrounded by the <player> tag is the name of the player, and the <action> tag is enclosed. You can define the type of action in the part. The descriptive definition is performed using XML schema or DTD (Document Type Definition).
[0039]
Here, FIG. 6 shows an example in which the information is described in XML, for example, when the player is “Nakada” and the operation is “free kick”. The description generator 23 may determine the character string in the <player> tag of the XML description as “Nakada” and the character string in the <action> tag as “free kick” as shown in FIG.
[0040]
The description generated by the description generator 23 is stored in the description DB 27. The description DB 27 sends information on the unit to be transmitted to the client to the transmitter 24 based on the request of the transmitter 24. The transmitter 24 sends a description of information to the distribution server 3 through the network 5. Information is distributed from the distribution server 3 to general user terminals 4-1,..., 4-m that are clients of information users. Here, the transmitter 24 may include the function of the distribution server 3. In that case, the transmitter 24 delivers the information directly to the client of the information user.
[0041]
Further, the information input clients 1-1, 1-2,..., 1-n can grasp the latest distribution information by receiving information currently distributed from the distribution server 3. Thus, for example, when the user interface of the information input device 12 is configured by a GUI with buttons and a list as shown in FIG. 3, by presenting the distribution information to the input person, a mismatch with the on-site situation is indicated. Can be grasped accurately and corrections can be made early.
[0042]
In addition, when information is input from a plurality of information input clients 1-1,..., 1-n, information input from other information input clients can be grasped, and information that must be input can be grasped. In particular, when creating a user interface that simplifies input as shown in Fig. 3, the score of each team is displayed from the current distribution information, and the default value of the input is used. The score can be input by pressing only one addition button 50. Further, when an input person finds an error in the score display section, the correction can be performed by a simple operation by pressing the addition button 50 or the subtraction button 51.
[0043]
FIG. 7 is a processing flowchart of the input information processing server 2 shown in FIG. In step S1, input information from the information input client 1 is awaited. If input information from the information input client 1 is received, an information conversion algorithm and an information table to be used are selected in step S2. The information conversion algorithm and the information table may be predetermined by the input information processing server 2 according to information distributed by the distribution server 3 such as soccer relay or baseball relay, and whether the received input information is characters. It may be selected depending on whether it is a voice, a still image or a moving image, or may be selected by the information input client 1 of the input information transmission source.
[0044]
In step S3, the selected information conversion algorithm (program) and information table are read from the analysis DB 25. A plurality of information conversion algorithms and a plurality of information tables can be used in combination. The information table is generally a list of information on items to be input such as player names, event names, and scores, but is not necessarily limited to these, and an arbitrary table may be used according to the information conversion algorithm. it can.
[0045]
In step S4, input information is analyzed using the read information conversion algorithm and information table. Here, according to the information conversion algorithm, morphological analysis, speech recognition, speech level analysis, character recognition, image recognition, and the like are performed, and information on the corresponding analysis result is acquired from the information table.
[0046]
In step S5, it is determined whether or not error detection is to be performed, and if error detection is to be performed, whether or not there is an error in the result of analyzing the input information. For example, it is determined that there is an error when the corresponding analysis result is not obtained from the information table. Further, when there is a contradiction in the input information from the plurality of information input clients 1-1,..., 1-n, it is determined that there is an error.
[0047]
In step S6, if there is an error in the analysis result of the input information, it is determined whether or not to correct it automatically. If not corrected, the analysis result is displayed to that effect, and the process proceeds to step S8. Alternatively, the input information is rejected and the next input information is waited for.
[0048]
In step S7, when it is determined in step S6 that automatic correction is performed, error correction such as selecting information in the information table closest to the analyzed result is performed. It is also possible to correct an error by selecting the analysis result having the largest number in the majority logic of input information from a plurality of information input clients 1-1,.
[0049]
In step S8, information related to the description format of information to be distributed is read from the description definition DB 26. A plurality of description formats may be prepared in advance in the description definition DB 26, and for example, which description format is to be used may be selected depending on the relay contents.
[0050]
In step S9, a description of information to be distributed is generated according to the description format read from the description definition DB 26 for the analysis result of the input information. If the information conversion algorithm has a formatted description generation function, the processing of steps S8 and S9 may be omitted, and the result of step S4 or S7 may be delivered as it is.
[0051]
In step S10, the generated description is transmitted to the distribution server 3. Here, when it is necessary to aggregate input information from a plurality of information input clients 1-1,..., 1-n, descriptions obtained from the input information are collectively transmitted to the distribution server 3. This aggregation process may be performed when the input information is analyzed in step S4. Information transmitted to the distribution server 3 is distributed from the distribution server 3 to the user terminals 4-1,..., 4-m and also to the information input clients 1-1,. A method for displaying and outputting information distributed in accordance with a predetermined format at the user terminal 4 or the information input client 1 depends on a browser such as the user terminal 4 or other application programs. The method of presenting information to be distributed may be the same or different between the user terminal 4 and the information input client 1. Information distributed from the distribution server 3 to the user terminal 4 can also be used as an index of distribution video such as live relay in the user terminal 4.
[0052]
In step S11, it is determined whether or not an information distribution end instruction has been issued. If the instruction is to continue, the process is repeated in the same manner from step S1. If there is an end instruction, the process ends.
[0053]
【The invention's effect】
As described above, according to the present invention, the input information processing server exists between the information input client and the distribution server, and the input information processing server converts the format of the information input by the information input client. There is no problem even if the input information and the format of the information distributed by the distribution server are different, and it is possible for the input person to input the information in a free format as long as the input information processing server can convert the format. .
[0054]
In addition, even if information is input from multiple information input clients, the input information processing server can aggregate multiple information or perform majority processing, and can respond to multiple information inputs. .
[0055]
Furthermore, since the input information processing server can detect and correct errors in the input information, it is possible to determine whether the input information is correct. In addition, the information distributed from the distribution server can be input to the information input client, and the information can be presented to the input person. It is also possible to prompt.
[Brief description of the drawings]
FIG. 1 is a diagram showing a basic system configuration of an information input distribution system according to the present invention.
FIG. 2 is a configuration diagram of an information input distribution system according to an embodiment of the present invention.
FIG. 3 is a diagram showing an example of an input interface in the embodiment of the present invention.
FIG. 4 is a diagram showing an example of an input method setting screen in the information input client.
FIG. 5 is a diagram showing an example of the contents of an analysis DB.
FIG. 6 is a diagram showing an example of a delivery description in the embodiment of the present invention.
FIG. 7 is a processing flowchart of the input information processing server.
FIG. 8 is a configuration diagram of a conventional information input distribution system.
[Explanation of symbols]
1-1, 1-2, ..., 1-n Information input client
2 Input information processing server
3 Distribution server
4-1, 4-2, ..., 4-m User terminal
5 network
11 Information transmitter
12 Information input device
13 Manual input interface
14 Microphone
15 Camera
21 Receiver
22 Analyzer
23 Description generator
24 Transmitter
25 DB for analysis
26 Description definition DB
27 Description DB

Claims (3)

時々刻々と変化する状況に関する情報を入力するための情報入力装置と,入力された情報を配信する配信サーバとを具備する情報入力配信システムにおいて,
前記情報入力装置が入力した入力源の種別が文字テキストの入力情報とその入力情報の入力源の種別をネットワークを介して複数の情報入力装置から受信する手段と,
前記複数の情報入力装置から受信した入力情報を集約する手段と,
情報入力装置からの入力情報に矛盾があるときに,当該入力情報に対して多数決による解決を図り,多数決結果を得る手段と,
入力源の種別に応じた複数の情報変換アルゴリズムと,入力対象の情報ごとにその入力対象の情報の分類情報または変換結果の情報が格納された複数の情報変換用の情報テーブルとを持ち,
受信した入力源の種別によって前記複数の情報変換アルゴリズムと前記複数の情報テーブルの中から1または複数の情報変換アルゴリズムと情報テーブルとを選択し,選択された情報変換アルゴリズムと情報テーブルとを用いて前記多数決結果として得られた入力情報を変換する手段と,
前記変換された入力情報を前記配信サーバへ送信する入力情報処理サーバを具備する
ことを特徴とする情報入力配信システム。
In an information input / distribution system comprising an information input device for inputting information on a situation that changes from moment to moment, and a distribution server that distributes the input information,
Means for receiving a plurality of information input devices type of the input source by the information input apparatus is input via the network the type of the input source of the input information and the input information written text,
Means for aggregating input information received from the plurality of information input devices;
Means for obtaining a majority result by solving the input information by majority vote when the input information from the information input device is inconsistent;
A plurality of information conversion algorithms according to the type of input source, and a plurality of information conversion information tables storing classification information of the input target information or conversion result information for each input target information,
Depending on the type of the received input source, one or more information conversion algorithms and information tables are selected from the plurality of information conversion algorithms and the plurality of information tables, and the selected information conversion algorithm and information table are used. Means for converting the input information obtained as a result of the majority vote;
An information input distribution system comprising: an input information processing server that transmits the converted input information to the distribution server.
請求項1記載の情報入力配信システムにおいて,
前記入力情報処理サーバは,
前記情報入力装置から入力情報とその入力情報の入力源の種別,および情報変換アルゴリズムを受信した場合には、受信した情報変換アルゴリズムを選択する
ことを特徴とする情報入力配信システム。
In the information input delivery system according to claim 1,
The input information processing server
When receiving the input information, the input source type of the input information, and the information conversion algorithm from the information input device, the received information conversion algorithm is selected.
請求項1記載の情報入力配信システムにおいて,
前記入力情報処理サーバは,
入力情報を解析した結果、前記選択された情報テーブルに入力情報に対応する入力対象の情報が存在しない場合に,入力情報が誤りであると判断する手段を具備する
ことを特徴とする情報入力配信システム。
In the information input delivery system according to claim 1,
The input information processing server
An information input distribution characterized by comprising means for determining that the input information is incorrect when the input information corresponding to the input information does not exist in the selected information table as a result of analyzing the input information system.
JP2001270324A 2001-09-06 2001-09-06 Information input distribution system Expired - Fee Related JP4656780B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001270324A JP4656780B2 (en) 2001-09-06 2001-09-06 Information input distribution system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001270324A JP4656780B2 (en) 2001-09-06 2001-09-06 Information input distribution system

Publications (2)

Publication Number Publication Date
JP2003085057A JP2003085057A (en) 2003-03-20
JP4656780B2 true JP4656780B2 (en) 2011-03-23

Family

ID=19095991

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001270324A Expired - Fee Related JP4656780B2 (en) 2001-09-06 2001-09-06 Information input distribution system

Country Status (1)

Country Link
JP (1) JP4656780B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4351587B2 (en) * 2004-06-24 2009-10-28 株式会社ゼータ・ブリッジ Digest video providing system and method
JP4862553B2 (en) * 2006-08-17 2012-01-25 日本電気株式会社 Update information distribution system, update information distribution method, and update information distribution program
WO2016067553A1 (en) * 2014-10-30 2016-05-06 パナソニックIpマネジメント株式会社 Play segment extraction method and play segment extraction device

Also Published As

Publication number Publication date
JP2003085057A (en) 2003-03-20

Similar Documents

Publication Publication Date Title
US11586808B2 (en) Insertion of standard text in transcription
US9028260B2 (en) Automated quiz generation system
US20170263265A1 (en) Conference support apparatus, conference support method, and computer program product
CN110795542B (en) Dialogue method, related device and equipment
JPWO2018216729A1 (en) Audio guide generation device, audio guide generation method, and broadcast system
US10741172B2 (en) Conference system, conference system control method, and program
JP5171501B2 (en) Server, system, method and program for extracting important words
JP2007213401A (en) Community site server and program for configurating community based on user preferable music data
JP6309539B2 (en) Method and apparatus for realizing speech input
US20210034663A1 (en) Systems and methods for managing voice queries using pronunciation information
JP2009238199A5 (en)
JP2020095210A (en) Minutes output device and control program for minutes output device
EP2869546B1 (en) Method and system for providing access to auxiliary information
JPWO2007029348A1 (en) Data extraction system, terminal device, terminal device program, server device, and server device program
JP4656780B2 (en) Information input distribution system
US20200092232A1 (en) Information processing apparatus, user terminal apparatus, and control method
JP2003216564A (en) Communication supporting method, communication server using therefor and communication supporting system
JP6233867B2 (en) Dictionary registration system for speech recognition, speech recognition system, speech recognition service system, method and program
KR20210067045A (en) System for music academy recommendation and method thereof
KR20090050840A (en) System and method for producing an estimate in real-time using mobile phone
CN113707144B (en) Control method and system of golf simulator
JP2004240234A (en) Server, system, method and program for character string correction training
CN111782858B (en) Music matching method and device
JP4948310B2 (en) Karaoke system with tempo adjustment function
JP4432298B2 (en) Communication support system, method and apparatus between video content viewers, communication support program and program recording medium

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061017

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061212

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20061212

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071113

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080107

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080117

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20081114

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20090709

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090909

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100805

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101025

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101221

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140107

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4656780

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees