JP2014200002A - 字幕配信システムおよび字幕映像再生装置 - Google Patents

Abstract

【課題】健常者のみならず、お年寄り、子供、失語症患者など様々な属性の視聴者にあった字幕を、視聴ユーザからの要求に応じて簡単に提供できる字幕配信システムを提供する。【解決手段】再生映像に対応した字幕をクラウド環境から取得して映像と同期再生する視聴クライアント１と、映像ごとに複数種の字幕を管理し、映像および字幕種別の識別情報(ID)を含む字幕要求に応答して当該映像および字幕種別に対応した字幕を視聴クライアント１に配信する字幕配信サーバ２と、前記字幕配信サーバ２への字幕の新規登録や既登録字幕の編集を行う編集クライアント３とを主要な構成とし、前記字幕配信サーバ２はクラウド環境に配置される。【選択図】図１

Description

本発明は、デジタル、BSおよびケーブルの各テレビ放送、インターネットを介した動画配信サービスならびにオフラインのコンテンツ（DVD、Blu-ray（登録商標）、PC上のコンテンツなど）において、視聴者の好みや属性（性別、年齢、母国語、健康状態）に応じた字幕をクラウド環境から配信する字幕配信システムおよび字幕映像再生装置に関する。

放送電波によって配信された映像および字幕テキストを適宜に加工して表示する技術が、特許文献１−４に開示されている。

特許文献１には、放送電波から受信した字幕テキストの表示行数、文字サイズ、文字修飾などを視聴者の指定した表示方法で表示する技術が開示されている。特許文献２には、受信した他言語の字幕を視聴者の理解できる言語に翻訳して表示する技術が開示されている。特許文献３には、受信した字幕を一言一句すべて表示するのではなく、適切な分量に要約して表示する技術が開示されている。特許文献４には、受信した字幕を、視聴者の年齢や出身地に応じて理解しやすい形式に変換して表示し、あるいは見逃した字幕を再表示することを可能にする技術が開示されている。

特開2000-278622号公報 特開平7-250282号公報 特開2002-223399号公報 特開2006-287676号公報

上記の従来技術では、予め用意された字幕は健常者など一部の視聴者なら理解できる全字幕であり、お年寄りや子供、失語症患者など、情報を取得することが困難な視聴者にとっては理解しがたい可能性がある。さらに、字幕のある映像はごく一部であり、自作のビデオや非常に古い映像など、字幕のない映像も数多くある。このような場合には、従来技術のように映像と共に字幕も配信される、という前提自体が通用しない。

本発明の目的は、上記の技術課題を解決し、健常者のみならず、お年寄り、子供、失語症患者など様々な属性や嗜好の視聴ユーザに合った字幕を簡単に提供できる字幕配信システムおよび字幕映像再生装置を提供することにある。

上記の目的を達成するために、本発明は、映像IDを含む字幕要求に応答して、当該映像IDに対応した字幕を配信する字幕配信システムおよび字幕映像再生装置において、以下のような手段を講じた点に特徴がある。

(1)本発明の字幕配信システムは、映像IDごとに複数種の字幕を管理する字幕データベースと、映像IDおよび字幕の種別情報を含む字幕要求を受け付ける要求メッセージ受付手段と、前記要求メッセージに応答して、前記映像IDおよび字幕の種別情報に対応した字幕を字幕データベースから抽出する字幕抽出手段と、抽出された字幕情報を字幕要求の送信元クライアントへ配信する字幕配信手段とを具備した。

(2)本発明の字幕映像再生装置は、映像を取得する手段と、前記映像の字幕をネットワーク上のサーバから取得する字幕取得手段と、前記映像および字幕を同期再生する再生制御手段とを具備した。

本発明によれば、以下のような効果が達成される。
(1)映像とは独立して多数の字幕がクラウド上で管理され、映像の視聴クライアントから、ユーザの属性や嗜好に適した字幕の配信が要求されると、予め映像毎に蓄積されている多種多様な字幕群の中から最適字幕が抽出されて提供されるので、視聴ユーザは、自身の属性や嗜好に合った字幕で映像を楽しめるようになる。

(2)字幕がクラウド上で管理され、ボランティアを含む様々な人々が字幕を簡単に追加、編集できるので、ライブラリを簡単に豊富化できるようになる。

(3)字幕の種別として、従来からある言語のみならず、様々な項目を細かく選択できるので、性別、年齢層、障害の有無あるいは嗜好等に応じて最適な字幕を配信できるようになる。

(4)視聴クライアントにおいては、映像とその字幕とを別々に取得し、両者を紐付けて同期再生できるので、映像に対して固定的な用意された字幕のみならず、視聴ユーザが所望の字幕を選び、映像と自由に組み合わせて再生できるようになる。

本発明の一実施形態に係る映像字幕配信システムのブロック図である。 視聴クライアントの主要部の構成を示した機能ブロック図である。 編集クライアントの主要部の構成を示した機能ブロック図である。 字幕配信サーバの主要部の構成を示した機能ブロック図である。 視聴クライアントの動作を示したフローチャートである 字幕配信サーバの動作を示したフローチャートである。 字幕管理情報テーブルの一例を示した図である。 字幕内容情報テーブルの一例を示した図である。 ユーザ管理テーブルの一例を示した図である。 字幕管理テーブルの一例を示した図である。

以下、図面を参照して本発明の実施の形態について詳細に説明する。図１は、本発明の一実施形態に係る映像字幕配信システムの主要部の構成を示したブロック図であり、再生映像に対応した字幕をクラウド環境から取得して映像と同期再生する字幕映像再生装置としての視聴クライアント１と、映像ごとに複数種の字幕を管理し、映像および字幕種別の識別情報(ID)を含む要求メッセージに応答して当該映像および字幕種別に対応した字幕を視聴クライアント１に配信する字幕配信サーバ２と、前記字幕配信サーバ２への字幕の新規登録や既登録字幕の編集を行う編集クライアント３とを主要な構成とし、前記字幕配信サーバ２は、何人もアクセスできるようクラウド環境に配置される。

図２は、前記視聴クライアント１の主要部の構成を示した機能ブロック図であり、映像再生部１０１は、DVDやBlu-ray（登録商標）などの映像記録媒体１０７に記録された映像あるいはネットワークやケーブル１０８を経由して配信される映像を復号して再生する。字幕種別受付部１０２は、視聴ユーザが視聴を希望する字幕種別として、言語、字幕フォントおよびそのサイズ、要約率、対象視聴者（性別、年齢層、障害の有無、その他）、表示位置ならびに表示方法などの字幕種別指定を受け付ける。

要求メッセージ送信部１０３において、閲覧要求部１０３ａは、ユーザIDおよびパスワードの記述された閲覧要求メッセージを字幕配信サーバ２へ送信する。字幕指定部１０３ｂは、前記字幕種別指定の記述された字幕指定メッセージを字幕配信サーバ２へ送信する。応答受信部１０４は、前記閲覧要求メッセージに対して字幕配信サーバ２から配信される字幕概要情報を受信し、さらに前記字幕指定メッセージに対して字幕配信サーバ２から配信される字幕を受信する。再生制御部１０５は、前記映像および受信した字幕を同期させ、字幕映像として表示部１０６上で再生する。

図３は、前記編集クライアント３の主要部の構成を示した機能ブロック図であり、字幕編集部３０１は、映像字幕を新規に作成し、または作成済みの字幕を編集する。当該映像字幕の作成および編集は、編集者の手作業により全手動で行われても良いし、あるいは自動翻訳機３０１ａや自動要約機３０１ｂなどを利用することで、全自動又は半自動により行われるようにしても良い。

字幕種別受付部３０２は、視聴ユーザが編集する字幕種別として、言語、字幕フォントおよびそのサイズ、要約率、対象視聴者（性別、年齢層、障害の有無、その他）、表示位置ならびに表示方法などの字幕種別指定を受け付ける。

要求メッセージ送信部３０３において、編集要求部３０３ａは、ユーザIDおよびパスワードの記述された編集要求メッセージを字幕配信サーバ２へ送信する。字幕指定部３０３ｂは、字幕種別指定の記述された字幕指定メッセージを字幕配信サーバ２へ送信する。登録要求部３０３ｃは、ユーザIDおよびパスワード、ならびに新規登録用の字幕または編集済み字幕を含む登録要求メッセージを字幕配信サーバ２へ送信する。

応答受信部３０４は、前記編集要求メッセージに対して字幕配信サーバ２から配信される字幕概要情報を受信し、さらに前記字幕指定メッセージに対して字幕配信サーバ２から配信される字幕を受信する

図４は、前記字幕配信サーバ２の主要部の構成を示した機能ブロック図であり、字幕データベース(DB)２０１および認証サーバ２０８と、ローカル接続またはネットワーク接続されている。

前記字幕DB２０１は、字幕管理情報テーブル２０１ａおよび字幕内容情報テーブル２０１ｂを含む。前記字幕管理情報テーブル２０１ａには、図７に一例を示したように、映像を一意に識別する動画IDごとに、動画名、動画所有者のIDおよび字幕を一意に識別する字幕IDを含む、字幕を管理するための各種の情報が管理されている。前記字幕内容情報部２０１ｂには、図８に一例を示したように、動画IDごとに、各字幕の内容を表す字幕内容情報として、字幕内容、字幕開始時刻、字幕表示時間、字幕表示位置、字幕フォントなどが管理されている。

認証サーバ２０８には、図９に一例を示したように、各ユーザを一意に識別するユーザIDおよびパスワードのペアごとに、当該ユーザに与えられる権限や提供可能な字幕の情報などが管理されている。

要求メッセージ受付部２０２は、図１０に一例を示した字幕管理テーブル２０２ａを備え、ユーザIDおよびパスワードの記述された要求メッセージを受信する。要求処理部２０３において、概要情報抽出部２０３ａは、前記閲覧要求や編集要求のメッセージに応答して字幕概要情報を字幕DB２０１から抽出し、字幕概要情報配信部２０４から各クライアントへ配信する。字幕抽出部２０３ｂは、前記字幕指定メッセージで指定された字幕を字幕DB２０１から抽出し、字幕配信部２０５から各クライアントへ配信する。

次いで、本実施形態の動作をフローチャートに沿って説明する。図５は、前記視聴クライアント１の動作を示したフローチャートであり、ステップＳ１では、字幕の取得対象となる映像に固有の動画IDが取得される。当該動画IDは、映像が記録媒体１０７に記録されていれば当該記録媒体１０７から取得され、映像がネットワークやケーブル１０８経由で配信される場合には当該配信元等から取得できる。

ステップＳ２では、前記動画ID、ユーザIDおよびパスワードの記述された閲覧要求メッセージが生成され、ステップＳ３において、前記閲覧要求部１０３ａから字幕配信サーバ２へ送信される。ステップＳ４では、前記要求メッセージに応答して字幕配信サーバ２から提供される字幕概要情報の受信に備えて待機する。

図６は、前記要求メッセージを受信した字幕配信サーバ２の動作を示したフローチャートであり、ステップＳ２１では、受信された閲覧要求メッセージが、前記要求メッセージ受付部２０２において受け付けられる。ステップＳ２２では、前記閲覧要求メッセージに基づいてユーザ認証が行われる。本実施形態では、閲覧要求メッセージに記述されているユーザIDおよびパスワードが抽出され、認証サーバ２０８のユーザ管理テーブル２０８ａと照合することでユーザ認証が行われる。これと同時に、ユーザ管理テーブル２０８ａに管理されているユーザ種別情報に基づいて、当該ユーザに付与する権限が、字幕の「閲覧」、「編集」、「登録」のいずれであるかが判断される。

視聴ユーザに対しては、原則として「閲覧」の権限が与えられているのでステップＳ２３へ進む。ステップＳ２３では、前記要求メッセージに記述されていた動画IDに基づいて字幕管理テーブル２０２ａが参照され、当該動画IDの情報を管理する字幕DBが検索される。そして、前記検索結果に基づいて、該当する動画の字幕ID、概要説明、提供字幕種別、字幕製作者ID、字幕製作日、字幕閲覧回数などの字幕概要情報が、前記概要情報抽出部２０３ａにより字幕DB２０１の各情報テーブル２０１ａ，２０１ｂから読み出されて要求元の視聴クライアント１へ提供される。

この際、同ユーザの提供字幕種別と字幕管理情報部に含まれる提供字幕種別とを比較参照し、提供する字幕の表示順位をソーティングあるいはフィルタリングすることで、視聴者は字幕の選択が容易になる。なお、動画IDに該当する字幕が未登録であれば。「該当字幕なし」の情報を返信して当該処理を終了する

図５へ戻り、視聴クライアント１では、ステップＳ４において前記字幕概要情報が受信されると、ステップＳ５では当該字幕概要情報が表示部１０６に表示される。本実施形態では、ディスプレイ上に言語、字幕フォントおよびそのサイズ、要約率、対象視聴者ならびに表示位置等を含む多数の選択項目が一覧表示され、ステップＳ６では、項目ごとに視聴者が所望の条件を入力することで字幕種別が指定される。

これらの指定内容は、所望の字幕を特定する字幕種別IDとして扱われ、ここでは当該字幕種別IDの記述された字幕指定メッセージが生成され、ステップＳ７において字幕配信サーバ２へ送信される。なお、上記のような複数の項目を入力する代わりに、あるいは入力に加えて、年齢、性別、障害の有無等のユーザ属性を入力するようにしても良い。

図６へ戻り、字幕配信サーバ２では、前記字幕指定メッセージがステップＳ２４で受け付けられる。ステップＳ２５では、前記字幕抽出部２０３ｂにより、前記動画IDおよび字幕種別IDを検索キーとして字幕DB２０１から対応する字幕が抽出される。なお、字幕種別IDに完全一致する字幕が未登録であれば最尤の字幕が抽出される。ステップＳ２６では、前記抽出された字幕が、字幕配信部２０５により要求元の視聴クライアント１へ配信される。

図５へ戻り、視聴クライアント１では、ステップＳ８において、前記配信された字幕が応答受信部１０４により受信されると、ステップＳ９では、当該字幕が一時記憶される。ステップＳ１０では、前記再生制御部１０５により、当該字幕が映像の再生タイミングに合わせて順次に読み出されて同期再生される。

一方、図６のステップＳ２１において、前記編集クライアント３から送信された編集要求メッセージが受信されると、ステップＳ２２ではユーザ権限が「編集」と判定されるので、ステップＳ２７からステップＳ２８を経てステップＳ２９へ進み、前記ユーザ権限が「閲覧」の場合と同様に、字幕概要情報の提供、字幕選択要求の受付および字幕の検索が行われる。ステップＳ３０では、検索された字幕が編集クライアントへ編集対象として送信される。

さらに、図６のステップＳ２１において、前記編集クライアント３から送信された登録メッセージが受信されると、前記ステップＳ２２ではユーザ権限が「登録」と判定されるのでステップＳ３１へ進む。ステップＳ３１では、前記登録要求メッセージに記述されている動画IDに基づいて、該当する動画の字幕ID、概要説明、提供字幕種別、字幕製作者ID、字幕製作日、字幕閲覧回数などの字幕概要情報が、前記概要情報抽出部２０３ａにより字幕DB２０１から読み出されて要求元の編集クライアント３へ提供される。

当該概要情報を受信した編集クライアントからは、新規登録される字幕または編集済み字幕、および当該字幕の字幕種別IDの記述されたメッセージが送信される。ステップＳ３２では、当該メッセージが要求メッセージ受付部２０２で受信され、記述されている字幕が字幕種別IDと対応付けられて字幕DB２０１に登録される。

本実施形態によれば、映像とは独立して多数の字幕がクラウド上で管理され、映像の視聴クライアントから、ユーザの属性や嗜好に適した字幕の配信が要求されると、予め映像毎に蓄積されている多種多様な字幕群の中から最適字幕が抽出されて提供されるので、視聴ユーザは、自身の属性や嗜好に合った字幕と共に映像を楽しめるようになる。

また、字幕がクラウド上で管理され、ボランティアを含む様々な人々が字幕を簡単に追加、編集できるので、ライブラリを簡単に豊富化できるようになる。

さらに、字幕の種別として、従来からある言語のみならず、様々な項目を細かく選択できるので、性別、年齢層あるいは障害の有無等に応じて最適な字幕を選択できるようになる。

１…視聴クライアント，２…字幕配信サーバ，３…編集クライアント，１０１…映像再生部，１０２，３０２…字幕種別受付部，１０３，３０３…要求メッセージ送信部，１０４，３０４…応答受信部，１０５…再生制御部，１０６…表示部，１０７…映像記録媒体，１０８…ネットワーク／ケーブル，２０１…字幕データベース(DB)，２０２…要求メッセージ受付部，２０３…要求処理部，２０４…字幕概要情報配信部，２０５…字幕配信部，２０８…認証サーバ，３０１…字幕編集部，タグ設定部，３０３…登録要求部

Claims (6)

1. 映像IDを含む字幕要求に応答して、当該映像IDに対応した字幕を配信する字幕配信システムにおいて、
   映像IDごとに複数種の字幕を管理する字幕データベースと、
   映像IDおよび字幕の種別情報を含む字幕要求を受け付ける要求メッセージ受付手段と、
   前記要求メッセージに応答して、前記映像IDおよび字幕の種別情報に対応した字幕を前記字幕データベースから抽出する字幕抽出手段と、
   前記抽出された字幕情報を前記字幕要求の送信元クライアントへ配信する字幕配信手段とを具備したことを特徴とする字幕配信システム。
2. 映像IDごとに、その概要情報を管理するデータベースと、
   前記字幕要求に対して前記概要情報を配信する字幕概要情報配信手段とを具備したことを特徴とする請求項１に記載の字幕配信システム。
3. 前記要求メッセージ受付手段は、字幕および種別情報の記述された登録要求メッセージを受信すると、当該字幕をその種別情報と対応付けて前記字幕データベースに登録することを特徴とする請求項１または２に記載の字幕配信システム。
4. 前記要求メッセージ受付手段は、前記要求メッセージに記述されているユーザIDおよびパスワードに基づいて当該メッセージの送信元を認証することを特徴とする請求項１ないし３のいずれかに記載の字幕配信システム。
5. 字幕映像を再生する字幕映像再生装置において、
   映像を取得する手段と、
   前記映像の字幕をネットワーク上のサーバから取得する字幕取得手段と、
   前記映像および字幕を同期再生する再生制御手段とを具備したことを特徴とする字幕映像再生装置。
6. 字幕種別を指定してネットワーク上のサーバに字幕を要求する手段と、
   前記要求に応答してサーバから配信される字幕を取得する手段とを具備したことを特徴とする請求項５に記載の字幕映像再生装置。