JP2001169148A - 生放送番組における字幕の作成装置および作成方法 - Google Patents

Abstract

(57)【要約】 【課題】 ニュースの生放送番組においてアナウンサが
読み上げるニュース文をリアルタイムで字幕化する。 【解決手段】 事前原稿（２）を基に、ニュース番組開
始直前に記者Ａが修正する箇所を、記者と異なる別のオ
ペレータＢが、カメラ（１６）の撮像画像をモニタ（２
０）しながらリアルタイムで修正し（６）、その修正結
果を、同一のオペレータあるいは別のオペレータが、字
幕スーパーとして見易いセンテンスに分割しておき、ニ
ュース番組開始と同時に、アナウンサの音声をモニタし
ながら、作成したセンテンスをタイミング良く送り出
す。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、生放送番組におけ
る字幕の作成装置および作成方法に関するものである。

【０００２】更に詳述すると、本発明は、テレビジョン
番組の音声を字幕化するにあたり、特に、ニュースなど
生放送の音声をリアルタイムに字幕化することを可能と
する、生放送番組における字幕の作成装置および作成方
法に関する。

【０００３】

【従来の技術】現在、テレビジョン番組の音声を字幕化
して欲しいという要望は極めて高く、すでに、生放送以
外のテレビジョン放送番組については、徐々に字幕化が
行われている。しかし、生放送については、従来のどの
ような方法をもってしても実現されていない。この点に
関して、アメリカでは、オペレータが音声を聞きながら
特殊なキーボードを用いてリアルタイムで入力し、入力
した文字をそのまま字幕化している。

【０００４】一例として、ニュース番組の場合について
述べる。ニュースの原文は予めワープロ等で作成され
る。しかし、ニュース原文作成後の状況変化により、そ
の約７０％は番組開示直前に改変されたり、緊急ニュー
スのため大幅にカットされたりすることから、ワープロ
原稿をそのまま字幕化することができない。

【０００５】そこで、ニュース番組中に話されるアナウ
ンサの音声そのものを字幕化することが考えられてい
る。しかし、日本語のニュース音声の場合、１分間に話
される語数は最低でも３００語以上であり、この音声を
聞きながら、英語と違ってリアルタイムで仮名漢字変換
しなければならない。しかもニュース文の場合には、そ
の内容が政治・経済・スポーツ・天気、等々とめまぐる
しく変化するだけでなく、人名・地名など固有名詞の出
現比率が多いため、すばやく、正確に仮名漢字変換する
ためにはそれらのジャンルに精通している必要がある。

【０００６】こうした条件を満たした上で、リアルタイ
ム入力できるオペレータを得ることは、最高水準のオペ
レータや要約筆記者をもってしても、現実には不可能で
ある。

【０００７】一方、人手による音声入力の代わりに、音
声認識装置を用いてリアルタイムに自動字幕化する試み
もなされている。しかし、現在のところ、スタジオにお
けるアナウンサ音声に限っても平均で認識率は８５％程
度であり、認識遅れ時間は３秒以上である。また、現場
からのリポート音声は、周囲雑音レベルが高いので、認
識率が大幅に低下すると同時に、認識遅れ時間が飛躍的
に増加してしまう。しかも、誤り部分については人手で
修正することになるが、修正にできるだけ時間をかけな
いためには、少なくとも２名がペアとなって常時監視
し、一方が誤りを発見し、他方が修正するなどの方法を
採らざるを得ない。さらに、こうした方法は、相当の注
意集中が要求されるため、せいぜい１０分程度しか持続
できない。このため、数１０分にわたるニュース番組で
は、こうした修正クルーが最低でも２組必要で、１０分
毎に交代する方法が必要になる。またこの場合でも、修
正発見・修正・修正再確認に最低３秒以上はかかること
になり、トータルでは、６秒以上の遅れが生じてしま
う。

【０００８】

【発明が解決しようとする課題】上述したように、日本
語のニュース音声をリアルタイムで字幕化する方法ある
いは装置は、現時点では存在しない。しかも、仮に、リ
アルタイムの条件を緩めて、遅れ時間数秒後に字幕が開
始される条件を認め得たとしても、人手で字幕化しよう
とすると、最高水準のオペレータ複数名を長時間にわた
り常時確保する必要がある。

【０００９】また、音声認識装置を用いる場合でも、装
置そのものの開発費への多額な投資が必要になるばかり
でなく、運用時においても、リアルタイム修正を行うた
めには、やはり複数名のベテランオペレータを必要と
し、多額な費用を要することになる。

【００１０】よって本発明の目的は、上述の点に鑑み、
リアルタイム入力が可能で、しかも最小のコストで、精
度の良い字幕化が可能な装置および方法を提供すること
にある。

【００１１】

【課題を解決するための手段】上記の目的を達成するた
めに、請求項１に係る本発明は、文字データを入力する
入力手段と、前記文字データを記録紙上に印字する印刷
手段と、前記印刷手段により印字された記録紙に対して
加筆訂正がなされている状態を撮像する撮像手段と、前
記撮像手段からの撮像出力を表示する表示手段と、前記
表示手段の表示内容に対応した修正を前記文字データに
加えるための文字処理手段と、前記文字処理手段からの
出力に基づいて、テレビ画面上に字幕を挿入する字幕発
生手段とを具備した、生放送番組における字幕の作成装
置である。

【００１２】請求項２に係る本発明は、請求項１に係る
作成装置において、前記字幕発生手段は、前記文字処理
手段による修正が完了したことを示す信号に応答して、
テレビ画面上に字幕を挿入する。

【００１３】請求項３に係る本発明は、請求項１に係る
作成装置において、前記撮像手段は、前記印刷手段によ
り印字された記録紙の表側あるいは裏側から印字文字お
よび加筆訂正されている状態を撮像し、必要に応じて画
像反転回路を介して前記表示手段に正転表示させる。

【００１４】請求項４に係る本発明は、請求項１に係る
作成装置において、前記文字処理手段からの出力は第１
および第２の表示装置に供給され、該第１の表示装置は
前記文字処理手段の操作者に対して文字表示をなし、該
第２の表示装置は前記印刷手段により印字された記録紙
に対して加筆訂正をなす者に対して文字表示をなす。

【００１５】請求項５に係る本発明は、請求項１に係る
作成装置において、前記撮像手段の替わりにスキャナを
用い、加筆訂正がなされた前記記録紙を読み込む。

【００１６】請求項６に係る本発明は、請求項１〜５の
いずれかに係る作成装置において、前記字幕発生手段
は、アナウンサの音声に同期して、字幕スーパーとして
見易いセンテンス毎に分割して文字列を表示する。

【００１７】請求項７に係る本発明は、請求項１〜６の
いずれかに係る作成装置を備え、ニュース番組開始と同
時に、アナウンサの音声をモニタしながら、リアルタイ
ムで字幕化を可能とするニュース字幕作成装置である。

【００１８】請求項８に係る本発明は、文字データを入
力する入力ステップと、前記文字データを記録紙上に印
字する印刷ステップと、前記印刷ステップにより印字さ
れた記録紙に対して加筆訂正がなされている状態を撮像
する撮像ステップと、前記撮像ステップからの撮像出力
を表示する表示ステップと、前記表示ステップの表示内
容に対応した修正を前記文字データに加えるための文字
処理ステップと、前記文字処理ステップでの出力に基づ
いて、テレビ画面上に字幕を挿入する字幕発生ステップ
とを具備した、生放送番組における字幕の作成方法であ
る。

【００１９】請求項９に係る本発明は、請求項８に係る
作成方法において、前記字幕発生ステップは、前記文字
処理ステップによる修正が完了したことを示す信号に応
答して、テレビ画面上に字幕を挿入する。

【００２０】請求項１０に係る本発明は、請求項８に係
る作成方法において、前記撮像ステップは、前記印刷ス
テップにより印字された記録紙の表側あるいは裏側から
印字文字および加筆訂正されている状態を撮像し、必要
に応じて画像反転回路を介して前記表示ステップに正転
表示させる。

【００２１】請求項１１に係る本発明は、請求項８に係
る作成方法において、前記文字処理ステップにおける出
力は第１および第２の表示装置に供給され、該第１の表
示装置は前記文字処理ステップの操作者に対して文字表
示をなし、該第２の表示装置は前記印刷ステップにより
印字された記録紙に対して加筆訂正をなす者に対して文
字表示をなす。

【００２２】請求項１２に係る本発明は、請求項８に係
る作成方法において、前記撮像ステップの替わりにスキ
ャナによるスキャンステップを実行し、加筆訂正がなさ
れた前記記録紙を読み込む。

【００２３】請求項１３に係る本発明は、請求項８〜１
２のいずれかに係る作成方法において、前記字幕発生ス
テップでは、アナウンサの音声に同期して、字幕スーパ
ーとして見易いセンテンス毎に分割して文字列を表示す
る。

【００２４】請求項１４に係る本発明は、請求項８〜１
３のいずれかに係る各ステップを備え、ニュース番組開
始と同時に、アナウンサーの音声をモニタしながら、リ
アルタイムで字幕化を可能とするニュース字幕作成方法
である。

【００２５】

【発明の実施の形態】実施の形態の要約 以下に詳述する実施の形態では、ニュース番組が開始さ
れる前にワープロなどで電子的に作成された事前原稿を
基に、ニュース番組開始直前に記者が修正する箇所を、
記者と異なる別のオペレータが、修正状況をモニタしな
がら、あるいはスキャナ等で読み取ってリアルタイムに
修正し、その修正結果を、同一のオペレータあるいは別
のオペレータが、字幕スーパーとして見易いセンテンス
に分割し、ニュース番組開始と同時に、アナウンサの音
声をモニタしながら、作成したセンテンスをタイミング
良く送り出すことにより、極めて安価で、かつ、精度の
高いニュース文を、アナウンサーの音声に遅れることな
く、リアルタイムで字幕化することを可能にしている。

【００２６】この場合、記者の修正原稿を見ながら電子
的に修正するオペレータの能力は、ブラインドタッチで
キー入力できるだけでよく、ステノワードなどのような
特殊なキーボードを用いて高速に入力する特殊能力を有
するオペレータは必要なく、かつ、こうした方法を実現
する装置は、既存の装置を組み合わせることで実現でき
ることから、極めて安価に実現することが可能である。

【００２７】以下、図面を参照して、本発明の各実施の
形態を詳細に説明する。

【００２８】実施の形態１ 図１は、本発明を適用したニュース字幕作成装置のハー
ドウェア構成図である。本図において、２はニュースの
事前原稿（電子データ）、４はプリンタ、６はワードプ
ロセッサであり、このプリンタ４からは事前原稿あるい
はワードプロセッサ６の出力がプリントアウトされる。
８Ａおよび８Ｂは、ワードプロセッサ６の出力を同時に
表示するための表示器である。１０はスイッチであり、
修正ＯＫ信号１２に応答して閉成（ＯＮ）される。この
修正ＯＫ信号１２の替わりに、オペレータがスイッチ１
０を直接に開閉してもよい。１４は字幕発生装置であ
り、テレビ画面上に、読み易い形態で文字列をスーパー
表示する。

【００２９】１６は撮像装置（カメラ）であり、プリン
タ４によりプリントアウトされたニュース原稿の表側あ
るいは裏側から、その状態を撮影する。１８は画像反転
装置であり、ニュース原稿を裏側から撮影した場合の映
像や、表側から記者の前上方から撮影した場合の映像を
正常な状態に戻す。２０は、モニタ装置としての表示器
である。

【００３０】本実施の形態では、ニュース番組開始直前
に、記者が（通常鉛筆を用いて）プリンタ４により印刷
された修正すべき原稿を加筆訂正している状態を、上あ
るいは斜め上から撮像するか、あるいは直下から撮像装
置（カメラ）１６で撮影し、記者と異なる別のオペレー
タが、その撮影映像をリアルタイムでモニタしながら、
ニュース番組が開始される前にワードプロセッサ６で、
電子的に作成された事前原稿をリアルタイムで修正す
る。そして、その修正結果を、再度、記者にモニタ表示
あるいはプリントアウトして回送し、修正結果を確認し
た後、同一のオペレータあるいは別のオペレータが、修
正結果を字幕スーパーとして見易いセンテンスに分割す
る。このことにより、ニュース番組開始と同時に、アナ
ウンサの音声をモニタしながら、音声のタイミングに合
わせてキューを出すことにより、作成した文章が字幕ス
ーパーされる。

【００３１】図２および図６は、上述した字幕表示の過
程を模式的に示した説明図であり、図１と同一のハード
ウェア要素には同一の番号を付してある。図３は、図２
および図６に示した字幕表示の過程をフローチャートの
形態で示したものである。

【００３２】次に、これら図２，図６および図３を参照
しながら、本実施の形態による動作を具体的に説明して
いく。

【００３３】手順１：ニュース番組開始時刻前に事前原
稿（電子データ）２を読み込み（ステップＳ１）、プリ
ンタ４を介してプリントアウト（ステップＳ２）して記
者デスク３０に転送する。これと同時に、事前原稿２を
ワードプロセッサ６に転送する（ステップＳ３）。

【００３４】手順２：通常、番組開始時刻前までの状況
変化により、プリントアウトされた事前原稿を、記者Ａ
が鉛筆で手書き修正を加え（ステップＳ４）、その修正
結果をアナウンサＤに渡す。このとき記者の修正状況を
リアルタイムで撮影するが、図２に示すように原稿の直
下から撮影する他、図６に示すように原稿の上方あるい
は斜め上方から撮影することも可能である（ステップＳ
５）。図２の修正時に用いる机の天板としては、ガラス
等の透明な板を用い、直下から修正状況をカメラ１６で
リアルタイムに撮影する。

【００３５】手順３：記者Ａの上方から修正中の原稿が
正常撮影されている場合（図示せず）には、カメラ１６
の出力画像は、画像反転装置１８を介することなく、そ
のまま表示器（映像モニタ）２０に表示させる。他方、
図６に示す如く、記者Ａの前方上方から撮影されている
場合は、画像が上下反転されているので（ステップＳ６
Ａ：ＹＥＳ）、画像反転装置１８’で上下反転し（ステ
ップＳ６Ｂ）、表示器２０に表示させる（ステップＳ
７）。また、図２に示す如く、原稿の直下から撮影され
ている場合は、画像反転装置１８で表裏反転し（ステッ
プＳ６Ａ，ステップＳ６Ｂ）、表示器２０に表示させ
る。 手順４：オペレータＢは、映像モニタ２０を見ながら、
ワードプロセッサ６で、事前原稿を即座に修正する（ス
テップＳ８）。この場合、オペレータＢに要求される能
力は、ブラインドタッチができること、修正された記者
の内容を読みとることのできる能力だけである。従っ
て、たとえ、番組開始直前に原稿が修正されたとして
も、記者の修正結果を見てからではなく、修正状況を見
ながら、オペレータＢが修正できるので、ほとんどリア
ルタイムで修正結果を電子化できる。

【００３６】手順５：オペレータＢにより修正された修
正文は、直ちにプリンタ４を介してプリンタトアウトさ
れ（ステップＳ９）、記者Ａにフィードバックされる。
これと同時に、電子化された修正文は表示器８Ｂにも表
示される（ステップＳ１０）。

【００３７】手順６：記者Ａは、修正結果を検証し、間
違いがなければ（ステップＳ１１）、スイッチ１０を閉
成させるためのボタン（図示せず）を押す。このトリガ
により電子化された修正文は、字幕発生装置（パソコ
ン）１４に転送される。

【００３８】手順７：記者Ａが修正結果の中に間違いを
発見した場合は、再度、上記の手順２に戻る。

【００３９】手順８：オペレータＣは、字幕発生装置１
４の表示画面上で、修正文をテレビジョン画面に最適に
字幕スーパーできるよう、文の意味上自然な箇所で区切
る（ステップＳ１２）。たとえば、文章を２行ずつ字幕
スーパーする場合、２行以内の文字数で、意味上区切り
のよい箇所でリターンさせる。この作業を続けて行って
おく。

【００４０】手順９：オペレータＣは、番組開始と同時
に、アナウンサＤ等の発話者の声（ステップＳ１３）
を、ヘッドホン４０等でモニタしながら、字幕スーパー
すべき最適なタイミングで字幕スーパーのキューを出す
（ステップＳ１４）。これにより、リアルタイムでニュ
ース文を字幕化することが可能になる。

【００４１】なお、オペレータＣは、オペレータＢが兼
用することも可能である。

【００４２】実施の形態１による効果 本実施の形態では、ニュースの生放送番組においてアナ
ウンサが読み上げるニュース文を字幕化する際、事前原
稿を基に、ニュース番組開始直前に記者が修正する箇所
を、記者と異なる別のオペレータが、カメラの撮像画像
をモニタしながらリアルタイムで修正し、その修正結果
を、同一のオペレータあるいは別のオペレータが、字幕
スーパーとして見易いセンテンスに分割しておき、ニュ
ース番組開始と同時に、アナウンサの音声をモニタしな
がら、作成したセンテンスをタイミング良く送り出すこ
とにより、リアルタイムで字幕化を行うことができる。

【００４３】実施の形態２ 上述した実施の形態１では、撮像装置１６を用いて修正
中の原稿をリアルタイムにモニタ表示させたが、この撮
像装置１６の替わりに、スキャナ３０（図４参照）等の
画像読み取り装置を用いることにより、リアルタイムで
原稿を修正することも可能である。

【００４４】この場合には、記者Ａによる修正箇所をス
キャナ３０で読み取り、その画像を表示器２０に表示さ
せる。

【００４５】したがって、図３に示したステップＳ５お
よびＳ６は、図５に示したステップＳ２０に置き換わ
る。

【００４６】その他の動作については、実施の形態１と
同様であるので、説明は省略する。

【００４７】実施の形態２による効果 本実施の形態では、生放送ニュース番組の開始前に電子
的に作成された事前原稿をベースに、開始直前に修正さ
れるニュース文を、修正状況をその場でスキャン走査し
ながらすばやく修正し、番組開始に伴なって、アナウン
サの音声のタイミングに合わせて字幕スーパーすること
ができる。

【００４８】

【発明の効果】以上説明した通り、本発明によれば、現
在は不可能であると思われているニュース等の生放送番
組において、ほとんど間違いのない字幕を、極めて安価
に且つリアルタイムにスーパーすることができる。

【図面の簡単な説明】

【図１】本発明を適用したニュース字幕作成装置のハー
ドウェア構成図である。

【図２】字幕表示の過程を模式的に示した説明図であ
る。

【図３】図２に示した字幕表示の過程を示したフローチ
ャートである。

【図４】その他の実施の形態によるニュース字幕作成装
置のハードウェア構成図である。

【図５】図４に示したニュース字幕作成装置による字幕
表示の過程を示したフローチャートである。

【図６】字幕表示の過程を模式的に示した説明図であ
る。

【符号の説明】

２ 事前原稿（電子データ） ４ プリンタ ６ ワードプロセッサ ８Ａ，８Ｂ 表示器 １０ スイッチ １２ 修正ＯＫ信号 １４ 字幕発生装置 １６，１６’ 撮像装置（カメラ） １８，１８’ 画像反転装置 ２０ 表示器 ３０ スキャナ

Claims (14)

【特許請求の範囲】
1. 【請求項１】 文字データを入力する入力手段と、 前記文字データを記録紙上に印字する印刷手段と、 前記印刷手段により印字された記録紙に対して加筆訂正
   がなされている状態を撮像する撮像手段と、 前記撮像手段からの撮像出力を表示する表示手段と、 前記表示手段の表示内容に対応した修正を前記文字デー
   タに加えるための文字処理手段と、 前記文字処理手段からの出力に基づいて、テレビ画面上
   に字幕を挿入する字幕発生手段とを具備したことを特徴
   とする、生放送番組における字幕の作成装置。
2. 【請求項２】 請求項１に記載の作成装置において、 前記字幕発生手段は、前記文字処理手段による修正が完
   了したことを示す信号に応答して、テレビ画面上に字幕
   を挿入することを特徴とする、生放送番組における字幕
   の作成装置。
3. 【請求項３】 請求項１に記載の作成装置において、 前記撮像手段は、前記印刷手段により印字された記録紙
   の表側あるいは裏側から印字文字および加筆訂正されて
   いる状態を撮像し、必要に応じて画像反転回路を介し
   て、前記表示手段に正転表示させることを特徴とする、
   生放送番組における字幕の作成装置。
4. 【請求項４】 請求項１に記載の作成装置において、 前記文字処理手段からの出力は第１および第２の表示装
   置に供給され、該第１の表示装置は前記文字処理手段の
   操作者に対して文字表示をなし、該第２の表示装置は前
   記印刷手段により印字された記録紙に対して加筆訂正を
   なす者に対して文字表示をなすことを特徴とする、生放
   送番組における字幕の作成装置。
5. 【請求項５】 請求項１に記載の作成装置において、 前記撮像手段の替わりにスキャナを用い、加筆訂正がな
   された前記記録紙を読み込むことを特徴とする、生放送
   番組における字幕の作成装置。
6. 【請求項６】 請求項１〜５のいずれかに記載の作成装
   置において、 前記字幕発生手段は、アナウンサの音声に同期して、字
   幕スーパーとして見易いセンテンス毎に分割して文字列
   を表示することを特徴とする、生放送番組における字幕
   の作成装置。
7. 【請求項７】 請求項１〜６のいずれかに記載の作成装
   置を備え、ニュース番組開始と同時に、アナウンサの音
   声をモニタしながら、リアルタイムで字幕化を可能とす
   ることを特徴とするニュース字幕作成装置。
8. 【請求項８】 文字データを入力する入力ステップと、 前記文字データを記録紙上に印字する印刷ステップと、 前記印刷ステップにより印字された記録紙に対して加筆
   訂正がなされている状態を撮像する撮像ステップと、 前記撮像ステップからの撮像出力を表示する表示ステッ
   プと、 前記表示ステップの表示内容に対応した修正を前記文字
   データに加えるための文字処理ステップと、 前記文字処理ステップでの出力に基づいて、テレビ画面
   上に字幕を挿入する字幕発生ステップとを具備したこと
   を特徴とする、生放送番組における字幕の作成方法。
9. 【請求項９】 請求項８に記載の作成方法において、 前記字幕発生ステップは、前記文字処理ステップによる
   修正が完了したことを示す信号に応答して、テレビ画面
   上に字幕を挿入することを特徴とする、生放送番組にお
   ける字幕の作成方法。
10. 【請求項１０】 請求項８に記載の作成方法において、 前記撮像ステップは、前記印刷ステップにより印字され
    た記録紙の表側あるいは裏側から印字文字および加筆訂
    正されている状態を撮像し、必要に応じて画像反転回路
    を介して、前記表示ステップに正転表示させることを特
    徴とする、生放送番組における字幕の作成方法。
11. 【請求項１１】 請求項８に記載の作成方法において、 前記文字処理ステップにおける出力は第１および第２の
    表示装置に供給され、該第１の表示装置は前記文字処理
    ステップの操作者に対して文字表示をなし、該第２の表
    示装置は前記印刷ステップにより印字された記録紙に対
    して加筆訂正をなす者に対して文字表示をなすことを特
    徴とする、生放送番組における字幕の作成方法。
12. 【請求項１２】 請求項８に記載の作成方法において、 前記撮像ステップの替わりにスキャナによるスキャンス
    テップを実行し、加筆訂正がなされた前記記録紙を読み
    込むことを特徴とする、生放送番組における字幕の作成
    方法。
13. 【請求項１３】 請求項８〜１２のいずれかに記載の作
    成方法において、 前記字幕発生ステップでは、アナウンサの音声に同期し
    て、字幕スーパーとして見易いセンテンス毎に分割して
    文字列を表示することを特徴とする、生放送番組におけ
    る字幕の作成方法。
14. 【請求項１４】 請求項８〜１３のいずれかに記載の各
    ステップを備え、ニュース番組開始と同時に、アナウン
    サの音声をモニタしながら、リアルタイムで字幕化を可
    能とすることを特徴とするニュース字幕作成方法。