JP2001265378A

JP2001265378A - 情報処理装置、方法、システム及び記憶媒体

Info

Publication number: JP2001265378A
Application number: JP2000080290A
Authority: JP
Inventors: Shigeru Matsuyama; 茂松山
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2000-03-22
Filing date: 2000-03-22
Publication date: 2001-09-28

Abstract

(57)【要約】【課題】音声再生装置がなくても音声データを文字と
して認識可能にしてデータ内容をおおよそ把握すること
ができる情報処理装置、方法、システム及び記憶媒体を
提供する。【解決手段】プレゼンテションデータ（印刷データ）
の１ページ分をＲＡＭ１０２に呼び出し、この印刷デー
タに音声データが含まれていた場合は音声認識プログラ
ムを実行して文字データに変換し、タイムコードと共に
ＲＡＭ１０２に格納する。また、印刷データに動画デー
タが含まれている場合は、事前に設定した動画サンプリ
ング仕様に従って動画データから画像データをサンプリ
ングし、これをタイムコードと共にＲＡＭ１０２に格納
する。そして、事前に設定した印刷書式に従って、これ
ら文字データ及び画像データから印刷ビットマップイメ
ージデータを作成すると共に、プリンタ１５００が実行
可能な印刷コマンドデータ群に変換してプリンタ１５０
０に送信する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、音声データや動画
データ等のデータを認識可能に処理する情報処理装置、
方法、システム及び記憶媒体に関する。

【０００２】

【従来の技術】従来、Ｗｅｂ（World-Wide Web）上や各
種メディア上のプレゼンテーションデータに動画や音声
のデータを挿入することで、取り扱い説明書、オンライ
ンショッピング、電子辞典等、様々な分野で効果を上げ
ている。このプレゼンテーションデータのように音声デ
ータや動画データ等が含まれるデータは、一般に、通信
回線を介して受信されたり配布されたＣＤ−ＲＯＭ等か
ら読み取られたりしてパーソナルコンピュータに取り込
まれる。そしてパーソナルコンピュータにＣＲＴやスピ
ーカが接続されていれば、ＣＲＴで動画を表示すると共
にスピーカで音声データを音声として発生して、データ
内容を十分に認識することができる。

【０００３】

【発明が解決しようとする課題】しかしながら、音声デ
ータや動画データ等が含まれるデータの内容を十分にし
かも速やかに認識するには、上記のようにＣＲＴ等の表
示装置やスピーカ等の音声発生装置はもちろん、パーソ
ナルコンピュータ、通信装置やメディアリーダ等のリソ
ースが必要であり、いつでもどこでもデータ内容を把握
することはできず、上記のような効果を享受するには不
便な場合があった。

【０００４】本発明は上記従来技術の問題を解決するた
めになされたものであり、その目的は、音声再生装置が
なくても音声データを文字として認識可能にしてデータ
内容をおおよそ把握することができる情報処理装置、方
法、システム及び記憶媒体を提供することにある。

【０００５】

【課題を解決するための手段】上記目的を達成するため
に本発明の請求項１の情報処理装置は、音声データが含
まれる所定データを入力するデータ入力手段と、該入力
手段により入力された所定データ中の音声データに基づ
いて音声認識処理によって文字データを生成する文字デ
ータ生成手段と、該文字データ生成手段により生成され
た文字データを可視表示用の画像データに変換するデー
タ変換手段とを備えたことを特徴とする。

【０００６】同じ目的を達成するために本発明の請求項
２の情報処理装置は、上記請求項１記載の構成におい
て、前記所定データにはさらに動画データが含まれ、前
記入力手段により入力された所定データ中の動画データ
に基づいて静止画像データを生成する静止画像データ生
成手段を備え、前記データ変換手段は、前記静止画像デ
ータ生成手段により生成された静止画像データを可視表
示用の画像データに変換することを特徴とする。

【０００７】同じ目的を達成するために本発明の請求項
３の情報処理装置は、上記請求項２記載の構成におい
て、前記データ変換手段は、前記動画データを所定のタ
イミングでサンプリングすることにより前記静止画像デ
ータを生成することを特徴とする。

【０００８】同じ目的を達成するために本発明の請求項
４の情報処理装置は、上記請求項３記載の構成におい
て、前記所定のタイミングは、所定の周期、シーン・チ
ェンジの発生及び前記音声データとの同期の少なくとも
１つに基づいて設定されることを特徴とする。

【０００９】同じ目的を達成するために本発明の請求項
５の情報処理装置は、上記請求項４記載の構成におい
て、前記所定のタイミングの設定手法は、ユーザにより
指定されることを特徴とする。

【００１０】同じ目的を達成するために本発明の請求項
６の情報処理装置は、上記請求項４または５記載の構成
において、前記所定の周期はユーザにより指定されるこ
とを特徴とする。

【００１１】同じ目的を達成するために本発明の請求項
７の情報処理装置は、上記請求項１〜６のいずれか１項
に記載の構成において、前記データ変換手段により変換
された画像データは、印刷出力用の画像データであるこ
とを特徴とする。

【００１２】同じ目的を達成するために本発明の請求項
８の情報処理装置は、上記請求項７記載の構成におい
て、前記データ変換手段により変換された印刷出力用の
画像データを印刷装置に出力するデータ出力手段を備え
たことを特徴とする。

【００１３】同じ目的を達成するために本発明の請求項
９の情報処理装置は、上記請求項８記載の構成におい
て、前記データ変換手段により変換された印刷出力用の
画像データの印刷書式を設定する印刷書式設定手段を備
えたことを特徴とする。

【００１４】同じ目的を達成するために本発明の請求項
１０の情報処理装置は、上記請求項９記載の構成におい
て、前記入力手段により入力された所定データ中に音声
データ及び動画データが含まれる場合は、前記印刷書式
設定手段は、前記データ変換手段によって前記音声デー
タに基づき可視表示用に変換された印刷出力用の画像デ
ータと前記データ変換手段によって前記動画データに基
づき可視表示用に変換された印刷出力用の画像データと
を合成して印刷書式を設定することを特徴とする。

【００１５】同じ目的を達成するために本発明の請求項
１１の情報処理装置は、上記請求項１〜１０のいずれか
１項に記載の構成において、前記データ変換手段により
変換された画像データを印刷する印刷手段を備えたこと
を特徴とする。

【００１６】上記目的を達成するために本発明の請求項
１２の情報処理方法は、音声データが含まれる所定デー
タを入力するデータ入力工程と、該入力工程により入力
された所定データ中の音声データに基づいて音声認識処
理によって文字データを生成する文字データ生成工程
と、該文字データ生成工程により生成された文字データ
を可視表示用の画像データに変換するデータ変換工程と
を含むことを特徴とする。

【００１７】同じ目的を達成するために本発明の請求項
１３の情報処理方法は、上記請求項１２記載の構成にお
いて、前記所定データにはさらに動画データが含まれ、
前記入力工程により入力された所定データ中の動画デー
タに基づいて静止画像データを生成する静止画像データ
生成工程を含み、前記データ変換工程は、前記静止画像
データ生成工程により生成された静止画像データを可視
表示用の画像データに変換することを特徴とする。

【００１８】同じ目的を達成するために本発明の請求項
１４の情報処理方法は、上記請求項１３記載の構成にお
いて、前記データ変換工程は、前記動画データを所定の
タイミングでサンプリングすることにより前記静止画像
データを生成することを特徴とする。

【００１９】同じ目的を達成するために本発明の請求項
１５の情報処理方法は、上記請求項１４記載の構成にお
いて、前記所定のタイミングは、所定の周期、シーン・
チェンジの発生及び前記音声データとの同期の少なくと
も１つに基づいて設定されることを特徴とする。

【００２０】同じ目的を達成するために本発明の請求項
１６の情報処理方法は、上記請求項１５記載の構成にお
いて、前記所定のタイミングの設定手法は、ユーザによ
り指定されることを特徴とする。

【００２１】同じ目的を達成するために本発明の請求項
１７の情報処理方法は、上記請求項１５または１６記載
の構成において、前記所定の周期はユーザにより指定さ
れることを特徴とする。

【００２２】同じ目的を達成するために本発明の請求項
１８の情報処理方法は、上記請求項１２〜１７のいずれ
か１項に記載の構成において、前記データ変換工程によ
り変換された画像データは、印刷出力用の画像データで
あることを特徴とする。

【００２３】同じ目的を達成するために本発明の請求項
１９の情報処理方法は、上記請求項１８記載の構成にお
いて、前記データ変換工程により変換された印刷出力用
の画像データを印刷装置に出力するデータ出力工程を含
むことを特徴とする。

【００２４】同じ目的を達成するために本発明の請求項
２０の情報処理方法は、上記請求項１９記載の構成にお
いて、前記データ変換工程により変換された印刷出力用
の画像データの印刷書式を設定する印刷書式設定工程を
含むことを特徴とする。

【００２５】同じ目的を達成するために本発明の請求項
２１の情報処理方法は、上記請求項２０記載の構成にお
いて、前記入力工程により入力された所定データ中に音
声データ及び動画データが含まれる場合は、前記印刷書
式設定工程は、前記データ変換工程によって前記音声デ
ータに基づき可視表示用に変換された印刷出力用の画像
データと前記データ変換工程によって前記動画データに
基づき可視表示用に変換された印刷出力用の画像データ
とを合成して印刷書式を設定することを特徴とする。

【００２６】同じ目的を達成するために本発明の請求項
２２の情報処理方法は、上記請求項１２〜２１のいずれ
か１項に記載の構成において、前記データ変換工程によ
り変換された画像データを印刷する印刷工程を含むこと
を特徴とする。

【００２７】同じ目的を達成するために本発明の請求項
２３の情報処理システムは、請求項１〜１０のいずれか
１項に記載の情報処理装置と、該情報処理装置に接続さ
れ、該情報処理装置の前記データ変換手段により変換さ
れた画像データに基づいて印刷処理を実行する印刷装置
とから構成されることを特徴とする。

【００２８】同じ目的を達成するために本発明の請求項
２４の記憶媒体は、音声データが含まれる所定データを
入力するデータ入力工程のコードと、該入力工程のコー
ドにより入力された所定データ中の音声データに基づい
て音声認識処理によって文字データを生成する文字デー
タ生成工程のコードと、該文字データ生成工程のコード
により生成された文字データを可視表示用の画像データ
に変換するデータ変換工程のコードとを記憶したことを
特徴とする。

【００２９】同じ目的を達成するために本発明の請求項
２５の記憶媒体は、上記請求項２４記載の構成におい
て、前記所定データにはさらに動画データが含まれ、前
記入力工程のコードにより入力された所定データ中の動
画データに基づいて静止画像データを生成する静止画像
データ生成工程のコードを記憶すると共に、前記データ
変換工程のコードは、前記静止画像データ生成工程のコ
ードにより生成された静止画像データを可視表示用の画
像データに変換することを特徴とする。

【００３０】

【発明の実施の形態】以下、本発明の実施の形態を図面
を参照して説明する。

【００３１】図１は、本発明の一実施の形態に係る情報
処理システムの全体構成を示すブロック図である。本シ
ステムは、ホストコンピュータ１００（情報処理装置）
とプリンタ１５００（印刷装置）とが双方向セントロニ
クスインターフェイス、シリアル、ＬＡＮ等の外部接続
ケーブル２００を介して接続されて構成される。

【００３２】ホストコンピュータ１００は、ＣＰＵ１０
１（文字データ生成手段、データ変換手段、静止画像デ
ータ生成手段、印刷書式設定手段）と、ＲＡＭ１０２
と、フォントＲＯＭ１０３と、オペレーションシステム
部（ＯＳ）１０４と、キーボードコントローラ１０６
と、ディスプレイコントローラ１０７と、ディスクコン
トローラＡ１０８と、ディスクコントローラＢ１０９
と、プリンタコントローラ１１０とがシステムバス１０
５で接続されて構成される。キーボードコントローラ１
０６にはキーボード及びマウス等の入力デバイス１１１
（データ入力手段）が接続され、ディスプレイコントロ
ーラ１０７にはディスプレイ１１２が接続されている。
ディスクコントローラＡ１０８には外部記憶装置Ａ１１
３が接続され、ディスクコントローラＢ１０９には外部
記憶装置Ｂ１１４（データ入力手段）が接続されてい
る。

【００３３】ホストコンピュータ１００は、ＣＰＵ１０
１がオペレーションシステム部１０４を介して所定のプ
ログラムを実行することにより動作し、各構成要素がシ
ステムバス１０５を介して制御される。外部記憶装置Ａ
１１３はハードディスク等を備え、プレゼンテーション
データ作成アプリケーション１１及びプリンタドライバ
（プログラム）１２を格納している。外部記憶装置Ｂ１
１４は、ＭＯドライブ、ＣＤ−ＲＯＭドライブ等を備え
る。

【００３４】ＲＡＭ１０２は、ＣＰＵ１０１の主メモ
リ、ワークエリア等として機能する。ディスプレイコン
トローラ１０７は、ディスプレイ１１２の表示を制御す
る。ディスプレイ１１２は、図形、文字、表、ウインド
ウ等を表示するが、動画を表示するものではない。ディ
スクコントローラ１０８は、外部記憶装置Ａ１１３との
アクセスを制御する。ディスクコントローラ１０９は、
外部記憶装置Ｂ１１４とのアクセスを制御する。プリン
タコントローラ１１０は、プリンタ１５００との通信制
御処理を実行する。

【００３５】一方、プリンタ１５００は、レーザビーム
プリンタ（ＬＢＰ）として構成され、そのプリンタ制御
ユニット１０００は、ＣＰＵ３０１と、ＲＡＭ３０２
と、プログラムＲＯＭ３０３と、フォントＲＯＭ３０４
と、入力バッファ３０６と、ページメモリ３０７と、エ
ンジンインターフェイス３０８とがシステムバス３０５
により接続されて構成される。エンジンインターフェイ
ス３０８にはプリンタエンジン３０９（印刷手段）が接
続され、システムバス３０５にはさらに操作部３１０が
接続されている。

【００３６】プリンタ１５００の各部の構成を詳述する
と、ＣＰＵ３０１は、ＲＯＭ３０３に記憶された制御プ
ログラムに基づいて、システムバス３０５に接続される
各デバイスを総括的に制御し、エンジンインターフェイ
ス３０８を介してプリンタエンジン３０９に出力情報と
して画像信号を出力する。

【００３７】ＲＡＭ３０２は、ＣＰＵ３０１の主メモ
リ、ワークエリアとして機能するメモリである。入力部
バッファ３０６は、ホストコンピュータ１００のプリン
タコントローラ１１０との通信処理を行う。操作パネル
部３１０には、操作用の不図示のスイッチ及びＬＥＤ表
示器等が配設されている。

【００３８】ホストコンピュータ１００では、作成アプ
リケーション１１が起動されると、入力デバイス１１１
または外部記憶装置Ｂ１１４からプレゼンテーションデ
ータ（所定データ）が読み込まれ、プレゼンテーション
データファイルが作成されて外部記憶装置Ａ１１３に格
納される。このプレゼンテーションデータファイルは、
文字、図形、動画、音声等のデータで構成されている。
作成されたプレゼンテーションデータファイルは、ディ
スプレイコントローラ１０７と、表示用のフォントＲＯ
Ｍ１０３を用いてディスプレイ１１２に表示される。

【００３９】作成されたプレゼンテーションデータファ
イルを印刷する場合は、ＲＡＭ１０２にプリンタドライ
バ１２がロードされていないときは外部記憶装置Ａ１１
３からプリンタドライバ１２を読み出し、ＲＡＭ１０２
に常駐させる。これらの制御はオペレーションシステム
部１０４により行い、さらにＲＡＭ１０２上のプリンタ
ドライバ１２をＣＰＵ１０１が実行する。

【００４０】プリンタドライバ１２は、音声認識プログ
ラム及び画像サンプリングのためのプログラムを含んで
いる。後述するように、プリンタドライバ１２は、動画
データをサンプリングする際のサンプリング仕様を指定
したり、動画のサンプル画像データと音声認識により変
換された文字データとをどのようなレイアウトで印刷す
るかを指定する印刷書式を設定し、設定した印刷書式に
従って生成された印刷コマンド群（印刷出力用の画像デ
ータ）をプリンタコントローラ１１０に出力する機能を
果たす。

【００４１】プリンタコントローラ１１０を経由した印
刷コマンド群は、外部接続ケーブル２００を通じてプリ
ンタ１５００に送信され、プリンタ１５００のＲＡＭ３
０２に一旦格納される。ＲＡＭ３０２に格納された印刷
コマンド群は、プログラムＲＯＭ３０３内の制御プログ
ラムをＣＰＵ３０１が実行することで印刷ビットマップ
データに展開され、ページメモリ３０７に格納される。
その際、文字データについてはフォントＲＯＭ３０４の
データを呼び出すことによりビットマップイメージに展
開される。１ページ分の印刷ビットマップデータが格納
されると、該データがエンジンインターフェイス３０８
を介してプリンタエンジン３０９に送信され、実際に印
刷される。これらの処理はＣＰＵ３０１により、システ
ムバス３０５を介して行われる。

【００４２】図２は、本実施の形態におけるプリンタの
内部構成を示す図であり、例えばレーザビームプリンタ
の場合を示している。プリンタ１５００は、ＬＢＰ本体
の筺体外壁及び筺体内部に、プリンタ制御ユニット１０
００と、操作部１５０１と、レーザドライバ１５０２
と、半導体レーザ１５０３と、回転多面鏡１５０５と、
静電ドラム１５０６と、現像ユニット１５０７と、用紙
カセット１５０８と、給紙ローラ１５０９と、搬送ロー
ラ１５１０と、搬送ローラ１５１１とを装備した構成と
なっている。

【００４３】プリンタ１５００は、プリンタ外部に接続
されているホストコンピュータ１００（図示略）から供
給される印刷情報（文字コード等）やフォーム情報或い
はマクロ命令等を入力して記憶すると共に、それらの情
報に従って対応する文字パターンやフォームパターン、
グラフィックパターン等を作成し、記録媒体である記録
紙等に像を形成する。

【００４４】操作パネル１５０１には、操作者が所定の
操作を行うためのスイッチ及び例えばＬＥＤ表示方式に
よる表示器等が配設されている。プリンタ制御ユニット
１０００は、プリンタ１５００全体の制御を行うと共に
ホストコンピュータ１００から供給される文字情報等を
解析するものであり、主に文字情報を対応する文字パタ
ーンのビデオ信号に変換してレーザドライバ１５０２へ
出力する。

【００４５】レーザドライバ１５０２は、半導体レーザ
１５０３を駆動するための回路であり、プリンタ制御ユ
ニット１０００から入力されたビデオ信号に応じて半導
体レーザ１５０３から発射されるレーザ光１５０４をオ
ン・オフ切り換えする。半導体レーザ１５０３は、レー
ザドライバ１５０２の駆動に基づきレーザ光１５０４を
回転多面鏡１５０５へ向けて発射する。

【００４６】回転多面鏡１５０５は、半導体レーザ１５
０３から発射されたレーザ光１５０４を左右方向に振る
ことにより静電ドラム１５０６上を走査露光させる。静
電ドラム１５０６は、静電潜像を形成するものであり、
走査露光に伴い静電ドラム１５０６上には文字パターン
の静電潜像が形成される。現像ユニット１５０７は、静
電ドラム１５０６の周囲に配設されており、静電ドラム
１５０６上に形成された静電潜像を現像するものであ
り、現像後は記録紙に転写される。

【００４７】用紙カセット１５０８は、プリンタ１５０
０に装着されており、該用紙カセット１５０８には記録
紙として例えばカットシート記録紙が収納される。給紙
ローラ１５０９は、用紙カセット１５０８内のカットシ
ート記録紙を最上面から１枚ずつ装置内へ取り込む。搬
送ローラ１５１０、１５１１は、給紙ローラ１５０９に
より給紙されたカットシート記録紙を静電ドラム１５０
６へ供給する。

【００４８】図３は、プレゼンテーションデータの入力
から印刷までの処理の流れを示す図である。

【００４９】ホストコンピュータ１００において、ま
ず、プレゼンテーションデータ作成アプリケーション１
１によりプレゼンテーショデータの入力、編集が行われ
る。すなわち、文字データ、図形データ等の印刷データ
が入力デバイス１１１でユーザにより入力されるか、ま
たは外部記憶装置Ｂ１１４から読み込まれ、編集される
（ステップＳ３０１）。次に、動画データ及び音声デー
タがマイク、ビデオカメラまたは外部記憶装置Ｂ１１４
から読み込まれ（ステップＳ３０２）、プレゼンテーシ
ョンデータファイルが作成されて外部記憶装置Ａ１１３
に格納される。

【００５０】そして、作成アプリケーション１１のメニ
ュー画面で印刷実行を選択指示すると、制御処理がプリ
ンタドライバ１２に移行する。

【００５１】図４〜図８は、ディスプレイ１１２に表示
される各種設定画面の表示例を示す図である。以下、図
３と併せて参照する。

【００５２】プリンタドライバ１２に制御処理が移行す
ると、図４に示す印刷仕様設定画面が表示され、この画
面上で動画データサンプリング仕様及び合成印刷書式の
設定がなされる（ステップＳ３０３）。この処理は、デ
ィスプレイ１１２に表示される図５、図６に示す画面に
従って行われる。なお、図５、図６に示す画面では、各
画面の設定内容が設定ボタンで確定され、設定ボタンま
たはキャンセルボタンがクリックされることで図４の画
面に表示が切り替わる。

【００５３】まず、図４に示す画面中の動画データサン
プリング仕様設定ボタン４１がクリックされると、表示
が図５に示す動画データサンプリング仕様設定メニュー
画面に切り替わる。図５に示すように、サンプリングの
タイミングとして、サンプリング周期（所定の周期）、
シーン・チェンジ、音声入力同期の少なくとも１つが指
定できるようになっている（所定のタイミング）。サン
プリング周期を指定した場合は、指定した周期で静止画
像が得られる。サンプリングの時間（間隔）はｓｅｃま
たはｍｓｅｃ単位で指定することができる。これによ
り、静止画生成の頻度が任意に設定可能で、使い勝手が
向上する。シーン・チェンジを指定した場合は、シーン
・チェンジが発生する度に静止画像が得られる。シーン
・チェンジ発生の判断基準としての変化率を指定するこ
とができる（例えば３０％）。音声入力同期を指定した
場合は、音声が入力される度に静止画像が得られる。図
５では、シーン・チェンジ及び音声入力同期が選択され
ている。

【００５４】サンプリングのタイミングとして、サンプ
リング周期を指定した場合は、簡単な構成で動画全体の
内容をおおよそ把握でき、シーン・チェンジを指定した
場合は、どのような場面が存在するのかを把握でき、音
声入力同期を指定した場合は、特に音声と関連している
部分の動画の内容（例えば動画と共に商品の取り扱いや
商品説明が音声でなされている場合）の把握が容易にな
る。

【００５５】図４に示す画面で音声データとサンプル画
像データの合成印刷書式設定ボタン４２がクリックされ
ると、表示が図６に示す音声データとサンプル画像デー
タの合成印刷書式設定メニュー画面に切り替わる。

【００５６】図６に示す画面では、音声データとサンプ
ル画像データの１ページに表示される画像数及びそれら
のレイアウトを指定する。同図に示すレイアウトＡで
は、画像数が１つで、レイアウトＢ、Ｃ、Ｄでは複数で
ある。これらは一例であるが、例えばレイアウトＡで
は、音声入力の発生に同期した１つの静止画像が表示さ
れる。レイアウトＢでは、音声入力の発生に同期した複
数の静止画像が表示される。音声データはまとめて所定
のマーク（例えば＠等（不図示））で区切られて表示さ
れる。

【００５７】レイアウトＣでは、縦列５画面表示とな
り、音声入力に同期した画像のほか、シーン・チェンジ
判定によりサンプリングされた画像もサンプリング順に
表示されている。レイアウトＤでは、音声入力に同期し
た画像が４つ表示される。

【００５８】なお、１ページ中の最大表示画像数を指定
するとその操作に応じてレイアウト選択画面も変更され
る。また、これらのレイアウト表示はプレビュー的な機
能も果たすことができる。

【００５９】次に、図４に示す画面で印刷書式設定ボタ
ン４３がクリックされると、図３のステップＳ３０３か
らステップＳ３０４に処理が移行する。ステップＳ３０
４では、印刷データの属性毎に印刷書式の設定を行うと
共に、印刷部数の指定及び印刷命令の発行の処理を行
う。

【００６０】この処理は、ディスプレイ１１２に表示さ
れる図７、図８に示す画面に従って行われる。なお、図
７、図８に示す画面でも、各画面の設定内容が設定ボタ
ンで確定され、設定ボタンまたはキャンセルボタンがク
リックされることで図４の画面に表示が切り替わる。

【００６１】まず、図７に示す印刷書式属性設定画面が
表示され、デフォルトで文字ページ書式が選択され現在
設定されている印刷書式が反転表示される。印刷書式保
存名欄７１には現在選択されている印刷書式の保存名
（同図では文字データ書式１）が表示される。印刷書式
保存名欄７１では、その右端のマークをクリックするこ
とで、保存されている印刷書式を呼び出し、任意に選択
することができるようになっている。このほか、用紙サ
イズ、レイアウト、印刷方向、給紙方法等のアイテムを
メニュー選択してこの書式に保存名を付けて保存するこ
とも可能である。

【００６２】図７に示す画面で動画データ書式ボタンが
クリックされると、図８に示す動画ページの印刷書式属
性設定画面に切り替わる。この画面で、図７の場合と同
様の手順で動画データの書式の設定を行う。

【００６３】次に、図４に示す画面で印刷開始ボタン４
４がクリックされると、図３のステップＳ３０４からス
テップＳ３０５に処理が移行する。ステップＳ３０５で
は、各印刷ページデータの属性毎に設定された印刷書式
に従って、印刷用データとして印刷ビットマップデータ
を作成すると共に、該印刷ビットマップデータをプリン
タ１５００が実行可能なデータとしてプリンタ１５００
に送信する処理を行う。この処理は受信した印刷データ
の各ぺージ毎に行われ、次の図９に示す処理によりなさ
れる。

【００６４】図９は、この印刷ビットマップデータ作
成、送信処理のフローチャートを示す図である。

【００６５】まず、ＲＡＭ１０２上の各種ポインタを初
期化し（ステップＳ９０１）、続くステップＳ９０２で
は、プレゼンテションデータの印刷データポインタＮが
指すプレゼンテションデータ（印刷データ）の１ページ
分をＲＡＭ１０２に呼び出す。なお、このとき、印刷デ
ータポインタＮは呼び出した印刷ページデータの最後を
指している。そしてＲＡＭ１０２に呼び出した印刷デー
タを解析し、文字図形データ部分を、上記設定された文
字データ印刷書式に従って、プリンタ１５００が実行可
能な印刷コマンドデータ群（ラスタデータやＰＤＬデー
タ等）に変換してプリンタ１５００に送信する。

【００６６】次いで、ステップＳ９０３では、ＲＡＭ１
０２に呼び出した印刷データを解析し、この印刷データ
に動画データまたは音声データが含まれているか否かを
判別する。その判別の結果、印刷データに動画データま
たは音声データが含まれていない場合は、ステップＳ９
０４に進み、印刷データポインタＮを「１」だけインク
リメントして、ステップＳ９０５に進む。

【００６７】ステップＳ９０５では、印刷データポイン
タＮの指示に基づき、次のプレゼンテションデータ（印
刷データ）があるか否かを判別し、その判別の結果、次
の印刷データがない場合は本処理を終了する一方、次の
印刷データがある場合は、前記ステップＳ９０２に戻っ
て次の印刷データの１ページ分の呼び出し処理に移行す
る。

【００６８】一方、前記ステップＳ９０３の判別の結
果、ＲＡＭ１０２に呼び出した印刷データに動画データ
または音声データが含まれている場合は、ステップＳ９
０６に進み、音声データが含まれていた場合は音声認識
プログラムを起動、実行してその音声データを文字デー
タに変換し、これをタイムコードと共にＲＡＭ１０２に
格納する。ここで音声認識処理の対象となる音声データ
は、説明等の言葉のデータである。

【００６９】続くステップＳ９０７では、ＲＡＭ１０２
に呼び出した印刷データに動画データが含まれている場
合は、図５の画面で設定された動画サンプリング仕様に
従って、印刷データ中の動画データから画像データをサ
ンプリングし、これをタイムコードと共にＲＡＭ１０２
に格納する。そして、図６の画面で設定された音声デー
タとサンプル画像データの合成印刷書式と、図８の画面
で設定された動画ページの印刷書式とに従って、１ペー
ジ分の印刷用データとして印刷ビットマップイメージデ
ータを作成すると共に、該印刷ビットマップイメージデ
ータをプリンタ１５００が実行可能な印刷コマンドデー
タ群に変換した後、これをプリンタ１５００に送信す
る。なお、音声データに基づく文字データと動画データ
に基づくサンプル画像データとの合成は、両者のタイム
コードを参照してなされる。

【００７０】続くステップＳ９０８では、印刷すべきデ
ータがあるか否かを判別し、その判別の結果、印刷すべ
きデータがある場合は前記ステップＳ９０７に戻る一
方、印刷すべきデータがない場合は前記ステップＳ９０
４に進む。

【００７１】図３に戻り、プリンタ１５００では、ステ
ップＳ３０５（図９の処理）で送信された印刷コマンド
データ群に基づき印刷処理を実行し（ステップＳ３０
６）、これにより、プレゼンテーションデータ中の音声
データ及び動画データを含むデータが文字や静止画像と
して印刷出力される。

【００７２】本実施の形態によれば、ホストコンピュー
タ１００において、プレゼンテーションデータ中に音声
データが含まれる場合は音声認識処理により文字データ
が生成され、動画データが含まれる場合は静止画像デー
タ生成され、これらがプリンタ１５００が印刷可能な印
刷出力用の画像データに変換されて出力され、プリンタ
１５００で印刷されるので、ＣＲＴやスピーカ等の音声
や動画の専用の再生装置がなくても、プリンタがあれば
音声データや動画データを文字や静止画像として認識す
ることができ、プレゼンテーションデータの内容をおお
よそ把握することができる。その際、印刷出力用の画像
データの印刷書式をユーザが任意に設定可能であるの
で、所望の印刷書式で印刷可能にでき、しかも音声デー
タ及び動画データが混在する場合でも、両者の関係が明
確になるような態様で印刷でき、内容の把握が一層容易
になり、使い勝手も向上する。

【００７３】また、動画データのサンプリングのタイミ
ングをユーザが任意に設定可能にしたので、動画データ
の内容に応じてより把握容易な静止画を得ることがで
き、使い勝手を向上することができる。

【００７４】なお、本実施の形態ではホストコンピュー
タ１００とプリンタ１５００とから成る情報処理システ
ムとして説明したが、印刷用のデータを作成する機能と
印刷を実行する機能の双方を備えた単体の装置として構
成してもよい。例えば、複写装置やファクシミリ装置に
適用してもよい。

【００７５】なお、本実施の形態ではプリンタ１５００
に印刷することでプレゼンテーションデータの内容をほ
ぼ把握するようにしたが、簡単な構成のモニタに静止画
や文字を表示するように構成すれば、印刷することなく
同様の効果を得ることができる。

【００７６】なお、本実施の形態では処理対象となるデ
ータとして取り扱い説明書、オンラインショッピング、
電子辞典等の分野におけるプレゼンテーションデータを
例示したが、これに限るものでなく、動画や音声のデー
タが挿入されたデータであれば対象にすることができ
る。また、データは、Ｗｅｂ（World-Wide Web）上や各
種メディア等あらゆるものから入力したものが、処理対
象になり、ＣＤ−ＲＯＭ等だけでなく、通信回線を介し
て受信したものであってもよい。

【００７７】なお、本実施の形態では各種制御プログラ
ムは外部記憶装置Ａ１１３に記憶され、これをＲＡＭ１
０２に読み出して実行する例を示したが、これら各種制
御プログラムはＲＯＭに記憶させて実行してもよい。あ
るいは、本発明を達成するためのソフトウェアによって
表される制御プログラムを記憶した記憶媒体を、情報処
理装置としてのホストコンピュータ１００やシステムに
読み出すことによっても、同様の効果を奏することがで
きる。

【００７８】図１０は、本情報処理装置に使用可能な記
憶媒体のメモリマップの一例を示す図である。ディレク
トリ情報は各工程のコードが記憶された記憶場所を示し
ている。同図に示すように、例えば、情報処理装置に使
用される記憶媒体としての不図示のＲＯＭに、データ入
力工程のコード、文字データ生成工程のコード及びデー
タ変換工程のコードの各工程のコードを記憶する。各工
程のコードは、それぞれ以下の機能を有する。すなわ
ち、データ入力工程のコードは、音声データが含まれる
所定データを入力する。文字データ生成工程のコード
は、入力工程のコードにより入力された所定データ中の
音声データに基づいて音声認識処理によって文字データ
を生成する。データ変換工程のコードは、文字データ生
成工程のコードにより生成された文字データを可視表示
用の画像データに変換する。

【００７９】上記記憶媒体はさらに次のように構成して
もよい。すなわち、前記所定データにはさらに動画デー
タが含まれ、前記入力工程のコードにより入力された所
定データ中の動画データに基づいて静止画像データを生
成する静止画像データ生成工程のコードをさらに記憶す
る。そして、前記データ変換工程のコードは、前記静止
画像データ生成工程のコードにより生成された静止画像
データを可視表示用の画像データに変換する機能を有す
る。

【００８０】なお、これらの場合の記憶媒体としては、
ＲＯＭのほか、フロッピディスク、ハードディスク、光
ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮
発性のメモリカード等を用いることができる。

【００８１】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張ボー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書き込まれた後、そのプログラムコードの指
示に基づき、その機能拡張ボードや機能拡張ユニットに
備わるＣＰＵなどが実際の処理の一部または全部を行
い、その処理によって前述した実施形態の機能が実現さ
れる場合も含まれる。

【００８２】

【発明の効果】以上説明したように、本発明の請求項１
に係る情報処理装置、請求項１２に係る情報処理方法ま
たは請求項２４に係る記憶媒体によれば、音声再生装置
がなくても音声データを文字として認識可能にしてデー
タ内容をおおよそ把握することができる。

【００８３】本発明の請求項２に係る情報処理装置、請
求項１３に係る情報処理方法または請求項２５に係る記
憶媒体によれば、音声や動画の再生装置がなくても音声
データや動画データを文字や静止画像として認識可能に
してデータ内容をおおよそ把握することができる。

【００８４】本発明の請求項３に係る情報処理装置また
は請求項１４に係る情報処理方法によれば、動画データ
の内容に応じてより把握容易な静止画を得ることができ
る。

【００８５】本発明の請求項４に係る情報処理装置また
は請求項１５に係る情報処理方法によれば、所定の周期
によれば簡単な構成で動画全体の内容をおおよそ把握で
き、シーン・チェンジの発生により設定すればどのよう
な場面が存在するのかを把握でき、音声データと同期さ
せれば特に音声と関連している部分の動画の内容の把握
が容易になる。

【００８６】本発明の請求項５に係る情報処理装置また
は請求項１６に係る情報処理方法によれば、使い勝手を
向上することができる。

【００８７】本発明の請求項６に係る情報処理装置また
は請求項１７に係る情報処理方法によれば、静止画生成
の頻度を任意に設定可能にして使い勝手を向上すること
ができる。

【００８８】本発明の請求項７に係る情報処理装置また
は請求項１８に係る情報処理方法によれば、文字や静止
画像を印刷出力可能にすることで、印刷装置があればモ
ニタ表示機能がなくてもデータの内容をおおよそ把握す
ることができる。

【００８９】本発明の請求項８に係る情報処理装置また
は請求項１９に係る情報処理方法によれば、文字や静止
画像を印刷装置に出力することで、モニタ表示機能がな
くてもデータの内容をおおよそ把握することができる。

【００９０】本発明の請求項９に係る情報処理装置また
は請求項２０に係る情報処理方法によれば、所望の印刷
書式で印刷可能にでき、データ内容の把握が容易にな
る。

【００９１】本発明の請求項１０に係る情報処理装置ま
たは請求項２１に係る情報処理方法によれば、音声デー
タ及び動画データが混在するデータを両者の関係が明確
になるような態様で印刷でき、内容の把握が一層容易に
なる。

【００９２】本発明の請求項１１に係る情報処理装置ま
たは請求項２２に係る情報処理方法によれば、文字や静
止画像を印刷装置で印刷することで、モニタ表示機能が
なくてもデータの内容をおおよそ把握することができ
る。

【００９３】本発明の請求項２３に係る情報処理システ
ムによれば、音声や動画の再生装置がなくても音声デー
タや動画データを文字や静止画像として認識可能に印刷
することで、モニタ表示機能がなくてもデータの内容を
おおよそ把握することができる。

【図面の簡単な説明】

【図１】本発明の一実施の形態に係る情報処理システム
の全体構成を示すブロック図である。

【図２】プリンタの内部構成を示す図である。

【図３】プレゼンテーションデータの入力から印刷まで
の処理の流れを示す図である。

【図４】印刷仕様設定画面の表示例を示す図である。

【図５】動画データサンプリング仕様設定メニュー画面
の表示例を示す図である。

【図６】音声データとサンプル画像データの合成印刷書
式設定メニュー画面の表示例を示す図である。

【図７】印刷書式属性設定画面の表示例を示す図であ
る。

【図８】動画ページの印刷書式属性設定画面の表示例を
示す図である。

【図９】印刷ビットマップデータ作成、送信処理のフロ
ーチャートを示す図である。

【図１０】本情報処理装置に使用可能な記憶媒体のメモ
リマップの一例を示す図である。

【符号の説明】

１００ホストコンピュータ（情報処理装置）１０１ＣＰＵ（文字データ生成手段、データ変換手
段、静止画像データ生成手段、印刷書式設定手段）１０２ＲＡＭ１０３フォントＲＯＭ１０４オペレーションシステム部（ＯＳ）１１１入力デバイス（データ入力手段）１１２ディスプレイ１１３外部記憶装置Ａ１１４外部記憶装置Ｂ（データ入力手段）１１０プリンタコントローラ３０１ＣＰＵ３０２ＲＡＭ３０３プログラムＲＯＭ３０７ページメモリ３０９プリンタエンジン（印刷手段）１０００プリンタ制御ユニット１５００プリンタ（印刷装置）

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｇ０６Ｆ 17/30 ２２０Ｆターム(参考） 2C087 AB05 BA05 BA14 BC05 BD01 BD12 BD13 BD24 BD46 5B021 AA01 AA02 AA30 QQ01 QQ02 5B075 ND16 NS01 PQ03 5D015 AA05 KK03 LL05 9A001 BB03 EE02 HH17 HH28 JJ35 KK42

Claims

【特許請求の範囲】

【請求項１】音声データが含まれる所定データを入力
するデータ入力手段と、該入力手段により入力された所定データ中の音声データ
に基づいて音声認識処理によって文字データを生成する
文字データ生成手段と、該文字データ生成手段により生成された文字データを可
視表示用の画像データに変換するデータ変換手段とを備
えたことを特徴とする情報処理装置。
【請求項２】前記所定データにはさらに動画データが
含まれ、前記入力手段により入力された所定データ中の
動画データに基づいて静止画像データを生成する静止画
像データ生成手段を備え、前記データ変換手段は、前記
静止画像データ生成手段により生成された静止画像デー
タを可視表示用の画像データに変換することを特徴とす
る請求項１記載の情報処理装置。
【請求項３】前記データ変換手段は、前記動画データ
を所定のタイミングでサンプリングすることにより前記
静止画像データを生成することを特徴とする請求項２記
載の情報処理装置。
【請求項４】前記所定のタイミングは、所定の周期、
シーン・チェンジの発生及び前記音声データとの同期の
少なくとも１つに基づいて設定されることを特徴とする
請求項３記載の情報処理装置。
【請求項５】前記所定のタイミングの設定手法は、ユ
ーザにより指定されることを特徴とする請求項４記載の
情報処理装置。
【請求項６】前記所定の周期はユーザにより指定され
ることを特徴とする請求項４または５記載の情報処理装
置。
【請求項７】前記データ変換手段により変換された画
像データは、印刷出力用の画像データであることを特徴
とする請求項１〜６のいずれか１項に記載の情報処理装
置。
【請求項８】前記データ変換手段により変換された印
刷出力用の画像データを印刷装置に出力するデータ出力
手段を備えたことを特徴とする請求項７記載の情報処理
装置。
【請求項９】前記データ変換手段により変換された印
刷出力用の画像データの印刷書式を設定する印刷書式設
定手段を備えたことを特徴とする請求項８記載の情報処
理装置。
【請求項１０】前記入力手段により入力された所定デ
ータ中に音声データ及び動画データが含まれる場合は、
前記印刷書式設定手段は、前記データ変換手段によって
前記音声データに基づき可視表示用に変換された印刷出
力用の画像データと前記データ変換手段によって前記動
画データに基づき可視表示用に変換された印刷出力用の
画像データとを合成して印刷書式を設定することを特徴
とする請求項９記載の情報処理装置。
【請求項１１】前記データ変換手段により変換された
画像データを印刷する印刷手段を備えたことを特徴とす
る請求項１〜１０のいずれか１項に記載の情報処理装
置。
【請求項１２】音声データが含まれる所定データを入
力するデータ入力工程と、該入力工程により入力された所定データ中の音声データ
に基づいて音声認識処理によって文字データを生成する
文字データ生成工程と、該文字データ生成工程により生成された文字データを可
視表示用の画像データに変換するデータ変換工程とを含
むことを特徴とする情報処理方法。
【請求項１３】前記所定データにはさらに動画データ
が含まれ、前記入力工程により入力された所定データ中
の動画データに基づいて静止画像データを生成する静止
画像データ生成工程を含み、前記データ変換工程は、前
記静止画像データ生成工程により生成された静止画像デ
ータを可視表示用の画像データに変換することを特徴と
する請求項１２記載の情報処理方法。
【請求項１４】前記データ変換工程は、前記動画デー
タを所定のタイミングでサンプリングすることにより前
記静止画像データを生成することを特徴とする請求項１
３記載の情報処理方法。
【請求項１５】前記所定のタイミングは、所定の周
期、シーン・チェンジの発生及び前記音声データとの同
期の少なくとも１つに基づいて設定されることを特徴と
する請求項１４記載の情報処理方法。
【請求項１６】前記所定のタイミングの設定手法は、
ユーザにより指定されることを特徴とする請求項１５記
載の情報処理方法。
【請求項１７】前記所定の周期はユーザにより指定さ
れることを特徴とする請求項１５または１６記載の情報
処理方法。
【請求項１８】前記データ変換工程により変換された
画像データは、印刷出力用の画像データであることを特
徴とする請求項１２〜１７のいずれか１項に記載の情報
処理方法。
【請求項１９】前記データ変換工程により変換された
印刷出力用の画像データを印刷装置に出力するデータ出
力工程を含むことを特徴とする請求項１８記載の情報処
理方法。
【請求項２０】前記データ変換工程により変換された
印刷出力用の画像データの印刷書式を設定する印刷書式
設定工程を含むことを特徴とする請求項１９記載の情報
処理方法。
【請求項２１】前記入力工程により入力された所定デ
ータ中に音声データ及び動画データが含まれる場合は、
前記印刷書式設定工程は、前記データ変換工程によって
前記音声データに基づき可視表示用に変換された印刷出
力用の画像データと前記データ変換工程によって前記動
画データに基づき可視表示用に変換された印刷出力用の
画像データとを合成して印刷書式を設定することを特徴
とする請求項２０記載の情報処理方法。
【請求項２２】前記データ変換工程により変換された
画像データを印刷する印刷工程を含むことを特徴とする
請求項１２〜２１のいずれか１項に記載の情報処理方
法。
【請求項２３】請求項１〜１０のいずれか１項に記載
の情報処理装置と、該情報処理装置に接続され、該情報
処理装置の前記データ変換手段により変換された画像デ
ータに基づいて印刷処理を実行する印刷装置とから構成
されることを特徴とする情報処理システム。
【請求項２４】音声データが含まれる所定データを入
力するデータ入力工程のコードと、該入力工程のコードにより入力された所定データ中の音
声データに基づいて音声認識処理によって文字データを
生成する文字データ生成工程のコードと、該文字データ生成工程のコードにより生成された文字デ
ータを可視表示用の画像データに変換するデータ変換工
程のコードとを記憶したことを特徴とする記憶媒体。
【請求項２５】前記所定データにはさらに動画データ
が含まれ、前記入力工程のコードにより入力された所定
データ中の動画データに基づいて静止画像データを生成
する静止画像データ生成工程のコードを記憶すると共
に、前記データ変換工程のコードは、前記静止画像デー
タ生成工程のコードにより生成された静止画像データを
可視表示用の画像データに変換することを特徴とする請
求項２４記載の記憶媒体。