JP2001500981A

JP2001500981A - 時間同期的に複数のデータストリームを検索かつ表示するための事後報告システムおよび方法

Info

Publication number: JP2001500981A
Application number: JP09532695A
Authority: JP
Inventors: ネメス，ルイス・ジー
Original assignee: トレイニング・イノヴェイションズ・グループ，リミテッド・ライアビリティ・カンパニー
Priority date: 1996-03-12
Filing date: 1997-03-07
Publication date: 2001-01-23
Also published as: DE69721976T8; EP0886848B1; US6370457B1; IL125764A; BR9708182A; AU2319097A; IL125764A0; CA2248010A1; DE69721976D1; DE69721976T2; CN1214783A; ATE240572T1; US5826206A; AU709627B2; WO1997034277A1; CA2248010C; EP0886848A1

Abstract

(57)【要約】本発明は事象に関する複数のデータストリームを記録するための事象事後報告システムおよび方法を提供する。各データストリームには事象の少なくとも一つの側面に関する時間順の情報が含まれる。事象の観察者は、事象の間の特定の時点に発生したものを事後報告の際に呼び戻すことを容易にするための時間表示マークを生成するものとすることができる。マークされた時間表示から始めて、その後も時間順に継続するように記録されたデータストリームから情報を検索し、そのデータストリームから検索された情報を時間同期的に表示するものとすることができる。

Description

【発明の詳細な説明】時間同期的に複数のデータストリームを検索かつ表示するための事後報告システムおよび方法発明の分野本発明は事象記録システム、特に事象関係者に事後報告(debriefing)させるためのシステムに関する。発明の背景航空輸送産業全体において、フライト乗務員のエラーが多くの航空機事故における寄与要因であることはよく知られている。しかしながら、複数のフライト乗務員によるエラーの多くは航空機を飛ばすことの技術側面とほとんど関係はない。その代わり、これらのエラーの多くは粗末なグループ意志決定、うまくゆかないコミニュケーション、不十分なリーダシップ、そしてフライト乗務員による粗末なタスク管理（まとめて「人間的要因（human factors）」によるエラーと呼ばれている）に関係している。１９６０年代後半から１９７０年代前半にかけて、フライト乗務員の飛行技術的な側面における熟達度を増進させるためにフライトシミュレーションが開発されてきた。フライトシミュレーションは航空機の実際の飛行状態を模し、現実の航空機で実際に遭遇する様々な状況を実際に飛行する前に訓練するためのコンピュータ制御装置である。航空輸送業界では、人間的要因によるエラーを無くすことに関してフライト乗務員の熟達度を増大させることの重要性が早くから認識されるとともに、フライトシミュレータ演習において技術的要因訓練と人間的要因訓練の両方を組み合わせてきた。すべての乗務員同士の明確かつあいまいさのないコミュニケーションが必要とされる高ストレス環境の例としては、離陸の際におけるエンジン故障がある。技術的な作業であるとよく考えられているが、フライト乗務員、管制塔、およびキャビン乗務員との間での正確な情報伝達が必要とされる。人間的要因の知識と能力に関してフライト乗務員の熟達度を増進させることは「コックピット資源管理（ＣＲＭ（cockpit resource management））」訓練として知られるようになった。ＣＲＭ訓練では、一般的にフライトシミュレーター訓練演習を、任務終了後あるいは事後の報告（debriefing）の間にフライト乗務員が再生したり再検討するために、ビデオテープに記録する。ビデオカメラを備えたシミュレーターは、フライト乗務員が様々な緊急事態における彼らのコミニュケーション能力とその他の人間的要因の能力を研ぎ澄ませるを助ける。残念ながら、フライトシミュレータ演習を記録するための従来のビデオカセットレコーダー（ＶＣＲ）技術は現在のところ、事後報告の際にはしばしば不十分である。ビデオテープに記録された事象の特定部分を捜し当てたり、何回もビデオテープの一部分を再生するには、頻繁に巻き戻しと先送りが必要となる。ビデオテープの異なる部分の間を素早く後ろおよび前にジャンプすることが難しいので、ある程度の時間のずれが一般的に存在する。事後報告目的のためにシミュレータ訓練演習を捕らえる（capture）ために従来のＶＣＲ技術を使用することにおける別の欠点は、ビデオカメラを使って、様々な計器によって示されるフライトデータ、シミュレータの詳細、およびフライト乗務員の行動を同時に捕らえることがやや難しいことである。発明の目的と概要したがって、本発明の目的は改良された事後報告（任務終了後の報告）システムおよび方法を提供することにある。本発明の他の目的は、従来のＶＣＲ技術の限界と欠点を克服する、改良された事後報告システムおよび方法を提供することにある。本発明によれば以上の目的およびその他の目的は、模擬的または現実的なある事象の間に生成された様々なタイプの情報を記録かつ再生するための事後報告（任務終了後報告）システムおよび方法によって実現される。一つの事象に関するとともに、その各々がその事象の少なくとも一つの側面に関する時間順の情報を含む、複数のデータストリームを記録することが容易になるような仕組みになっている。記録されたデータストリームには、その事象の関係者の行動についての映像記録と、事象関係者の可聴なコミニュケーションの音声記録が含まれる。また、航空機フライトの動画を生成するために必要な計測器を含む様々な事象監視計測器からの計測データストリームも含まれる。事象の間におけるどの時点も、観察者によって生成された、またはこの事後報告システムによって自動的に生成された時間表示マーク(time indication mark) によって「指示」または「表示」できるようになっている。事象の観察者は、事後報告の際に、事象の間におけるどの特定時点において発生したものを呼び出すことを容易にする時間表示マークを生成することができる。観察者は、好ましくはコンピュータディスプレイを使って、ある事象に関連づけることができ、選択できる、あらかじめ定義された時間表示マークのカテゴリおよびサブカテゴリのメニューが与えられる。同様に、この事後報告システムは、あるパラメータが事象の間に一致したときに自動的に時間表示マークを生成するように構成することができる。時間表示マークは、事象（たとえばＣＲＭ）の関係者の行動に関連するカテゴリ、その事象の技術的な側面に関連するカテゴリなど（これらは限定されない）を含む、ある事象の事実上どんな側面に対しても定義することができる。事象の間の時間に時間表示マークの特定なカテゴリを付随させることによって、事後報告の際に様々な記録されたデータストリームを選択的に再生させることが容易となる。たとえば、事象関係者達のコミュニケーションが事象の間の特定の時点において良（または不良）であるならば、あらかじめ定義された時間表示マークはメニューから選択され、そして記録されたデータストリームの各々に付随させられる。事後報告の際に、事象関係者はこの時間表示マークで表された時点またはその近くにおいて始まるいくつかのデータストリームを時間同期的に眺めることができる。あらかじめ定義されていない時間表示マークを生成して、そしてそれを記録されたデータストリームに関連させることができる。たとえば、事後報告の際に再検討の価値があるけれども、まだ特定のあらかじめ定義されたカテゴリに入らない何かがある事象の間に発生したならば、観察者はいずれにしても時間表示マークを生成することができる。記録されたデータストリームは検索され、そして時間同期的に表示される。特に、マークされた時問表示で始まって、その後も時間順に継続するように時間同期的に記録されたデータストリームを検索し、表示することが可能である。事後報告の際には、ユーザには特定の時間表示マークを選択することができる様々なコンピュータ画面が提供される。たとえば、一つの事象の間に生成されたすべてのマークのリストを列挙させることができる。あるいはその代わりに、事象からの様々なデータを関連する時間表示とともに、ユーザに対して選択のために提供することができる。特定の時間表示マークを選択することによって、様々な記録データが選択された時間表示に付随する時点またはその近くにおいて始まるように時間同期的に再生される。映像（ビデオ）および計測データストリームを時間同期的に提供するための複数のゾーンを有するディスプレイが使用される。事象監視計器とその他のデータが動画として表示される。音声データストリームが、表示された映像および計測データストリームと時間同期的に再生される。この結果、従来のＶＣＲ技術の不利な点が本発明により克服される。記録された事象のいかなる部分もボタンを押した瞬間から実際上なんら時間のずれもなく再生することが可能である。本発明は航空機フライトシミュレータの事後報告システムおよび方法に関連して使用することができる。シミュレータフライトデッキにあるフライトシミュレータとビデオカメラの両方からのデータはコンピュータに送られる。コンピュータの画面は時間表示マークのあらかじめ定義された様々なカテゴリを表示するように構成される。「チェックパイロット（check pilot）」と呼ばれる訓練補助者（training facilitator）は、模擬訓練中の乗務員のやりとりを観察し、ディスプレイから時間表示マークを選択する。時間表示マークは技術的およびＣＲＭ側面などの様々な模擬フライトに関連させることができる。たとえば、シミュレートされた事象の間に、チェックパイロットが事後報告の際に再検討することが望ましいと思われるフライト乗務員の振る舞いを観察した場合には、チェックパイロットはあらかじめ定義された時間表示マークを選択、またはあらかじめ定義されていないマークを生成することができ、そのマークを記録されたデータストリームに付随させることができる。事後報告コンピュータに付随するソフトウエアは、自動的にシミュレータフライトを再構築し、それをフライトデッキからの映像および音声信号と結合させ、事後報告室におかれたモニタ上にデジタル化された映像、動画、および選択された計測器を表示させる。模擬訓練後の事後報告の際に、チェックパイロットはフライト中のいずれの事象にも移ることができ、フライトデッキにおいて発生したことを、計器を表す動画と、航空機およびフライト経路の複数の光景を使って、完全にすべて単一のモニタ上に正確に表示して、その乗員に見せることができる。模擬訓練中の乗務員の会話を選択された単語およびフレーズによって検索するこができる音声認識ソフトを含めることもできる。本発明は、技術的要因と人間的要因についての出来映えを示す単一の統合されたディスプレイによって、乗務員にフライトを再体験させることによって訓練効率および効果を有利にかなり高めることができる。本発明による事後報告システムの別の利点は、フライト乗務員が個々に訓練後に自身に事後報告することができることである。こうしてチェックパイロットの主観性が取り除かれ、乗務員とシミュレータシステムとのやりとりを乗務員自身が処理しなければならなくなる。他のもう一つの利点は、本発明によってチェックパイロットの事前最終打ち合わせ（briefing）、任務終了後報告あるいは事後報告(debrifing)、および評価（evaluation）が標準化されることにある。本発明以前には、ビデオテープ上にマークをつけても、それはそのマークを特定する情報を欠いていた。チェックパイロットはマークが存在していたことは知っていたが、そのマークに関連する何の説明的な情報は存在しなかった。本発明によれば、時間表示マークは訓練が事後報告セッション中に再演されるときに模擬訓練で発生した事象を特に重要な節目において呼び戻すのを容易にする。模擬フライト訓練中においては、あまりに多くの刺激が発生する（たとえば、刻々と変化するフライトの計器の表示、変化し続けるコックピットの外側の視界、ベルや拡声器などの様々な聴覚的コミュニケーション、乗務員同士のコミュニケーション、および管制塔とのコミュニケーション）ので、フライト乗務員やチェックパイロットが起こった事象およびデータのすべてを事後報告セッション中に思い出すことは困難である。フライト乗務員やチェックパイロットの経験的事実認識に基づいた処理では、運動能力や事実認識能力を訓練するためにすべての刺激を自己のものとすることはできない。すでに説明したように、本発明は、（１）時間同期的に複数のデータストリームを記録し、マークし、表示する、（２）時間同期的に複数のデータストリームを記録し、カテゴリ化されたマークを施し、表示する、（３）時間同期的に複数のデータストリームを記録し、自動的にマークし、表示する、ためのシステムおよび方法を実現する。これらの態様の各々は、事後報告の際に訓練効率および効果を改善するため、個別、または、組み合わせて使用することができる。本発明はシミュレートされた事象の記録や事後報告に限定されない。多くの「現実の」事象を記録することができ、実際の事象関係者は本発明を使用して事後報告した。たとえば、本発明のシステムおよび方法は、原子力発電所の監視室、病院の手術室、スペースミッションの際のアメリカ航空宇宙局（ＮＡＳＡ:the N ational Aeronautics and Space Administration）のコントロールセンター、製造工場の組立ライン、および、事象の技術的な側面とその事象の参加関係の間のやりとりとの両方を含むその他の場面で使用することができる。本発明は多くの潜在的な応用を有する力強い教育ツールである。図面の簡単な説明図１Ａは本発明による、複数のデータストリームを記録し、マークし、検索するための作業手順を簡略に示した図である。図１Ｂは本発明による、事象の間に時間表示をマークするための作業手順を簡略に示した図である。図１Ｃは本発明による、時間表示マークを使って時間同期的に複数のデータストリームを検索し、かつ表示するための作業手順を簡略に示した図である。図２はフライトシミュレータとともに使用される際の本発明によるハードウエアについての概略の構成図である。図３は本発明がフライトシミュレータとともに使用される際の時間表示マークの階層的メニューを示した略図である。図４は本発明がフライトシミュレータとともに使用される際の統合化された事後報告コンピュータディスプレイを示した図である。図５は事後報告の際に時間表示マークのリストから特定の時間表示マークを選択するためのディスプレイスクリーンを示した図である。図６は事後報告の際に時間表示マークを選択するための代替となるディスプレイスクリーンを示した図である。図７は本発明の他の実施態様おける時間表示マークの階層的メニューを示した略図である。詳細な説明以下、本発明の好ましい実施の態様を図面を参照しながら説明する。しかしながら、本発明は多くの異なる実施態様において実施することができ、以下に説明される実施態様に限定すべきではない。むしろ、以下の実施態様は本開示が具体的かつ完全になるようにするためのもであって、当業者に対して本発明の範囲を十分に明らかにするものである。まず図１Ａを参照して説明する。本発明の事後（帰任後）報告作業には、一事象に関する複数のデータストリームを記録すること（ブロック１００）と、その事象の間に時間表示をマークすること（ブロック２００）と、およびそのマークされた時間表示によって即座に時間同期的に記録されたデータストリームを検索および表示すること（ブロック３００）とが含まれる。複数のデータストリームは、映像、音声、事象監視、および計測値のデータストリームを含むことができる。この事後報告システムは、データストリームをデジタル化かつ同期化し、コンピュータスクリーン上に同時に表示し、さらにどの時点における各データストリームの情報にも瞬間的アクセスことができる能力を持つ。次に図１Ｂを参照しながら、一つの事象の間に時間表示（indication of time ）をマークする作業を説明する。事象の観察者は時間表示マークに、記録された情報を関連させて、事後報告の際の再検討を容易にすることができる。時間表示マークはカテゴリおよびサブカテゴリの見出し（ヘディング）と、マークが生成された時点の時間コードを含む一つのデータフィールド（data field）である。複数のあらかじめ定義された時間表示マークがカテゴリおよびそれぞれのカテゴリ内のサブカテゴリによって構成される（ブロック２０２と２０４）。観察者には、複数のメニュー、ウインドウなどを有するコンピュータディスプレイが提供され、そこから特定の時間表示マークを選択することができる（ブロック２０６）。時間コードは選択された時間表示マークと関連する（ブロック２０８）。たとえば、複数の相互作用している関係者が存在する事象において、もし観察者が事象の間に関係者の良いまたは悪い振る舞いを目撃したならば、あらかじめ定義された時間表示マークをコンピュータディスプレイから選択することができ、また時間コードをその選択されたマークと関連づけることができる。事後報告の際には、事象関係者は、この時間表示マークによって表される時点またはその近くから始まるデータストリームを時間同期的に見ることができる。あらかじめ定義されていない時間表示マークを作成することもできるし、それを記録されたデータストリームと関連させることもできる。たとえば、事後報告の際に再検討する価値のあるような、特定の定義されたカテゴリにはまだ入らない何かが事象の間に生じるような場合には、観察者には時間表示マークを生成する能力が与えられる。加えて、時間表示マークは自動的に生成することもできる（ブロック２１０および２１２）。たとえば、観察者とは独立に、特定の出来事に対応して時間表示マークが生成されるようにすることができる。次に図１Ｃを参照しながら、マークされた時間表示を使って記録されたデータストリームを時間同期的に検索および表示する作業を説明する。事象の事後報告の際に、ユーザには、好ましくはコンピュータディスプレイを使用して、その事象の間に生成された時間表示マークのリストが示される（ブロック３０２）。もしユーザが一つの時間表示マークを選択したならば（ブロック３０４）、その時間表示マークにおいてまたはその近くから始まる複数の記録されたデータストリームが時間同期的に表示される（ブロック３０６）。時間表示マークはカテゴリによって表示されることが好ましい。しかしながら、ユーザによる時間表示マークの選択を容易にさせる様々な表示形態を使用することができる。本発明は複数のデータストリームに付随すべき様々な時間表示マークを取り入れることができ、それによって事後報告の際にこれらの時間表示マークによってデータストリームにアクセスすることができる。本発明はまた、記録された事象の技術的な側面や事象関係者の人間同士のやりとりの側面などの様々なカテゴリから選択される時間表示マークも取り入れることもできる。本発明は、実際の事象のリスクとコストが高い様々なシミュレートされた事象、特に関係者を含む事象、に対する教育ツールとして有利なものである。経験的に、本発明による事後報告システムが有利になる事象は、航空機の操縦、バスや列車などの地上基地から発信する輸送手段の操縦、外科出術、海運上の模擬実験、および戦争のための模擬実験などどに有利であるが、こうしたもの以外にも効力を発揮する。本発明は様々な現実的な事象、特に事象の技術的な側面と複数の関係者が存在する事象のための教育ツールとしても有利である。経験的に現実事象のロケーションとしては、発電所の制御室、病院の手術室、宇宙局のコントロールセンター、戦略室、空港の管制塔、航空交通管制機関、テレビの放送室、船の操舵室、スポーツイベント、会議や調停、および様々な工業製造設備などが挙げられるが、これらに限定されない。本発明は、一つの実施態様において、航空機のフライトシミュレータとともに使用される事後報告システムおよび方法を含む。フライトシミュレータ訓練におけるフライト乗務員の能力が二つの要素、すなわち技術的な熟達度と、人間的要因またはＣＲＭの熟達度とを使って一般的に計測される。フライト乗務員の能力の技術的な要素には、航空機システムに関する知識および能力と、正常、異常および緊急事態における操縦法と、航空交通管制（ＡＴＣ: air trafic control）法、計測器フライトの方法と、そしてナビゲーションおよび航空用のチャートなどが含まれるが、これらには限定されない。フライト乗務員の能力のＣＲＭ要素には、コミニュケーション能力と、チーム行動、コマンド訓練およびリーダシップの発揮と、意志決定と、そして資源管理、仕事負荷およびストレスなどが含まれるが、これらには限定されない。本発明は、フライトシミュレータからのデータストリームと、シミュレータコックピットのビデオカメラおよびマイクからのデータストリームを捕らえるのに必要なソフトウェア、ハードウェア、およびインタフェースから成る。フライトシミュレータからのデータには、フライトおよびエンジンの計測データと、計器および航空機の姿勢を動画として表示（ディスプレイ）するのに必要な他のデータが含まれる。一般的に、これらのデータストリームはデジタル様式で生成される。一方、音声および映像のデータストリームは一般的にアナログ様式で生成される。本発明ではアナログのデータストリームをデジタルのデータストリームに変換してもよい。さらにその上、本発明では、複数のデータストリームを同期化し、記憶することができる。本発明の重要な側面は、記録されたデータストリームに関連する様々な時間表示マークを生成することができる点である。時間表示マークによれば、事後報告の際に複数のデータストリームに実際上即座にアクセスすることができるようになる。模擬フライト訓練の後の一般的なフライトシミュレータの事後報告セッションの際、本発明では、一つのモニタ上の複数のウィンドウにデジタル化された映像データストリームが、フライト計測および飛行機姿勢の動画と時間同期化された上で表示される。音声の再生も、スピーカ装置を介して、表示された映像と動画式のデータストリームと時間同期するように実行される。こうして、いかなる時点においてもその時点の飛行機姿勢、計器の読み、および乗務員の行動／やりとりが容易に見られる。再生の際には、様々な同期化されたデータストリームを、実際上、フライト訓練のどの時点へも、時問の遅れなく、素早く先送りおよび巻き戻しすることができる。図２は、フライトシミュレータに関連する事後報告システムとして使用される際の、本発明の好ましいハードウェア構成を簡略に示した図である。一般的に、事後報告システム１０の構成要素としては、フライトシミュレータ操縦室２０、フライトシミュレータのホストコンピュータ３０、チェックパイロットインターフェース４０，マーキング装置５０，音声および映像記録システム６０、事後報告コンピュータ７０，そして事後報告コンピュータのユーザインタフェース８０が含まれる。当業者には知られているように、フライト乗務員は、フライトシミュレータのホストコンピュータ３０によって制御されるフライトシミュレータ操縦室２０内でフライト訓練演習を行う。フライトシミュレータ操縦室２０内の計器は一般的に特定の航空機のコックピットを再現したものであるが、ホストコンピュータ３０によってコンピュータ制御されている。訓練演習の間の制御はチェックパイロットのインターフェース４０を介してチェックパイロットに委ねられる。図示された実施態様では、フライトシミュレータ操縦室２０にはフライト乗務構成員の音声コミュニケーションを記録するために複数のマイク２２が備えつけられている。一般的な構成では、コックピットの４つのマイク、すなわちコックピットワイドの領域マイク、機長および副機長用のブームマイク、そしてパネルに取り付けられたマイクとして、使用される。音声ミキサ２３は各マイクからの音声入力信号を組み合わせて単一の音声源にする。フライト乗務員の行動はフライトシミュレータ操縦室内に配置された一つ以上のビデオカメラ２４を使って記録される。各ビデオカメラ２４は赤外線弱光カメラ（infrared low light camer a）であることが好ましい。映像・音声ブースター２５は、記録システム６０と事後報告室コンピュータ７０との間の長距離にわたる映像および音声のアナログデータストリームを強め、それによって次のデータストリームのデジタル化を容易にする。雑音防護装置（hum buckler）２６は、記録システム６０と事後報告室のコンピュータ７０との間の長距離にわたる映像および音声のアナログデータストリームのノイズを最小化するために設けられるのが好ましい。しかしながら、本発明はアナログの映像および音声記録装置に限定されるものではない。電荷結合カメラ（ＣＣＤカメラ）などのデジタル記録装置を使用してもよい。本発明はシミュレータから直接得られるデジタル式の音声および映像を重要な情報に取り入れる。この情報は事後報告室コンピュータ７０の構成可能なディスプレイに即座に再生される。モニタは事後報告の際により状況を把握するためのどの視点からでも飛行機追跡視野（chase plane view）を提供するのが好ましい。事後報告室コンピュータ７０は、音声と映像のキャプチャ（capture）および再生（playback）用のボード、シリアルおよびイーサネット通信ポート、キーボード、小グループで見るのに適したモニタ、マウス、そして少なくとも４ギガバイトのデータ記憶容量を備えたシリコン・グラフィックス・モデルＲ４０００（ Silicon Graphics Model R4000）またはそれに同等のものが好ましい。少なくと８ギガバイトの記憶容量があればより好ましい。事後報告室コンピュータ７０のソフトウェアは、映像および音声のデータストリームを捕捉かつ記憶すること、フライトシミュレータからの計測データストリームおよびその他のデータストリームを記憶すること、音声および映像データストリームを再生すること、そして、４次元的な動画でフライトシミュレータデータを再生することを実行する。４次元の動画は空間のどの地点からでも３次元的な動画を提供する能力がある。マウスを対象の周りのどんなポイントへも移動させることによってユーザは空間のその地点からその対象を観察することができる。加えて、４次元の動画作成装置にフレーム速度再生をスピードアップまたはスローダウンさせて、映像再生との同期を維持させるソフトウェアが提供される。模擬フライトの計測表示をイクシーダンス（exceedance）に復号化するソフトウェアも提供される。イクシーダンスとは起こるべきではなかったが起こっしまった何かを意味する用語である。たとえば、もし航空機が最大速度を越えたならば、このことはイクシーダンスとされる。航空機の最大速度はコンピュータファイルに記憶されている。さらに最大速度は、特定高度における最大速度といったように、特定の条件によってさらに条件付けることもできる。プログラムは常に模擬の航空機の速度をそのファイルと比較して、最大速度を越えてしまったかを判定する。もし越えてしまったならば、イクシーダンスのマークが生成される。事後報告コンピュータ７０の制御は、スタートアップおよびコンフィギュレーションに関する様々なメニューを好ましく有するマウス操作型インターフェースを使って維持される。加えて、ユーザインターフェースはＶＣＲインターフェースに使用されるプロトコルに類似するパネルを有することが好ましい。たとえば、「早送り」、「巻き戻し」、「再生」、「一時停止」、および「停止」ボタンがスクリーン上に表示される。ボタンは以前または次の時間表示マークにジャンプするように構成されることが好ましい。ユーザはスクリーン上に表示された適当なボタンを単にクリックすることによって、再生を制御することができる。事後報告コンピュータのモニタ上のすべてのウィンドウは同期化され、再生の間に映像とのバランスが維持される。音声は事後報告コンピュータに結合したスピーカ装置を使って提供され、十分に映像および画像表示と同期化される。図４は、フライトシミュレータと共に使用された際の、事後報告コンピュータシステム７２の好ましい実施態様を簡略に示した図である。少なくと四つの異なるウィンドウを有する３５インチ（８８．９ｃｍ）のカラーモニタであることが好ましい。時間表示マークを表示させるために５番目のウィンドウを与えてもよい。構成可能なウィンドウは望まれるだけ拡大、移動、そして縮小させることができる。図示された構成においては、映像表示ウィンドウ７３はシミュレータ訓練の間のフライト乗務員のデジタル映像記録を表示する。飛行機姿勢の表示ウィンドウ７４は模擬フライト訓練の間のどんなステージにおいても様々な視点から飛行機の姿勢を示す。加えて、飛行機姿勢表示ウィンドウ７４において理想的な飛行機姿勢を実際の飛行機姿勢の上に重ね合わせてもよい。飛行機姿勢ウィンドウ７４は傾斜や天候の様子などのような直接関係のある情報を表示することができる。計測表示ウィンドウ７５には選択された航空機計測器の動画表示が含まれるが、これはシミュレータで「飛ばされている」航空機タイプや、含まれる特定の模擬フライト訓練に依存して構成できる。動画計測はシミュレータのコックピットにおける実際の計測の外観を正確に再現する。動画（animation）は表示された様々な計測器がリアルタイムに映し出されるという点で動的（dynamic）ある。たとえば、図４に示されている対地速度インジケータと高度計には、模擬訓練の特定部分の再生の間の連続的な読みが示される。すべての表示ウィンドウは、動的な計測および飛行機姿勢の動画、そしてフライト乗務員のデジタル映像および音声が、記録された訓練の間の特定時点において起きたものを表すことができるように同期化される。すべての表示された映像および計測データはデジタル様式にあるので、記録されたフライト演習の間のどんな時点にも直ちにアクセス可能である。加えて、以下詳細に説明されるように、フライト演習の記録の間の様々な時点において、チェックパイロットによって手動的、そしてイクシーダンスルーチンによって自動的に、そしてシミュレータによって自動的に時間表示マークが生成され、事後報告の際には、これらの特定の時点に即座にアクセスするこができる。記録されたデータストリームが事後報告の間に再生されるとき、各時間表示マークによって、模擬フライト演習の間の特定の時点で起きたものに素早く即座にアクセスすることが容易になる。事後報告の間に、フライト乗務員は、いかなる時間マークであってもその前後およびそれ自体において、彼らの行動を観察し、彼らのコミニュケーションに耳を傾け、フライトの計測および飛行機姿勢を観察することができる。たとえば、記録されたデータストリームは与えられた時間マークの１０秒前から始めて以後継続的に再生することができる。本発明はあり余る再生オプションを可能とし、ここにおける記述に限定されるものではない。多くの可能な再生オプションは事象関係者にとって現実または模擬の事象から学習する際に使用される価値あるツールを生み出す。マーキング装置５０によってチェックパイロットは模擬フライト演習の間に時間表示マークを生成し、パーフォーマンス要素（performance factor）の一つ以上のカテゴリにその時間マークを関連させることができる。マーキング装置５０は「タッチスクリーン」型ディスプレイ（“touch screen”display）を備えたパーソナルコンピュータによって制御され、そしてフライトシミュレータ操縦室２０内に配置されることが好ましい。タッチスクリーン上に与えられたマーキング装置のユーザインターフェースは以下詳細に説明されるが、チェックパイロットによる使用を容易にするように設計される。しかしながら、非タッチスクリーン型コンピュータもマーキング装置のユーザ・インターフェースを提供するために使用することができる。キーボードやマウス機能などの従来の選択技術も時間表示マークを生成するために使用することができる。マーキング装置５０はマーキング装置のディスプレイ上にメインメニューと階層的なサブメニューとを生成し、かつ時間マークデータを事後報告コンピュータ７０に送信するためのソフトウェアを備える。マーキング装置５０はイーサネットまたはシリアルポートケーブルを介して事後報告コンピュータ７０に接続されるのが好ましい。加えて、マーキング装置５０はチェックパイロットに、事後報告室コンピュータ７０による様々な映像、音声、および計測のデータストリームの記録を、制御できる能力を提供する。マーキング装置５０は事後報告システムに、停止、およびマークすべき時を知らせる。フライトシミュレーション演習の際には、人間的要因（Human Factor）、技術的（Technical）、ＬＯＦＴ事象の引き起こし（LOFT Event Trigger）、自動検出、そして終了といった時間表示マークのカテゴリを含む、マーキング装置のディスプレイ上に、チェックパイロットに対して図３の最上部に示されているようなメインメニュー５２が提供される。このメインメニュー５２から、図３に示されているように、チェックパイロットに各カテゴリ内のサブカテゴリ５４が表示される。各サブカテゴリは、好ましくは、以下に説明されるように選択することのできるあらかじめ定義された複数の時間表示マークを含む。あらかじめ定義された時間表示マークと、それらのそれぞれのカテゴリおよびサブカテゴリは様々な方法でユーザに表示され、メニューには限定されない。ユーザに時間表示マークのカテゴリおよびサブカテゴリを表示する他の方法としては別々のウィンドウまたはアイコンを使用することなどが挙げられる。時間表示マークは、そのマークが事後報告コンピュータ７０上で受信される時に、メインカテゴリの見出し、サブカテゴリの見出し、および時間コードインデックスを含むデータフィールドとして定義される。各マークが選択された後、時間表示マークのデータは事後報告コンピュータ７０上に記憶され、マーキング装置５０は次の時間マークに備えるために時間マークのカテゴリのメインメニューに戻る。人間的要因マークのサブカテゴリには、「ブリーフィング（事前の最終打ち合わせ）（briefing）」、「照会（Inquiry）／主張（Assertion）／弁護（advoca cy）」、「乗務員の自己批評（Crew Self Crtique）」、「コミニュケーション（Communications）／決断（Decisions）」、「リーダシップ（Leadership）／指導者に従う能力（Followership）」、「人間相互の関係（Interpersonal Rela tions）」、「準備（Preparation）／計画（Planning）／警戒（Vigilance）」、「作業負荷管理（Workload Management）」などが含まれる。これらのサブカテゴリは,乗務員資源管理助言回報（ＡＣ１２０−５１（Crew Resorce Manage ment Advisory Circular））において連邦航空局（ＦＡＡ:Federal Avitation A dministration））によって推奨されている。これらのサブカテゴリは、それに向けて世界中の飛行機訓練部署が熟達度を獲得するのに努力している基準、ゴール、およびモデルとして採用してきたＣＲＭの所産である。以下の表１から表８は、以上に列挙された人問的要因のサブカテゴリの各々に関するあらかじめ定義された時間表示マークを示すものである。シミュレータにおけるチェックパイロットがサブカテゴリーの中に積極的な振る舞い、または消極的な振る舞いのいずれかを観察したなら、彼／彼女は上記または他の時間表示マークを生成してその観察結果を知らせる。時間表示マークの生成はタッチスクリーン上でこれらの列挙された時間表示マークをタッチすることによって遂行される。加えて、特定のカテゴリまたはサブカテゴリ内であらかじめ定義されていない時間表示マークを生成することができる。たとえば、事後報告の際に再検討の価値があるけれども、まだ特定のあらかじめ定義されたカテゴリに入らない事象の間に何かが発生することになっていたならば、チェックパイロットはそのシミュレートされた事象の間にこの特定のポイントをマークするための一般的な時間表示マークを生成させることができる。時間表示マークの技術的なサブカテゴリには、フライト乗務員がうまく実行するできるはずの最小数の操作が含まれる。これらのサブカテゴリは国よって異なるが、しかし多数のサブカテゴリは世界の航空路で標準的となっている。一般的に、これらのサブカテゴリには、、「離陸拒絶（Rejected Takeoff）」、「Ｖ１カット（V1 Cut）」、「エリア出発（Area Departure）」、「エリア到着（Area Arrival）」、「不正確アプローチ（Non Precision Approaches）」、「ホールディング（Holding）」、「ＩＬＳアプローチ（ILS Approarches）」、「失敗アプローチ（Missed Approarches）」、「着陸（Landings）」、「風のシア（Wind shear）」が含まれるが、これらに限定はされない。示されたように、こうしたサブカテゴリの様々なサブカテゴリが存在する。シミュレータにおけるチェックパイロットは技術的サブカテゴリのいずれかから時間表示マークを選択することができる。「ＬＯＦＴ」は「航路指向フライト訓練（Line Oriented Flight Training）」の頭字語である。航空産業は、技術的な熟達度を主にした操作ではなく、実際の航路運転（Line Operations）に密接に関連したシミュレーションを志向している。「航路運転（Line Operations）」という用語は、旅客とともに飛行することを意味している。操縦能力、訓練、実地、および評価よりむしろ人間的要因の訓練と評価に重きが置かれている。「ＬＯＦＴ」事象誘因(Loft event trigge r)とは、模擬フライト演習に導入され、特に人間的要因事象を導入するように設計された外部事象として定義される。たとえば、エンジンオイルの温度ゲージは模擬フライトの間に不安定な読みを示し、フライト乗務員の注意を散漫にするかもしれない。注意が散漫であると、作業負荷の管理あるいはフライト乗務員同士のコミニュケーションを失敗させる結果になるかもしれない。事後報告の間の焦点は、フライトが注意散漫にもかかわらず首尾よく継続されるように注意の散漫を管理できるかにある。シミュレータにおけるチェックパイロットはＬＯＦＴカテゴリまたはサブカテゴリから時間表示マークを選択することができる。「自動検出（AutoDetect）」には様々な自動的に生成された時間表示マークのサブカテゴリが含まれる。経験的にサブカテゴリには、チェックパイロットがあるシミュレータ機能を開始するときと、ある機能パラメータが越えられたときが含まれる。たとえば、時間表示マークは、チェックパイロットがシミュレータに風のシアを誘発するように要求するときに自動的に生成されるようにすることができる。別の例として、時間表示マークは、航空機が特定高度で特定速度を越えて操縦されたときに自動的に生成されるようにすることができる。自動的に生成された時間表示マークは多数であり得、ユーザが本発明を特定のニーズにカスタマイズすることが期待される。次に図５を参照して、事後報告の間に時間表示マークのリスト８３から特定の時間表示マークを選択するための事後報告室コンピュータのディスプレイ８２を説明する。ユーザは「マーク数入力（Enter Mark #）」と表示された場所で時間表示マーク数を入力し、キーボードまたはマウスを操作し、選択されたマークによって表される時点において様々なデータストリームの再生を開始させる。スクリーン８２において「次ページ（next page）」と「前ページ（previous page）」などを使ってユーザは時間マークの付加的なスクリーン列挙を見ることができる。あるいはその代わりに、特定マークにおける経過タイムの表示を、選択された経過タイムからの再生の制御とともに表示されるようにすることができる。図示されているように、特定の記録されたフライト演習の間の時点を表示する時間コード８４は、各時間表示マークに関連している。加えて、マークカテゴリ８５とサブカテゴリ８６の両方が各時間表示マークに関連する。たとえば、図５に示されたように、特定のフライト演習に入ってから１０秒経過した時点で、時間マークが「Ｖ１カット（V1 Cut）」の技術的操作（maneuver）に対して生成された。事後報告の間にこのマークを選択すると、図４に図示されたディスプレイが、デジタル様式かつ時間同期的に、フライト乗務員、飛行機姿勢、および様々なフライト計測の、フライト演習に入ってから１０秒経過した時点から始まる映像の再生を行う。しかしながら、本発明によれば、１０秒マークの前、後、およびその時点において、始め、そして終わることができるように構成可能になるように再生することが許される。次に図６を参照して、事後報告の間に時間表示マークを選択するための事後報告室コンピュータのディスプレイ８８を説明する。図示されたスクリーンディスプレイはフライト演習の特定区分における航空機の高度についてのプロット９１を表示している。高度（フィート単位、１フィート＝３０．４８ｃｍ）が「ｙ」軸８９に、時間が「ｘ」軸９０に沿ってプロットされている。垂直マーク９２は模擬フライト演習の間にマーキング装置５０を使って生成された時間表示マークを表す。模擬フライト演習の間に、マークはシミュレータによって自動的に生成されたもの、またはすでに説明したようにチェックパイロットによって生成されたもののいずれかである。事後報告の間に、ユーザは、マウスを使ってマーク上を「クリック」することによって特定のマークを選択する。選択されたとき、その時点で起こったものの詳細をすでに説明したように事後報告室コンピュータのモニタ上に表示することができる。加えて、マークが選択されるとき、選択された時間表示マークに関するデータを含むウィンドウが表示されることが好ましい。時間表示マークは認識が容易になるようにマークのタイプに基づいて彩色符号化される。たとえば、図６の垂直マークのすべてまたはいくつかのもの９２はマゼンタで、技術的マークを表すものとすることができる。図６の垂直マークのすべてまたはいくつかのもの９２は赤で、人間的要因のマークを表すものとすることができる。図６の垂直マークのすべてまたはいくつかのもの９２は白で、自動検出マークを表すものとすることができる。加えて、スクリーンはズームインおよびズームアウトすることができ、スクリーンの領域がマークによって雑然となる場合に使用を容易にさせる。次いで図７を参照する。マーキング装置のディスプレイ上のメインメニュー５２には音声認識のカテゴリが含まれる。フライト乗務員の間の音声コミニュケーションを録音することによって生成された音声データストリームは、音声認識ソフトウェアを使用して解析されるようにすることができる。当業者には知られているように、音声データストリームの単語、音節、および他の音声部分を音声認識ソフトウェアを使用して選択的に位置を捜し当てるようにすることができる。キーワード検索は、音声データストリームの選択部分の位置を捜し当てるのを容易にするために実行されることが好ましい。たとえば、模擬演習の間に乗務員が「中止（abort）」とか、「火災（fire）」とかの単語を使用したかどうかを決定するために検索を実行する。音声データストリームの選択的に位置を捜し当てられた単語と他の部分が時間表示マークとして役割を果し、以後の検索のために記憶されるようにすることができる。本発明の他の実施態様では、フライト乗務員の適切な振る舞いの映像例は、模擬演習の間の特定の事象に対して即座に利用可能なものとすることができる。たとえば、セッション中にＣＲＭエラーが発生したとき、システムは、もし事後報告またはブリーフィングの間に求められれば、その特定の事象についての適切な乗務員の行動／相互のやりとりの映像例を使って応答するようにすることができる。本発明によるシステムおよび方法は様々な事象に対して教育ツールとして使用できる。たとえば、外科手術中に、ビデオカメラを用いて事象を記録できる。本システムは、モニタ、人工呼吸器などのような手術の間に使用される計測器と共に、ビデオカメラとも接続するように構成することができる。映像および／または音声信号はデジタル化され、記憶される。続いて、記憶データと計測データを表示し、それによって外科医チームの行動／相互のやりとりを様々な計測の読みと同時に示すことができる。最終結果は、外科医チームに事後報告させる際の使用と訓練とのために価値のある教育的補助手段として利用できる。本発明は、訓練演習と現実の事象を事後報告するための現存のツールに対する著しい改善である。本発明は、訓練を受ける者に対して、技術的側面と人間的要因的側面の両方に関して彼らの能力を単一的かつ統合的に表示することによって、彼らの訓練経験または作業経験を「再体験（relive）」させることを可能にし、それにより訓練の効率および効果を増大させる。以上の説明は本発明を具体的にわかり易く説明するために与えられ、限定するためのものではない。本発明に関する２、３の具体例が説明されてきたが、当業者は、本発明の新規的な教えと利点から大きくかけ離れることなく、本明細書の実施態様において多くの修正を行うことが可能であることは難なく認識できよう。したがって、こうしたすべての修正は以下の発明の請求の範囲の内に包含されると解される。請求の範囲における機能により規定する表現は、ここに列挙された機能とその構造的な均等物のみならず均等な構造を実現するものとして、本明細書に説明された構造を包含するものと解される。それ故、上記説明は本発明を説明するものであって、開示された特定の実施態様に限定されるものではないこと、そして、開示された実施態様に対する修正は、他の実施態様は言うに及ばず、以下の発明の請求の範囲に包含されるものと解されることが理解される。本発明は、以下の請求の範囲により定義される。

【手続補正書】特許法第１８４条の８第１項【提出日】平成１０年４月２７日（１９９８．４．２７）【補正内容】おけるエンジン故障がある。技術的な作業であるとよく考えられているが、フライト乗務員、管制塔、およびキャビン乗務員との間での正確な情報伝達が必要とされる。人間的要因の知識と能力に関してフライト乗務員の熟達度を増進させることは「コックピット資源管理（ＣＲＭ（cockpit resource management））」訓練として知られるようになった。ＣＲＭ訓練では、一般的にフライトシミュレーター訓練演習を、任務終了後あるいは事後の報告（debriefing）の間にフライト乗務員が再生したり再検討するために、ビデオテープに記録する。ビデオカメラを備えたシミュレーターは、フライト乗務員が様々な緊急事態における彼らのコミニュケーション能力とその他の人間的要因の能力を研ぎ澄ませるを助ける。残念ながら、フライトシミュレータ演習を記録するための従来のビデオカセットレコーダー（ＶＣＲ）技術は現在のところ、事後報告の際にはしばしば不十分である。ビデオテープに記録された事象の特定部分を捜し当てたり、何回もビデオテープの一部分を再生するには、頻繁に巻き戻しと先送りが必要となる。ビデオテープの異なる部分の間を素早く後ろおよび前にジャンプすることが難しいので、ある程度の時間のずれが一般的に存在する。事後報告目的のためにシミュレータ訓練演習を捕らえる（capture）ために従来のＶＣＲ技術を使用することにおける別の欠点は、ビデオカメラを使って、様々な計器によって示されるフライトデータ、シミュレータの詳細、およびフライト乗務員の行動を同時に捕らえることがやや難しいことである。米国特許第５，４６７，２７４号には、航空機の操縦を事後報告するための方法が記述されている。すでに説明したように、航空機の操縦はビデオレコーダと音声レコーダの両方によって記録され、機上搭載ビデオレコーダ（ＡＶＴＲ: ai rborne videotape recorder）に保存される。ＡＶＴＲは選択されたフライトデータも関連する時間パラメータとともに記録する。操縦の事後報告の際に、映像信号、音声信号、およびフライトパラメータに関係するその他の信号などの、記録された様々な信号は、同期化されて３次元的なディスプレイ上に表示される。公開されたＰＣＴ出願ＷＯ９５／２５３１３号（以下、’３１３出願）は事後報告システムおよび方法に向けられたものではないが、代わりに、コンピュータによって統合された電話などの様々なマルチメディア応用において必要とされる、複数のデータストリームを同期化し、かつ指定するための方法および装置を記述している。’３１３出願の装置は、各々のデータストリームの状態（ステータス）を追跡するセレクタ（selector）を備える。加えて、スタートポインタとエンドポインタが各データストリームに付随している。システム時間がひとたびそれぞれのデータストリームのスタート時間に等しくなると、セレクタは状態を更新して、スタート時間に達したかどうかを知らせる。各データストリームは一般的にトリガ条件（trigger condition）も含む。スタート時間に到達すると、セレクタはそれによってトリガ条件が満足されたかを決定し、もしそうならば、それぞれのデータストリームを一つのプレイアウトデバイス（playout devaice）に送る。複数のデータストリームを同期化するために、データストリームのトリガ条件は、２つ以上のデータストリームのスタート時間が、各データストリームが同時にプレイアウトデバイスに送り届けられるように、到達されることを要求する。発明の目的と概要したがって、本発明の目的は改良された事後報告（任務終了後の報告）システムおよび方法を提供することにある。本発明の他の目的は、従来のＶＣＲ技術の限界と欠点を克服する、改良された事後報告システムおよび方法を提供することにある。請求の範囲（補正）１．長い期間にわたって発生する事象に関するとともに、該事象についての少なくとも一つの側面に関する時間順の情報を含む複数のデータストリームを記録する手段（６０）を備えた事象に関する事後報告システム（１０）であって、前記記録手段（６０）と共働して作動して、関心事項が発生する時点における前記長期間の間の離散的な時点をマークするとともに、あるカテゴリにそれぞれの事項の特徴に基づいて前記マークされた時点の各々を関連づけるカテゴリ化マーク手段（５０）と、前記マーク手段（５０）とそれぞれのカテゴリの選択に応じて、該選択されたカテゴリにおけるマークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリに関連する事象の部分が表示されるように、該選択されたカテゴリにおける前記マークされた時点について前記データストリームから検索された情報を表示するための表示手段（７０）とを備えたことを特徴とする声象事後報告システム。２．前記事象が模擬の航空機操縦であるような航空機操縦を模擬するための航空機フライトシミュレータ（２０）をさらに備えたことを特徴とする請求項１に記載の事象事後報告システム（１０）。３．地上基地から発進する輸送手段の操縦に使用されることを特徴とする請請求項１に記載の事象事後報告システム（１０）。４．製造設備の監視に使用されることを特徴とする請求項１に記載の事象事後報告システム（１０）。５．前記関連したカテゴリには、前記事象の関係者の行動に関する情報が含まれることを特徴とする請求項１に記載の事象事後報告システム（１０）。６．前記関連したカテゴリには、前記事象の技術的パラメータに関する情報が含まれることを特徴とする請求項１に記載の事象事後報告システム（１０）。７．前記同期的表示手段（７０）は、前記マークされた時点から始まって、その後も時間順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示するための手段から成ることを特徴とする請求項１に記載の事象事後報告システム（１０）。８．前記記録手段（６０）は、事象関係者の行動についての映像データストリームを生成するための映像記録手段（２４）と、事象関係者の音声的コミュニケーションについての音声データストリームを生成するための音声記録手段（２４）と、様々な事象監視計器からの計測データストリームを生成するための計測記録手段とを含んで成ることを特徴とする請求項１に記載の事象事後報告システム（１０）。９．前記同期的表示手段（７０）は複数のゾーンを有するディスプレイ（７２）から成るとともに、前記映像および計測データストリームは前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示されることを特徴とする請求項８に記載の事象事後報告システム（１０）。１０．前記同期的表示手段（７０）は、前記音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するための手段を備えたことを特徴とする請求項９に記載の事象事後報告システム（１０）。１１．前記演奏手段は、選択的に前記音声データストリームの部分の位置を捜し当てる音声認識手段をさらに備えたことを特徴とする請求項１０に記載の事象事後報告システム（１０）。１２．前記マーク手段（５０）は、前記長期間の間の時点に関するユーザ確認に反応することを特徴とする請求項１に記載の事象事後報告システム（１０）。１３．前記同期的表示手段（７０）は、選択された計測器の外観を表示するための手段（７５）を備えたことを特徴とする請求項１に記載の事象事後報告システム（１０）。１４．長期間にわたって発生する事象に関するとともに、該長期間にわたる事象についての少なくとも一つの側面に関する時間順の情報を含む複数のデータストリームを記録する手段（６０）を備えた事象に関する事後報告システム（１０）であって、少なくとも一つの前記側面が所定の判定基準を満足する前記長期間における時点を自動的にマークするための自動マーク手段（５０）と、前記自動マーク手段に応じて、前記自動的にマークされた時点に基づいて前記記録されたデータストリームから情報を検索し、少なくとも一つの前記側面が所定の判定基準を満足する間の前記事象の部分が表示されるように、前記データストリームから検索された情報を表示するための表示手段（７０）とを備えたことを特徴とする事象事後報告システム。１５．前記事象が模擬の航空機操縦であるような航空機操縦を模擬するための航空機フライトシミュレータ（２０）をさらに備えたことを特徴とする請求項１４に記載の事象事後報告システム（１０）。１６．地上基地から発進する輸送手段の操縦に使用されることを特徴とする請求項１４に記載の事象事後報告システム（１０）。１７．製造設備の監視に使用されることを特徴とする請求項１４に記載の事象事後報告システム（１０）。１８．前記同期的表示手段（７０）は、前記マークされた時点から始まって、その後も時間順に継続されるように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示するための手段を備えたことを特徴とする請求項１４に記載の事象事後報告システム（１０）。１９．前記記録手段（６０）は、事象関係者の行動についての映像データストリームを生成するための映像記録手段（２４）と、事象関係者の可聴的コミュニケーションについての音声データストリームを生成するための音声記録手段（２４）と、様々な事象監視計測器からの計測データストリームを生成するための計測記録手段とから成ることを特徴とする請求項１４に記載の事象事後報告システム（１０）。２０．前記同期的表示手段（７０）は複数のゾーンを有するディスプレイ（７２）を備えるとともに、前記映像および計測データストリームは前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示されることを特徴とする請求項１９に記載の事象事後報告システム（１０）。２１．前記同期的表示手段（７０）は、音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するための手段を備えたことを特徴とする請求項２０に記載の事象事後報告システム（１０）。２２．前記長期間の間に時点をマークするとともに、あるカテゴリに該マークされた時点を関連させるための手段（５０）をさらに備えたことを特徴する請求項１４に記載の事象事後報告システム（１０）。２３．前記同期的表示手段（７０）は、選択された計測器の外観を表示するための手段（７５）を備えたことを特徴とする請求項１４に記載の事象事後報告システム（１０）。２４．長い期間にわたって発生する事象に関するとともに、その各々が該事象についての少なくとも一つの側面に関する時間順の情報を含む複数のデータストリームを記録すること（１００）を含む事象の事後報告のための方法であって、前記事象において関心事項が発生する離散的な時点を特定するステップと、関心事項が発生する時点において、複数のデータストリームを記録する前記ステップの際にそれらの離散的な時点をマークするステップ（２００）と、前記マークされた時点に基づいて前記記録されたデータストリームから情報を検索し、前記事象の選択部分が表示されるように前記データストリームから検索情報を時間同期的に表示するステップ（３００）とを含んで成ることを特徴とする事象事後報告方法。２５．前記マークするステップ（２００）は、前記側面の少なくと一つが所定の判定基準を満足する間に前記事象の部分を表示することができるように、前記側面の少なくとも一つが所定の判定基準を満足する時点で前記複数のデータストリームを記録する前記ステップ（１００）の間に該当する離散的な時点を自動的にマークすること（２１２）が含まれることを特徴とする請求項２４に記載の事象事後報告方法。２６．時点をマークする前記ステップ（２００）は、関心事項が発生する前記長期間の間における離散的な時点をマークすることと、前記関心事項のそれぞれ特徴に基づいて、あるカテゴリに前記マークされた時点の各々を関連づけること（２０８）と、選択されたカテゴリにおけるマークされた時点に基づいて前記記録されたデータストリームから情報を検索し、前記選択されたカテゴリに関連する事象の部分が表示されるように前記記録されたデータストリームからの前記検索された情報を表示することとが含まれることを特徴とする請求項２４に記載の事象事後報告方法。２７．一カテゴリに関連づける前記ステップ（２０８）には、前記事象の関係者の行動に関するカテゴリに前記マークされた時点を関連づけることが含まれることを特徴とする請求項２６に記載の事象事後報告方法。２８．一カテゴリに関連づける前記ステップ（２０８）には、前記事象の技術的パラメータに関するカテゴリに関連づけることが含まれることを特徴とする請求項２６に記載の事象事後報告方法。２９．前記事象が模擬の航空機操縦であるように航空機操縦を模擬するステップをさらに備えたことを特徴とする請求項２４に記載の事象事後報告方法。３０．地上基地から発進する輸送手段の操縦に使用されることを特徴とする請請求項２４に記載の事象事後報告方法。３１．製造設備の監視に使用されることを特徴とする請求項２４に記載の事象事後報告方法。３２．前記マークされた時点に基づいて前記データストリームから情報を検索する前記ステップ（３００）は、前記マークされた時点から始めて、その後も時間順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示すること（３０６）が含まれることを特徴とする請求項２４に記載の事象事後報告方法。３３．事象に関する複数のデータストリームを記録する前記ステップ（１００）は、事象関係者の行動についての映像データストリームを生成することと、事象関係者の可聴的コミュニケーションについての音声データストリームを生成することと、様々な事象監視計器からの計測データストリームを生成することとを含んで成ることを特徴とする請求項２４に記載の事象事後報告方法。３４．検索情報を検索しかつ表示する前記ステップ（３００）は、前記映像および計測データストリームを、複数のゾーンのそれぞれ一つにおいて時間同期的に表示することと含んで成ることを特徴とする請求項３３に記載の事象事後報告方法。３５．音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するステップをさらに備えたことを特徴とする請求項３４に記載の事象事後報告方法。３６．前記演奏ステップは、選択的に前記音声データストリームの音声部分の位置を捜し当てるステップをさらに備えたことを特徴とする請求項３５に記載の事象事後報告方法。

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 5/91 Ｚ (81)指定国ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＤＥ，ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，ＩＴ，ＬＵ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ，ＣＦ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＭＬ，ＭＲ，ＮＥ，ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＧＨ，ＫＥ，ＬＳ，ＭＷ，ＳＤ，ＳＺ，ＵＧ)，ＥＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ，ＲＵ，ＴＪ，ＴＭ)，ＡＬ，ＡＭ，ＡＴ，ＡＴ，ＡＵ，ＡＺ，ＢＡ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，ＣＵ，ＣＺ，ＣＺ，ＤＥ，ＤＥ，ＤＫ，ＤＫ，ＥＥ，ＥＥ，ＥＳ，ＦＩ，ＦＩ，ＧＢ，ＧＥ，ＨＵ，ＩＬ，ＩＳ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ，ＫＺ，ＬＣ，ＬＫ，ＬＲ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＤ，ＭＧ，ＭＫ，ＭＮ，ＭＷ，ＭＸ，ＮＯ，ＮＺ，ＰＬ，ＰＴ，ＲＯ，ＲＵ，ＳＤ，ＳＥ，ＳＧ，ＳＩ，ＳＫ，ＳＫ，ＴＪ，ＴＭ，ＴＲ，ＴＴ，ＵＡ，ＵＧ，ＵＳ，ＵＺ，ＶＮ

Claims

【特許請求の範囲】１．長い期間にわたって発生するある事象に関するとともに、該事象についての少なくとも一つの側面に関する時間順の情報を含む複数のデータストリームを記録する手段と、前記長期間の間のある時点をマークするとともに、該マークされた時点をあるカテゴリに関連させるためのカテゴリ化されたマーク手段と、前記マーク手段に反応して、ある選択されたカテゴリにおけるマークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリにおける前記マークされた時点について前記データストリームから検索された情報を表示するための表示手段とを備えたことを特徴とする事象事後報告システム。２．前記関連したカテゴリには、前記事象の関係者の行動に関する情報が含まれることを特徴とする請求項１に記載の事象事後報告システム。３．前記関連したカテゴリには、前記事象の技術的パラメータに関する情報が含まれることを特徴とする請求項１に記載の事象事後報告システム。４．前記同期的表示手段は、前記マークされた時点から始まって、その後も時間順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示するための手段から成ることを特徴とする請求項１に記載の事象事後報告システム。５．前記記録手段は、事象関係者の行動についての映像データストリームを生成するための映像記録手段と、事象関係者の音声的コミュニケーションについての音声データストリームを生成するための音声記録手段と、様々な事象監視計器からの計測データストリームを生成するための計測記録手段とを含んで成ることを特徴とする請求項１に記載の事象事後報告システム。６．前記同期的表示手段は複数のゾーンを有するディスプレイから成るとともに、前記映像および計測データストリームは前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示されることを特徴とする請求項５に記載の事象事後報告システム。７．前記同期的表示手段は、前記音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するための手段を備えたことを特徴とする請求項６に記載の事象事後報告システム。８．前記演奏手段は、選択的に前記音声データストリームの部分の位置を捜し当てる音声認識手段をさらに備えたことを特徴とする請求項６に記載の事象事後報告システム。９．前記マーク手段は、前記長期間の間の時点に関するユーザ確認に反応することを特徴とする請求項１に記載の事象事後報告システム。１０．前記同期的表示手段は、選択された計測器の外観を表示するための手段を備えたことを特徴とする請求項１に記載の事象事後報告システム。１１．長期間にわたって発生する事象に関するとともに、その各々が該事象についての少なくとも一つの側面に関する時間順の情報を含む、複数のデータストリームを記録する手段と、少なくとも一つの前記側面が所定の判定基準を満足する前記長期間における時点をマークするための自動マーク手段と、前記自動マーク手段に応じて、自動的にマークされた時点に基づいて前記データストリームから情報を検索し、該データストリームから検索された情報を表示するための表示手段とを備えたことを特徴とする事象事後報告システム。１２．前記同期的表示手段は、前記マークされた時点から始まって、その後も時間順に継続されるように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示するための手段を備えたことを特徴とする請求項１１に記載の事象事後報告システム。１３．前記記録手段は、事象関係者の行動についての映像データストリームを生成するための映像記録手段と、事象関係者の可聴的コミュニケーションについての音声データストリームを生成するための音声記録手段と、様々な事象監視計測器からの計測データストリームを生成するための計測記録手段とから成ることを特徴とする請求項１１に記載の事象事後報告システム。１４．前記同期的表示手段は複数のゾーンを有するディスプレイを備えるとともに、前記映像および計測データストリームは前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示されることを特徴とする請求項１３に記載の事象事後報告システム。１５．前記同期的表示手段は、音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するための手段を備えたことを特徴とする請求項１４に記載の事象事後報告システム。１６．前記長期間の間に時点をマークするとともに、あるカテゴリに該マークされた時点を関連させるための手段をさらに備えたことを特徴する請求項１１に記載の事象事後報告システム。１７．前記同期的表示手段は、選択された計測器の外観を表示するための手段を備えたことを特徴とする請求項１１に記載の事象事後報告システム。１８．航空機の操縦を模擬操縦するための航空機シミュレータと、模擬の航空機操縦に関するとともに、その各々が該模擬の航空機操縦の少なくとも一つの側面に関する複数のデータストリームを記録するための手段と、前記模擬の航空機操縦の間に時間をマークするとともに、あるカテゴリに該マークされた時間を関連させるためのカテゴリ化されたマーク手段と、前記マーク手段に応じて、選択されたカテゴリにおけるマークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリにおける前記マークされた時点について前記データストリームから検索された情報を表示するための表示手段とを備えたことを特徴とする航空機操縦シミュレータ用事象事後報告システム。１９．前記関連したカテゴリには、前記模擬航空機操縦の関係者の行動に関する情報が含まれることを特徴とする請求項１８に記載の航空機操縦シミュレータ用事象事後報告システム。２０．前記関連したカテゴリには、前記模擬航空機操縦の技術的パラメータに関する情報が含まれることを特徴とする請求項１８に記載の航空機操縦シミュレータ用事象事後報告システム。２１．前記同期的表示手段は、前記マークされた時点から始めて、その後も時間順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示するための手段から成ることを特徴とする請求項１８に記載の航空機操縦シミュレータ用事象事後報告システム。２２．前記記録手段は、事象関係者の行動についての映像データストリームを生成するための映像記録手段と、事象関係者の可聴的コミュニケーションについての音声データストリームを生成するための音声記録手段と、様々な事象監視計測器からの計測データストリームを生成するための計測記録手段とを含んで成ることを特徴とする請求項１８に記載の航空機操縦シミュレータ用事象事後報告システム。２３．前記同期的表示手段は複数のゾーンを有するディスプレイを備えるとともに、前記映像および計測データストリームは前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示されることを特徴とする請求項２２に記載の航空機操縦シミュレータ用事象事後報告システム。２４．前記同期的表示手段は、音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するための手段を備えたことを特徴とする請求項２３に記載の航空機操縦シミュレータ用事象事後報告システム。２５．前記演奏手段は、選択的に前記音声データストリームの部分の位置を捜し当てる音声認識手段をさらに備えたことを特徴とする請求項２４に記載の航空機操縦シミュレータ用事象事後報告システム。２６．前記マーク手段は、前記模擬航空機操縦の間の時点に関するユーザ確認に反応することを特徴とする請求項２４に記載の航空機操縦シミュレータ用事象事後報告システム。２７．前記同期的表示手段は、選択された航空機操縦計器の外観を表示するための手段を備えたことを特徴とする請求項１８に記載の航空機操縦シミュレータ用事象事後報告システム。２８．事象に関する事後報告のための方法であって、長期間にわたって発生する事象に関するとともに、その各々が該事象についての少なくとも一つの側面に関する時間順の情報を含む、複数のデータストリームを記録するステップと、少なくとも一つの前記側面が所定の判定基準を満足する前記長期間における時点を自動的にマークするステップと、前記自動的にマークされた時点に基づいて前記データストリームから情報を検索し、該データストリームからの検索された情報を表示するステップとを含んで成ることを特徴とする事象事後報告方法。２９．前記マークされた時点に基づいて前記データストリームから情報を検索する前記ステップは、前記マークされた時点から始めて、その後も時間順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示することが含まれることを特徴とする請求項２８に記載の事象事後報告方法。３０．事象に関する複数のデータストリームを記録する前記ステップは、事象関係者の行動についての映像データストリームを生成することと、事象関係者の可聴的コミュニケーションについての音声データストリームを生成することと、様々な事象監視計器からの計測データストリームを生成することとを含んで成ることを特徴とする請求項28に記載の事象事後報告方法。３１．検索情報を検索しかつ表示する前記ステップは、前記映像および計測データストリームを、複数のゾーンのそれぞれ一つにおいて時間同期的に表示することと含んで成ることを特徴とする請求項３０に記載の事象事後報告方法。３２．音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するステップをさらに備えたことを特徴とする請求項３１に記載の事象事後報告方法。３３．前記演奏ステップは、選択的に前記音声データストリームの音声部分の位置を捜し当てるステップをさらに備えたことを特徴とする請求項３２に記載の事象事後報告方法。３４．前記長期間の間の時点を自動的にマークする前記ステップは、一カテゴリに前記マークされた時点を関連づけることと、選択された一カテゴリにおけるマークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリにおける前記マークされた時点に関して前記データストリームから検索された情報を表示することがさらに含まれることを特徴とする請求項３２に記載の事象事後報告方法。３５．一カテゴリに関連づける前記ステップには、前記事象の関係者の行動に関するカテゴリに前記マークされた時点を関連づけることが含まれることを特徴とする請求項３４に記載の事象事後報告方法。３６．一カテゴリに関連づける前記ステップには、前記事象の技術的パラメータに関するカテゴリに関連づけることが含まれることを特徴とする請求項３４に記載の事象事後報告方法。３７．航空機のフライトシミュレータ訓練を事後報告するための方法であって、航空機の操縦を模擬操縦することと、前記模擬の航空機操縦に関するとともに、その各々が該模擬の航空機操縦の少なくとも一つの側面に関する複数のデータストリームを記録することと、前記模擬の航空機操縦の間に時点をマークするとともに、あるカテゴリに該マークされた時点を関連させることと、選択されたカテゴリにおけるマークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリにおける前記マークされた時点に関して前記データストリームから検索された情報を表示することから成ることを特徴とする航空機フライトシミュレータ訓練における事後報告方法。３８．マークされた時点に基づいて前記データストリームから情報を検索する前記ステップは、前記マークされた時点から始めて、その後も時点順に継続するように前記データストリームから情報を検索し、該データストリームから検索された情報を時間同期的に表示することが含まれることを特徴とする請求項３７に記載の航空機フライトシミュレータ訓練における事後報告方法。３８．事象に関する複数のデータストリームを記録する前記ステップは、フライトシミュレータ訓練の関係者の行動についての映像データストリームを生成することと、フライトシミュレータ訓練の関係者の可聴的コミュニケーションについての音声データストリームを生成することと、フライトシミュレータフライト訓練の様々な監視計測器からの計測データストリームを生成することとを含んで成ることを特徴とする請求項３７に記載の航空機フライトシミュレータ訓練における事後報告方法。４０．情報を検索しかつ表示する前記ステップは、前記映像および計測データストリームを、前記複数のゾーンのそれぞれの一つにおいて時間同期的に表示することを含んで成ることを特徴とする請求項３９に記載の航空機フライトシミュレータ訓練における事後報告方法。４１．音声データストリームを前記表示された映像および計測データストリームと時間同期的に演奏するステップをさらに備えたことを特徴とする請求項４０に記載の航空機フライトシミュレータ訓練における事後報告方法。４２．前記演奏ステップは、選択的に前記音声データストリームの音声部分の位置を捜し当てるステップをさらに備えたことを特徴とする請求項４１に記載の航空機フライトシミュレータ訓練における事後報告方法。４３．前記長期間の間の時点を自動的にマークする前記ステップは、あるカテゴリに前記マークされた時点を関連づけることと、選択されたカテゴリにおける前記マークされた時点に基づいて前記データストリームから情報を検索し、該選択されたカテゴリにおける前記マークされた時点に対して前記データストリームから検索された情報を表示することとがさらに含まれることを特徴とする請求項３７に記載の航空機フライトシミュレータ訓練における事後報告方法。４４．あるカテゴリに関連づける前記ステップには、前記フライトシミュレータ訓練の関係者の行動に関するカテゴリに前記マークされた時点を関連づけることが含まれることを特徴とする請求項４３に記載の航空機フライトシミュレータ訓練における事後報告方法。４５．あるカテゴリに関連づける前記ステップには、前記フライトシミュレータ訓練の技術的パラメータに関するカテゴリに関連づけることが含まれることを特徴とする請求項４３に記載の航空機フライトシミュレータ訓練における事後報告方法。４６．少なくとも一つの前記側面が所定の判定基準を満足する、前記長期間における時点をマークすることと、前記自動的にマークされた時点に基づいて前記データストリームから情報を検索し、該データストリームから検索された情報を表示することとがさらに含まれることを特徴とする請求項37に記載の航空機フライトシミュレータ訓練における事後報告方法。