JP6847168B2 - 動画再生装置及び動画再生方法 - Google Patents

Description

本発明は、動画再生装置及び動画再生方法に係り、特に、作業内容を撮影した作業動画を再生しながら作業分析することが可能な動画再生装置及び動画再生方法に関する。

従来、生産ラインにおいてヒト、機械及びモノの動きや時間を「見える化」することで生産現場の作業時間短縮、省力化及びコスト低減を果たすことを目的として、作業内容を撮影した作業動画を再生しながら作業分析することが可能な動画再生装置が知られている。
当該動画再生装置によれば、作業動画を用いた分析結果を基に作業工程の編成を行い、精度の高い作業標準を作成することが可能である。

例えば、特許文献１に記載の作業分析装置は、生産ラインにおける作業者の作業映像を再生しながら各作業工程を作業要素毎に分析するものであって、効率的な生産準備活動を実行することができる。
具体的には、表示画面上においてプレビューセクション上に作業者の作業映像データが表示され、作業時間表セクション上に作業要素リストが表示されて、作業要素の開始時間や終了時間等の属性情報が入力され、タイムラインセクション上に作業工程の時間軸や、作業映像データの再生時点が表示される構成となっている。

特開２０１１−１５０５６９号公報

ところで、上記のような作業分析を目的とする動画再生装置では、ユーザー利便性をより向上させたものが求められていた。

本発明は、上記の課題に鑑みてなされたものであり、本発明の目的は、ユーザー利便性を向上させた動画再生装置及び動画再生方法を提供することにある。

前記課題は、本発明の動画再生装置によれば、複数のフレーム画像から構成される動画を再生する動画再生装置であって、前記動画は、作業内容を撮影した作業動画であって、前記動画再生装置は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能な装置であって、前記作業動画を表示する動画表示部と、ユーザー操作の入力を受け付けて、表示されている前記作業動画をもとに前記作業内容となる作業工程を作業要素に分割して、各作業要素における作業時間を算出する分析実施部と、前記各作業要素における作業時間の情報を表示する作業要素一覧表示部と、前記各作業要素における前記作業時間の合計時間を集計し、該合計時間を表示する合計時間表示部と、表示された前記作業動画を構成するフレーム画像から、所定の前記フレーム画像を選択する画像選択部と、選択された前記フレーム画像に基づくサムネイルを表示するサムネイル表示部と、を備え、前記画像選択部は、表示されている前記作業動画を構成するフレーム画像のうち、前記作業動画に対して設定される時間軸における所定時点の第１フレーム画像と、前記作業動画の再生速度と、前記作業動画の再生時間に応じて設定される時間間隔係数とを積算することで得られる時間間隔を前記所定時点から空けたときに定まる他の所定時点の第２フレーム画像とを選択すること、により解決される。

上記構成の動画再生装置であれば、主に作業分析を目的として利用され、ユーザーとなる分析者の利便性を向上させた動画再生装置を実現できる。
また上記構成により、同じ表示画面上において動画を表示するとともに、動画の中から所定時点のフレーム画像を選択して、選択されたフレーム画像に基づくサムネイルを表示することができる。
そのため、ユーザー利便性を低下させることなく（複数のフレーム画像を大きく表示することなく）、ユーザーが動画の所定時点（例えば、再生時点）における映像を確認しているときに、所定時点から前後した時点における映像も合わせて確認することが可能な動画再生装置となる。
なお、サムネイルとは、上記フレーム画像を縮小した縮小画像であって、必ずしも、表示画面上でユーザーの選択操作が実行されたときに、サムネイルに対応する時点のフレーム画像から動画を再開させるものに限定されなくて良い。

このとき、前記分析実施部は、前記作業動画から、各作業要素における有効動作時間及び無効動作時間を算出した上で、前記有効動作時間にレイティング率を積算することで作業標準時間を算出し、前記作業要素一覧表示部は、前記各作業要素における前記作業標準時間を前記表示画面上に表示し、前記合計時間表示部は、前記各作業要素における前記作業標準時間の合計時間を集計し、該合計時間を前記表示画面上に表示すると良い。
また、前記作業要素一覧表示部は、前記各作業要素に対してヒトの作業内容であるか又は機械の作業内容であるかを分類するための項目となる種別を前記表示画面上に表示すると良い。
上記構成により、ユーザー利便性をより一層向上させることができる。

また、複数のフレーム画像から構成される動画をコンピュータが再生することが可能な動画再生方法であって、前記動画は、作業内容を撮影した作業動画であって、前記動画再生方法は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能であって、前記コンピュータが、前記作業動画を表示する動画表示処理と、ユーザー操作の入力を受け付けて、表示されている前記作業動画をもとに前記作業内容となる作業工程を作業要素に分割して、各作業要素における作業時間を算出する分析実施処理と、前記各作業要素における作業時間の情報を表示する作業要素一覧表示処理と、前記各作業要素における前記作業時間の合計時間を集計し、該合計時間を表示する合計時間表示処理と、表示された前記作業動画を構成するフレーム画像から、所定の前記フレーム画像を選択する画像選択処理と、選択された前記フレーム画像に基づくサムネイルを表示するサムネイル表示処理と、を実行し、前記画像選択処理では、表示されている前記作業動画を構成するフレーム画像のうち、前記作業動画に対して設定される時間軸における所定時点の第１フレーム画像と、前記作業動画の再生速度と、前記作業動画の再生時間に応じて設定される時間間隔係数とを積算することで得られる時間間隔を前記所定時点から空けたときに定まる他の所定時点の第２フレーム画像とを選択する動画再生方法も実現することができる。

本発明によれば、主に作業分析を目的として利用され、ユーザー利便性を向上させた動画再生装置及び動画再生方法を実現することができる。
また、ユーザー利便性を低下させることなく、ユーザーが動画の再生時点における映像を確認しているときに、再生時点から前後した時点における映像も合わせて確認することができる。

本実施形態の作業動画再生システム全体の構成図である。 作業動画再生装置のハード構成図である。 作業動画再生システムのソフト構成図である。 作業要素一覧データの一例を示す図である。 作業動画の再生速度と、選択されるフレーム画像の時間間隔との対応関係を示す再生速度／時間間隔対応データの一例を示す図である。 作業動画の総再生時間と、選択されるフレーム画像の時間間隔係数との対応関係を示す再生時間／時間間隔係数対応データの一例を示す図である。 作業分析画面の一例を示す図である。 再生速度の変更に伴って、フレーム画像を再選択する手順を説明する図である。 再生速度の変更に伴って、フレーム画像を再選択する手順を説明する図である。 本実施形態の作業動画再生方法の処理の一例を示すフロー図である。

以下、本発明に係る実施形態について図１〜図１０を参照して説明する。
本実施形態は、作業内容を撮影した作業動画を再生する作業動画再生装置であって、表示画面上に作業動画を表示し、ユーザー操作を受け付けて再生中の作業動画を停止すると、作業動画の中から、停止直前の再生時点におけるフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像とを選択して、各フレーム画像に基づくサムネイルを同画面上に表示するものであって、また、ユーザー操作によって作業動画の再生速度を変更すると、変更された再生速度に対応させて各フレーム画像の時間間隔を変更することを特徴とする作業動画再生装置の発明に関するものである。
なお、作業動画は、複数のフレーム画像から構成されるものである。

本実施形態の作業動画再生システムＳ全体の構成を図１に示す。
作業動画再生システムＳは、ライン作業において各作業工程の作業内容を撮影して作業動画を記録する複数の撮影装置１と、複数の撮影装置１とネットワークを通じて接続され、撮影装置１から作業動画を示す作業動画データを取得して、作業動画を再生しながら作業工程を分析し、当該分析結果を基に作業標準の内容を示す作業標準データを出力する作業動画再生装置１０と、から主に構成されている。
ここでライン作業とは、一連の作業工程の集合体を示すものであって、例えば、「組み立てライン」等がある。作業工程とは、一連の作業要素の集合体を示すものであり、例えば「エンジン組み付け」、「バンパー取り付け」、「タイヤ取り付け」等がある。
また、作業要素とは、一連の動作の集合体を示すものであり、例えば、「ブッシュを準備」、「ブッシュセット位置を確認」、「ブッシュをセット」、「車体へ組み付け」等がある。動作とは、作業を細分化したときの最小単位を示すものである。

撮影装置１は、例えばビデオカメラであって、図１に示すように、ライン作業において各作業工程の作業内容を撮影可能な位置にそれぞれ設置されている。
撮影装置１は、各作業内容を撮影して作業動画を記録する。そして、当該作業動画を示す作業動画データを作成し、作業動画再生装置１０に向けてデータ送信するものである。

作業動画再生装置１０は、作業分析を行う分析者によって用いられるコンピュータであって、作業動画データが示す作業動画を表示画面上に表示するとともに、ユーザー操作を受け付けて、作業動画の中から所定時点のフレーム画像と、所定時点から所定の時間間隔を前後に空けたときに定まる時点のフレーム画像とを選択して、選択された各フレーム画像に基づくサムネイルを同じ画面上に表示するものである。
また、ユーザー操作を受け付けて作業動画の再生速度を変更し、変更された再生速度に対応させて各フレーム画像の時間間隔を変更し、変更された時間間隔でフレーム画像を再選択した上で、再選択された各フレーム画像に基づくサムネイルを表示するものである。
作業動画再生装置１０は、撮影装置１とデータ通信を行い、撮影装置１から送信された作業動画データを記憶しておくことができる。
また作業動画再生装置１０は、作業動画データに基づいて作業分析、作業編成を行った結果を基に作業標準データを作成し、作業標準データを表示画面上に出力表示するほか、紙媒体で出力印刷することができる。

作業動画再生装置１０のハード構成を図２に示す。
作業動画再生装置１０は、データの演算・制御処理装置としてのＣＰＵと、記憶装置としてのＲＯＭ、ＲＡＭ、及びＨＤＤと、ホームネットワーク又はインターネットを通じて情報データの送受信を行う通信用インターフェイスとを備えたコンピュータである。
また作業動画再生装置１０は、所定の書式で表示される文字又は画像の情報を表示する表示装置と、ＣＰＵに所定の指令を入力するときユーザーによって操作される入力装置と、外付けハードディスク等の記憶媒体装置と、を備えている。また、作業動画再生装置１０は、文字又は画像の情報を出力する印刷装置をさらに備えていても良い。
なお、撮影装置１についても同様のハード構成を備えたコンピュータである。

作業動画再生装置１０のＲＯＭ、ＨＤＤ、及び外部記憶装置には、図３に示すように、コンピュータとして必要な機能を果たすメインプログラムに加えて、作業動画再生プログラムが記憶されており、これらプログラムがＣＰＵによって実行されることにより、作業動画再生装置１０の機能が発揮されることになる。

作業動画再生装置１０のソフト構成を図３に示す。
作業動画再生装置１０は、機能面から説明すると、各種プログラム及び各種データを記憶するデータ記憶部１１と、各撮影装置１から作業動画データを取得するデータ取得部１２と、取得した各作業動画データが示す作業動画を表示画面上に表示する動画表示部１３と、予め記憶された作業要素一覧データに基づく作業要素一覧を表示画面上に表示する作業要素一覧表示部１４と、ユーザー操作を受け付けて再生中の作業動画を停止する動画停止部１５と、表示された作業動画の中から、作業動画に対して設定される時間軸において再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点のフレーム画像とを選択する画像選択部１６と、選択された各フレーム画像に基づくサムネイルを表示画面上に表示するサムネイル表示部１７と、ユーザー操作を受け付けて、表示された作業動画の再生速度を変更する再生速度変更部１８と、変更された再生速度に対応させて、選択されるフレーム画像の時間間隔を変更する時間間隔変更部１９と、を主な構成要素として備えている。
また、表示された作業動画から作業内容を動作分析する分析実施部２０と、分析結果に基づいて作業標準データを出力するデータ出力部２１と、を構成要素として備えている。
これらは、ＣＰＵ、ＲＯＭ、ＲＡＭ、ＨＤＤ、通信用インターフェイス、及び各種プログラム等によって構成されている。

データ記憶部１１には、撮影装置１から取得した作業動画データと、図４に示す作業要素一覧データと、図５に示す再生速度／時間間隔対応データと、図６に示す再生時間／時間間隔係数対応データと、作業標準データとがそれぞれ記憶されている。
なお、データ記憶部１１は、各種プログラム及び各種情報データを保持して格納しておく構成であっても良いし、不図示のデータサーバーから各種プログラム及び各種情報データを読み込んで一時的に格納しておく構成であっても良い。

動画表示部１３は、作業動画再生装置１０の表示ディスプレイ上に図７に示す作業分析画面３０を表示し、作業分析画面３０上において作業動画を表示するものである。
また、作業分析画面３０上に表示された所定のサムネイル３８を選択するユーザー操作を受け付けて、受け付け直前の再生時点におけるフレーム画像から、所定のサムネイル３８に対応する時点におけるフレーム画像へ切り替えた上で、切り替えられたフレーム画像から動画の再生を再開可能にするものである。
また、作業分析画面３０上に表示されたシークバー３２上において現在の再生時点とは異なる時点を指定するユーザー操作を受け付けて、現在の再生時点におけるフレーム画像から、異なる時点におけるフレーム画像へ切り替えた上で、切り替えられたフレーム画像から動画の再生を再開可能にするものである。

分析実施部２０は、ユーザー操作の入力を受け付けて、図７の作業分析画面３０上に表示された作業動画から、作業工程を作業要素に分割して各作業要素の作業時間を算出する。
また、当該作業動画から、ヒト又は機械が作業内容に対して有効な動作をした時間を示す有効動作時間と、無効な動作をした時間を示す無効動作時間とを算出した上で、有効動作時間にレイティング率を積算することで作業標準時間を算出する。

なお、撮影装置１についても機能面から説明すると、図３に示すように、各種プログラム及び各種データを格納するほか、作業動画データを格納するデータ格納部２と、作業動画データを作成するデータ作成部３と、作業動画データを作業動画再生装置１０に向けて発信するデータ発信部４と、を主な構成要素として備えている。

次に、作業動画再生装置１０に記憶される作業要素一覧データ、再生速度／時間間隔対応データ、及び再生時間／時間間隔係数対応データについて、図４〜図６に基づいて詳細に説明する。
作業要素一覧データは、図４に示すように、作業工程において各作業要素の詳細内容を一覧表で示すデータテーブルであって、ユーザー操作の入力を受け付けて各作業要素の詳細内容が作成、更新されるものである。
具体的には、作業要素一覧データには、作業工程の作業要素に対して、ＮＯ．（番号）、作業要素（名称）、種別、スタート、要素時間（作業時間）、有効時間（有効動作時間）、無効時間（無効動作時間）、レイティング（レイティング率）、及び標準時間（作業標準時間）がそれぞれ対応付けられている。
ここで種別とは、各作業要素に対して「１：手作業」、「２：工具作業」及び「３：マシン作業」の分類の中から１つ選択して入力される項目である。

再生速度／時間間隔対応データは、図５に示すように、作業動画の再生速度と、選択されるフレーム画像の時間間隔との対応関係を示すデータテーブルである。
図５の実施例を見ると、作業動画の再生速度が１．０倍速（通常状態）であるとき、選択されるフレーム画像の時間間隔が０．５秒であることを示している。
そして、再生速度が早くなるにつれてフレーム画像の時間間隔が広くなり、また、再生速度が遅くなるにつれてフレーム画像の時間間隔が狭くなることを示している。
詳しく言うと、フレーム画像の時間間隔（秒）は、再生速度（倍速）と、指標となる時間間隔係数とを積算することによって算出される。

再生時間／時間間隔係数対応データは、図６に示すように、作業動画の総再生時間と、選択されるフレーム画像の時間間隔係数との対応関係を示すデータテーブルである。
図６の実施例を見ると、作業動画の総再生時間が６０．０秒以上であって３００．０秒未満（６０．０〜３００．０秒）であるとき、選択されるフレーム画像の時間間隔係数が０．５であることを示している。
そして、総再生時間が長くなるにつれて時間間隔係数が大きくなることを示している。

次に、作業動画再生装置１０の表示ディスプレイに表示される作業分析画面３０について、図７に基づいて詳細に説明する。
作業分析画面３０は、作業動画データが示す作業動画の内容と、作業要素一覧データが示す作業要素一覧表の内容とを主に表示しており、ユーザー操作の入力を受け付けて作業工程の動作分析を実行するための表示画面である。
作業動画の内容は、作業分析画面３０に設けられた動画ウィンドウ３１上に表示されており、実施例を見ると、作業工程１「エンジン組み付け」の中で作業要素４「車体へ組み付け」の動画内容が表示されている。

作業分析画面３０の中で動画ウィンドウ３１よりも下側部分には、再生されている作業動画の再生時点を示すシークバー３２と、ユーザー操作を受け付けて再生中の作業動画を停止するための実行ボタンとなる停止ボタン３３と、ユーザー操作を受け付けて停止中の作業動画を再生するための実行ボタンとなる再生ボタン３４と、が主に表示されている。
実施例を見ると、動画内容が再生時点「４０．００秒」で停止された状態で表示されている。

作業分析画面３０の中で動画ウィンドウ３１よりも左側部分には、再生されている作業動画の再生速度の内容を示す再生速度一覧ウィンドウ３５が表示されている。
再生速度は、ユーザー操作の入力を受け付けて最大８．０倍速から最小０．２倍速まで任意に設定することができる。
実施例を見ると、作業動画の再生速度が１．０倍速で設定されていることが表示されている。

再生速度一覧ウィンドウ３５上に上下方向に並べて表示された数字アイコンは、所定の数字アイコンを選択するユーザー操作を受け付けて、現在の再生速度から、所定の数字アイコンに対応する再生速度へ変更するための実行ボタンとして機能する。
例えば、ユーザー操作を受け付けて数字アイコン「４．０」の実行ボタンが押されると、作業動画の再生速度が、現在の再生速度（例えば、１．０倍速）から、数字アイコン「４．０」に対応する再生速度４．０倍速へ変更される。

作業要素一覧表の内容は、作業分析画面３０の下部分に設けられた作業要素一覧ウィンドウ３６上に表示されている。
実施例を見ると、ユーザー操作の入力を受け付けて、作業工程１の作業要素１に対して、ＮＯ．「１」、作業要素「ブッシュを準備」、種別「１：手作業」、スタート「１．００（秒）」、要素時間「８．００（秒）」、有効時間「８．００（秒）」、無効時間「０．００（秒）」、レイティング「１５０（％）」、及び標準時間「１２．００（秒）」がそれぞれ入力されている。
また、作業要素一覧ウィンドウ３６よりも下側部分には、作業工程の作業時間、有効動作時間、無効動作時間及び標準時間を示す合計時間表示タブ３７が設けられ、作業要素一覧表の入力結果に基づいて自動的に集計される。

ここで動画ウィンドウ３１上には、作業動画の所定時点におけるサムネイル３８ａと、所定時点から所定の時間間隔を前後に空けたときに定まる第１前後時点におけるサムネイル３８ｂ，３８ｃと、各々の第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点におけるサムネイル３８ｄ，３８ｅと、が表示されている。
実施例を見ると、サムネイル３８ａは再生時点のフレーム画像の内容を表示し、サムネイル３８ｂ，３８ｃは、再生時点から時間間隔０．５秒を前後に空けたときに定まる時点のフレーム画像の内容を表示している。またサムネイル３８ｄ，３８ｅは、再生時点から時間間隔１．０秒を前後に空けたときに定まる時点のフレーム画像の内容を表示している。

各サムネイル３８ａ〜３８ｅは、所定のサムネイルを選択するユーザー操作を受け付けて、受け付け直前に表示されている再生時点のフレーム画像から、所定のサムネイルに対応する時点のフレーム画像へ切り替えて、切り替えられたフレーム画像から動画の再生を再開するための実行ボタンとして機能する。
例えば、ユーザー操作を受け付けて作業分析画面３０上に表示されたサムネイル３８ａの実行ボタンが押されると、動画ウィンドウ３１上に表示された作業動画が、再生時点（４０．００秒）のフレーム画像から、サムネイル３８ａに対応する時点（３９．００秒）のフレーム画像へ切り替わって、切り替わったフレーム画像から動画の再生が再開される。

次に、再生速度の変更に伴って、作業動画の中からフレーム画像を再選択する手順を図８、図９に基づいて説明する。
具体例として、総再生時間１００．０秒の作業動画について再生速度が１．０倍速から４．０倍速に変更された場合を挙げる。

まず図８に示すように、再生中の作業動画を停止するユーザー操作の入力がなされると、作業動画を停止したときの再生時点のフレーム画像と、再生時点から時間間隔Ｔを前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から時間間隔Ｔを空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像が選択される。
このとき、時間間隔Ｔ（秒）は、再生速度Ｖ（倍速）と、指標となる時間間隔係数Ｘとを積算することによって算出される値となる。
本実施例においては、総再生時間が１００．０秒であることから、時間間隔係数は、図６の再生時間／時間間隔係数対応データを参照して０．５となる。その結果、時間間隔Ｔは、再生速度１．０（倍速）に時間間隔係数０．５を積算することで０．５（秒）になる。
つまり、選択される５枚のフレーム画像は、再生時点のフレーム画像と、再生時点を基準として前後に時間間隔０．５秒を順に空けたときに定まるフレーム画像となる。

なお、作業動画は、例えば１秒当たりのフレーム画像数が３０枚（フレームレートが３０ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ））で設定されている。
その場合、再生時点を基準として時間間隔０．５秒を空けたときに定まるフレーム画像とは、再生時点のフレーム画像から数えて１５番目のフレーム画像になり、当該１５番目のフレーム画像が選択される。

そして図９に示すように、ユーザー操作の入力を受け付けて作業動画の再生速度が１．０倍速から４．０倍速に変更されると、変更された再生速度に対応させて時間間隔Ｔについても時間間隔Ｔ´に変更される。
時間間隔Ｔ´は、再生速度４．０（倍速）に時間間隔係数０．５を積算することで２．０（秒）にとなる。
その結果、再選択される５枚のフレーム画像は、再生時点のフレーム画像と、再生時点を基準として前後に時間間隔１．０秒を順に空けたときに定まる第１前後時点のフレーム画像と、第２前後時点のフレーム画像となる。

上記構成の動画再生装置１０であれば、ユーザーとなる分析者は、作業動画の再生速度を早めて全体的な作業分析をしたいときには、表示されるサムネイルの時間間隔が広くなるため、全体的な作業内容をより把握し易くなる。
また、作業動画の再生速度を遅くして緻密な作業分析をしたいときには、表示されるサムネイルの時間間隔が狭くなるため、緻密な作業内容をより把握し易くなる。そのため、ユーザー利便性が向上する。

＜作業動画再生方法＞
次に、作業動画再生システムＳで実行される作業動画再生プログラムの処理について、図１０に基づいて説明する。
図１０は、本実施形態に係る作業動画再生プログラムの処理のうち、コンピュータに相当する作業動画再生装置１０が、各撮影装置１から取得した作業動画データに基づいて表示画面上に作業動画を表示し、ユーザー操作を受け付けて再生中の作業動画を停止すると、作業動画の中から再生時点におけるフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像とを選択して、各フレーム画像に基づくサムネイルを同画面上に表示し、その後、ユーザー操作によって作業動画の再生速度を変更すると、変更された再生速度に対応させて各フレーム画像の時間間隔を変更し、再選択された各フレーム画像に基づくサムネイルを同画面上に再表示する処理を実行するフローチャートである。

本実施形態に係る作業動画再生プログラムは、データ記憶部１１を備えた作業動画再生装置１０の機能的な構成要素として、上述したデータ取得部１２と、動画表示部１３と、作業要素一覧表示部１４と、動画停止部１５と、画像選択部１６と、サムネイル表示部１７と、再生速度変更部１８と、時間間隔変更部１９と、分析実施部２０と、データ出力部２１と、を実現させるために各種プログラムを集約させたユーティリティプログラムであって、作業動画再生装置１０のＣＰＵがこの作業分析プログラムを実行する。

図１０に示す作業動画再生プロセスでは、まず、作業動画再生装置１０のデータ取得部１２が、ライン作業において各作業内容工程を撮影可能な位置に設置された各撮影装置１から、作業動画データを取得するステップ０１（ＳＴ０１）から始まる。
作業動画データは、各作業工程の作業内容を撮影した作業動画を示すデータであって、当該データ取得後にデータ記憶部１１に記憶されて保管される。

次に、ステップ０２で、動画表示部１３が、作業動画データが示す作業動画を表示画面上に表示する。
具体的には、作業動画再生装置１０の表示画面上に図７の作業分析画面３０を表示し、また作業分析画面３０において、作業工程１「エンジン組み付け」の作業動画の内容を動画ウィンドウ３１上に表示する。

次に、ステップ０３で、動画停止部１５が、ユーザー操作の入力を受け付けて再生中の作業動画を停止する。
具体的には、図７に示すように、ユーザー操作の入力を受け付けて作業分析画面３０上に表示された停止ボタン３３が押されることで、再生中の作業動画を停止する。

次に、ステップ０４で、画像選択部１６が、表示された作業動画の中から、作業動画に対して設定される時間軸において所定時点におけるフレーム画像と、所定時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像と、を選択する。
具体的には、図８に示すように、作業動画を停止したときの再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像を選択する。

次に、ステップ０５で、サムネイル表示部１７が、選択された各フレーム画像に基づいて作成されるサムネイルを表示画面上に表示する。
具体的には、図７の作業分析画面３０において、停止直前の再生時点におけるサムネイル３８ａと、第１前後時点のサムネイル３８ｂ，３８ｃと、第２前後時点のサムネイル３８ｄ，３８ｅとを動画ウィンドウ３１上に左右幅方向に並ばせて表示する。

次に、ステップ０６で、再生速度変更部１８が、ユーザー操作の入力を受け付けて、表示された作業動画の再生速度を変更する。
具体的には、図７の再生速度一覧ウィンドウ３５上において、ユーザー操作の入力を受け付けて所定の数字アイコンの実行ボタンが押されると、作業動画の再生速度を現在の再生速度から、所定の数字アイコンに対応する再生速度へ変更する。

次に、ステップ０７で、時間間隔変更部１９が、変更された再生速度に対応させて、選択されるフレーム画像の時間間隔を変更する。
具体的には、変更された再生速度に対応させて、図５の再生速度／時間間隔対応データ、図６の再生時間／時間間隔係数対応データを参照した上でフレーム画像の時間間隔を変更する。

次に、ステップ０８で、画像選択部１６は、時間間隔が変更されたとき、所定時点におけるフレーム画像と、所定時点から変更された時間間隔を前後にそれぞれ空けたときに定まる時点におけるフレーム画像とを再選択する。
具体的には、図９に示すように、再生時点のフレーム画像と、再生時点から変更された時間間隔を前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から変更された時間間隔を空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像を再選択する。

最後に、ステップ０９で、サムネイル表示部１７が、再選択された各フレーム画像に基づいて作成されるサムネイルを表示画面上に再表示する。
具体的には、図７の作業分析画面３０において、再生時点のサムネイル３８ａと、第１前後時点のサムネイル３８ｂ´，３８ｃ´と、第２前後時点のサムネイル３８ｄ´，３８ｅ´とを動画ウィンドウ３１上に左右幅方向に並ばせて表示する。

上記ステップ０１からステップ０９を経て図１０のプロセスを終了する。
上記の作業動画再生プログラムの処理フローにより、ユーザーとなる分析者が、作業動画の再生時点における映像を確認しているときに、再生時点から前後した時点における複数のサムネイルも合わせて確認することができる。
また、分析者によって作業動画の再生速度が変更されたときには、作業動画と合わせて表示される複数のサムネイルについても分析者の意向に沿わせて変更することができる。

＜その他の実施形態＞
上記実施形態において、図８に示すように、画像選択部１６は、作業動画の中から、再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けた時点のフレーム画像とを選択しているが、再生時点を基準に限定されることなく、任意の時点を基準としてフレーム画像を選択することができても良い。
また、画像選択部１６は、再生時点のフレーム画像と、再生時点よりも前時点のみのフレーム画像を選択することができても良い。また、再生時点のフレーム画像を不要とし、再生時点の前後の時点のみのフレーム画像を選択することができても良い。
さらに、各フレーム画像は、均一な時間間隔を空けて選択されているが、各フレーム画像の間で異なる時間間隔を空けてそれぞれ選択することができても良い。

上記実施形態において、図８に示すように、画像選択部１６は、再生中の作業動画を停止するユーザー操作がなされると、作業動画の中から、所定のフレーム画像を５枚選択しているが、特に限定されることなく変更可能である。
例えば、画像選択部１６が、ユーザー操作を受け付けて、作業動画の再生中であっても所定のフレーム画像を選択することができても良い。また、ユーザー操作に関係なく自動で所定のフレーム画像を選択することができても良い。
そうすれば、サムネイル表示部１７が、作業動画の再生中であってもサムネイルを表示することができる等、ユーザーの意向に沿って設定変更可能な動画再生装置１０となる。
また例えば、画像選択部１６が、所定のフレーム画像を２枚又は３枚だけ選択することができても良いし、５枚を超えて選択することができても良い。

上記実施形態において、図６に示すように、時間間隔係数は作業動画の総再生時間に対応して設定されているが、特に限定されることなく、ユーザーが任意に時間間隔係数を設定することができても良い。そうすれば、ユーザーが隣り合うサムネイルの時間間隔を自由に決定できるため、ユーザーの利便性がより向上する。

本実施形態では、主として本発明に係る動画再生装置及び動画再生方法に関して説明した。
ただし、上記の実施形態は、本発明の理解を容易にするための一例に過ぎず、本発明を限定するものではない。本発明は、その趣旨を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれることは勿論である。
特に、動画再生装置１０で実行される動画再生プログラムの処理について、また、各種データや各種表示画面の構成、配置レイアウトについて、上記の実施形態にて説明したものは、あくまで一例に過ぎず、本発明を限定するものではない。

Ｓ 作業動画再生システム（動画再生システム）
１ 撮影装置
２ データ格納部
３ データ作成部
４ データ発信部
１０ 作業動画再生装置（動画再生装置）
１１ データ記憶部
１２ データ取得部
１３ 動画表示部
１４ 作業要素一覧表示部
１５ 動画停止部
１６ 画像選択部
１７ サムネイル表示部
１８ 再生速度変更部
１９ 時間間隔変更部
２０ 分析実施部
２１ データ出力部
３０ 作業分析画面
３１ 動画ウィンドウ
３２ シークバー
３３ 停止ボタン
３４ 再生ボタン
３５ 再生速度一覧ウィンドウ
３６ 作業要素一覧ウィンドウ
３７ 合計時間表示タブ（合計時間表示部）
３８，３８ａ，３８ｂ，３８ｃ，３８ｄ，３８ｅ サムネイル
３８ａ´，３８ｂ´，３８ｃ´，３８ｄ´，３８ｅ´ サムネイル

Claims (4)

1. 複数のフレーム画像から構成される動画を再生する動画再生装置であって、
   前記動画は、作業内容を撮影した作業動画であって、
   前記動画再生装置は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能な装置であって、
   前記作業動画を表示する動画表示部と、
   ユーザー操作の入力を受け付けて、表示されている前記作業動画をもとに前記作業内容となる作業工程を作業要素に分割して、各作業要素における作業時間を算出する分析実施部と、
   前記各作業要素における作業時間の情報を表示する作業要素一覧表示部と、
   前記各作業要素における前記作業時間の合計時間を集計し、該合計時間を表示する合計時間表示部と、
   表示された前記作業動画を構成するフレーム画像から、所定の前記フレーム画像を選択する画像選択部と、
   選択された前記フレーム画像に基づくサムネイルを表示するサムネイル表示部と、を備え、
   前記画像選択部は、表示されている前記作業動画を構成するフレーム画像のうち、前記作業動画に対して設定される時間軸における所定時点の第１フレーム画像と、
   前記作業動画の再生速度と、前記作業動画の再生時間に応じて設定される時間間隔係数とを積算することで得られる時間間隔を前記所定時点から空けたときに定まる他の所定時点の第２フレーム画像とを選択することを特徴とする動画再生装置。
2. 前記分析実施部は、前記作業動画から、各作業要素における有効動作時間及び無効動作時間を算出した上で、前記有効動作時間にレイティング率を積算することで作業標準時間を算出し、
   前記作業要素一覧表示部は、前記各作業要素における前記作業標準時間を表示画面上に表示し、
   前記合計時間表示部は、前記各作業要素における前記作業標準時間の合計時間を集計し、該合計時間を表示画面上に表示することを特徴とする請求項１に記載の動画再生装置。
3. 前記作業要素一覧表示部は、前記各作業要素に対してヒトの作業内容であるか又は機械の作業内容であるかを分類するための項目となる種別を表示画面上に表示することを特徴とする請求項２に記載の動画再生装置。
4. 複数のフレーム画像から構成される動画をコンピュータが再生することが可能な動画再生方法であって、
   前記動画は、作業内容を撮影した作業動画であって、
   前記動画再生方法は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能であって、
   前記コンピュータが、
   前記作業動画を表示する動画表示処理と、
   ユーザー操作の入力を受け付けて、表示されている前記作業動画をもとに前記作業内容となる作業工程を作業要素に分割して、各作業要素における作業時間を算出する分析実施処理と、
   前記各作業要素における作業時間の情報を表示する作業要素一覧表示処理と、
   前記各作業要素における前記作業時間の合計時間を集計し、該合計時間を表示する合計時間表示処理と、
   表示された前記作業動画を構成するフレーム画像から、所定の前記フレーム画像を選択する画像選択処理と、
   選択された前記フレーム画像に基づくサムネイルを表示するサムネイル表示処理と、を実行し、
   前記画像選択処理では、表示されている前記作業動画を構成するフレーム画像のうち、前記作業動画に対して設定される時間軸における所定時点の第１フレーム画像と、
   前記作業動画の再生速度と、前記作業動画の再生時間に応じて設定される時間間隔係数とを積算することで得られる時間間隔を前記所定時点から空けたときに定まる他の所定時点の第２フレーム画像とを選択することを特徴とする動画再生方法。

Images