JP2017011498A - 動画再生装置及び動画再生方法 - Google Patents

Abstract

【課題】主に作業分析を目的として利用され、ユーザーとなる分析者の利便性を向上させた動画再生装置を提供する。【解決手段】作業動画再生装置は、表示画面上に作業動画を表示し、ユーザー操作を受け付けて再生中の作業動画を停止すると、作業動画の中から、停止直前の再生時点におけるフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像とを選択し、各フレーム画像に基づくサムネイルを同画面上に表示する。また、ユーザー操作によって作業動画の再生速度を変更すると、変更された再生速度に対応させて各フレーム画像の時間間隔を変更する。【選択図】図７

Description

本発明は、動画再生装置及び動画再生方法に係り、特に、作業内容を撮影した作業動画を再生しながら作業分析することが可能な動画再生装置及び動画再生方法に関する。

従来、生産ラインにおいてヒト、機械及びモノの動きや時間を「見える化」することで生産現場の作業時間短縮、省力化及びコスト低減を果たすことを目的として、作業内容を撮影した作業動画を再生しながら作業分析することが可能な動画再生装置が知られている。
当該動画再生装置によれば、作業動画を用いた分析結果を基に作業工程の編成を行い、精度の高い作業標準を作成することが可能である。

例えば、特許文献１に記載の作業分析装置は、生産ラインにおける作業者の作業映像を再生しながら各作業工程を作業要素毎に分析するものであって、効率的な生産準備活動を実行することができる。
具体的には、表示画面上においてプレビューセクション上に作業者の作業映像データが表示され、作業時間表セクション上に作業要素リストが表示されて、作業要素の開始時間や終了時間等の属性情報が入力され、タイムラインセクション上に作業工程の時間軸や、作業映像データの再生時点が表示される構成となっている。

特開２０１１−１５０５６９号公報

ところで、上記のような作業分析を目的とする動画再生装置では、ユーザー利便性の向上を図るための要望の一つとして、ユーザーとなる分析者が、作業動画の再生時点における作業者の動作を確認しているときに、再生時点からやや前後した時点における作業者の動作も合わせて確認したいという要望があった。
一方で、同じ表示画面上で作業動画のほかに複数の作業映像を表示してしまうと、作業要素リスト等の作業分析に必要なツールを見易いサイズで表示できなくなる虞があって、かえってユーザー利便性が低下する虞もあった。
そこで、ユーザー利便性を低下させることなく、分析者が作業動画の再生時点における映像を確認しているときに、再生時点から前後した時点における複数の映像も合わせて確認することが可能な動画再生装置が求められていた。

また、上記作業分析を目的とする動画再生装置では、分析者が、作業動画の再生速度を適宜変更しながら、全体的な作業分析や緻密な作業分析をしていくものである。
ここで再生速度が変更されれば、表示画面上において作業動画と合わせて確認したい上記複数の作業映像も当然に異なってくるはずである。
そこで、ユーザー利便性の向上を図るために、分析者によって作業動画の再生速度が変更されたときには、作業動画と合わせて表示される上記複数の作業映像も分析者の意向に沿わせて変更されるような工夫が求められていた。

また、作業分析を目的としたものに限定されることなく、幅広い目的で利用される動画再生装置において、上述のようなユーザー利便性を向上させたものが求められていた。

本発明は、上記の課題に鑑みてなされたものであり、本発明の目的は、幅広く利用され、ユーザー利便性を向上させた動画再生装置及び動画再生方法を提供することにある。
また、本発明の他の目的は、ユーザー利便性を低下させることなく、ユーザーが動画の再生時点における映像を確認しているときに、再生時点から前後した時点における複数の映像も合わせて確認可能な動画再生装置及び動画再生方法を提供することにある。
また、本発明の他の目的は、ユーザーによって動画の再生速度が変更されたときには、動画と合わせて表示される上記複数の映像もユーザーの意向に沿わせて変更可能な動画再生装置及び動画再生方法を提供することにある。
また、本発明の他の目的は、主に作業分析を目的として利用され、ユーザーとなる分析者の利便性を向上させた動画再生装置及び動画再生方法を提供することにある。

前記課題は、本発明の動画再生装置によれば、複数のフレーム画像から構成される動画を再生する動画再生装置であって、前記動画を表示画面上に表示する動画表示部と、表示された前記動画の中から、該動画に対して設定される時間軸において所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像と、を選択する画像選択部と、選択された各々の前記フレーム画像に基づいて作成されるサムネイルを前記動画と共に前記表示画面上に表示するサムネイル表示部と、ユーザー操作を受け付けて、表示された前記動画の再生速度を変更する再生速度変更部と、変更された前記再生速度に対応させて、選択される前記フレーム画像の前記時間間隔を変更する時間間隔変更部と、を備えていること、により解決される。

上記構成の動画再生装置であれば、同じ表示画面上において動画を表示するとともに、動画の中から所定時点及び所定時点前後のフレーム画像を選択して、選択された各々のフレーム画像に基づくサムネイルを表示することができる。
そのため、ユーザー利便性を低下させることなく（複数のフレーム画像を大きく表示することなく）、ユーザーが動画の所定時点（例えば、再生時点）における映像を確認しているときに、所定時点から前後した時点における映像も合わせて確認することが可能な動画再生装置となる。
また、上記構成の動画再生装置であれば、ユーザー操作によって変更された動画の再生速度に対応させて、上記複数のフレーム画像の時間間隔を変更することができるため、よりユーザーの意向に沿わせた形で、複数のサムネイルを表示することができる。
なお、サムネイルとは、上記フレーム画像を縮小した縮小画像であって、必ずしも、表示画面上でユーザーの選択操作が実行されたときに、サムネイルに対応する時点のフレーム画像から動画を再開させるものに限定されなくて良い。

このとき、前記動画は、作業内容を撮影した作業動画であって、前記動画再生装置は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能な装置であると良い。
上記構成により、主に作業分析を目的として利用され、ユーザーとなる分析者の利便性を向上させた動画再生装置を実現できる。

このとき、前記動画表示部は、所定の前記サムネイルを選択するユーザー操作を受け付けて、受け付け直前の再生時点における前記フレーム画像から、所定の前記サムネイルに対応する時点における前記フレーム画像へ切り替えて、切り替えられた前記フレーム画像から前記動画の再生を再開すると良い。
上記構成により、ユーザーとなる分析者が、表示された複数のサムネイルの中から、所定のサムネイルに対応する時点の動画内容を詳しく確認したいときに、当該サムネイルを選択するだけのシンプルな操作で当該動画内容から動画の再生を再開することができる。そのため、ユーザー利便性が一層向上する。

このとき、ユーザー操作を受け付けて、再生されている前記動画を停止する動画停止部を備え、前記画像選択部は、前記動画停止部の実行に伴って、停止直前の再生時点における前記フレーム画像と、前記再生時点から所定の時間間隔を前後に空けたときに定まる時点における前記フレーム画像と、を選択すると良い。
上記構成により、動画を再生しているときにはサムネイルを表示することがなく、再生されている動画を停止したときにサムネイルを表示するため、ユーザーとなる分析者にとって直感的な操作性をもたらすことができる。
また、動画を停止したときにサムネイルを表示するため、動画再生装置のＣＰＵやメモリのスペックによっては動作が遅くなってしまう虞を軽減することができる。

このとき、前記時間間隔変更部は、前記再生速度変更部が前記再生速度を通常よりも早く設定したとき、前記時間間隔を通常よりも広くなるように設定し、前記再生速度変更部が前記再生速度を通常よりも遅く設定したとき、前記時間間隔を通常よりも狭くなるように設定すると良い。
上記構成により、ユーザーとなる分析者は、作業動画の再生速度を早めて全体的な（おおまかな）作業分析をしたいときには、表示されるサムネイルの時間間隔が広くなるため、全体的な作業内容をより把握し易くなる。
また、作業動画の再生速度を遅くして緻密な作業分析をしたいときには、表示されるサムネイルの時間間隔が狭くなるため、緻密な作業内容をより把握し易くなる。そのため、ユーザー利便性が一層向上する。

このとき、前記画像選択部は、前記所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を前後にそれぞれ空けたときに定まる第１前後時点における前記フレーム画像と、各々の前記第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点における前記フレーム画像とを選択し、前記サムネイル表示部は、選択された少なくとも５つからなる前記サムネイルを前記表示画面上に表示すると良い。
上記構成により、ユーザーとなる分析者が、作業動画を確認しながら、同時に所定時点、第１前後時点及び第２前後時点における５つ以上のサムネイルを確認できるため、分析者にとって作業分析の効率化につながる。

このとき、前記画像選択部は、前記所定時点における前記フレーム画像と、前記所定時点から均一な時間間隔を前後にそれぞれ空けたときに定まる時点における前記フレーム画像と、を選択すると良い。
上記構成により、ユーザーとなる分析者が、表示されたサムネイル同士の対応関係を直感的に把握し易くなるため、分析者にとって作業分析の効率化につながる。

このとき、前記動画表示部は、前記動画と共にシークバーを前記表示画面上に表示し、表示された前記シークバー上において現在の再生時点とは異なる時点を指定するユーザー操作を受け付けて、前記現在の再生時点における前記フレーム画像から、前記異なる時点における前記フレーム画像へ切り替えて、切り替えられた前記フレーム画像から前記動画の再生を再開可能とし、前記画像選択部は、ユーザー操作によって前記異なる時点が指定されたとき、該異なる時点における前記フレーム画像と、前記異なる時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像とを再選択し、前記サムネイル表示部は、再選択された前記フレーム画像に基づいて作成されるサムネイルを表示すると良い。
上記構成により、シークバーを利用したユーザー操作の指定を受け付けて、指定された指定時点及び指定時点前後のフレーム画像に基づくサムネイルを表示することができるため、ユーザーにとって直感的な操作性をもたらすことができる。

また、複数のフレーム画像から構成される動画をコンピュータが再生することが可能な動画再生方法であって、前記コンピュータが、前記動画を表示画面上に表示する動画表示処理と、表示された前記動画の中から、該動画に対して設定される時間軸において所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像と、を選択する画像選択処理と、選択された各々の前記フレーム画像に基づいて作成されるサムネイルを前記動画と共に前記表示画面上に表示するサムネイル表示処理と、ユーザー操作を受け付けて、表示された前記動画の再生速度を変更する再生速度変更処理と、変更された前記再生速度に対応させて、選択される前記フレーム画像の前記時間間隔を変更する時間間隔変更処理と、を実行する動画再生方法も実現することができる。

本発明によれば、幅広く利用され、ユーザー利便性を向上させた動画再生装置及び動画再生方法を実現することができる。
また、ユーザー利便性を低下させることなく、ユーザーが動画の再生時点における映像を確認しているときに、再生時点から前後した時点における複数の映像も合わせて確認することができる。
また、ユーザーによって動画の再生速度が変更されたときには、動画と合わせて表示される上記複数の映像もユーザーの意向に沿わせて変更することができる。
また、主に作業分析を目的として利用され、ユーザーとなる分析者の利便性を向上させた動画再生装置及び動画再生方法を実現できる。

本実施形態の作業動画再生システム全体の構成図である。 作業動画再生装置のハード構成図である。 作業動画再生システムのソフト構成図である。 作業要素一覧データの一例を示す図である。 作業動画の再生速度と、選択されるフレーム画像の時間間隔との対応関係を示す再生速度／時間間隔対応データの一例を示す図である。 作業動画の総再生時間と、選択されるフレーム画像の時間間隔係数との対応関係を示す再生時間／時間間隔係数対応データの一例を示す図である。 作業分析画面の一例を示す図である。 再生速度の変更に伴って、フレーム画像を再選択する手順を説明する図である。 再生速度の変更に伴って、フレーム画像を再選択する手順を説明する図である。 本実施形態の作業動画再生方法の処理の一例を示すフロー図である。

強調
以下、本発明に係る実施形態について図１〜図１０を参照して説明する。
本実施形態は、作業内容を撮影した作業動画を再生する作業動画再生装置であって、表示画面上に作業動画を表示し、ユーザー操作を受け付けて再生中の作業動画を停止すると、作業動画の中から、停止直前の再生時点におけるフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像とを選択して、各フレーム画像に基づくサムネイルを同画面上に表示するものであって、また、ユーザー操作によって作業動画の再生速度を変更すると、変更された再生速度に対応させて各フレーム画像の時間間隔を変更することを特徴とする作業動画再生装置の発明に関するものである。
なお、作業動画は、複数のフレーム画像から構成されるものである。

本実施形態の作業動画再生システムＳ全体の構成を図１に示す。
作業動画再生システムＳは、ライン作業において各作業工程の作業内容を撮影して作業動画を記録する複数の撮影装置１と、複数の撮影装置１とネットワークを通じて接続され、撮影装置１から作業動画を示す作業動画データを取得して、作業動画を再生しながら作業工程を分析し、当該分析結果を基に作業標準の内容を示す作業標準データを出力する作業動画再生装置１０と、から主に構成されている。
ここでライン作業とは、一連の作業工程の集合体を示すものであって、例えば、「組み立てライン」等がある。作業工程とは、一連の作業要素の集合体を示すものであり、例えば「エンジン組み付け」、「バンパー取り付け」、「タイヤ取り付け」等がある。
また、作業要素とは、一連の動作の集合体を示すものであり、例えば、「ブッシュを準備」、「ブッシュセット位置を確認」、「ブッシュをセット」、「車体へ組み付け」等がある。動作とは、作業を細分化したときの最小単位を示すものである。

撮影装置１は、例えばビデオカメラであって、図１に示すように、ライン作業において各作業工程の作業内容を撮影可能な位置にそれぞれ設置されている。
撮影装置１は、各作業内容を撮影して作業動画を記録する。そして、当該作業動画を示す作業動画データを作成し、作業動画再生装置１０に向けてデータ送信するものである。

作業動画再生装置１０は、作業分析を行う分析者によって用いられるコンピュータであって、作業動画データが示す作業動画を表示画面上に表示するとともに、ユーザー操作を受け付けて、作業動画の中から所定時点のフレーム画像と、所定時点から所定の時間間隔を前後に空けたときに定まる時点のフレーム画像とを選択して、選択された各フレーム画像に基づくサムネイルを同じ画面上に表示するものである。
また、ユーザー操作を受け付けて作業動画の再生速度を変更し、変更された再生速度に対応させて各フレーム画像の時間間隔を変更し、変更された時間間隔でフレーム画像を再選択した上で、再選択された各フレーム画像に基づくサムネイルを表示するものである。
作業動画再生装置１０は、撮影装置１とデータ通信を行い、撮影装置１から送信された作業動画データを記憶しておくことができる。
また作業動画再生装置１０は、作業動画データに基づいて作業分析、作業編成を行った結果を基に作業標準データを作成し、作業標準データを表示画面上に出力表示するほか、紙媒体で出力印刷することができる。

作業動画再生装置１０のハード構成を図２に示す。
作業動画再生装置１０は、データの演算・制御処理装置としてのＣＰＵと、記憶装置としてのＲＯＭ、ＲＡＭ、及びＨＤＤと、ホームネットワーク又はインターネットを通じて情報データの送受信を行う通信用インターフェイスとを備えたコンピュータである。
また作業動画再生装置１０は、所定の書式で表示される文字又は画像の情報を表示する表示装置と、ＣＰＵに所定の指令を入力するときユーザーによって操作される入力装置と、外付けハードディスク等の記憶媒体装置と、を備えている。また、作業動画再生装置１０は、文字又は画像の情報を出力する印刷装置をさらに備えていても良い。
なお、撮影装置１についても同様のハード構成を備えたコンピュータである。

作業動画再生装置１０のＲＯＭ、ＨＤＤ、及び外部記憶装置には、図３に示すように、コンピュータとして必要な機能を果たすメインプログラムに加えて、作業動画再生プログラムが記憶されており、これらプログラムがＣＰＵによって実行されることにより、作業動画再生装置１０の機能が発揮されることになる。

作業動画再生装置１０のソフト構成を図３に示す。
作業動画再生装置１０は、機能面から説明すると、各種プログラム及び各種データを記憶するデータ記憶部１１と、各撮影装置１から作業動画データを取得するデータ取得部１２と、取得した各作業動画データが示す作業動画を表示画面上に表示する動画表示部１３と、予め記憶された作業要素一覧データに基づく作業要素一覧を表示画面上に表示する作業要素一覧表示部１４と、ユーザー操作を受け付けて再生中の作業動画を停止する動画停止部１５と、表示された作業動画の中から、作業動画に対して設定される時間軸において再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点のフレーム画像とを選択する画像選択部１６と、選択された各フレーム画像に基づくサムネイルを表示画面上に表示するサムネイル表示部１７と、ユーザー操作を受け付けて、表示された作業動画の再生速度を変更する再生速度変更部１８と、変更された再生速度に対応させて、選択されるフレーム画像の時間間隔を変更する時間間隔変更部１９と、を主な構成要素として備えている。
また、表示された作業動画から作業内容を動作分析する分析実施部２０と、分析結果に基づいて作業標準データを出力するデータ出力部２１と、を構成要素として備えている。
これらは、ＣＰＵ、ＲＯＭ、ＲＡＭ、ＨＤＤ、通信用インターフェイス、及び各種プログラム等によって構成されている。

データ記憶部１１には、撮影装置１から取得した作業動画データと、図４に示す作業要素一覧データと、図５に示す再生速度／時間間隔対応データと、図６に示す再生時間／時間間隔係数対応データと、作業標準データとがそれぞれ記憶されている。
なお、データ記憶部１１は、各種プログラム及び各種情報データを保持して格納しておく構成であっても良いし、不図示のデータサーバーから各種プログラム及び各種情報データを読み込んで一時的に格納しておく構成であっても良い。

動画表示部１３は、作業動画再生装置１０の表示ディスプレイ上に図７に示す作業分析画面３０を表示し、作業分析画面３０上において作業動画を表示するものである。
また、作業分析画面３０上に表示された所定のサムネイル３８を選択するユーザー操作を受け付けて、受け付け直前の再生時点におけるフレーム画像から、所定のサムネイル３８に対応する時点におけるフレーム画像へ切り替えた上で、切り替えられたフレーム画像から動画の再生を再開可能にするものである。
また、作業分析画面３０上に表示されたシークバー３２上において現在の再生時点とは異なる時点を指定するユーザー操作を受け付けて、現在の再生時点におけるフレーム画像から、異なる時点におけるフレーム画像へ切り替えた上で、切り替えられたフレーム画像から動画の再生を再開可能にするものである。

分析実施部２０は、ユーザー操作の入力を受け付けて、図７の作業分析画面３０上に表示された作業動画から、作業工程を作業要素に分割して各作業要素の作業時間を算出する。
また、当該作業動画から、ヒト又は機械が作業内容に対して有効な動作をした時間を示す有効動作時間と、無効な動作をした時間を示す無効動作時間とを算出した上で、有効動作時間にレイティング率を積算することで作業標準時間を算出する。

なお、撮影装置１についても機能面から説明すると、図３に示すように、各種プログラム及び各種データを格納するほか、作業動画データを格納するデータ格納部２と、作業動画データを作成するデータ作成部３と、作業動画データを作業動画再生装置１０に向けて発信するデータ発信部４と、を主な構成要素として備えている。

次に、作業動画再生装置１０に記憶される作業要素一覧データ、再生速度／時間間隔対応データ、及び再生時間／時間間隔係数対応データについて、図４〜図６に基づいて詳細に説明する。
作業要素一覧データは、図４に示すように、作業工程において各作業要素の詳細内容を一覧表で示すデータテーブルであって、ユーザー操作の入力を受け付けて各作業要素の詳細内容が作成、更新されるものである。
具体的には、作業要素一覧データには、作業工程の作業要素に対して、ＮＯ．（番号）、作業要素（名称）、種別、スタート、要素時間（作業時間）、有効時間（有効動作時間）、無効時間（無効動作時間）、レイティング（レイティング率）、及び標準時間（作業標準時間）がそれぞれ対応付けられている。
ここで種別とは、各作業要素に対して「１：手作業」、「２：工具作業」及び「３：マシン作業」の分類の中から１つ選択して入力される項目である。

再生速度／時間間隔対応データは、図５に示すように、作業動画の再生速度と、選択されるフレーム画像の時間間隔との対応関係を示すデータテーブルである。
図５の実施例を見ると、作業動画の再生速度が１．０倍速（通常状態）であるとき、選択されるフレーム画像の時間間隔が０．５秒であることを示している。
そして、再生速度が早くなるにつれてフレーム画像の時間間隔が広くなり、また、再生速度が遅くなるにつれてフレーム画像の時間間隔が狭くなることを示している。
詳しく言うと、フレーム画像の時間間隔（秒）は、再生速度（倍速）と、指標となる時間間隔係数とを積算することによって算出される。

再生時間／時間間隔係数対応データは、図６に示すように、作業動画の総再生時間と、選択されるフレーム画像の時間間隔係数との対応関係を示すデータテーブルである。
図５の実施例を見ると、作業動画の総再生時間が６０．０秒以上であって３００．０秒未満（６０．０〜３００．０秒）であるとき、選択されるフレーム画像の時間間隔係数が０．５であることを示している。
そして、総再生時間が長くなるにつれて時間間隔係数が大きくなることを示している。

次に、作業動画再生装置１０の表示ディスプレイに表示される作業分析画面３０について、図７に基づいて詳細に説明する。
作業分析画面３０は、作業動画データが示す作業動画の内容と、作業要素一覧データが示す作業要素一覧表の内容とを主に表示しており、ユーザー操作の入力を受け付けて作業工程の動作分析を実行するための表示画面である。
作業動画の内容は、作業分析画面３０に設けられた動画ウィンドウ３１上に表示されており、実施例を見ると、作業工程１「エンジン組み付け」の中で作業要素４「車体へ組み付け」の動画内容が表示されている。

作業分析画面３０の中で動画ウィンドウ３１よりも下側部分には、再生されている作業動画の再生時点を示すシークバー３２と、ユーザー操作を受け付けて再生中の作業動画を停止するための実行ボタンとなる停止ボタン３３と、ユーザー操作を受け付けて停止中の作業動画を再生するための実行ボタンとなる再生ボタン３４と、が主に表示されている。
実施例を見ると、動画内容が再生時点「４０．００秒」で停止された状態で表示されている。

作業分析画面３０の中で動画ウィンドウ３１よりも左側部分には、再生されている作業動画の再生速度の内容を示す再生速度一覧ウィンドウ３５が表示されている。
再生速度は、ユーザー操作の入力を受け付けて最大８．０倍速から最小０．２倍速まで任意に設定することができる。
実施例を見ると、作業動画の再生速度が１．０倍速で設定されていることが表示されている。

再生速度一覧ウィンドウ３５上に上下方向に並べて表示された数字アイコンは、所定の数字アイコンを選択するユーザー操作を受け付けて、現在の再生速度から、所定の数字アイコンに対応する再生速度へ変更するための実行ボタンとして機能する。
例えば、ユーザー操作を受け付けて数字アイコン「４．０」の実行ボタンが押されると、作業動画の再生速度が、現在の再生速度（例えば、１．０倍速）から、数字アイコン「４．０」に対応する再生速度４．０倍速へ変更される。

作業要素一覧表の内容は、作業分析画面３０の下部分に設けられた作業要素一覧ウィンドウ３６上に表示されている。
実施例を見ると、ユーザー操作の入力を受け付けて、作業工程１の作業要素１に対して、ＮＯ．「１」、作業要素「ブッシュを準備」、種別「１：手作業」、スタート「１．００（秒）」、要素時間「８．００（秒）」、有効時間「８．００（秒）」、無効時間「０．００（秒）」、レイティング「１５０（％）」、及び標準時間「１２．００（秒）」がそれぞれ入力されている。
また、作業要素一覧ウィンドウ３６よりも下側部分には、作業工程の作業時間、有効動作時間、無効動作時間及び標準時間を示す合計時間表示タブ３７が設けられ、作業要素一覧表の入力結果に基づいて自動的に集計される。

ここで動画ウィンドウ３１上には、作業動画の所定時点におけるサムネイル３８ａと、所定時点から所定の時間間隔を前後に空けたときに定まる第１前後時点におけるサムネイル３８ｂ，３８ｃと、各々の第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点におけるサムネイル３８ｄ，３８ｅと、が表示されている。
実施例を見ると、サムネイル３８ａは再生時点のフレーム画像の内容を表示し、サムネイル３８ｂ，３８ｃは、再生時点から時間間隔０．５秒を前後に空けたときに定まる時点のフレーム画像の内容を表示している。またサムネイル３８ｄ，３８ｅは、再生時点から時間間隔１．０秒を前後に空けたときに定まる時点のフレーム画像の内容を表示している。

各サムネイル３８ａ〜３８ｅは、所定のサムネイルを選択するユーザー操作を受け付けて、受け付け直前に表示されている再生時点のフレーム画像から、所定のサムネイルに対応する時点のフレーム画像へ切り替えて、切り替えられたフレーム画像から動画の再生を再開するための実行ボタンとして機能する。
例えば、ユーザー操作を受け付けて作業分析画面３０上に表示されたサムネイル３８ａの実行ボタンが押されると、動画ウィンドウ３１上に表示された作業動画が、再生時点（４０．００秒）のフレーム画像から、サムネイル３８ａに対応する時点（３９．００秒）のフレーム画像へ切り替わって、切り替わったフレーム画像から動画の再生が再開される。

次に、再生速度の変更に伴って、作業動画の中からフレーム画像を再選択する手順を図８、図９に基づいて説明する。
具体例として、総再生時間１００．０秒の作業動画について再生速度が１．０倍速から４．０倍速に変更された場合を挙げる。

まず図８に示すように、再生中の作業動画を停止するユーザー操作の入力がなされると、作業動画を停止したときの再生時点のフレーム画像と、再生時点から時間間隔Ｔを前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から時間間隔Ｔを空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像が選択される。
このとき、時間間隔Ｔ（秒）は、再生速度Ｖ（倍速）と、指標となる時間間隔係数Ｘとを積算することによって算出される値となる。
本実施例においては、総再生時間が１００．０秒であることから、時間間隔係数は、図６の再生時間／時間間隔係数対応データを参照して０．５となる。その結果、時間間隔Ｔは、再生速度１．０（倍速）に時間間隔係数０．５を積算することで０．５（秒）になる。
つまり、選択される５枚のフレーム画像は、再生時点のフレーム画像と、再生時点を基準として前後に時間間隔０．５秒を順に空けたときに定まるフレーム画像となる。

なお、作業動画は、例えば１秒当たりのフレーム画像数が３０枚（フレームレートが３０ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ））で設定されている。
その場合、再生時点を基準として時間間隔０．５秒を空けたときに定まるフレーム画像とは、再生時点のフレーム画像から数えて１５番目のフレーム画像になり、当該１５番目のフレーム画像が選択される。

そして図９に示すように、ユーザー操作の入力を受け付けて作業動画の再生速度が１．０倍速から４．０倍速に変更されると、変更された再生速度に対応させて時間間隔Ｔについても時間間隔Ｔ´に変更される。
時間間隔Ｔ´は、再生速度４．０（倍速）に時間間隔係数０．５を積算することで２．０（秒）にとなる。
その結果、再選択される５枚のフレーム画像は、再生時点のフレーム画像と、再生時点を基準として前後に時間間隔１．０秒を順に空けたときに定まる第１前後時点のフレーム画像と、第２前後時点のフレーム画像となる。

上記構成の動画再生装置１０であれば、ユーザーとなる分析者は、作業動画の再生速度を早めて全体的な作業分析をしたいときには、表示されるサムネイルの時間間隔が広くなるため、全体的な作業内容をより把握し易くなる。
また、作業動画の再生速度を遅くして緻密な作業分析をしたいときには、表示されるサムネイルの時間間隔が狭くなるため、緻密な作業内容をより把握し易くなる。そのため、ユーザー利便性が向上する。

＜作業動画再生方法＞
次に、作業動画再生システムＳで実行される作業動画再生プログラムの処理について、図１０に基づいて説明する。
図１０は、本実施形態に係る作業動画再生プログラムの処理のうち、コンピュータに相当する作業動画再生装置１０が、各撮影装置１から取得した作業動画データに基づいて表示画面上に作業動画を表示し、ユーザー操作を受け付けて再生中の作業動画を停止すると、作業動画の中から再生時点におけるフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像とを選択して、各フレーム画像に基づくサムネイルを同画面上に表示し、その後、ユーザー操作によって作業動画の再生速度を変更すると、変更された再生速度に対応させて各フレーム画像の時間間隔を変更し、再選択された各フレーム画像に基づくサムネイルを同画面上に再表示する処理を実行するフローチャートである。

本実施形態に係る作業動画再生プログラムは、データ記憶部１１を備えた作業動画再生装置１０の機能的な構成要素として、上述したデータ取得部１２と、動画表示部１３と、作業要素一覧表示部１４と、動画停止部１５と、画像選択部１６と、サムネイル表示部１７と、再生速度変更部１８と、時間間隔変更部１９と、分析実施部２０と、データ出力部２１と、を実現させるために各種プログラムを集約させたユーティリティプログラムであって、作業動画再生装置１０のＣＰＵがこの作業分析プログラムを実行する。

図１０に示す作業動画再生プロセスでは、まず、作業動画再生装置１０のデータ取得部１２が、ライン作業において各作業内容工程を撮影可能な位置に設置された各撮影装置１から、作業動画データを取得するステップ０１（ＳＴ０１）から始まる。
作業動画データは、各作業工程の作業内容を撮影した作業動画を示すデータであって、当該データ取得後にデータ記憶部１１に記憶されて保管される。

次に、ステップ０２で、動画表示部１３が、作業動画データが示す作業動画を表示画面上に表示する。
具体的には、作業動画再生装置１０の表示画面上に図７の作業分析画面３０を表示し、また作業分析画面３０において、作業工程１「エンジン組み付け」の作業動画の内容を動画ウィンドウ３１上に表示する。

次に、ステップ０３で、動画停止部１５が、ユーザー操作の入力を受け付けて再生中の作業動画を停止する。
具体的には、図７に示すように、ユーザー操作の入力を受け付けて作業分析画面３０上に表示された停止ボタン３３が押されることで、再生中の作業動画を停止する。

次に、ステップ０４で、画像選択部１６が、表示された作業動画の中から、作業動画に対して設定される時間軸において所定時点におけるフレーム画像と、所定時点から所定の時間間隔を前後に空けたときに定まる時点におけるフレーム画像と、を選択する。
具体的には、図８に示すように、作業動画を停止したときの再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像を選択する。

次に、ステップ０５で、サムネイル表示部１７が、選択された各フレーム画像に基づいて作成されるサムネイルを表示画面上に表示する。
具体的には、図７の作業分析画面３０において、停止直前の再生時点におけるサムネイル３８ａと、第１前後時点のサムネイル３８ｂ，３８ｃと、第２前後時点のサムネイル３８ｄ，３８ｅとを動画ウィンドウ３１上に左右幅方向に並ばせて表示する。

次に、ステップ０６で、再生速度変更部１８が、ユーザー操作の入力を受け付けて、表示された作業動画の再生速度を変更する。
具体的には、図７の再生速度一覧ウィンドウ３５上において、ユーザー操作の入力を受け付けて所定の数字アイコンの実行ボタンが押されると、作業動画の再生速度を現在の再生速度から、所定の数字アイコンに対応する再生速度へ変更する。

次に、ステップ０７で、時間間隔変更部１９が、変更された再生速度に対応させて、選択されるフレーム画像の時間間隔を変更する。
具体的には、変更された再生速度に対応させて、図５の再生速度／時間間隔対応データ、図６の再生時間／時間間隔係数対応データを参照した上でフレーム画像の時間間隔を変更する。

次に、ステップ０８で、画像選択部１６は、時間間隔が変更されたとき、所定時点におけるフレーム画像と、所定時点から変更された時間間隔を前後にそれぞれ空けたときに定まる時点におけるフレーム画像とを再選択する。
具体的には、図９に示すように、再生時点のフレーム画像と、再生時点から変更された時間間隔を前後に空けたときに定まる第１前後時点のフレーム画像と、第１前後時点から変更された時間間隔を空けたときに定まる第２前後時点のフレーム画像との合計５枚のフレーム画像を再選択する。

最後に、ステップ０９で、サムネイル表示部１７が、再選択された各フレーム画像に基づいて作成されるサムネイルを表示画面上に再表示する。
具体的には、図７の作業分析画面３０において、再生時点のサムネイル３８ａと、第１前後時点のサムネイル３８ｂ´，３８ｃ´と、第２前後時点のサムネイル３８ｄ´，３８ｅ´とを動画ウィンドウ３１上に左右幅方向に並ばせて表示する。

上記ステップ０１からステップ０９を経て図１０のプロセスを終了する。
上記の作業動画再生プログラムの処理フローにより、ユーザーとなる分析者が、作業動画の再生時点における映像を確認しているときに、再生時点から前後した時点における複数のサムネイルも合わせて確認することができる。
また、分析者によって作業動画の再生速度が変更されたときには、作業動画と合わせて表示される複数のサムネイルについても分析者の意向に沿わせて変更することができる。

＜その他の実施形態＞
上記実施形態において、図８に示すように、画像選択部１６は、作業動画の中から、再生時点のフレーム画像と、再生時点から所定の時間間隔を前後に空けた時点のフレーム画像とを選択しているが、再生時点を基準に限定されることなく、任意の時点を基準としてフレーム画像を選択することができても良い。
また、画像選択部１６は、再生時点のフレーム画像と、再生時点よりも前時点のみのフレーム画像を選択することができても良い。また、再生時点のフレーム画像を不要とし、再生時点の前後の時点のみのフレーム画像を選択することができても良い。
さらに、各フレーム画像は、均一な時間間隔を空けて選択されているが、各フレーム画像の間で異なる時間間隔を空けてそれぞれ選択することができても良い。

上記実施形態において、図８に示すように、画像選択部１６は、再生中の作業動画を停止するユーザー操作がなされると、作業動画の中から、所定のフレーム画像を５枚選択しているが、特に限定されることなく変更可能である。
例えば、画像選択部１６が、ユーザー操作を受け付けて、作業動画の再生中であっても所定のフレーム画像を選択することができても良い。また、ユーザー操作に関係なく自動で所定のフレーム画像を選択することができても良い。
そうすれば、サムネイル表示部１７が、作業動画の再生中であってもサムネイルを表示することができる等、ユーザーの意向に沿って設定変更可能な動画再生装置１０となる。
また例えば、画像選択部１６が、所定のフレーム画像を２枚又は３枚だけ選択することができても良いし、５枚を超えて選択することができても良い。

上記実施形態において、図６に示すように、時間間隔係数は作業動画の総再生時間に対応して設定されているが、特に限定されることなく、ユーザーが任意に時間間隔係数を設定することができても良い。そうすれば、ユーザーが隣り合うサムネイルの時間間隔を自由に決定できるため、ユーザーの利便性がより向上する。

本実施形態では、主として本発明に係る動画再生装置及び動画再生方法に関して説明した。
ただし、上記の実施形態は、本発明の理解を容易にするための一例に過ぎず、本発明を限定するものではない。本発明は、その趣旨を逸脱することなく、変更、改良され得ると共に、本発明にはその等価物が含まれることは勿論である。
特に、動画再生装置１０で実行される動画再生プログラムの処理について、また、各種データや各種表示画面の構成、配置レイアウトについて、上記の実施形態にて説明したものは、あくまで一例に過ぎず、本発明を限定するものではない。

Ｓ 作業動画再生システム（動画再生システム）
１ 撮影装置
２ データ格納部
３ データ作成部
４ データ発信部
１０ 作業動画再生装置（動画再生装置）
１１ データ記憶部
１２ データ取得部
１３ 動画表示部
１４ 作業要素一覧表示部
１５ 動画停止部
１６ 画像選択部
１７ サムネイル表示部
１８ 再生速度変更部
１９ 時間間隔変更部
２０ 分析実施部
２１ データ出力部
３０ 作業分析画面
３１ 動画ウィンドウ
３２ シークバー
３３ 停止ボタン
３４ 再生ボタン
３５ 再生速度一覧ウィンドウ
３６ 作業要素一覧ウィンドウ
３７ 合計時間表示タブ
３８，３８ａ，３８ｂ，３８ｃ，３８ｄ，３８ｅ サムネイル
３８ａ´，３８ｂ´，３８ｃ´，３８ｄ´，３８ｅ´ サムネイル

Claims (9)

1. 複数のフレーム画像から構成される動画を再生する動画再生装置であって、
   前記動画を表示画面上に表示する動画表示部と、
   表示された前記動画の中から、該動画に対して設定される時間軸において所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像と、を選択する画像選択部と、
   選択された各々の前記フレーム画像に基づいて作成されるサムネイルを前記動画と共に前記表示画面上に表示するサムネイル表示部と、
   ユーザー操作を受け付けて、表示された前記動画の再生速度を変更する再生速度変更部と、
   変更された前記再生速度に対応させて、選択される前記フレーム画像の前記時間間隔を変更する時間間隔変更部と、を備えていることを特徴とする動画再生装置。
2. 前記動画は、作業内容を撮影した作業動画であって、
   前記動画再生装置は、前記作業動画を示す作業動画データを取得して、前記作業動画を再生しながら前記作業内容を分析することが可能な装置であることを特徴とする請求項１に記載の動画再生装置。
3. 前記動画表示部は、所定の前記サムネイルを選択するユーザー操作を受け付けて、受け付け直前の再生時点における前記フレーム画像から、所定の前記サムネイルに対応する時点における前記フレーム画像へ切り替えて、切り替えられた前記フレーム画像から前記動画の再生を再開することを特徴とする請求項１又は２に記載の動画再生装置。
4. ユーザー操作を受け付けて、再生されている前記動画を停止する動画停止部を備え、
   前記画像選択部は、前記動画停止部の実行に伴って、停止直前の再生時点における前記フレーム画像と、前記再生時点から所定の時間間隔を前後に空けたときに定まる時点における前記フレーム画像と、を選択することを特徴とする請求項１乃至３のいずれか１項に記載の動画再生装置。
5. 前記時間間隔変更部は、
   前記再生速度変更部が前記再生速度を通常よりも早く設定したとき、前記時間間隔を通常よりも広くなるように設定し、
   前記再生速度変更部が前記再生速度を通常よりも遅く設定したとき、前記時間間隔を通常よりも狭くなるように設定することを特徴とする請求項１乃至４のいずれか１項に記載の動画再生装置。
6. 前記画像選択部は、前記所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を前後にそれぞれ空けたときに定まる第１前後時点における前記フレーム画像と、各々の前記第１前後時点から所定の時間間隔を空けたときに定まる第２前後時点における前記フレーム画像とを選択し、
   前記サムネイル表示部は、選択された少なくとも５つからなる前記サムネイルを前記表示画面上に表示することを特徴とする請求項１乃至５のいずれか１項に記載の動画再生装置。
7. 前記画像選択部は、前記所定時点における前記フレーム画像と、前記所定時点から均一な時間間隔を前後にそれぞれ空けたときに定まる時点における前記フレーム画像と、を選択することを特徴とする請求項６に記載の動画再生装置。
8. 前記動画表示部は、前記動画と共にシークバーを前記表示画面上に表示し、表示された前記シークバー上において現在の再生時点とは異なる時点を指定するユーザー操作を受け付けて、前記現在の再生時点における前記フレーム画像から、前記異なる時点における前記フレーム画像へ切り替えて、切り替えられた前記フレーム画像から前記動画の再生を再開可能とし、
   前記画像選択部は、ユーザー操作によって前記異なる時点が指定されたとき、該異なる時点における前記フレーム画像と、前記異なる時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像とを再選択し、
   前記サムネイル表示部は、再選択された前記フレーム画像に基づいて作成されるサムネイルを表示することを特徴とする請求項１乃至７のいずれか１項に記載の動画再生装置。
9. 複数のフレーム画像から構成される動画をコンピュータが再生することが可能な動画再生方法であって、
   前記コンピュータが、
   前記動画を表示画面上に表示する動画表示処理と、
   表示された前記動画の中から、該動画に対して設定される時間軸において所定時点における前記フレーム画像と、前記所定時点から所定の時間間隔を空けたときに定まる時点における前記フレーム画像と、を選択する画像選択処理と、
   選択された各々の前記フレーム画像に基づいて作成されるサムネイルを前記動画と共に前記表示画面上に表示するサムネイル表示処理と、
   ユーザー操作を受け付けて、表示された前記動画の再生速度を変更する再生速度変更処理と、
   変更された前記再生速度に対応させて、選択される前記フレーム画像の前記時間間隔を変更する時間間隔変更処理と、を実行することを特徴とする動画再生方法。
   

Images