JP6354624B2 - Video imaging system, information processing terminal, video confirmation method and program - Google Patents
Video imaging system, information processing terminal, video confirmation method and program Download PDFInfo
- Publication number
- JP6354624B2 JP6354624B2 JP2015044488A JP2015044488A JP6354624B2 JP 6354624 B2 JP6354624 B2 JP 6354624B2 JP 2015044488 A JP2015044488 A JP 2015044488A JP 2015044488 A JP2015044488 A JP 2015044488A JP 6354624 B2 JP6354624 B2 JP 6354624B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- unit
- moving image
- still image
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
本発明は動画撮像システム、情報処理端末、動画確認方法及びプログラムに関する。 The present invention relates to a moving image capturing system, an information processing terminal, a moving image checking method, and a program.
撮像された動画からサムネイル等の静止画を生成する技術がある。この技術に関連し、特許文献1には、動画の撮像直後のユーザの記憶が鮮明なうちに、録画された動画の内容を的確にユーザに提示する情報処理装置が開示されている。特許文献1にかかる情報処理装置は、動画像を時分割した各区間を代表する複数のサムネイル画像を生成するサムネイル生成制御部と、複数のサムネイル画像を時系列に応じて配列した確認画面を表示部に表示させる表示制御部とを備える。
There is a technology for generating still images such as thumbnails from captured moving images. In relation to this technique,
また、特許文献2には、ハイライトシーン動画像から静止画像を自動抽出するとき、重要なシーンの静止画を確実に生成する装置が開示されている。特許文献2にかかる装置は、カメラで撮影した映像から該当するハイライトシーン動画像を切り出す。そして、この装置は、次に動画像の中から指定した切り出し密度で静止画像を切り出す際、特定時刻付近での切り出し密度を高密度に設定することにより、重要なシーンをハイライト静止画像として抽出する。
例えばスポーツの試合又は練習等において、その動画を撮像装置で撮像し、撮像装置で撮像した動画の内容をその場で確認することがある。ここで、スポーツの試合又は練習等においては、動画の内容を確認する時間が限られていることが多い。このような場合、撮像した動画内で視聴したいシーンを短時間で探すことが求められる。 For example, in a sports game or practice, the moving image may be captured by an imaging device, and the content of the moving image captured by the imaging device may be confirmed on the spot. Here, in sports games or practice, the time for confirming the content of a moving image is often limited. In such a case, it is required to search for a scene to be viewed in the captured moving image in a short time.
上記課題に鑑み、本発明の目的は、動画を撮像した後、ユーザが視聴したいシーンを短時間で探すことが可能な動画撮像システム、情報処理端末、動画確認方法及びプログラムを提供することである。 In view of the above problems, an object of the present invention is to provide a moving image imaging system, an information processing terminal, a moving image confirmation method, and a program capable of quickly searching for a scene that a user wants to view after capturing a moving image. .
そこで、本発明は、情報処理端末と、前記情報処理端末と通信可能であって、前記情報処理端末からの指示に応じて動画を撮像する撮像装置と、を有し、前記情報処理端末は、前記撮像装置に対して動画の撮像を停止するように指示する停止指示部と、前記停止指示部が停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出された複数の表示用静止画を取得する表示用静止画取得部と、前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部とを有する動画撮像システムを提供する。 Therefore, the present invention includes an information processing terminal and an imaging device that is communicable with the information processing terminal and captures a moving image in response to an instruction from the information processing terminal. A stop instruction unit that instructs the imaging device to stop capturing a moving image, and a plurality of displays extracted from the moving image captured by the imaging device in response to the stop instruction unit issuing a stop instruction There is provided a moving image capturing system including a display still image acquisition unit that acquires a still image for display and a display unit that displays a list of the plurality of still images for display acquired by the display still image acquisition unit.
また、本発明は、撮像装置に対して動画の撮像を停止するように指示する停止指示部と、前記停止指示部が停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出された複数の表示用静止画を取得する表示用静止画取得部と、前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部とを有する情報処理端末を提供する。 In addition, the present invention provides a stop instruction unit that instructs the imaging device to stop capturing a moving image, and extracts from the moving image captured by the imaging device in response to the stop instruction unit issuing a stop instruction. An information processing terminal comprising: a display still image acquisition unit that acquires a plurality of display still images that have been displayed; and a display unit that displays a list of the plurality of display still images acquired by the display still image acquisition unit I will provide a.
また、本発明は、動画を撮像する撮像部と、前記撮像部に対して動画の撮像を停止するように指示する停止指示部と、前記停止指示部が停止指示を行うことに応じて、前記撮像部によって撮像された動画から抽出された複数の表示用静止画を取得する表示用静止画取得部と、前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部とを有する動画撮像システムを提供する。 Further, the present invention provides an imaging unit that captures a moving image, a stop instruction unit that instructs the imaging unit to stop capturing a moving image, and the stop instruction unit issues a stop instruction, A display still image acquisition unit that acquires a plurality of display still images extracted from a moving image captured by the imaging unit, and a list of the plurality of display still images acquired by the display still image acquisition unit are displayed. Provided is a moving image capturing system having a display unit.
また、本発明は、動画を撮像する撮像装置に対して動画の撮像を停止するように指示するステップと、停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出された複数の表示用静止画を取得するステップと、前記取得された前記複数の表示用静止画の一覧を表示するステップとを有する動画確認方法を提供する。 The present invention also includes a step of instructing an imaging device that captures a moving image to stop capturing a moving image, and a plurality of images extracted from the moving image captured by the imaging device in response to the stop instruction. There is provided a moving image checking method including the steps of: obtaining a still image for display; and displaying a list of the obtained plurality of still images for display.
また、本発明は、動画を撮像する撮像装置に対して動画の撮像を停止するように指示するステップと、停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出された複数の表示用静止画を取得するステップと、前記取得された前記複数の表示用静止画の一覧を表示するステップとをコンピュータに実行させるプログラムを提供する。 The present invention also includes a step of instructing an imaging device that captures a moving image to stop capturing a moving image, and a plurality of images extracted from the moving image captured by the imaging device in response to the stop instruction. There is provided a program for causing a computer to execute a step of acquiring a still image for display and a step of displaying a list of the acquired plurality of still images for display.
本発明によれば、動画を撮像した後、ユーザが視聴したいシーンを短時間で探すことが可能な動画撮像システム、情報処理端末、動画確認方法及びプログラムを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, after imaging a moving image, the moving image imaging system, information processing terminal, moving image confirmation method, and program which can look for the scene which a user wants to view in a short time can be provided.
(実施の形態1)
以下、図面を参照して本発明の実施の形態について説明する。
図1は、実施の形態1にかかる動画撮像システム1を示す図である。動画撮像システム1は、撮像装置100と、情報処理端末200とを有する。撮像装置100は、例えばカムコーダ又はビデオカメラ等である。撮像装置100は、動画を撮像し、撮像された動画を、動画像データとして記録する。また、撮像装置100は、撮像した動画から、動画の予め定められた時間区間それぞれに対応するシーンの複数の静止画を抽出するように構成されている。また、撮像装置100は、情報処理端末200と、例えばWiFi等の無線通信又は有線通信によって、通信を行う。詳しくは後述する。
(Embodiment 1)
Embodiments of the present invention will be described below with reference to the drawings.
FIG. 1 is a diagram illustrating a moving image capturing
情報処理端末200は、例えばタブレット端末等である。情報処理端末200は、好ましくはユーザによって持ち運び可能なモバイル機器である。情報処理端末200は、撮像装置100と無線又は有線等の通信路10を介して通信を行う。情報処理端末200は、撮像装置100に対して動画の撮像の開始及び停止を指示するように構成されている。また、情報処理端末200は、動画の撮像が停止されると、撮像装置100から、抽出された静止画の少なくとも一部の静止画それぞれに対応する複数の表示用静止画を取得する。ここで、表示用静止画は、例えばサムネイルであって、情報処理端末200において一覧表示されるための静止画である。さらに、情報処理端末200は、取得された複数の表示用静止画の一覧を表示する。さらに、ユーザが、表示された表示用静止画を選択すると、選択された表示用静止画に関連付けられた時間に対応する動画の位置から、動画を再生する。詳しくは後述する。
The
図2は、実施の形態1にかかる撮像装置100のハードウェア構成を示す図である。撮像装置100は、操作部102と、表示部104と、情報処理装置110と、撮像部130とを有する。なお、撮像装置100には、操作部102及び表示部104は設けられていなくてもよい。操作部102は、例えばタッチパネル又はキーボード等である。操作部102は、撮影者等のユーザの操作を受け付ける。また、操作部102は、情報処理装置110の制御によって、ユーザに必要な情報を表示してもよい。
FIG. 2 is a diagram illustrating a hardware configuration of the
表示部104は、例えばタッチパネル又はLCD(Liquid Crystal Display)等である。表示部104は、情報処理装置110の制御によって、ユーザに必要な情報を表示する。また、表示部104は、入力装置を有してもよく、必要に応じてユーザの操作を受け付けてもよい。また、表示部104は、撮像部130によって撮像された動画又は静止画を表示してもよい。
The
情報処理装置110は、例えばコンピュータである。情報処理装置110は、例えばCPU(Central Processing Unit)等の制御部112と、例えばメモリ又はハードディスク等の記憶部114と、通信部116とを有する。情報処理装置110は、操作部102、表示部104及び撮像部130の動作を制御する。また、情報処理装置110は、操作部102によって受け付けられた操作に応じて必要な処理を行う。また、情報処理装置110は、撮像部130によって撮像された動画に対して、静止画の抽出といった画像処理等の必要な処理を行う。通信部116は、無線又は有線を介して接続された情報処理端末200と通信を行うために必要な処理を行う。
The
撮像部130は、例えばCCD(Charge Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等の撮像素子である。撮像部130は、撮像部130の前のシーンを動画像として読み取る処理を行う。具体的には、撮像部130は、動画を撮像して、撮像された動画に対応する動画像データを生成する。また、撮像部130は、静止画を撮像して、撮像された静止画に対応する静止画像データを生成してもよい。なお、用語「動画」は、情報処理における処理対象としての、「動画を示す動画像データ」も意味する。同様に、用語「静止画」は、情報処理における処理対象としての、「静止画を示す静止画像データ」も意味する。
The
図3は、実施の形態1にかかる情報処理端末200のハードウェア構成を示す図である。情報処理端末200は、操作部202と、表示部204と、情報処理装置210と、撮像部230とを有する。なお、情報処理端末200には、撮像部230は設けられていなくてもよい。
FIG. 3 is a diagram illustrating a hardware configuration of the
操作部202は、例えばタッチパネル又はキーボード等である。操作部202は、ユーザの操作を受け付ける。また、操作部202は、情報処理装置210の制御によって、ユーザに必要な情報を表示してもよい。表示部204は、例えばタッチパネル又はLCD等である。表示部204は、情報処理装置210の制御によって、ユーザに必要な情報を表示する。また、表示部204は、撮像装置100から得られた動画又は静止画を表示する。また、表示部204は、入力装置を有してもよく、必要に応じてユーザの操作を受け付けてもよい。なお、好ましくは、操作部202及び表示部204は、一体となってタッチパネルを構成している。
The
情報処理装置210は、例えばコンピュータである。情報処理装置210は、例えばCPU等の制御部212と、例えばメモリ又はハードディスク等の記憶部214と、通信部216とを有する。情報処理装置210は、操作部202、表示部204及び撮像部230の動作を制御する。また、情報処理装置210は、操作部202によって受け付けられた操作に応じて必要な処理を行う。また、情報処理装置210は、撮像装置100から得られた静止画又は動画を表示するための処理等の必要な処理を行う。通信部216は、無線又は有線を介して接続された撮像装置100と通信を行うために必要な処理を行う。撮像部230は、撮像装置100に設けられた撮像部130と同様の構成を有し得る。
The
図4は、実施の形態1にかかる撮像装置100の機能ブロック図である。実施の形態1にかかる撮像装置100は、撮像処理部150を有する。撮像処理部150は、撮像開始指示受信部152と、撮像制御部154と、動画格納部156と、静止画抽出部158と、静止画格納部160とを有する。また、撮像処理部150は、撮像停止指示受信部170と、撮像時間送信部172と、表示用静止画要求受信部174と、表示用静止画生成部176と、表示用静止画送信部178とを有する。さらに、撮像処理部150は、再生要求受信部180と、再生処理部182とを有する。これらの撮像処理部150の各構成要素については後で詳述するが、一部の構成要素については以下で説明する。
FIG. 4 is a functional block diagram of the
静止画抽出部158は、撮像部130によって撮像された動画から、この動画の予め定められた時間区間それぞれに対応するシーンの複数の静止画を抽出する。例えば、予め定められた時間区間が5秒であるとすると、静止画抽出部158は、動画の開始から5秒間隔で、各区間に対応するシーンの静止画を抽出する。具体的には、静止画抽出部158は、動画の開始から0秒後のシーンの静止画を抽出し、5秒後のシーンの静止画を抽出し、10秒後のシーンの静止画を抽出する。静止画抽出部158は、以後同様に、5秒おきに静止画を抽出する。静止画抽出部158は、この抽出処理を、動画の終了時点まで行う。
The still
さらに、静止画抽出部158は、抽出された静止画それぞれに、各静止画に対応する時間に関する情報である時間情報を付加する。つまり、静止画像データとしての静止画には、時間情報が含まれている。具体的には、静止画抽出部158は、例えば動画の開始から0秒後のシーンの静止画については、「動画開始から0秒」を示す時間情報を付加する。同様に、静止画抽出部158は、例えば動画の開始から5秒後のシーンの静止画については、「動画開始から5秒」を示す時間情報を付加する。なお、動画が撮像された時刻が動画に付加されている場合、この時間情報は、この静止画のシーンが撮像された時刻を示してもよい。
Further, the still
表示用静止画生成部176は、情報処理端末200からの要求に応じて、抽出された静止画の少なくとも一部の静止画それぞれに対応する複数の表示用静止画を取得する。この表示用静止画は、情報処理端末200において一覧表示される。したがって、表示用静止画生成部176は、元の静止画に対して圧縮処理及び縮小処理等の画像処理を施すことによって、サムネイル等の表示用静止画を生成する。なお、この表示用静止画には、元の静止画に付加されていた時間情報が付加されている。つまり、表示用静止画にも、時間情報が含まれている。
In response to a request from the
なお、撮像処理部150は、例えば、制御部112の制御によって、プログラムを実行させることによって実現できる。より具体的には、撮像処理部150は、記憶部114に格納されたプログラムを、制御部112の制御によってプログラムを実行することによって実現される。また、撮像処理部150の各構成要素は、プログラムによるソフトウェアで実現することに限ることなく、ハードウェア、ファームウェア、及びソフトウェアのうちのいずれかの組み合わせ等により実現してもよい。また、撮像処理部150の各構成要素は、例えばFPGA(field-programmable gate array)又はマイコン等の、使用者がプログラミング可能な集積回路を用いて実現してもよい。この場合、この集積回路を用いて、上記の各構成要素から構成されるプログラムを実現してもよい。このことは、後述する情報処理端末200における動画確認処理部についても同様である。
Note that the
図5は、実施の形態1にかかる情報処理端末200の機能ブロック図である。実施の形態1にかかる情報処理端末200は、動画確認処理部250を有する。動画確認処理部250は、撮像開始指示部252と、撮像停止指示部254とを有する。また、動画確認処理部250は、撮像時間受信部256と、取得位置決定部260と、表示用静止画要求部270と、表示用静止画取得部272と、一覧表示制御部274とを有する。また、動画確認処理部250は、表示用静止画選択部276と、選択履歴記録部278と、再生要求部280と、再生処理部282とを有する。動画確認処理部250は、撮像装置100によって撮像された動画をユーザが確認するための処理を行う。言い換えると、動画確認処理部250は、動画をユーザが確認するための動画確認方法を実行する。これらの動画確認処理部250の各構成要素については後で詳述するが、一部の構成要素については以下で説明する。
FIG. 5 is a functional block diagram of the
表示用静止画選択部276は、ユーザの操作により、表示部204に一覧表示された複数の表示用静止画から、1つ以上の表示用静止画を選択する。選択履歴記録部278は、表示用静止画選択部276によって選択された表示用静止画に付加されている時間情報に基づいて、選択の履歴を記録する。具体的には、選択履歴記録部278は、動画の終端から、選択された表示用静止画に関する時間情報が示す時間位置まで遡った時間を記録する。なお、「時間位置」とは、動画における時間軸上の位置を示し、例えば動画開始からの時間である。例えば動画の撮像時間が「5分」であり、選択された表示用静止画に関する時間情報が「動画開始から2分」を示している場合、動画の終端から、選択された表示用静止画に関する時間情報が示す時間位置まで遡った時間は、5分−2分=3分である。したがって、この場合、選択履歴記録部278は、選択履歴として、「動画終了まで3分」を示す時間情報を記録する。この時間情報を、「選択時間情報」と称する。
The display still
図6は、実施の形態1にかかる動画撮像システム1における処理の流れを示すシーケンス図である。まず、ステップS102において、情報処理端末200の操作部202は、ユーザによってなされた、動画の撮像の開始に関する操作を受け付ける。具体的には、例えば、表示部204が、撮像の開始を指示するためのアイコンを表示させ、ユーザがそのアイコンをタッチすることによって、操作部202は、撮像の開始に関する操作を受け付ける。
FIG. 6 is a sequence diagram illustrating a flow of processing in the moving
この操作に応じて、ステップS104において、情報処理端末200は、撮像装置100に対して、撮像の開始を指示する。具体的には、撮像開始指示部252は、操作部202から、撮像の開始に関する操作を示す信号を受信する。撮像開始指示部252は、この信号を受信すると、撮像を開始する旨の指示を示す信号を生成し、生成された信号を、通信部216及び通信路10を介して、撮像装置100に対して送信する。
In response to this operation, in step S104, the
撮像装置100は、情報処理端末200から撮像を開始する旨の指示を示す信号を受信すると、ステップS106において撮像処理を行う。さらに、撮像装置100は、ステップS108において静止画の抽出処理を行う。具体的には、撮像開始指示受信部152は、情報処理端末200から、通信路10及び通信部116を介して、撮像を開始する旨の指示を示す信号を受信する。さらにこのとき、撮像開始指示受信部152は、撮像制御部154に対し、撮像を開始する旨の指示を示す信号を出力する。撮像制御部154は、撮像部130に対して、動画を撮像するように制御する。動画格納部156は、撮像部130によって生成された動画像データとしての動画を格納する。
When receiving a signal indicating an instruction to start imaging from the
また、撮像制御部154は、撮像を行うように制御している間、予め定められた時間間隔で動画から静止画を抽出する旨の指示を、静止画抽出部158に対して出力する。静止画抽出部158は、動画格納部156に格納された動画から、予め定められた時間間隔で静止画を抽出する。具体的には、静止画抽出部158は、上述したように、予め定められた時間区間それぞれに対応するシーンの複数の静止画を抽出する。なお、「予め定められた時間間隔」は、情報処理端末200によって指定されるようにしてもよい。この場合、情報処理端末200から送信される、撮像を開始する旨の指示を示す信号が、時間間隔を示す情報を含んでもよい。静止画抽出部158は、抽出した複数の静止画を静止画格納部160に格納する。このとき、静止画抽出部158は、各静止画に、対応する時間情報を付加する。
In addition, the
次に、ステップS110において、情報処理端末200の操作部202は、ユーザによってなされた、動画の撮像の停止に関する操作を受け付ける。具体的には、表示部204が、撮像の停止を指示するためのアイコンを表示させ、ユーザがそのアイコンをタッチすることによって、操作部202は、撮像の停止に関する操作を受け付ける。
Next, in step S <b> 110, the
この操作に応じて、ステップS112において、情報処理端末200は、撮像装置100に対して、撮像の停止を指示する。具体的には、撮像停止指示部254は、操作部202から、撮像の停止に関する操作を示す信号を受信する。撮像停止指示部254は、この信号を受信すると、撮像を停止する旨の指示を示す信号を、通信部216及び通信路10を介して、撮像装置100に対して送信する。
In response to this operation, in step S112, the
ステップS114において、撮像装置100は、情報処理端末200から撮像を停止する旨の指示を示す信号を受信すると、撮像処理を停止する。具体的には、撮像停止指示受信部170は、情報処理端末200から、通信路10及び通信部116を介して、撮像を停止する旨の指示を示す信号を受信する。さらにこのとき、撮像停止指示受信部170は、撮像制御部154及び撮像時間送信部172に対し、撮像を停止する旨の指示を示す信号を出力する。これにより、撮像制御部154は、撮像部130に対して、撮像を停止するように制御する。
In step S <b> 114, when the
また、このとき、ステップS116において、撮像装置100は、撮像された動画の撮像時間を示す情報を、情報処理端末200に対して送信する。具体的には、撮像時間送信部172は、撮像停止指示受信部170から信号を受け付けると、動画格納部156に格納された動画の撮像時間を示す情報を取得する。そして、撮像時間送信部172は、取得した撮像時間を示す情報を、通信部116及び通信路10を介して、情報処理端末200に対して送信する。そして、情報処理端末200の撮像時間受信部256は、その撮像時間を示す情報を、通信路10及び通信部216を介して受信する。
At this time, in step S <b> 116, the
撮像時間を示す情報を受信すると、ステップS20において、情報処理端末200は、後の処理で表示するために取得すべき表示用静止画それぞれの、動画における位置を決定する。具体的には、撮像時間受信部256は、撮像時間を示す情報を取得位置決定部260に送信する。取得位置決定部260は、撮像時間を示す情報と、選択履歴記録部278に記録された選択履歴とを用いて、取得すべき表示用静止画それぞれの動画における位置を決定する。以下、詳述する。
When the information indicating the imaging time is received, in step S20, the
図7は、実施の形態1にかかる取得位置決定部260の処理を示すフローチャートである。まず、ステップS202において、取得位置決定部260は、選択履歴記録部278に選択履歴が記録されているか否かを判定する。選択履歴が記録されていない場合、つまりS202の判定がNOの場合、ステップS204において、取得位置決定部260は、取得すべき表示用静止画の時間軸上の位置が等間隔となるように、取得位置を決定する。なお、「取得位置」とは、処理対象の動画について取得すべき表示用静止画の時間位置つまり動画における時間軸上の位置である。
FIG. 7 is a flowchart of a process performed by the acquisition
ここで、実施の形態1においては、取得すべき表示用静止画の時間間隔は、静止画格納部160に格納されている静止画の時間間隔よりも長くなるようにする。これによって、取得される表示用静止画の数は、静止画抽出部158によって抽出された静止画の数よりも少なくなる。例えば、静止画格納部160に静止画が5秒間隔で格納されている場合、取得位置決定部260は、5秒よりも大きい20秒間隔となるように、取得位置を決定する。つまり、取得位置決定部260は、「動画開始から0秒」、「動画開始から20秒」、「動画開始から40秒」、「動画開始から60秒」といったように、取得位置を決定する。
Here, in the first embodiment, the time interval between the still images for display to be acquired is set to be longer than the time interval between the still images stored in the still
一方、選択履歴が記録されている場合、つまりS202の判定がYESの場合、ステップS210において、取得位置決定部260は、選択時間情報の頻度を判定する。例えば、「動画終了まで3分」を示す選択時間情報が選択履歴記録部278に1つ記録されている場合、つまり、「動画終了まで3分」の表示用静止画が1回選択された場合、「動画終了まで3分」を示す選択時間情報の頻度は「1」である。同様に、例えば、「動画終了まで2分」を示す選択時間情報が選択履歴記録部278に2つ記録されている場合、つまり、「動画終了まで2分」の表示用静止画が2回選択された場合、「動画終了まで2分」を示す選択時間情報の頻度は「2」である。
On the other hand, if the selection history is recorded, that is, if the determination in S202 is YES, in step S210, the acquisition
ステップS212において、取得位置決定部260は、処理対象の動画において、頻度の高い選択時間情報に対応する時間位置における時間間隔が相対的に短くなるように、取得位置を決定する。言い換えると、取得位置決定部260は、選択された頻度の高い時間帯における時間間隔が、選択された頻度の低い時間帯における時間間隔よりも短くなるように、取得位置を決定する。
In step S212, the acquisition
例えば、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録しているケースを仮定する。ここで、処理対象の動画の撮像時間が5分である場合、「動画終了まで3分」を示す選択時間情報に対応する時間情報は、「動画開始から2分」を示す情報である。この場合において、頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から2分」を示す時間情報に対応する表示用静止画である。したがって、取得位置決定部260は、「動画開始から2分」を示す時間情報の前後の時間帯における時間間隔が他の時間帯における時間間隔よりも短くなるように、取得位置を決定する。
For example, it is assumed that the selection
つまり、取得位置決定部260は、「動画開始から2分」の前後の時間帯においては、例えば10秒間隔で表示用静止画を取得するように、取得位置を決定する。一方、取得位置決定部260は、例えば「動画開始から4分」のようなその他の時間帯においては、例えば30秒間隔等の10秒間隔よりも長い間隔となるように、取得位置を決定する。なお、取得位置決定部260は、その他の時間帯においては、時間間隔を変更せず、20秒間隔となるように取得位置を決定してもよい。
That is, the acquisition
また、例えば、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録し、「動画終了まで2分」を示す選択時間情報を2つ記録しているケースを仮定する。このとき、「動画終了まで2分」を示す選択時間情報の方が、「動画終了まで3分」を示す選択時間情報よりも、頻度が高い。また、処理対象の動画の撮像時間が5分である場合、「動画終了まで3分」を示す選択時間情報に対応する時間情報は「動画開始から2分」を示す情報である。同様に、このとき、「動画終了まで2分」を示す選択時間情報に対応する時間情報は、「動画開始から3分」を示す情報である。この場合において、最も頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から3分」を示す時間情報に対応する表示用静止画である。また、次に頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から2分」を示す時間情報に対応する表示用静止画である。
Further, for example, the selection
したがって、取得位置決定部260は、「動画開始から3分」を示す時間情報の前後の時間帯における時間間隔が、「動画開始から2分」を示す時間情報の前後の時間帯における時間間隔よりも短くなるように、取得位置を決定する。同様に、取得位置決定部260は、「動画開始から2分」を示す時間情報の前後の時間帯における時間間隔が、他の時間情報の前後の時間帯における時間間隔よりも短くなるように、取得位置を決定する。
Therefore, the acquisition
つまり、取得位置決定部260は、「動画開始から3分」の前後においては、例えば5秒間隔で表示用静止画を取得するように、取得位置を決定する。また、取得位置決定部260は、「動画開始から2分」の前後の時間帯においては、例えば10秒間隔等の5秒間隔よりも長い間隔で表示用静止画を取得するように、取得位置を決定する。また、取得位置決定部260は、例えば「動画開始から4分」のようなその他の時間帯においては、例えば30秒間隔等の10秒間隔よりも長い間隔となるように、取得位置を決定する。
That is, the acquisition
取得位置決定部260は、決定された取得位置を示す情報つまり時間情報を、表示用静止画要求部270に対して出力する。なお、この取得位置決定部260の処理の具体例については、後述する。
The acquisition
ステップS122において、情報処理端末200は、撮像装置100に対して、表示用静止画を要求する。具体的には、表示用静止画要求部270は、表示用静止画を要求する旨の命令を、通信部216及び通信路10を介して、撮像装置100に対して送信する。ここで、表示用静止画を要求する旨の命令には、取得位置決定部260によって決定された取得位置を示す情報が含まれている。そして、撮像装置100の表示用静止画要求受信部174は、その表示用静止画を要求する旨の命令を、通信路10及び通信部116を介して受信する。そして、表示用静止画要求受信部174は、表示用静止画を要求する旨の命令に含まれる、取得位置を示す情報を、表示用静止画生成部176に対して出力する。
In step S122, the
ステップS124において、撮像装置100は、表示用静止画を情報処理端末200に対して送信する。具体的には、表示用静止画生成部176は、情報処理端末200から送信された取得位置を示す時間情報に対応する静止画を、静止画格納部160から取得する。そして、表示用静止画生成部176は、取得された静止画に対して上述した画像処理を施して、表示用静止画を生成する。これによって、取得位置に対応する表示用静止画が生成される。表示用静止画生成部176は、生成された表示用静止画を表示用静止画送信部178に対して出力する。
In step S <b> 124, the
表示用静止画送信部178は、表示用静止画を、通信部116及び通信路10を介して、情報処理端末200に対して送信する。情報処理端末200の表示用静止画取得部272は、撮像装置100から、通信路10及び通信部216を介して、表示用静止画を受信する。これにより、表示用静止画取得部272は、取得位置決定部260によって決定された取得位置に対応する表示用静止画を取得する。表示用静止画取得部272は、取得された表示用静止画を、一覧表示制御部274に対して出力する。
The display still
ステップS130において、情報処理端末200は、撮像装置100から受信した表示用静止画の一覧を表示する。具体的には、一覧表示制御部274は、表示用静止画取得部272からの表示用静止画が一覧で表示されるように、表示部204を制御する。これによって、表示部204は、複数の表示用静止画を一覧表示する。
In step S <b> 130, the
なお、一覧表示制御部274が表示部204に複数の表示用静止画を表示させる方法は、表示部204の大きさ及びユーザの好みによって適宜変更可能である。例えば、一覧表示制御部274は、複数の表示用静止画を1列に並べるように表示させてもよいし、適度に折り返して複数列に並べるように表示させてもよい。また、表示用静止画の動画における時間軸上の位置が等間隔でない場合、一覧表示制御部274は、その時間軸上の位置に対応するように間隔を広くしたり狭くしたりするように表示させてもよいし、等間隔に並べるように表示させてもよい。
Note that the method by which the list
また、表示用静止画の数が多いために全ての表示用静止画が表示部204に表示されない場合、一覧表示制御部274は、頻度の高い選択時間情報に対応する時間に関する表示用静止画を優先的に表示するようにしてもよい。この場合、一覧表示制御部274は、それ以外の表示用静止画については適宜表示されないようにしてもよい。この場合、ユーザがスクロール操作を行うことによって、表示されていなかった表示用静止画が表示されるようにしてもよい。
If all the display still images are not displayed on the
ステップS132において、情報処理端末200の操作部202は、ユーザによってなされた、表示用静止画の選択に関する操作を受け付ける。具体的には、表示部204に複数の表示用静止画が表示されている状態で、ユーザが表示されている表示用静止画をタッチして選択することによって、操作部202は、表示用静止画の選択に関する操作を受け付ける。この操作に応じて、表示用静止画選択部276は、タッチつまり選択された表示用静止画を示す情報を受け付ける。これによって、表示用静止画選択部276は、表示部204に一覧表示された複数の表示用静止画から、1つ以上の表示用静止画を選択する。表示用静止画選択部276は、選択された表示用静止画を示す情報を、選択履歴記録部278及び再生要求部280に対して出力する。
In step S132, the
ステップS134において、情報処理端末200は、選択履歴を記録する。具体的には、上述したように、選択履歴記録部278は、表示用静止画選択部276によって選択された表示用静止画に付加されている時間情報に基づいて、選択履歴つまり選択時間情報を記録する。このステップS134の処理は、ステップS136の後で行われてもよい。選択履歴記録部278は、S132の処理において表示用静止画が1つ選択されたときは、その表示用静止画に対応する選択時間情報を記録する。
In step S134, the
ステップS136において、情報処理端末200は、撮像装置100に対して、動画の再生を要求する。具体的には、再生要求部280は、動画を再生することを要求する旨の命令を、通信部216及び通信路10を介して、撮像装置100に対して送信する。ここで、動画を再生することを要求する旨の命令には、選択された表示用静止画に対応する時間情報が含まれている。再生要求受信部180は、この動画を再生することを要求する旨の命令を、通信路10及び通信部116を介して受信する。再生要求受信部180は、受信した命令に含まれる、選択された表示用静止画に対応する時間情報を、再生処理部182に対して出力する。
In step S136, the
ステップS138は、撮像装置100は、情報処理端末200に対して動画を転送する。具体的には、再生処理部182は、選択された表示用静止画に対応する時間情報によって示される時間から、動画が情報処理端末200において再生されるような処理を行う。例えば、再生処理部182は、選択された表示用静止画に対応する時間から動画が再生されるように、情報処理端末200に対してストリーミング配信処理を行う。
In step S138, the
ステップS140において、情報処理端末200は、撮像装置100から転送された動画を再生する。具体的には、再生処理部282は、撮像装置100からストリーミング配信された動画を、表示部204に表示させるための処理を行う。これによって、表示部204は、選択された表示用静止画に対応する時間から動画を再生する。なお、動画の転送は、ストリーミング配信に限られない。撮像装置100は、選択された表示用静止画に対応する時間から再生されるような処理を施した上で、動画像データそのものを情報処理端末200に送信してもよい。これにより、情報処理端末200は、動画像データをダウンロードしてもよい。
In step S140, the
なお、S132の処理で、2つの表示用静止画が選択されるようにしてもよい。言い換えると、動画を再生する開始時点ではなく、動画を再生する期間が指定されるようにしてもよい。この場合、再生処理部182及び再生処理部282は、その選択された2つの表示用静止画のうち時間の早いものに対応する時間から動画を開始し、時間の遅い表示用静止画に対応する時間に動画の再生を終了するようにしてもよい。また、この場合、選択履歴記録部278は、開始時間及び終了時間それぞれに対応する時間情報、及び、開始時間から終了時間までの期間における全ての時間情報を選択時間情報として記憶してもよい。また、この場合、取得位置決定部260は、その期間に対応する時間情報について、時間間隔が相対的に短くなるように取得位置を決定してもよい。
Note that two display still images may be selected in the process of S132. In other words, it is possible to specify a period for reproducing a moving image instead of the start point of reproducing the moving image. In this case, the
上述した実施の形態においては、S110の操作でユーザが情報処理端末200を用いて動画の停止を指示したあと、ユーザが何らの操作を行うことなく、S130の処理で、情報処理端末200において表示用静止画が表示される。つまり、ユーザは、動画の停止を指示したあと、煩わしい操作を行うことなく、短時間で、動画の内容を確認することが可能となる。したがって、動画を撮像した後、ユーザが視聴したいシーンを短時間で探すことが可能となる。このことは、他の実施の形態においても同様である。
In the embodiment described above, after the user instructs to stop the moving image using the
また、上述した実施の形態においては、選択した頻度の高い時間帯について、表示用静止画が相対的に細かく表示されるように構成されている。ユーザが視聴したいシーンは、同じような時間帯に集中する傾向がある。例えば、あるユーザは、視聴したいシーンの直後、例えば約10秒後に、動画を停止することが多い。また、別のユーザは、視聴したいシーンが経過してからしばらくしたあと、例えば約2分後に、動画を停止することが多い。したがって、選択履歴に応じて、選択した頻度の高い時間帯については細かく表示用静止画を表示させることによって、ユーザは、視聴したいシーンをより容易に探すことが可能となる。このことは、他の実施の形態においても同様である。 Further, in the above-described embodiment, the still image for display is configured to be displayed relatively finely in the time zone selected with high frequency. Scenes that the user wants to watch tend to concentrate in similar time zones. For example, a user often stops moving images immediately after a scene he / she wants to watch, for example, about 10 seconds later. In addition, another user often stops moving images after a while after the scene he / she wants to watch has elapsed, for example, about two minutes later. Therefore, the user can more easily search for a scene that he / she wants to view by displaying a still image for display in a selected time zone according to the selection history. This is the same in other embodiments.
また、実施の形態1においては、選択履歴がない場合に、比較的、多くの表示用静止画が表示されない。したがって、表示部204の大きさが小さい場合であっても、複数の表示用静止画を一覧表示させることが可能となる。
In the first embodiment, when there is no selection history, a relatively large number of still images for display are not displayed. Therefore, even when the
以下、実施の形態1にかかる具体例について図を用いて説明する。
図8及び図9は、実施の形態1にかかる処理を説明するための第1の具体例を示す図である。第1の具体例においては、動画を再生する開始時点が指定される。図8に示すように、撮像装置100は、動画Aを撮像して、動画Aに関する静止画20a〜20tを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、選択履歴を記録していないものとする。また、静止画20a〜20tの時間間隔は、t1秒であるとする。
Hereinafter, a specific example according to the first embodiment will be described with reference to the drawings.
FIG. 8 and FIG. 9 are diagrams illustrating a first specific example for explaining the processing according to the first embodiment. In the first specific example, a start time point for reproducing a moving image is designated. As illustrated in FIG. 8, the
このとき、選択履歴記録部278が選択履歴を記録していないので、図7に示したS204の処理において、取得位置決定部260は、等間隔となるように、取得位置を決定する。このとき、例えば取得位置の間隔がt2=t1*4(秒)であるとすると、取得位置決定部260は、「動画開始から0秒」、「動画開始からt1*4(秒)」、「動画開始からt1*8(秒)」、「動画開始からt1*12(秒)」及び「動画開始からt1*16(秒)」といったように、取得位置を決定する。
At this time, since the selection
このとき、表示用静止画生成部176は、取得位置「動画開始から0秒」に対応する静止画20aを取得する。また、表示用静止画生成部176は、取得位置「動画開始から(t1*4)秒」に対応する静止画20eを取得する。同様に、表示用静止画生成部176は、取得位置「動画開始から(t1*8)秒」、「動画開始から(t1*12)秒」及び「動画開始から(t1*16)秒」にそれぞれ対応する、静止画20i、20m及び20qを取得する。そして、表示用静止画生成部176は、静止画20a、20e、20i、20m及び20qに対して画像処理を行って、表示用静止画40a、40e、40i、40m及び40qを生成する。
At this time, the display still
そして、表示用静止画取得部272は、撮像装置100から表示用静止画40a、40e、40i、40m及び40qを取得する。これにより、情報処理端末200は、表示部204に表示用静止画40a、40e、40i、40m及び40qを一覧表示させる。そして、ユーザが表示用静止画40iを選択すると、撮像装置100の処理によって、情報処理端末200は、表示用静止画40iに対応する時間位置つまり静止画20iに対応する時間位置から、動画を再生する。このとき、動画の撮像時間をT1秒とすると、選択履歴記録部278は、「T1−(t1*8)」(秒)を示す選択時間情報を記録する。
Then, the display still
次に、図9に示すように、撮像装置100は、動画Bを撮像して、動画Bに関する静止画22a〜22tを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、「T1−(t1*8)」(秒)を示す選択時間情報を記録している。また、静止画22a〜22tの時間間隔は、t1秒であるとする。また、動画Bの撮像時間はT1秒であるとする。
Next, as illustrated in FIG. 9, the
このとき、選択履歴記録部278が選択履歴を記録しているので、図7に示したS210の処理において、取得位置決定部260は、選択時間情報の頻度を判定する。この場合、取得位置決定部260は、「T1−(t1*8)」(秒)を示す選択時間情報の頻度が「1」であると判定する。ここで、「T1−(t1*8)」(秒)を示す選択時間情報に対応する、動画Bにおける時間位置は、T1−(T1−(t1*8))=t1*8(秒)である。
At this time, since the selection
したがって、取得位置決定部260は、時間位置t1*8(秒)の前後の時間間隔が相対的に短くなるように、取得位置を決定する。この例では、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」の前後の時間間隔をt1*2(秒)とし、それ以外の時間情報の間隔については、t1*2(秒)よりも長く、例えばt1*6(秒)等となるようにする。ここで、それ以外の時間帯における時間間隔については、頻度の高い選択時間情報に対応する時間情報の前後の時間帯における時間間隔よりも長ければよく、一定である必要はない。このことは、他の具体例においても同様である。
Therefore, the acquisition
このとき、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」を、取得位置として決定する。また、取得位置決定部260は、その前後の時間情報「動画開始からt1*6(秒)」及び「動画開始からt1*10(秒)」を、取得位置として決定する。さらに、取得位置決定部260は、時間情報「動画開始から0秒」及び「動画開始からt1*16(秒)」を、取得位置として決定する。
At this time, the acquisition
このとき、表示用静止画生成部176は、取得位置「動画開始から0秒」に対応する静止画22aを取得する。また、表示用静止画生成部176は、取得位置「動画開始からt1*6(秒)」に対応する静止画22gを取得する。また、表示用静止画生成部176は、取得位置「動画開始からt1*8(秒)」に対応する静止画22iを取得する。つまり、「T1−(t1*8)」(秒)を示す選択時間情報に対応する動画Bにおける静止画は、静止画22iである。
At this time, the display still
また、表示用静止画生成部176は、取得位置「動画開始からt1*10(秒)」に対応する静止画22kを取得する。また、表示用静止画生成部176は、取得位置「動画開始からt1*16(秒)」に対応する静止画22qを取得する。そして、表示用静止画生成部176は、静止画22a、22g、22i、22k及び22qに対して画像処理を行って、表示用静止画42a、42g、42i、42k及び42qを生成する。このとき、「T1−(t1*8)」(秒)を示す選択時間情報に対応する動画Bにおける表示用静止画は、表示用静止画42iである。
Further, the display still
そして、表示用静止画取得部272は、撮像装置100から表示用静止画42a、42g、42i、42k及び42qを取得する。これにより、情報処理端末200は、表示部204に表示用静止画42a、42g、42i、42k及び42qを一覧表示させる。このとき、「T1−(t1*8)」(秒)を示す選択時間情報に対応する表示用静止画42iの前後の表示用静止画の時間間隔が相対的に短くなるように表示されている。
The display still
図10及び図11は、実施の形態1にかかる処理を説明するための第2の具体例を示す図である。第2の具体例においては、動画を再生する期間、つまり始点及び終点が指定される。図10に示すように、第1の具体例と同様に、撮像装置100は、動画Aを撮像して、動画Aに関する静止画20a〜20uを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、選択履歴を記録していないものとする。また、静止画20a〜20uの時間間隔は、t1秒であるとする。このとき、上述した第1の具体例と同様に、選択履歴記録部278が選択履歴を記録していないので、図7に示したS204の処理において、取得位置決定部260は、等間隔となるように、取得位置を決定する。したがって、情報処理端末200は、等間隔である静止画20a、20e、20i、20m、20q及び20uに対応する表示用静止画40a、40e、40i、40m、40q及び40uを取得し、これらを表示部204に一覧表示させる。
10 and 11 are diagrams illustrating a second specific example for explaining the processing according to the first embodiment. In the second specific example, a period for reproducing a moving image, that is, a start point and an end point are designated. As illustrated in FIG. 10, as in the first specific example, the
ユーザが表示用静止画40i及び40mを選択すると、撮像装置100の処理によって、情報処理端末200は、表示用静止画40iに対応する時間位置から、表示用静止画40mに対応する時間位置までの期間、動画を再生する。このとき、動画の撮像時間をT1秒とすると、選択履歴記録部278は、上記期間に対応する「T1−(t1*8)」(秒)、「T1−(t1*9)」(秒)、「T1−(t1*10)」(秒)、「T1−(t1*11)」(秒)及び「T1−(t1*12)」(秒)を示す選択時間情報を記録する。
When the user selects the display still
次に、図11に示すように、撮像装置100は、第1の具体例と同様に、動画Bを撮像して、動画Bに関する静止画22a〜22uを抽出する。静止画22a〜22uの時間間隔は、t1秒であるとする。また、動画Bの撮像時間はT1秒であるとする。
Next, as illustrated in FIG. 11, the
このとき、選択履歴記録部278が選択履歴を記録しているので、図7に示したS210の処理において、取得位置決定部260は、選択時間情報の頻度を判定する。この場合、取得位置決定部260は、「T1−(t1*8)」(秒)から「T1−(t1*12)」(秒)までの選択時間情報の頻度が「1」であると判定する。ここで、「T1−(t1*8)」(秒)を示す選択時間情報に対応する、動画Bにおける時間位置は、T1−(T1−(t1*8))=t1*8(秒)である。また、「T1−(t1*12)」((秒)を示す選択時間情報に対応する、動画Bにおける時間位置は、T1−(T1−(t1*12))=t1*12(秒)である。
At this time, since the selection
したがって、取得位置決定部260は、時間位置t1*8(秒)からt1*12(秒)までの期間における時間間隔が相対的に短くなるように、取得位置を決定する。この例では、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」から「動画開始からt1*12(秒)」までの期間においては、時間間隔をt1*2(秒)とし、それ以外の時間情報の間隔については、t1*2(秒)よりも長く、例えばt1*4(秒)等となるようにする。
Therefore, the acquisition
このとき、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」及び「動画開始からt1*12(秒)」を、取得位置として決定する。また、取得位置決定部260は、時間情報「動画開始からt1*10(秒)」を、取得位置として決定する。さらに、取得位置決定部260は、時間情報「動画開始から0秒」、「動画開始からt1*4(秒)」及び「動画開始からt1*16(秒)」を、取得位置として決定する。
At this time, the acquisition
これにより、表示用静止画取得部272は、撮像装置100から、上記取得位置として決定された時間情報にそれぞれ対応する表示用静止画42a、42e、42i、42k、42m及び42qを取得する。そして、情報処理端末200は、これらの表示用静止画を表示部204に一覧表示させる。このとき、時間情報「T1−(t1*8)(秒)」から「T1−(t1*12)(秒)」までの間の選択時間情報に対応する表示用静止画42i、42k、42mの時間間隔が相対的に短くなるように表示されている。
Accordingly, the display still
なお、上述した第2の具体例においては、選択された2つの表示用静止画それぞれの時間情報の間の期間について、表示用静止画の時間間隔が相対的に短くなるようにしたが、このような構成に限られない。2つの選択時間情報それぞれに対応する時間情報の前後の時間情報の時間間隔が相対的に短くなるようにしてもよい。上記の例では、時間位置t1*8(秒)の前後、及び時間位置t1*12(秒)の前後について、時間間隔が短くなるようにしてもよい。このことは、後述する他の実施の形態においても同様である。 In the second specific example described above, the time interval between the still images for display is relatively short with respect to the period between the time information of each of the two selected still images for display. It is not restricted to such a configuration. You may make it the time interval of the time information before and behind the time information corresponding to each of two selection time information become relatively short. In the above example, the time interval may be shortened before and after the time position t1 * 8 (seconds) and before and after the time position t1 * 12 (seconds). The same applies to other embodiments described later.
また、上述した第2の具体例において、S140において動画が再生されているときに、S132で選択した、後の時間に対応する表示用静止画に対応するシーンが再生される前にユーザが再生を停止した場合、選択時間情報を書き換えてもよい。つまり、上記の例では、t1*12(秒)の前の例えばt1*10(秒)で再生が停止されたとき、選択時間情報「T1−(t1*12)」を「T1−(t1*10)」と書き換えてもよい。このことは、後述する他の実施の形態においても同様である。 In the second specific example described above, when a moving image is played back in S140, the user plays back the scene corresponding to the display still image corresponding to the later time selected in S132. When the operation is stopped, the selection time information may be rewritten. That is, in the above example, when the reproduction is stopped at, for example, t1 * 10 (seconds) before t1 * 12 (seconds), the selection time information “T1- (t1 * 12)” is changed to “T1- (t1 *). 10) ". The same applies to other embodiments described later.
上述した第1の具体例及び第2の具体例においては、取得位置決定部260は、選択された頻度の低い選択時間情報に対応する時間における時間間隔が、選択時間情報が記録されていないときの時間間隔と比較して長くなるように、取得位置を決定する。これにより、選択された頻度の高い時間帯については、動画Aと比較して、動画Bについては、表示用静止画が多く表示され得る。一方、選択された頻度の低い時間帯については、動画Aと比較して、動画Bについては、表示用静止画が少なく表示され得る。このように構成されることによって、表示部204に表示される表示用静止画の数を、略一定にすることが可能となる。このようにすることによって、表示部204の大きさがあまり大きくない場合に、表示される表示用静止画の数を増加させることなく、ユーザは、視聴したいシーンをより容易に探すことが可能となる。
In the first specific example and the second specific example described above, the acquisition
図12は、実施の形態1にかかる処理を説明するための第3の具体例を示す図である。第3の具体例においては、選択の頻度が高い時間帯について、情報処理端末200に表示される表示用静止画の数が増加する。まず、第1の具体例と同様に、図8に示すように動画Aが撮像され、表示用静止画40a、40e、40i、40m及び40qが一覧表示される。そして、表示用静止画40iが選択されたとする。このとき、選択履歴記録部278は、「T1−(t1*8)」(秒)を示す選択時間情報を記録する。
FIG. 12 is a diagram illustrating a third specific example for describing the process according to the first embodiment. In the third specific example, the number of still images for display displayed on the
次に、第1の具体例と同様に、撮像装置100は、動画Bを撮像して、動画Bに関する静止画22a〜22tを抽出する。そして、第1の具体例と同様に、取得位置決定部260は、時間位置t1*8(秒)の前後の時間間隔が相対的に短くなるように、取得位置を決定する。この例では、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」の前後の時間間隔をt1*2(秒)とする。一方、取得位置決定部260は、それ以外の時間情報の間隔については、動画Aの場合と同じ、t1*4(秒)とする。つまり、取得位置決定部260は、動画Aの場合と同じ時間情報を、取得位置として決定する。
Next, as in the first specific example, the
このとき、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」を、取得位置として決定する。また、取得位置決定部260は、その前後の時間情報「動画開始からt1*6(秒)」及び「動画開始からt1*10(秒)」を、取得位置として決定する。さらに、取得位置決定部260は、動画Aの場合と同じ、時間情報「動画開始から0秒」、「動画開始からt1*4(秒)」、「動画開始からt1*12(秒)」及び「動画開始からt1*16(秒)」を、取得位置として決定する。
At this time, the acquisition
これにより、表示用静止画取得部272は、撮像装置100から、上記取得位置として決定された時間情報にそれぞれ対応する表示用静止画42a、42e、42g、42i、42k、42m及び42qを取得し、これらを表示部204に一覧表示させる。このとき、選択時間情報「T1−(t1*8)(秒)」に対応する表示用静止画42iの前後の表示用静止画が増加しているので、この時間帯において時間間隔が相対的に短くなるように表示されている。
Thereby, the display still
上述した第3の具体例においては、第1の具体例及び第2の具体例と異なり、選択された頻度の高い時間帯については、動画Aと比較して、動画Bについては、表示用静止画が多く表示され得る。一方、選択された頻度の低い時間帯については、動画Aと略同じ数で、動画Bについても、表示用静止画が表示され得る。このように構成されることによって、選択された頻度の高い時間帯についてより細かく表示用静止画を表示しつつ、選択された頻度の低い時間帯においても、選択時間情報が記録されていないと同程度の細かさで表示用静止画を表示することができる。 In the third specific example described above, unlike the first specific example and the second specific example, the time period of the selected frequency is higher than that of the moving image A, and the moving image B is stationary for display. Many pictures can be displayed. On the other hand, in the time zone selected with a low frequency, the display still image can be displayed for the moving image B in substantially the same number as the moving image A. By being configured in this way, while displaying a still image for display more finely for a selected time zone having a high frequency, the selected time information is not recorded even in a selected time zone having a low frequency. A still image for display can be displayed with a fine degree of detail.
(実施の形態2)
次に、実施の形態2について説明する。実施の形態2は、実施の形態1と同様に、図1〜図3に示した装置及びシステムにおいて実現される。また、実施の形態2にかかる撮像装置100は、実施の形態1と同様に、図4に示した撮像処理部150を有する。また、実施の形態2にかかる情報処理端末200は、実施の形態1と同様に、図5に示した動画確認処理部250を有する。そして、実施の形態2にかかる撮像装置100及び情報処理端末200は、実施の形態1と同様に、図6に示したシーケンス図のように処理を行う。一方、実施の形態2にかかるS20の取得位置決定部260の処理が、実施の形態1とは異なる。
(Embodiment 2)
Next, a second embodiment will be described. The second embodiment is realized in the apparatus and system shown in FIGS. 1 to 3 as in the first embodiment. Also, the
図13は、実施の形態2にかかる取得位置決定部260の処理を示すフローチャートである。まず、ステップS302において、S202と同様に、取得位置決定部260は、選択履歴記録部278に選択履歴が記録されているか否かを判定する。選択履歴が記録されていない場合、つまりS302の判定がNOの場合、ステップS304において、S204と同様に、取得位置決定部260は、取得すべき表示用静止画の時間軸上の位置が等間隔となるように、取得位置を決定する。
FIG. 13 is a flowchart of a process performed by the acquisition
ここで、実施の形態2においては、取得すべき表示用静止画の時間間隔は、静止画格納部160に格納されている静止画の時間間隔と同じであってもよい。例えば、静止画格納部160に静止画が5秒間隔で格納されている場合、取得位置決定部260は、5秒間隔となるように、取得位置を決定する。つまり、取得位置決定部260は、「動画開始から0秒」、「動画開始から5秒」、「動画開始から10秒」、「動画開始から15秒」といったように、取得位置を決定する。なお、このときに取得すべき表示用静止画の時間間隔は、静止画の時間間隔と同じでなくてもよい。例えば、格納されている静止画について1つおきに表示用静止画が取得されてもよい。好ましくは、実施の形態2においては、実施の形態1の場合よりは、表示用静止画の時間間隔は短い。
Here, in the second embodiment, the time interval between the still images for display to be acquired may be the same as the time interval between the still images stored in the still
一方、選択履歴が記録されている場合、つまりS302の判定がYESの場合、ステップS310において、S210と同様に、取得位置決定部260は、選択時間情報の頻度を判定する。ステップS312において、取得位置決定部260は、頻度の低い選択時間情報に対応する時間情報に対応する表示用静止画の数を減少させるように、取得位置を決定する。
On the other hand, if the selection history is recorded, that is, if the determination in S302 is YES, in step S310, the acquisition
例えば、上述したような、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録し、処理対象の動画の撮像時間が5分である例を想定する。この場合、取得位置決定部260は、「動画開始から2分」に対応する表示用静止画の近傍の時間帯においては、静止画格納部160に格納されている静止画の時間間隔と同じとするように、取得位置を決定する。一方、取得位置決定部260は、「動画開始から2分」に対応する表示用静止画の近傍の時間帯以外の時間帯においては、時間間隔が長くなるように、取得位置を決定する。
For example, as described above, it is assumed that the selection
つまり、取得位置決定部260は、「動画開始から2分」の前後の時間帯においては、5秒間隔で表示用静止画を取得するように、取得位置を決定する。一方、取得位置決定部260は、例えば「動画開始から4分」のようなその他の時間帯においては、例えば10秒間隔等の5秒間隔よりも長い間隔となるように、取得位置を決定する。
That is, the acquisition
また、例えば、上述したような、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録し、「動画終了まで2分」を示す選択時間情報を2つ記録し、処理対象の動画の撮像時間が5分である例を想定する。この場合、取得位置決定部260は、「動画開始から3分」を示す時間情報の前後の時間帯における時間間隔が5秒間隔となるように、取得位置を決定する。また、取得位置決定部260は、「動画開始から2分」を示す時間情報の前後の時間間隔が、「動画開始から3分」を示す時間情報の前後の時間帯における時間間隔よりも長くなるように、取得位置を決定する。同様に、取得位置決定部260は、その他の時間情報の前後の時間帯における時間間隔が「動画開始から2分」を示す時間情報の前後の時間間隔よりも長くなるように、取得位置を決定する。
Further, for example, the selection
つまり、取得位置決定部260は、「動画開始から2分」の前後においては、例えば10秒間隔等の5秒間隔よりも長い間隔で表示用静止画を取得するように、取得位置を決定する。また、取得位置決定部260は、例えば「動画開始から4分」のようなその他の時間位置においては、例えば20秒間隔等の10秒間隔よりも長い間隔となるように、取得位置を決定する。
That is, the acquisition
また、実施の形態2においては、選択履歴がない場合であっても細かく表示用静止画が表示される。したがって、ユーザは、視聴したいシーンを、より正確に選択することが可能となる。実施の形態2は、情報処理端末200が、多くの表示用静止画を表示させることが可能な表示部204を備えている場合に、より有効である。
In the second embodiment, a still image for display is displayed finely even when there is no selection history. Therefore, the user can more accurately select a scene that the user wants to view. The second embodiment is more effective when the
また、実施の形態2においては、選択を繰り返していくと、選択された頻度の高い時間帯についてはより細かく、選択された頻度の低い時間帯についてはより粗く、表示用静止画が表示され得る。したがって、特に、選択時間情報が複数ある場合に、複数の時間帯において、容易に、表示用静止画を細かく表示させることが可能となる。 Further, in the second embodiment, when the selection is repeated, a still image for display can be displayed in which the selected time zone is finer and the selected low time zone is coarser. . Therefore, particularly when there are a plurality of pieces of selection time information, it is possible to easily display a still image for display in a plurality of time zones.
以下、実施の形態2にかかる具体例について図を用いて説明する。
図14及び図15は、実施の形態2にかかる処理を説明するための第1の具体例を示す図である。第1の具体例においては、動画を再生する開始時点が指定される。図14に示すように、撮像装置100は、動画Aを撮像して、動画Aに関する静止画20a〜20tを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、選択履歴を記録していないものとする。また、静止画20a〜20tの時間間隔は、t1秒であるとする。このとき、選択履歴記録部278が選択履歴を記録していないので、図13に示したS304の処理において、取得位置決定部260は、等間隔つまりt1秒となるように、取得位置を決定する。つまり、取得位置決定部260は、「動画開始から0秒」、「動画開始からt1秒」、「動画開始からt1*2(秒)」、「動画開始からt1*3(秒)」及び「動画開始からt1*4(秒)」といったように、取得位置を決定する。
Hereinafter, a specific example according to the second embodiment will be described with reference to the drawings.
FIGS. 14 and 15 are diagrams illustrating a first specific example for explaining the processing according to the second embodiment. In the first specific example, a start time point for reproducing a moving image is designated. As illustrated in FIG. 14, the
このとき、上述した具体例と同様に、表示用静止画取得部272は、撮像装置100から表示用静止画40a〜40tを取得する。これにより、情報処理端末200は、表示部204に表示用静止画40a〜40tを一覧表示させる。そして、ユーザが表示用静止画40iを選択すると、撮像装置100の処理によって、情報処理端末200は、表示用静止画40iに対応する時間位置つまり静止画20iに対応する時間位置から、動画を再生する。このとき、動画の撮像時間をT1秒とすると、選択履歴記録部278は、「T1−(t1*8)」(秒)を示す選択時間情報を記録する。
At this time, similarly to the specific example described above, the display still
次に、図15に示すように、撮像装置100は、動画Bを撮像して、動画Bに関する静止画22a〜22tを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、「T1−(t1*8)」(秒)を示す選択時間情報を記録している。また、静止画22a〜22tの時間間隔は、t1秒であるとする。また、動画Bの撮像時間はT1秒であるとする。
Next, as illustrated in FIG. 15, the
このとき、選択履歴記録部278が選択履歴を記録しているので、図13に示したS310の処理において、取得位置決定部260は、選択時間情報の頻度を判定する。この場合、取得位置決定部260は、「T1−(t1*8)」(秒)を示す選択時間情報の頻度が「1」であると判定する。ここで、「T1−(t1*8)」(秒)を示す選択時間情報に対応する、動画Bにおける時間位置は、T1−(T1−(t1*8))=t1*8(秒)である。
At this time, since the selection
したがって、取得位置決定部260は、時間位置t1*8(秒)の前後の時間帯以外の時間帯における時間間隔が相対的に長くなるように、取得位置を決定する。この例では、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」の前後の時間帯以外の時間帯Bにおける時間間隔が、t1(秒)よりも長く、例えばt1*2(秒)等となるようにする。一方、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」の前後の時間帯Aにおける時間間隔が、動画Aの場合と同様にt1(秒)となるようにする。ここで、それ以外の時間帯における時間間隔については、頻度の高い選択時間情報に対応する時間情報の前後の時間帯における時間間隔よりも長ければよく、一定である必要はない。このことは、他の具体例においても同様である。
Therefore, the acquisition
このとき、取得位置決定部260は、時間情報「動画開始からt1*8(秒)」を、取得位置として決定する。また、取得位置決定部260は、時間帯Aにおける時間情報「動画開始からt1*7(秒)」及び「動画開始からt1*9(秒)」を、取得位置として決定する。さらに、取得位置決定部260は、時間帯Bに対応する時間情報、例えば「動画開始から0秒」、「動画開始からt1*2(秒)」、「動画開始からt1*4(秒)」及び「動画開始からt1*6(秒)」を、取得位置として決定する。同様に、取得位置決定部260は、時間帯Bに対応する時間情報、例えば「動画開始からt1*10秒」、「動画開始からt1*12(秒)」、「動画開始からt1*14(秒)」等を、取得位置として決定する。
At this time, the acquisition
このとき、表示用静止画生成部176は、取得位置「動画開始から0秒」、「動画開始からt1*2(秒)」、「動画開始からt1*4(秒)」及び「動画開始からt1*6(秒)」にそれぞれ対応する静止画22a,22c,22e及び22gを取得する。また、表示用静止画生成部176は、取得位置「動画開始からt1*10秒」、「動画開始からt1*12(秒)」、「動画開始からt1*14(秒)」等にそれぞれ対応する静止画22k,22m,22o、22q及び22sを取得する。
At this time, the display still
また、表示用静止画生成部176は、取得位置「動画開始からt1*7(秒)」に対応する静止画22hを取得する。また、表示用静止画生成部176は、取得位置「動画開始からt1*8(秒)」に対応する静止画22iを取得する。つまり、「T1−(t1*8)」(秒)を示す選択時間情報に対応する動画Bにおける静止画は、静止画22iである。また、表示用静止画生成部176は、取得位置「動画開始からt1*9(秒)」に対応する静止画22jを取得する。
Further, the display still
そして、表示用静止画生成部176は、静止画22a,22c,22e、22gに対して画像処理を行って、表示用静止画42a,42c,42e、42gを生成する。同様に、表示用静止画生成部176は、静止画22h、22i、22jに対して画像処理を行って、表示用静止画42h、42i、42jを生成する。同様に、表示用静止画生成部176は、静止画22k,22m,22o、22q、22sに対して画像処理を行って、表示用静止画42k,42m,42o、42q、42sを生成する。このとき、「T1−(t1*8)」(秒)を示す選択時間情報に対応する動画Bにおける表示用静止画は、表示用静止画42iである。
The display still
そして、表示用静止画取得部272は、撮像装置100から上記の表示用静止画42a等を取得する。これにより、情報処理端末200は、表示部204に上記の表示用静止画42a等を一覧表示させる。このとき、「T1−(t1*8)」(秒)を示す選択時間情報に対応する表示用静止画42iの前後の時間帯の表示用静止画の数が相対的に多くなるように表示されている。
The display still
図16及び図17は、実施の形態2にかかる処理を説明するための第2の具体例を示す図である。第2の具体例においては、動画を再生する期間、つまり始点及び終点が指定される。図16に示すように、第1の具体例と同様に、撮像装置100は、動画Aを撮像して、動画Aに関する静止画20a〜20tを抽出する。このとき、情報処理端末200において、選択履歴記録部278は、選択履歴を記録していないものとする。また、静止画20a〜20tの時間間隔は、t1秒であるとする。このとき、上述した第1の具体例と同様に、選択履歴記録部278が選択履歴を記録していないので、図13に示したS304の処理において、取得位置決定部260は、等間隔つまりt1秒となるように、取得位置を決定する。したがって、情報処理端末200は、静止画20a〜20tに対応する表示用静止画40a〜40tを取得し、これらを表示部204に一覧表示させる。
FIGS. 16 and 17 are diagrams illustrating a second specific example for explaining the processing according to the second embodiment. In the second specific example, a period for reproducing a moving image, that is, a start point and an end point are designated. As illustrated in FIG. 16, as in the first specific example, the
ユーザが表示用静止画40i及び40oを選択すると、撮像装置100の処理によって、情報処理端末200は、表示用静止画40iに対応する時間位置から、表示用静止画40oに対応する時間位置までの期間、動画を再生する。このとき、動画の撮像時間をT1秒とすると、選択履歴記録部278は、上記期間に対応する「T1−(t1*8)」(秒)から「T1−(t1*14)」(秒)を示す選択時間情報を記録する。
When the user selects the display still
次に、図17に示すように、撮像装置100は、第1の具体例と同様に、動画Bを撮像して、動画Bに関する静止画22a〜22tを抽出する。静止画22a〜22tの時間間隔は、t1秒であるとする。また、動画Bの撮像時間はT1秒であるとする。
Next, as illustrated in FIG. 17, the
このとき、選択履歴記録部278が選択履歴を記録しているので、図13に示したS310の処理において、取得位置決定部260は、選択時間情報の頻度を判定する。この場合、取得位置決定部260は、「T1−(t1*8)」(秒)から「T1−(t1*14)」(秒)までの選択時間情報の頻度が「1」であると判定する。
At this time, since the selection
したがって、取得位置決定部260は、時間位置t1*8(秒)からt1*14(秒)までの期間以外の時間帯における時間間隔が相対的に長くなるように、取得位置を決定する。この例では、取得位置決定部260は、上記期間に対応する時間帯A以外の時間帯Bにおける時間間隔が、t1(秒)よりも長く、例えばt1*2(秒)等となるようにする。
Therefore, the acquisition
このとき、取得位置決定部260は、時間帯Aに対応する時間情報「動画開始からt1*8(秒)」から「動画開始からt1*14(秒)」の間の時間情報それぞれを、取得位置として決定する。さらに、取得位置決定部260は、時間帯Bに対応する時間情報、例えば時間情報「動画開始から0秒」、「動画開始からt1*2(秒)」等を、取得位置として決定する。
At this time, the acquisition
これにより、表示用静止画取得部272は、撮像装置100から、上記取得位置として決定された時間情報にそれぞれ対応する表示用静止画42a、42c、42e、42g、42i〜42o、42q及び42sを取得し、これらを表示部204に一覧表示させる。このとき、時間情報「T1−(t1*8)(秒)」から「T1−(t1*14)(秒)」までの間の選択時間情報に対応する表示用静止画42i〜42oに対応する時間帯の表示用静止画の数が相対的に多くなるように表示されている。
Thereby, the display still
(実施の形態3)
次に、実施の形態3について説明する。実施の形態3は、実施の形態1と同様に、図1〜図3に示した装置及びシステムにおいて実現される。また、実施の形態3にかかる撮像装置100は、実施の形態1と同様に、図4に示した撮像処理部150を有する。また、実施の形態3にかかる情報処理端末200は、実施の形態1と同様に、図5に示した動画確認処理部250を有する。そして、実施の形態3にかかる撮像装置100及び情報処理端末200は、実施の形態1と同様に、図6に示したシーケンス図のように処理を行う。
(Embodiment 3)
Next, Embodiment 3 will be described. The third embodiment is realized in the apparatus and system shown in FIGS. 1 to 3 as in the first embodiment. Further, the
一方、実施の形態3にかかるS130の一覧表示制御部274の処理が、実施の形態1及び実施の形態2とは異なる。具体的には、一覧表示制御部274は、実施の形態1等と同様に、表示用静止画取得部272からの表示用静止画が一覧で表示されるように、表示部204を制御する。この際、一覧表示制御部274は、選択履歴における選択時間情報の頻度に応じて、表示される表示用静止画の大きさが互いに異なり得るようにするように構成されている。以下、詳述する。
On the other hand, the processing of the list
図18は、実施の形態3にかかる一覧表示制御部274の処理を示すフローチャートである。まず、ステップS402において、一覧表示制御部274は、選択履歴記録部278に選択履歴が記録されているか否かを判定する。選択履歴が記録されていない場合、つまりS402の判定がNOの場合、ステップS404において、他の実施の形態と同様に、一覧表示制御部274は、全ての表示用静止画が互いに同じ大きさで表示されるように、各表示用静止画を表示させる。
FIG. 18 is a flowchart illustrating processing of the list
一方、選択履歴が記録されている場合、つまりS402の判定がYESの場合、ステップS410において、S210の処理と同様にして、一覧表示制御部274は、選択時間情報の頻度を判定する。ステップS412において、一覧表示制御部274は、頻度の高い選択時間情報に対応する時間情報に対応する表示用静止画の大きさが他の表示用静止画よりも大きくなるように、各表示用静止画を表示させる。
On the other hand, if the selection history is recorded, that is, if the determination in S402 is YES, in step S410, the list
例えば、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録しているケースを仮定する。そして、処理対象の動画の撮像時間が5分である場合、「動画終了まで3分」を示す選択時間情報に対応する時間情報は、「動画開始から2分」を示す情報である。この場合において、頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から2分」を示す時間情報に対応する表示用静止画である。したがって、一覧表示制御部274は、この「動画開始から2分」を示す時間情報に対応する表示用静止画を、他の表示用静止画よりも大きくなるように表示する。
For example, it is assumed that the selection
また、例えば、選択履歴記録部278が選択時間情報として「動画終了まで3分」を示す選択時間情報を1つ記録し、「動画終了まで2分」を示す選択時間情報を2つ記録しているケースを仮定する。そして、処理対象の動画の撮像時間が5分である場合、「動画終了まで3分」を示す選択時間情報に対応する時間情報は「動画開始から2分」を示す情報であり、「動画終了まで2分」を示す選択時間情報に対応する時間情報は、「動画開始から3分」を示す情報である。この場合において、最も頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から3分」を示す時間情報に対応する表示用静止画である。また、次に頻度の高い選択時間情報に対応する表示用静止画は、「動画開始から2分」を示す時間情報に対応する表示用静止画である。
Further, for example, the selection
したがって、一覧表示制御部274は、「動画開始から3分」を示す時間情報に対応する表示用静止画が最も大きく表示されるようにする。また、一覧表示制御部274は、「動画開始から2分」を示す時間情報に対応する表示用静止画が2番目に大きく表示されるようにする。
Therefore, the list
以下、実施の形態3にかかる具体例について図を用いて説明する。なお、以下の具体例は、上記の実施の形態2に適用した例を示しているが、実施の形態3は、実施の形態1にも適用可能である。また、以下の具体例においては、頻度の高い選択時間情報に対応する表示用静止画が大きく表示されるような構成であるが、頻度の低い選択時間情報に対応する表示用静止画が縮小して表示されるような構成であってもよい。 Hereinafter, a specific example according to the third embodiment will be described with reference to the drawings. Although the following specific example shows an example applied to the second embodiment, the third embodiment can also be applied to the first embodiment. In the following specific example, the display still image corresponding to the frequently selected time information is displayed in a large size, but the display still image corresponding to the less frequently selected time information is reduced. May be configured to be displayed.
図19は、実施の形態3にかかる処理を説明するための第1の具体例を示す図である。第1の具体例においては、動画を再生する開始時点が指定される。なお、図19に示した例は、図15で示した実施の形態2の第1の具体例に対応する。 FIG. 19 is a diagram illustrating a first specific example for explaining the processing according to the third embodiment. In the first specific example, a start time point for reproducing a moving image is designated. The example shown in FIG. 19 corresponds to the first specific example of the second embodiment shown in FIG.
図15を用いて上述したように、選択時間情報「T1−(t1*8)」に対応する表示用静止画は、表示用静止画42iである。したがって、図19に示すように、一覧表示制御部274は、頻度の高い選択時間情報に対応する表示用静止画である表示用静止画42iの大きさが、他の表示用静止画よりも大きくなるように、各表示用静止画を表示させる。なお、図19に示すように、一覧表示制御部274は、表示用静止画42iの前後の表示用静止画42h及び42jを、表示用静止画42iよりは小さいが他の表示用静止画よりは大きくなるように表示させるようにしてもよい。
As described above with reference to FIG. 15, the display still image corresponding to the selection time information “T1- (t1 * 8)” is the display still image 42i. Accordingly, as shown in FIG. 19, the list
図20は、実施の形態3にかかる処理を説明するための第2の具体例を示す図である。第2の具体例においては、動画を再生する期間、つまり始点及び終点が指定される。なお、図20に示した例は、図17で示した実施の形態2の第2の具体例に対応する。 FIG. 20 is a diagram illustrating a second specific example for explaining the process according to the third embodiment. In the second specific example, a period for reproducing a moving image, that is, a start point and an end point are designated. The example shown in FIG. 20 corresponds to the second specific example of the second embodiment shown in FIG.
図17を用いて上述したように、選択時間情報「T1−(t1*8)」から「T1−(t1*14)」に対応する表示用静止画は、表示用静止画42i〜42oである。したがって、図20に示すように、一覧表示制御部274は、頻度の高い選択時間情報に対応する表示用静止画である表示用静止画42i〜42oの大きさが、他の表示用静止画よりも大きくなるように、各表示用静止画を表示させる。なお、一覧表示制御部274は、表示用静止画42i〜42oの前後の表示用静止画を、表示用静止画42i〜42oよりは小さいが他の表示用静止画よりは大きくなるように表示させるようにしてもよい。
As described above with reference to FIG. 17, the display still images corresponding to the selection time information “T1- (t1 * 8)” to “T1- (t1 * 14)” are display still images 42i to 42o. . Therefore, as shown in FIG. 20, the list
実施の形態3においては、選択された頻度の高い時間帯における表示用静止画を大きく表示させることが可能となる。したがって、ユーザは、選択された頻度の高い時間帯の表示用静止画、つまりそのユーザが視聴したい可能性の高いシーンを、さらに容易に確認することが可能となる。 In the third embodiment, it is possible to display a still image for display in a selected time zone with high frequency. Therefore, the user can more easily confirm the still image for display in the selected time zone, that is, the scene that the user is likely to view.
(変形例)
なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、図4に示した撮像処理部150の各構成要素の少なくとも1つは、情報処理端末200で実現されてもよい。同様に、図5に示した動画確認処理部250の各構成要素の少なくとも1つは、撮像装置100で実現されてもよい。さらに、撮像処理部150及び動画確認処理部250が、1つの装置で実現されてもよい。この場合、その装置は、図2及び図3に示すように、情報処理装置、操作部、表示部及び撮像部を有している。そして、その装置は、自身の装置に設けられた撮像部で動画を撮影し、情報処理装置で撮像処理部150及び動画確認処理部250を実現し、表示部に表示用静止画を表示させる。
(Modification)
Note that the present invention is not limited to the above-described embodiment, and can be changed as appropriate without departing from the spirit of the present invention. For example, at least one of the components of the
また、上述したシーケンス図及びフローチャートにおける処理の順序は、適宜、変更可能である。また、上述したシーケンス図及びフローチャートにおける複数の処理の少なくとも1つは、省略されても構わない。例えば、選択履歴が記録されていない場合、図6に示したS116、S20及びS122の処理はなくてもよい。この場合、情報処理端末200が撮像の停止を指示するときに、撮像の停止を指示する旨の命令に、表示用静止画の時間間隔を示す情報を含ませてもよい。このときの時間間隔は等間隔であってもよい。撮像装置100は、指示された間隔で表示用静止画を生成し、S124の処理で情報処理端末200に送信する。なお、この表示用静止画の時間間隔の指定は、S104の処理のときに行われてもよい。
Moreover, the order of the processes in the sequence diagrams and flowcharts described above can be changed as appropriate. In addition, at least one of the plurality of processes in the sequence diagram and the flowchart described above may be omitted. For example, when the selection history is not recorded, the processing of S116, S20, and S122 shown in FIG. In this case, when the
また、上述した実施の形態においては、撮像装置100は、動画を撮像しながら静止画を抽出するように構成されているが、このような構成に限られない。例えば、静止画は、動画の撮像が終了したときに抽出されるようにしてもよい。ただし、動画を撮像しながら静止画を抽出することにより、動画の撮像が停止してから表示用静止画が一覧表示されるまでの時間が、より短くなる。
In the above-described embodiment, the
一方、動画から静止画を抽出する処理は、取得位置決定部260の処理の後で行われてもよい。この場合、静止画格納部160はなくてもよい。この場合、撮像装置100は、取得位置決定部260によって決定された取得位置に関する静止画のみ抽出し、抽出された静止画について表示用静止画を生成するようにしてもよい。
On the other hand, the process of extracting a still image from a moving image may be performed after the process of the acquisition
また、上述した実施の形態においては、撮像装置100において静止画が抽出されるように構成されているが、このような構成に限られない。情報処理端末200が静止画を抽出するようにしてもよい。この場合、撮像装置100は、撮像した動画つまり動画像データを、リアルタイムで情報処理端末200に送信する。このようにすることによって、情報処理端末200は、動画の撮像を停止してから撮像装置100と通信を行うことが不要となるので、動画の撮像が停止してから表示用静止画が一覧表示されるまでの時間が、さらに短くなる。
In the above-described embodiment, the
また、上述した実施の形態においては、表示用静止画は、情報処理端末200が表示用静止画を要求したときに作成されるとしたが、このような構成に限られない。表示用静止画は、静止画が抽出されるときに生成されるようにしてもよい。このようにすることによって、撮像が停止した後で画像処理を行う必要がなくなるので、動画の撮像が停止してから表示用静止画が一覧表示されるまでの時間が、さらに短くなる。ただし、抽出された全ての静止画について画像処理を行うので、情報処理のリソースがより多く消費され得る。
In the above-described embodiment, the display still image is created when the
また、撮像装置100で作成される動画像データつまり動画ファイルのサイズに制限がある場合、動画が複数の動画ファイルに分割され得る。この場合、撮像装置100は、分割された全ての動画ファイルについて、静止画を抽出するようにしてもよい。
In addition, when moving image data created by the
また、動画が撮像されている間に、情報処理端末200において、マーカを記録するようにしてもよい。マーカは、ユーザが興味を持ったシーンについて、例えばユーザが情報処理端末200の操作部を操作することによって記録される。このマーカは、記録された時間を示す時間情報を含む。そして、情報処理端末200は、撮像を停止する旨の指示に、このマーカに関する時間情報を含めてもよい。この場合、撮像装置100は、その時間情報に対応する静止画及びこの静止画の前後の時間帯の静止画について、表示用静止画を生成するようにしてもよい。これにより、選択履歴がない場合であっても、ユーザが興味を持ったシーンについて、時間間隔が短くなるように表示用静止画を表示することが可能となる。さらに。このマーカの記録を、選択履歴と組み合わせてもよい。つまり、マーカが記録された時間を示す時間情報を選択時間情報としてもよい。
Further, the marker may be recorded in the
また、上述した実施の形態においては、選択履歴つまり「選択時間情報」は、動画の終端からの時間を示すとしたが、このような構成に限られない。「選択時間情報」は、動画の始端からの時間を示してもよい。また、「選択時間情報」は、動画の開始から終了までの時間のうち、どれくらいの割合が経過したかを示してもよい。 In the above-described embodiment, the selection history, that is, “selection time information” indicates the time from the end of the moving image. However, the configuration is not limited thereto. “Selection time information” may indicate a time from the beginning of the moving image. The “selected time information” may indicate how much of the time from the start to the end of the moving image has elapsed.
また、上述した実施の形態においては、S132において選択された表示用静止画に関する時間情報に対応する選択時間情報について常に記録されるとしたが、このような構成に限られない。例えば、S140において動画が再生されてから、ユーザが再生を停止するまでの時間が予め定められた時間よりも短い場合に、ユーザが興味を示さなかったとして、このときの選択時間情報は削除されてもよい。 In the above-described embodiment, the selection time information corresponding to the time information related to the still image for display selected in S132 is always recorded. However, the present invention is not limited to such a configuration. For example, if the time from when the moving image is played back in S140 to when the user stops playing is shorter than a predetermined time, the selection time information at this time is deleted because the user does not show interest. May be.
また、上述した実施の形態において、「等間隔」という用語が使用されているが、用語「等間隔」は、厳密に等しい間隔のみに限定されるわけではない。例えば0.5秒等、人間が「等間隔である」と認識できる程度の時間のみ、間隔がずれている場合も、本発明においては、「等間隔」であるとする。 In the above-described embodiment, the term “equally spaced” is used, but the term “equally spaced” is not limited to strictly equal intervals. For example, in the present invention, it is assumed that the interval is deviated only for a time that allows a human to recognize that it is “equally spaced”, such as 0.5 seconds.
また、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)、CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 The program can be stored using various types of non-transitory computer readable media and supplied to a computer. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (for example, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (for example, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W and semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (random access memory)) are included. The program may also be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
1 動画撮像システム
100 撮像装置
150 撮像処理部
154 撮像制御部
156 動画格納部
158 静止画抽出部
176 表示用静止画生成部
178 表示用静止画送信部
180 再生要求受信部
182 再生処理部
200 情報処理端末
202 操作部
204 表示部
250 動画確認処理部
252 撮像開始指示部
254 撮像停止指示部
256 撮像時間受信部
260 取得位置決定部
270 表示用静止画要求部
272 表示用静止画取得部
274 一覧表示制御部
276 表示用静止画選択部
278 選択履歴記録部
280 再生要求部
282 再生処理部
DESCRIPTION OF
Claims (8)
前記情報処理端末と通信可能であって、前記情報処理端末からの指示に応じて動画を撮像する撮像装置と、
を有し、
前記情報処理端末は、
前記撮像装置に対して動画の撮像を停止するように指示する停止指示部と、
前記停止指示部が停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出され、前記動画における時間に関する情報である時間情報を含む複数の表示用静止画を取得する表示用静止画取得部と、
前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部と、
前記表示部によって表示された前記複数の表示用静止画から少なくとも1つの表示用静止画を選択する選択部と、
前記選択部によって選択された前記表示用静止画に関する時間情報に基づいて、選択の履歴を記録する履歴記録部と
を有し、
前記表示用静止画取得部は、前記履歴記録部によって記録された履歴に応じて、前記表示用静止画を取得する
動画撮像システム。 An information processing terminal;
An imaging device that is communicable with the information processing terminal and that captures a moving image in response to an instruction from the information processing terminal;
Have
The information processing terminal
A stop instructing unit for instructing the imaging device to stop capturing a moving image;
In response to the stop instruction being given by the stop instruction unit, a display still image that is extracted from a moving image captured by the imaging device and acquires a plurality of display still images including time information that is information related to time in the moving image. An image acquisition unit;
A display unit that displays a list of the plurality of still images for display acquired by the display still image acquisition unit ;
A selection unit for selecting at least one display still image from the plurality of display still images displayed by the display unit;
A history recording unit that records a selection history based on time information about the still image for display selected by the selection unit;
Have
The moving image capturing system , wherein the display still image acquisition unit acquires the display still image according to a history recorded by the history recording unit .
前記情報処理端末は、
選択された頻度の低い時間情報に対応する表示用静止画の数を減少させるように、前記表示用静止画取得部によって取得されるべき表示用静止画それぞれに対応する、前記動画における時間軸上の位置を決定する取得位置決定部
をさらに有し、
前記表示用静止画取得部は、前記取得位置決定部によって決定された位置に対応する表示用静止画を取得する
請求項1に記載の動画撮像システム。 The history includes selection time information that is information corresponding to time information of the selected still image for display,
The information processing terminal
On the time axis of the moving image corresponding to each display still image to be acquired by the display still image acquisition unit so as to reduce the number of display still images corresponding to the selected low-frequency information. An acquisition position determination unit for determining the position of
The moving image imaging system according to claim 1 , wherein the display still image acquisition unit acquires a display still image corresponding to the position determined by the acquisition position determination unit.
をさらに有し、
前記取得位置決定部は、前記選択された頻度の低い時間情報に対応する表示用静止画の数が、前記静止画抽出部によって抽出された、前記選択された頻度の低い時間情報に対応する静止画の数よりも少なくなるように、前記動画における時間軸上の位置を決定する 請求項2に記載の動画撮像システム。 A still image extracting unit that extracts a plurality of still images from a moving image captured by the imaging device at a predetermined time interval;
The acquisition position determination unit is configured such that the number of still images for display corresponding to the selected low-frequency time information is extracted by the still image extraction unit, and the still image corresponding to the selected low-frequency time information is selected. The moving image capturing system according to claim 2 , wherein a position on the time axis in the moving image is determined so as to be smaller than the number of images.
請求項2又は3に記載の動画撮像システム。 The display unit is configured such that the display still image corresponding to the selected frequency information having a high selected frequency is larger than the display still image corresponding to the selected time information having a low selected frequency. The moving image imaging system according to claim 2 or 3 , wherein the plurality of still images for display are displayed.
前記停止指示部が停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出され、前記動画における時間に関する情報である時間情報を含む複数の表示用静止画を取得する表示用静止画取得部と、
前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部と、
前記表示部によって表示された前記複数の表示用静止画から少なくとも1つの表示用静止画を選択する選択部と、
前記選択部によって選択された前記表示用静止画に関する時間情報に基づいて、選択の履歴を記録する履歴記録部と
を有し、
前記表示用静止画取得部は、前記履歴記録部によって記録された履歴に応じて、前記表示用静止画を取得する
情報処理端末。 A stop instructing unit for instructing the imaging device to stop capturing moving images;
In response to the stop instruction being given by the stop instruction unit, a display still image that is extracted from a moving image captured by the imaging device and acquires a plurality of display still images including time information that is information related to time in the moving image. An image acquisition unit;
A display unit that displays a list of the plurality of still images for display acquired by the display still image acquisition unit ;
A selection unit for selecting at least one display still image from the plurality of display still images displayed by the display unit;
A history recording unit that records a selection history based on time information about the still image for display selected by the selection unit;
Have
The display still image acquisition unit acquires the display still image according to a history recorded by the history recording unit .
前記撮像部に対して動画の撮像を停止するように指示する停止指示部と、
前記停止指示部が停止指示を行うことに応じて、前記撮像部によって撮像された動画から抽出され、前記動画における時間に関する情報である時間情報を含む複数の表示用静止画を取得する表示用静止画取得部と、
前記表示用静止画取得部によって取得された前記複数の表示用静止画の一覧を表示する表示部と、
前記表示部によって表示された前記複数の表示用静止画から少なくとも1つの表示用静止画を選択する選択部と、
前記選択部によって選択された前記表示用静止画に関する時間情報に基づいて、選択の履歴を記録する履歴記録部と
を有し、
前記表示用静止画取得部は、前記履歴記録部によって記録された履歴に応じて、前記表示用静止画を取得する
動画撮像システム。 An imaging unit for imaging a video;
A stop instructing unit that instructs the imaging unit to stop capturing a moving image;
In response to the stop instruction being given by the stop instruction unit , a still image for display that is extracted from the moving image captured by the imaging unit and that includes a plurality of display still images including time information that is information related to time in the moving image. An image acquisition unit;
A display unit that displays a list of the plurality of still images for display acquired by the display still image acquisition unit ;
A selection unit for selecting at least one display still image from the plurality of display still images displayed by the display unit;
A history recording unit that records a selection history based on time information about the still image for display selected by the selection unit;
Have
The moving image capturing system , wherein the display still image acquisition unit acquires the display still image according to a history recorded by the history recording unit .
停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出され、前記動画における時間に関する情報である時間情報を含む複数の表示用静止画を取得するステップと、
前記取得された前記複数の表示用静止画の一覧を表示するステップと、
前記一覧を表示するステップによって表示された前記複数の表示用静止画から少なくとも1つの表示用静止画を選択するステップと、
前記表示用静止画を選択するステップによって選択された前記表示用静止画に関する時間情報に基づいて、選択の履歴を記録するステップと
を有し、
前記表示用静止画を取得するステップは、前記選択の履歴を記録するステップによって記録された履歴に応じて、前記表示用静止画を取得する
動画確認方法。 Instructing an imaging device that captures a moving image to stop capturing a moving image;
Acquiring a plurality of display still images including time information that is extracted from a moving image captured by the imaging device and includes information related to time in the moving image in response to performing a stop instruction;
Displaying a list of the acquired plurality of still images for display ;
Selecting at least one display still image from the plurality of display still images displayed by the step of displaying the list;
Recording a selection history based on time information about the display still image selected by the step of selecting the display still image;
Have
The method of obtaining the display still image, wherein the step of acquiring the still image for display acquires the still image for display according to the history recorded by the step of recording the selection history .
停止指示を行うことに応じて、前記撮像装置によって撮像された動画から抽出され、前記動画における時間に関する情報である時間情報を含む複数の表示用静止画を取得するステップと、
前記取得された前記複数の表示用静止画の一覧を表示するステップと、
前記一覧を表示するステップによって表示された前記複数の表示用静止画から少なくとも1つの表示用静止画を選択するステップと、
前記表示用静止画を選択するステップによって選択された前記表示用静止画に関する時間情報に基づいて、選択の履歴を記録するステップと
を有し、
前記表示用静止画を取得するステップは、前記選択の履歴を記録するステップによって記録された履歴に応じて、前記表示用静止画を取得することを特徴とする、
上記ステップをコンピュータに実行させるプログラム。 Instructing an imaging device that captures a moving image to stop capturing a moving image;
Acquiring a plurality of display still images including time information that is extracted from a moving image captured by the imaging device and includes information related to time in the moving image in response to performing a stop instruction;
Displaying a list of the acquired plurality of still images for display ;
Selecting at least one display still image from the plurality of display still images displayed by the step of displaying the list;
Recording a selection history based on time information about the display still image selected by the step of selecting the display still image;
Have
The step of acquiring the still image for display acquires the still image for display according to the history recorded by the step of recording the selection history.
A program for causing a computer to execute the above steps .
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015044488A JP6354624B2 (en) | 2015-03-06 | 2015-03-06 | Video imaging system, information processing terminal, video confirmation method and program |
US14/984,975 US9905272B2 (en) | 2015-03-06 | 2015-12-30 | Video capture system, information processing terminal, video checking method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015044488A JP6354624B2 (en) | 2015-03-06 | 2015-03-06 | Video imaging system, information processing terminal, video confirmation method and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016165043A JP2016165043A (en) | 2016-09-08 |
JP6354624B2 true JP6354624B2 (en) | 2018-07-11 |
Family
ID=56876295
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015044488A Active JP6354624B2 (en) | 2015-03-06 | 2015-03-06 | Video imaging system, information processing terminal, video confirmation method and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6354624B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7182754B2 (en) * | 2020-06-12 | 2022-12-05 | 株式会社Mixi | Information processing device, control method and control program for information processing device |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004032636A (en) * | 2002-06-28 | 2004-01-29 | Fuji Photo Film Co Ltd | Image transmitter and image receiver |
JP4317003B2 (en) * | 2003-12-25 | 2009-08-19 | 富士通株式会社 | Highlight still image generation / distribution device |
JP2006270263A (en) * | 2005-03-22 | 2006-10-05 | Fuji Photo Film Co Ltd | Photographing system |
JP2011082688A (en) * | 2009-10-05 | 2011-04-21 | Canon Inc | Still image extraction apparatus and still image extraction method |
JP4788827B2 (en) * | 2010-01-25 | 2011-10-05 | セイコーエプソン株式会社 | Generation processing of still image data based on multiple frame image data |
JP5765444B2 (en) * | 2014-01-08 | 2015-08-19 | ソニー株式会社 | Information processing apparatus, image processing method, program, and information processing system |
-
2015
- 2015-03-06 JP JP2015044488A patent/JP6354624B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016165043A (en) | 2016-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6746772B2 (en) | Video display device and operating method thereof | |
WO2020007009A1 (en) | Method and apparatus for determining background music of video, terminal device and storage medium | |
US9071806B2 (en) | Reproducing apparatus | |
KR20110106292A (en) | Information processing device, moving image cutting method, and moving image cutting program | |
KR102478500B1 (en) | Image processing method, image processing device, and program | |
JP5627383B2 (en) | MOVIE REPRODUCTION DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
CN105306859A (en) | Information-processing device and information-processing method | |
CN104349221A (en) | Communication apparatus that performs streaming distribution, information processing apparatus, and controlling method thereof | |
US10972811B2 (en) | Image processing device and image processing method | |
JP2007323698A (en) | Multi-media content display device, method, and program | |
JP2007180638A (en) | Imaging apparatus | |
JP6354624B2 (en) | Video imaging system, information processing terminal, video confirmation method and program | |
JPWO2007114241A1 (en) | Video processing device | |
JP6632360B2 (en) | Information processing device | |
JP6492783B2 (en) | Video imaging system, information processing terminal, video confirmation method and program | |
JP6639242B2 (en) | Information processing device | |
JP6314465B2 (en) | Information processing apparatus, image processing system, data display method and program in information processing apparatus | |
KR102139331B1 (en) | Apparatus, server, and method for playing moving picture contents | |
JP2006041586A (en) | Video reproducing and displaying apparatus | |
US9905272B2 (en) | Video capture system, information processing terminal, video checking method, and program | |
JP2006333216A (en) | Image reproducing apparatus, image reproducing method and control program | |
JP6463967B2 (en) | Imaging apparatus and control method thereof | |
JP6263002B2 (en) | Imaging apparatus, control method therefor, and program | |
KR100808198B1 (en) | Broadcasting Terminal and Method for Recording Broadcasting Data thereof | |
JP4488516B2 (en) | Video delay display system, computer program, and information storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170330 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180323 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180515 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180528 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6354624 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |