JP2017085654A - Imaging device, imaging method, and imaging program - Google Patents
Imaging device, imaging method, and imaging program Download PDFInfo
- Publication number
- JP2017085654A JP2017085654A JP2017005700A JP2017005700A JP2017085654A JP 2017085654 A JP2017085654 A JP 2017085654A JP 2017005700 A JP2017005700 A JP 2017005700A JP 2017005700 A JP2017005700 A JP 2017005700A JP 2017085654 A JP2017085654 A JP 2017085654A
- Authority
- JP
- Japan
- Prior art keywords
- marker
- data
- moving image
- time
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Camera Data Copying Or Recording (AREA)
Abstract
Description
本発明は撮像装置、撮像方法、及び撮像プログラムに関する。 The present invention relates to an imaging apparatus, an imaging method, and an imaging program.
ビデオカメラ等の撮像装置を用いて動画や静止画を撮像する場合に、ユーザが自動ないし手動で撮像画像データに対して、その撮像画像を識別したり検索したりするためのタグを付与する技術が知られている。これらのタグを用いることにより、ユーザは、撮像された画像データの整理や検索を容易に行うことができる。 A technique for providing a tag for identifying or searching a captured image data to a captured image data automatically or manually when a user captures a moving image or a still image using an imaging device such as a video camera. It has been known. By using these tags, the user can easily organize and search the captured image data.
例えば、特許文献1には、動画像ファイル内における各シーンの先頭画像の開始位置を示す時間軸データに対応する動画像インデックスを追加及び表示等をすることができるデジタル画像管理検索システムが開示されている。 For example, Patent Document 1 discloses a digital image management search system that can add and display a moving image index corresponding to time axis data indicating the start position of the first image of each scene in a moving image file. ing.
しかしながら、1つのイベント(ゲームや試合等)が複数の動画ファイルに亘って記録された場合、ユーザは、イベントの動画を管理する際に、複数の動画ファイルからイベントの時間帯(例えばイベントの開始位置や終了位置)を探し出し、把握しておく必要がある。そのため、動画ファイルの管理に手間がかかるという問題がある。 However, when one event (game, game, etc.) is recorded over a plurality of video files, the user can manage the event time zone (for example, start of the event) from the video files when managing the video of the event. It is necessary to find out and grasp the position and end position. Therefore, there is a problem that it takes time to manage the moving image file.
なお、特許文献1に記載の技術は、1つの動画ファイル内における各シーンの先頭画像に対してインデックスを追加等ものである。そのため、1つのイベントが、複数の動画ファイルに亘った場合におけるインデックスの管理については、何ら開示されていない。 The technique described in Patent Document 1 adds an index to the first image of each scene in one moving image file. For this reason, there is no disclosure of index management in the case where one event spans a plurality of moving image files.
本発明は、上述の課題に鑑みてなされたものであり、1つのイベントが複数の動画ファイルに亘って記録された場合でも、動画ファイルを容易に管理することができる撮像装置、撮像方法、及び撮像プログラムを提供することを目的とする。 The present invention has been made in view of the above-described problems, and an imaging apparatus, an imaging method, and an imaging apparatus capable of easily managing a moving image file even when one event is recorded over a plurality of moving image files. An object is to provide an imaging program.
本発明の一態様にかかる撮像装置は、競技者が予め決められた地点を通過したことを示すマーカを動画に入力するマーカ入力部(入力部32)と時間を計測する計測部とを有する携帯端末装置と、通信回線を介して接続される撮像装置であって、撮像処理により動画の撮像データを生成する撮像部(100)と、前記撮像データを動画ファイルとして記憶する記憶部(カード型記録媒体302)と、前記動画ファイルに対する前記マーカの入力指示と、前記計測部が計測した前記時間に関する時間情報と、を前記携帯端末装置から受An imaging apparatus according to an aspect of the present invention has a marker input unit (input unit 32) that inputs a marker indicating that a player has passed a predetermined point into a moving image and a measurement unit that measures time. An imaging device connected to a terminal device via a communication line, an imaging unit (100) that generates moving image imaging data by imaging processing, and a storage unit (card-type recording) that stores the imaging data as a moving image file Medium 302), an input instruction of the marker for the moving image file, and time information relating to the time measured by the measuring unit are received from the portable terminal device.
信する受信部(無線モジュール309)と、前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させる制御部(マーカデータ管理部402)と、前記マーカデータを選択するための操作部(306)と、前記操作部の操作により選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生する再生部(動画ファイル管理部401)と、を備えるものである。And generating the marker data by associating the receiving unit (wireless module 309) to be transmitted, the marker corresponding to the input instruction of the marker, the time when the marker was input, and the time information. Is associated with the video file and stored in the storage unit (marker data management unit 402), an operation unit (306) for selecting the marker data, and the operation unit selected by the operation unit A playback unit (moving image file management unit 401) that plays back the moving image file from a time that is back by a time corresponding to the time information associated with the marker from the time when the marker of the marker data is input. Is.
本発明の一態様にかかる撮像方法は、競技者が予め決められた地点を通過したことを示すマーカを動画に入力するマーカ入力部(入力部32)と時間を計測する計測部とを有する携帯端末装置と、通信回線を介して接続される撮像装置の撮像方法であって、撮像処理により動画の撮像データを生成するステップと、前記撮像データを動画ファイルとして記憶部(カード型記録媒体302)に記憶させるステップと、前記動画ファイルに対する前記マーカの入力指示と、前記計測部が計測した前記時間に関する時間情報と、を前記携帯端末装置から受信するステップと、前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させるステップと、前記マーカデータを選択するステップと、選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生するステップと、を備えるものである。 An imaging method according to an aspect of the present invention includes a mobile phone including a marker input unit (input unit 32) that inputs a marker indicating that a player has passed a predetermined point into a moving image, and a measurement unit that measures time. An imaging method of an imaging device connected to a terminal device via a communication line, the step of generating moving image imaging data by an imaging process, and a storage unit (card type recording medium 302) as the imaging data as a moving image file Storing in the mobile terminal device, the step of receiving the marker input instruction for the moving image file, the time information related to the time measured by the measuring unit, and the marker input instruction corresponding to the marker input instruction Marker data is generated by associating a marker, the time when the marker was input, and the time information, and the marker data is converted into the moving image file. Corresponding to the time information associated with the marker from the time when the marker of the selected marker data is input, the step of causing the storage unit to store the marker data in association with the marker, and the step of selecting the marker data And a step of reproducing the moving image file from a time that is back by time.
本発明の一態様にかかる撮像システムは、携帯端末装置と、当該携帯端末装置と通信回線を介して接続される撮像装置と、を備える撮像システムであって、前記携帯端末装置は、時間を計測する計測部と、競技者が予め決められた地点を通過したことを示すマーカを動画に入力するマーカ入力部(入力部32)と、前記マーカ入力部の操作に応じて、前記マーカの入力指示と前記計測部が計測した前記時間に関連する時間情報とを対応付けて、前記撮像装置に送信する送信部(通信部34)と、を有し、前記撮像装置は、撮像処理により動画の撮像データを生成する撮像部(100)と、前記撮像データを動画ファイルとして記憶する記憶部(カード型記録媒体302)と、前記動画ファイルに対する前記マーカの入力指示及び前記時間情報を前記携帯端末装置から受信する受信部(無線モジュール309)と、前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させる制御部(マーカデータ管理部402)と、前記マーカデータを選択するための操作部(306)と、前記操作部の操作により選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生する再生部(動画ファイル管理部401)と、を有するものである。 An imaging system according to an aspect of the present invention is an imaging system including a mobile terminal device and an imaging device connected to the mobile terminal device via a communication line, and the mobile terminal device measures time. A measurement input unit, a marker input unit (input unit 32) for inputting a marker indicating that the athlete has passed a predetermined point to the moving image, and an input instruction for the marker in accordance with the operation of the marker input unit And a transmission unit (communication unit 34) that associates the time information related to the time measured by the measurement unit and transmits the information to the imaging device, and the imaging device captures a moving image by imaging processing. An image pickup unit (100) that generates data, a storage unit (card type recording medium 302) that stores the image pickup data as a moving image file, an input instruction of the marker for the moving image file, and the time information Marker data is generated by associating the receiving unit (wireless module 309) that receives from the portable terminal device, the marker corresponding to the marker input instruction, the time when the marker was input, and the time information. A control unit (marker data management unit 402) that stores the marker data in the storage unit in association with the moving image file, an operation unit (306) for selecting the marker data, and an operation of the operation unit A playback unit (video file management unit 401) that plays back the video file from a time that has been traced back by a time corresponding to the time information associated with the marker from the time when the marker of the marker data selected by ) And.
本発明によれば、1つのイベントが複数の動画ファイルに亘って記録された場合でも、動画ファイルを容易に管理することができる撮像装置、撮像方法、及び撮像プログラムを提供することができる。 According to the present invention, it is possible to provide an imaging apparatus, an imaging method, and an imaging program capable of easily managing a moving image file even when one event is recorded over a plurality of moving image files.
<実施の形態1>
以下、図面を参照して本発明の実施の形態について説明する。図1は、本実施の形態にかかる撮像装置1の外観図である。図1に示すように、撮像装置1は、本体部11と、モニタ部12と、ヒンジ13と、レンズ14と、を備える。本体部11の前端には、レンズ
14が設けられている。なお、図1は、モニタ部12を開いた状態を示す斜視図である。
<Embodiment 1>
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is an external view of an imaging apparatus 1 according to the present embodiment. As illustrated in FIG. 1, the imaging device 1 includes a main body unit 11, a monitor unit 12, a hinge 13, and a lens 14. A lens 14 is provided at the front end of the main body 11. FIG. 1 is a perspective view showing a state in which the monitor unit 12 is opened.
<撮像装置1の外観構成>
本体部11は、複数のレンズを有するレンズユニットや、撮像素子、バッテリ、Wi−Fiモジュール等(図示省略)を格納する筐体である。撮像装置1は、画像を撮像するためのレンズユニット及び撮像素子を用いて、静止画及び動画を撮像することができる。
<External Configuration of Imaging Device 1>
The main body 11 is a housing that stores a lens unit having a plurality of lenses, an image sensor, a battery, a Wi-Fi module, and the like (not shown). The imaging device 1 can capture a still image and a moving image using a lens unit and an image sensor for capturing an image.
また、本体部11の左側面には、モニタ部12が設けられている。モニタ部12は、本体部11に対して、ヒンジ13を介して連結されている。モニタ部12は、被写体、記憶された画像データ、設定情報、その他の情報を表示する液晶モニタなどを有している。例
えば、ユーザが撮像を行うために、モニタ部12を開くことで、電源がオン状態となる。なお、モニタ部12がタッチパネル機能を備える場合には、モニタ部12の液晶モニタが操作部の一部となる。
A monitor unit 12 is provided on the left side surface of the main body unit 11. The monitor unit 12 is connected to the main body unit 11 via a hinge 13. The monitor unit 12 includes a liquid crystal monitor that displays a subject, stored image data, setting information, and other information. For example, the user turns on the power by opening the monitor unit 12 for imaging. When the monitor unit 12 has a touch panel function, the liquid crystal monitor of the monitor unit 12 becomes a part of the operation unit.
モニタ部12を開いた状態では、モニタ部12の液晶モニタは、後方側、すなわちレンズ鏡筒の開口方向とは反対方向を向いて配置されている。モニタ部12は、モニタ部12を開いた状態において、本体部11に対して回転可能に連結されている。モニタ部12を回転させることにより、液晶モニタの向きが、後方側から前方側(レンズ鏡筒の開口方向)に変化する。 In a state where the monitor unit 12 is opened, the liquid crystal monitor of the monitor unit 12 is arranged to face the rear side, that is, the direction opposite to the opening direction of the lens barrel. The monitor unit 12 is rotatably connected to the main body unit 11 when the monitor unit 12 is opened. By rotating the monitor unit 12, the direction of the liquid crystal monitor changes from the rear side to the front side (the opening direction of the lens barrel).
なお、本発明に係る撮像装置1は、静止画または動画像を撮像でき、例えば液晶モニタ等の表示部を有するものであれば、その形状、及び構成は特に限定されるものではない。すなわち、撮像装置1は、ビデオカメラに限らず、撮像部及び表示部を有する電子機器(たとえばスマートフォン等の携帯端末装置)であればよい。 The imaging device 1 according to the present invention is not particularly limited in shape and configuration as long as it can capture a still image or a moving image and has a display unit such as a liquid crystal monitor. That is, the imaging device 1 is not limited to a video camera, and may be an electronic device (for example, a mobile terminal device such as a smartphone) having an imaging unit and a display unit.
<撮像装置1の内部構成>
次に、撮像装置1の構成について図2を参照して説明する。図2は、本実施の形態にかかる撮像装置1の内部構成を示すブロック図である。
<Internal Configuration of Imaging Device 1>
Next, the configuration of the imaging apparatus 1 will be described with reference to FIG. FIG. 2 is a block diagram showing an internal configuration of the imaging apparatus 1 according to the present embodiment.
中央制御部400はCPU(Central Processing Unit)、各種プログラムが格納されたROM(Read Only Memory)、及びワークエリアとしてのRAM(Random Access Memory)等を含む半導体集積回路により構成され、撮像、各種画像の表示、及びユーザが撮像画像データにマーカを入力するために、撮像状況に応じて使用されるマーカの種類等に対応したアイコン画像を適切に配置したGUI(Graphic User Interface)に係る画像(以下、「インターフェイス画像」という。)の特定等の撮像装置1全体の処理を統括的に制御する。中央制御部400の内部構成は、図8を参照して後述する。 The central control unit 400 includes a semiconductor integrated circuit including a CPU (Central Processing Unit), a ROM (Read Only Memory) in which various programs are stored, a RAM (Random Access Memory) as a work area, and the like. And a GUI (Graphic User Interface) image (hereinafter referred to as GUI) in which icon images corresponding to the type of marker used according to the imaging situation are appropriately arranged for the user to input a marker to the captured image data. , Which is referred to as “interface image”). The internal configuration of the central control unit 400 will be described later with reference to FIG.
撮像装置1は、ズームレンズ101、フォーカスレンズ102、絞り103、及び撮像素子104で構成される撮像部100を有する。ズームレンズ101は図示しないズームアクチュエータによって光軸LAに沿って移動する。同様に、フォーカスレンズ102は、図示しないフォーカスアクチュエータによって光軸LAに沿って移動する。絞り103は、図示しない絞りアクチュエータに駆動されて動作する。撮像素子104は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等で構成される。 The imaging apparatus 1 includes an imaging unit 100 including a zoom lens 101, a focus lens 102, a diaphragm 103, and an imaging element 104. The zoom lens 101 is moved along the optical axis LA by a zoom actuator (not shown). Similarly, the focus lens 102 moves along the optical axis LA by a focus actuator (not shown). The diaphragm 103 operates by being driven by a diaphragm actuator (not shown). The imaging element 104 is configured by a CCD (Charge Coupled Device), a CMOS (Complementary Metal Oxide Semiconductor), or the like.
撮像部100を用いた撮像は以下の手順で行われる。撮像素子104はズームレンズ101、フォーカスレンズ102、及び絞り103を通過した光を光電変換して、被写体のアナログ画像信号を生成する。アナログ画像信号処理部105が、このアナログ画像信号を増幅した後、画像A/D変換部106が、その増幅された信号をデジタル画像データに変換する。画像入力コントローラ107は、画像A/D変換部106から出力されたデジタル画像データを撮像データとして取り込んで、バス200を介してメインメモリ205に格納する。 Imaging using the imaging unit 100 is performed according to the following procedure. The image sensor 104 photoelectrically converts light that has passed through the zoom lens 101, the focus lens 102, and the aperture 103 to generate an analog image signal of the subject. After the analog image signal processing unit 105 amplifies the analog image signal, the image A / D conversion unit 106 converts the amplified signal into digital image data. The image input controller 107 takes in digital image data output from the image A / D conversion unit 106 as imaging data and stores it in the main memory 205 via the bus 200.
デジタル信号処理部108は、バス200を介して中央制御部400からの指令に基づき、メインメモリ205に格納された撮像データを取り込み、所定の信号処理を施して輝度信号と色差信号とからなるデータを生成する。デジタル信号処理部108はまた、オフセット処理、ホワイトバランス調整処理、ガンマ補正処理、RGB補完処理、ノイズ低減処理、輪郭補正処理、色調補正処理、光源種別判定処理等の各種デジタル補正を行う。 The digital signal processing unit 108 captures image data stored in the main memory 205 based on a command from the central control unit 400 via the bus 200, performs predetermined signal processing, and includes data including a luminance signal and a color difference signal. Is generated. The digital signal processing unit 108 also performs various digital corrections such as offset processing, white balance adjustment processing, gamma correction processing, RGB interpolation processing, noise reduction processing, contour correction processing, color tone correction processing, and light source type determination processing.
マイク109は撮像時の周囲の音声を周音し、アナログ音声信号を生成する。アナログ音声信号処理部110がそのアナログ音声信号を増幅した後、音声A/D変換部111が、その増幅された信号をデジタル音声データに変換する。音声入力コントローラ112は、音声A/D変換部111から出力されたデジタル音声データを撮像データと併せてメインメモリ205に格納する。 The microphone 109 circulates the surrounding sound at the time of imaging and generates an analog sound signal. After the analog audio signal processing unit 110 amplifies the analog audio signal, the audio A / D conversion unit 111 converts the amplified signal into digital audio data. The audio input controller 112 stores the digital audio data output from the audio A / D converter 111 in the main memory 205 together with the imaging data.
多重化部113は、メインメモリ205に格納された撮像データ及びデジタル音声データの圧縮データを多重化しストリームデータを生成する。また、多重化部113は、カード型記録媒体302に格納されたストリームデータに逆多重化処理を施し、映像の圧縮データと音声の圧縮データとをそれぞれ分離して生成する。 The multiplexing unit 113 multiplexes the compressed image data and digital audio data stored in the main memory 205 to generate stream data. Also, the multiplexing unit 113 performs demultiplexing processing on the stream data stored in the card type recording medium 302, and separates and generates video compression data and audio compression data.
圧縮・伸張処理部201は、バス200を介して中央制御部400からの指示に従い、メインメモリ205に格納された撮像データ及びデジタル音声データに所定の圧縮処理を施し、圧縮データを生成する。また、圧縮・伸張処理部201は、中央制御部400からの指令に従い、カード型記録媒体302等に格納された映像の圧縮データ及び音声の圧縮データに所定形式の伸張処理を施し、非圧縮データを生成する。なお、本実施の形態の撮像装置1では、静止画像に対してはJPEG規格に準拠した圧縮方式が、動画像に対してはMPEG2規格やAVC/H.264規格に準拠した圧縮方式が採用される。 The compression / decompression processing unit 201 performs predetermined compression processing on the imaging data and digital audio data stored in the main memory 205 in accordance with an instruction from the central control unit 400 via the bus 200 to generate compressed data. Further, the compression / decompression processing unit 201 performs decompression processing of a predetermined format on the compressed video data and the compressed audio data stored in the card type recording medium 302 or the like in accordance with a command from the central control unit 400, so that uncompressed data Is generated. Note that in the imaging apparatus 1 according to the present embodiment, a compression method conforming to the JPEG standard is used for still images, and MPEG2 standard or AVC / H. A compression method conforming to the H.264 standard is adopted.
音声・画像処理部202は、バス200を介して中央制御部400の指示に従い、メインメモリ205から読み出したデジタルデータに所定の画像処理を施す。例えばメニュー画像やOSD画像等、各種処理のための画像データを生成し、その画像データをメインメモリ205から読み出されたオリジナルの撮像データに重畳させて液晶モニタ304に出力する。この出力によって、液晶モニタ304に表示される画像は各種画像データが合成ないし重畳されたものとなる。なお、液晶モニタ304の代わりに有機EL(Electro - Luminescence)モニタ等の他のモニタを用いることも可能である。 The sound / image processing unit 202 performs predetermined image processing on the digital data read from the main memory 205 in accordance with an instruction from the central control unit 400 via the bus 200. For example, image data for various processes such as a menu image and an OSD image is generated, and the image data is superimposed on the original image data read from the main memory 205 and output to the liquid crystal monitor 304. With this output, the image displayed on the liquid crystal monitor 304 is a composite or superimposition of various image data. Instead of the liquid crystal monitor 304, another monitor such as an organic EL (Electro-Luminescence) monitor can be used.
ROM203はバス200を介して中央制御部400に接続されており、中央制御部400が実行する制御プログラム及び制御に必要な各種データ等を格納している。フラッシュROM204は、ユーザの設定情報等、撮像装置1の動作に関する各種設定情報を格納している。 The ROM 203 is connected to the central control unit 400 via the bus 200 and stores a control program executed by the central control unit 400 and various data necessary for control. The flash ROM 204 stores various setting information related to the operation of the imaging apparatus 1, such as user setting information.
メインメモリ205は、撮像データ(動画像及び静止画)の一時記憶領域として使用される。メインメモリ205は、中央制御部400の指令に応じて、保持している多重化されたストリームデータ(動画ファイル)をカード型記録媒体302または内蔵型記録媒体209に格納する。このとき、ストリームデータの格納先をカード型記録媒体302にするか、内蔵型記録媒体209にするかについて、ユーザが選択できるようにしてもよい。なお、メインメモリ205は、中央制御部400の演算作業領域としても使用される。 The main memory 205 is used as a temporary storage area for imaged data (moving images and still images). The main memory 205 stores the multiplexed stream data (moving image file) that is held in the card type recording medium 302 or the built-in type recording medium 209 in accordance with a command from the central control unit 400. At this time, the user may be able to select whether the storage destination of the stream data is the card type recording medium 302 or the built-in type recording medium 209. The main memory 205 is also used as a calculation work area of the central control unit 400.
メディア制御部206は、中央制御部400の指令に従い、カードI/F301を通じてカード型記録媒体302または内蔵型記録媒体209へのデータの書き込みやデータの読み出しを制御する。カード型記録媒体302は(記憶部)SDカードやコンパクトフラッシュ(登録商標)等の外部メモリであり、撮像装置1に対して脱着可能に設けられている。また、カード型記録媒体302は、後述するマーカデータファイル、試合データファイル、マーカ種別テーブル、及びチームテーブルを記憶する。 The media control unit 206 controls data writing to and data reading from the card type recording medium 302 or the built-in type recording medium 209 through the card I / F 301 in accordance with a command from the central control unit 400. The card-type recording medium 302 is an external memory (storage unit) such as an SD card or a compact flash (registered trademark), and is provided so as to be detachable from the imaging apparatus 1. The card-type recording medium 302 stores a marker data file, a game data file, a marker type table, and a team table, which will be described later.
ジャイロセンサ207は、3軸の加速度及び角速度の変化を検出する。そして、ジャイロセンサ207の検出結果に応じて、液晶モニタ304の表示向きを変える。時計208は、撮像画像データの取得日時の情報や、マーカが入力された日時及び時刻等を示す入力時刻情報を生成する。内蔵型記録媒体209は、撮像装置1に予め内蔵されたRAM等のメモリである。 The gyro sensor 207 detects changes in triaxial acceleration and angular velocity. Then, the display orientation of the liquid crystal monitor 304 is changed according to the detection result of the gyro sensor 207. The clock 208 generates input time information indicating the acquisition date and time information of the captured image data, the date and time when the marker is input, and the like. The built-in recording medium 209 is a memory such as a RAM built in the imaging device 1 in advance.
液晶モニタ304、スピーカ305、操作部306及び入出力端子307は入出力I/F303に接続されている。液晶モニタ304は、例えばVRAM205やメインメモリ205に一時記録された撮像データ、又はインターフェイス画像データや各種メニュー画像データ等、各種画像データから生成された画像を表示する。ここで、液晶モニタ304に出力される撮像データは、ユーザが操作部306の図示しない録画ボタンをONにしてカード型記録媒体等の図示しない記録媒体に記録するものだけでなく、ユーザが撮像する内容を確認するために液晶モニタ304に表示される、いわゆるスルー画像に係るデータも含まれるのは勿論である。スピーカ305は、例えばメインメモリ205に一時記録された音声を出力する。 The liquid crystal monitor 304, the speaker 305, the operation unit 306, and the input / output terminal 307 are connected to the input / output I / F 303. The liquid crystal monitor 304 displays images generated from various image data such as imaging data temporarily recorded in the VRAM 205 or the main memory 205, or interface image data or various menu image data. Here, the imaging data output to the liquid crystal monitor 304 is not only recorded by a user on a recording medium (not shown) such as a card type recording medium by turning on a recording button (not shown) of the operation unit 306, but also captured by the user. Of course, data relating to a so-called through image displayed on the liquid crystal monitor 304 to confirm the contents is also included. The speaker 305 outputs sound temporarily recorded in the main memory 205, for example.
操作部306(マーカ入力部)は、操作ボタン、又は液晶モニタ304上に設けられたタッチパネル等から構成されており、ユーザの撮像装置1への操作入力を受け付ける。例えば、ユーザは、マーカを付与したいタイミングで、操作部306を操作し、動画に対してマーカを入力する。入出力端子307は、図示しないテレビモニタやPC(Personal Computer)等に接続される。 The operation unit 306 (marker input unit) is configured by an operation button, a touch panel provided on the liquid crystal monitor 304, or the like, and receives an operation input from the user to the imaging apparatus 1. For example, the user operates the operation unit 306 at a timing when a marker is desired to be input, and inputs a marker to the moving image. The input / output terminal 307 is connected to a television monitor (not shown), a PC (Personal Computer), or the like.
無線モジュール309は、バス200及び無線I/F308を介して、各データを他の装置との間で送受信する。各種情報及び撮像画像データ等の無線通信はIEEE802.11規格に準拠した方式で行われる。より具体的には、無線モジュール309は、Wi−Fi等の無線LAN規格に準拠した通信処理を行う。 The wireless module 309 transmits / receives each data to / from other devices via the bus 200 and the wireless I / F 308. Wireless communication such as various types of information and captured image data is performed by a method compliant with the IEEE 802.11 standard. More specifically, the wireless module 309 performs communication processing conforming to a wireless LAN standard such as Wi-Fi.
<カード型記録媒体302の詳細>
ここで、図3を参照して、カード型記録媒体302に格納された各種データについて詳細に説明する。図3に示すように、カード型記録媒体302は、動画ファイル51、マーカ種別テーブル52、マーカデータファイル54、試合データファイル55、及びチームテーブル53を格納する。なお、カード型記録媒体302は、図3に示したデータ以外も格納し得るが、本発明に直接関係しないデータの説明は省略する。
<Details of Card Type Recording Medium 302>
Here, with reference to FIG. 3, various data stored in the card type recording medium 302 will be described in detail. As shown in FIG. 3, the card-type recording medium 302 stores a moving image file 51, a marker type table 52, a marker data file 54, a game data file 55, and a team table 53. The card-type recording medium 302 can store data other than the data shown in FIG. 3, but description of data not directly related to the present invention is omitted.
動画ファイル51は、上述したストリームデータであり、撮像データと音声データが多重化された動画のデータである。カード型記録媒体302は、複数の動画ファイル51を格納する。動画ファイル51には、イベントを含む動画像が記録されている。1つのイベントが複数の動画ファイル51に亘って記録されていてもよいし、1つの動画ファイル51に複数のイベントが記録されていてもよい。 The moving image file 51 is the above-described stream data, and is moving image data in which imaging data and audio data are multiplexed. The card type recording medium 302 stores a plurality of moving image files 51. A moving image including an event is recorded in the moving image file 51. One event may be recorded over a plurality of moving image files 51, or a plurality of events may be recorded in one moving image file 51.
ここで、イベントとは、開始と終了が規定されており、参加者が存在するものを意味する。イベントの参加者は、個人(人物)であってもよいし、複数の人物が集まったチーム、グループ、またはペアであってもよい。イベントとは、例えば、スポーツの試合や、音楽ライブ、演劇等である。なお、音楽ライブや演劇等においては、参加者は歌手や演者等である。本実施の形態においては、バスケットボールの試合をイベントとして用いて説明する。 Here, the event means that the start and end are defined and there are participants. Participants in the event may be individuals (persons) or teams, groups, or pairs of a plurality of persons. The event is, for example, a sports game, a music live, a theater, or the like. In music live and theater performances, participants are singers and performers. In the present embodiment, a description will be given using a basketball game as an event.
マーカ種別テーブル52は、マーカID(識別情報)と当該マーカIDに対応するマーカとが対応付けられて格納されたテーブルである。なお、マーカとは、動画の任意の時刻を示す標識を意味する。例えば、マーカは、再生中の動画と別のテキストまたは画像であって、当該動画上に表示されるテキストまたは画像である。マーカは、ユーザの操作部306の操作に応じて入力されたり、所定の条件に応じて撮像装置1により自動的に入力されたりする。 The marker type table 52 is a table in which a marker ID (identification information) and a marker corresponding to the marker ID are stored in association with each other. The marker means a sign indicating an arbitrary time of the moving image. For example, the marker is text or an image that is different from the moving image being played back, and is displayed on the moving image. The marker is input according to the operation of the operation unit 306 by the user, or is automatically input by the imaging device 1 according to a predetermined condition.
図4にマーカ種別テーブル52の一例を示す。図4に示すマーカ種別テーブル52には、6種類のマーカID及びマーカが格納されている。マーカID10に対応するマーカは、試合の開始を指定するための試合開始マーカ(スタートマーカ)である。マーカID20に対応するマーカは、試合の終了を指定するための試合終了マーカ(エンドマーカ)である。マーカID30に対応するマーカは、得点が入ったことを示す得点マーカ(スコアマーカ)である。マーカID40に対応するマーカは、確認すべき時刻を示すチェックマーカである。マーカID50に対応するマーカは、笑顔が写っていることを示す笑顔マーカである、マーカID60に対応するマーカは、良いプレーを示すグッドマーカである。
なお、マーカの種類は、図4に示したものに限られない。また、マーカはテキストではなく画像であってもよい。
An example of the marker type table 52 is shown in FIG. The marker type table 52 shown in FIG. 4 stores six types of marker IDs and markers. The marker corresponding to the marker ID 10 is a game start marker (start marker) for designating the start of the game. The marker corresponding to the marker ID 20 is a match end marker (end marker) for designating the end of the match. The marker corresponding to the marker ID 30 is a score marker (score marker) indicating that a score has been entered. The marker corresponding to the marker ID 40 is a check marker indicating the time to be confirmed. The marker corresponding to the marker ID 50 is a smile marker indicating that a smile is shown. The marker corresponding to the marker ID 60 is a good marker indicating good play.
In addition, the kind of marker is not restricted to what was shown in FIG. The marker may be an image instead of text.
チームテーブル53(参加者テーブル)は、チームIDと、当該チームIDに対応するチームのチーム名等と、が対応付けられて格納されたテーブルである。つまり、チームテーブル53に格納されたデータは、ユーザが予め入力してもよいし、撮像装置1が他のメモリやサーバから読み込んでもよい。 The team table 53 (participant table) is a table in which a team ID and a team name of a team corresponding to the team ID are stored in association with each other. That is, the data stored in the team table 53 may be input in advance by the user, or may be read from another memory or server by the imaging apparatus 1.
図5にチームテーブル53の一例を示す。図5に示すチームテーブル53は、3つのチームデータが格納されている。チームデータは、チーム名とチームIDとが対応付けられている。加えて、チームカラー及びチームの選手名もチームIDに対応付けられている。例えば、チームID1には、チーム名「○○○スターズ」、チームカラー「青」、選手名「鈴木、田中等」が対応付けられている。なお、チームデータに含まれる情報は、図5に示したものに限られない。 FIG. 5 shows an example of the team table 53. The team table 53 shown in FIG. 5 stores three team data. In team data, a team name and a team ID are associated with each other. In addition, the team color and the player name of the team are also associated with the team ID. For example, the team ID “1” is associated with the team name “XXX Stars”, the team color “blue”, and the player names “Suzuki, Tanaka, etc.”. Note that the information included in the team data is not limited to that shown in FIG.
マーカデータファイル54は、1つ以上のマーカデータを含むファイルである。ここで、マーカデータは、入力されたマーカを指定するためのマーカIDと、マーカが入力された時刻を示す入力時刻と、を少なくとも含む。マーカデータファイル54は、動画ファイル51に対応付けられて、カード型記録媒体302に格納される。例えば、複数のマーカデータファイル54は、複数の動画ファイル51に対して、一対一で対応付けられる。 The marker data file 54 is a file including one or more marker data. Here, the marker data includes at least a marker ID for designating the input marker and an input time indicating a time when the marker is input. The marker data file 54 is stored in the card type recording medium 302 in association with the moving image file 51. For example, the plurality of marker data files 54 are associated with the plurality of moving image files 51 on a one-to-one basis.
図6にマーカデータファイル54の一例を示す。図6に示すマーカデータファイル54は、6つのマーカデータを格納している。なお、図6に示すマーカデータファイル54においては、入力時刻はミリ秒(ms)で表示されている。例えば、一番上のマーカデータは、マーカIDが「10」であり、入力時刻が「8521ms」である。図4に示したように、マーカID10のマーカは、試合開始マーカである。つまり、マーカデータファイル54の一番上のマーカデータは、時刻8521msに試合開始マーカが入力されたことを意味する。なお、このときの時刻とは、動画ファイルの先頭の時刻を0とした場合の経過時間(以下、メディア内時刻と称す)を意味する。 An example of the marker data file 54 is shown in FIG. The marker data file 54 shown in FIG. 6 stores six marker data. In the marker data file 54 shown in FIG. 6, the input time is displayed in milliseconds (ms). For example, the marker data at the top has a marker ID of “10” and an input time of “8521 ms”. As shown in FIG. 4, the marker with the marker ID 10 is a match start marker. That is, the marker data at the top of the marker data file 54 means that a match start marker is input at time 8521 ms. The time at this time means an elapsed time (hereinafter referred to as media time) when the top time of the moving image file is set to 0.
なお、ユーザによりマーカID10の試合開始マーカデータが入力される場合、試合するチームのチームIDも入力される。図6に示したマーカデータファイルの1番上のマーカデータは、チームID1のチームと、チームID2のチームと、が対戦する試合の試合開始マーカデータである。 In addition, when the game start marker data of marker ID10 are input by the user, team ID of the team which fights is also input. The marker data at the top of the marker data file shown in FIG. 6 is game start marker data of a game in which a team with team ID 1 and a team with team ID 2 face each other.
また、ユーザによりマーカID30の得点マーカが入力される場合、得点を取ったチームのチームID及び得点も入力される。図6に示したマーカデータファイルの2番目のマーカデータは、チームID1のチームが2点を取ったことを示す得点マーカのマーカデータである。同様に、図6に示したマーカデータファイルの3番目のマーカデータは、チームID1のチームが3点を取ったことを示す得点マーカデータである。 In addition, when the score marker of the marker ID 30 is input by the user, the team ID and score of the team that has scored are also input. The second marker data in the marker data file shown in FIG. 6 is marker data of a score marker indicating that the team with team ID 1 has scored two points. Similarly, the third marker data in the marker data file shown in FIG. 6 is score marker data indicating that the team with team ID 1 has scored three points.
このとき、マーカデータファイルに格納される得点は、合計点ではなくて、得点したことにより加算される点数である。上記の例においては、3番目のマーカデータにおいて、得点の項目には、2+3=「5」ではなく、そのときに加算される「3」が格納される。 At this time, the score stored in the marker data file is not a total score but a score added by the score. In the above example, in the third marker data, not 2 + 3 = “5” but “3” added at that time is stored in the score item.
このように、マーカデータに加算分の点数が格納されることにより、前に入力したマーカデータの得点を修正したい場合に、当該修正したい得点のみを修正すればよい。そして、各得点マーカデータに格納された得点を再度合計することにより、修正後の合計点を容易に算出することができる。 As described above, when the score of the added marker data is stored in the marker data, when it is desired to correct the score of the previously input marker data, only the score to be corrected needs to be corrected. And the total score after correction | amendment is easily computable by summing again the score stored in each score marker data.
一方、マーカデータの得点の項目にその時点における合計点を格納すると、修正したいマーカデータの得点を修正したとしても、その後、修正後の合計点を算出するために、各得点マーカデータに格納された得点の合計を用いることはできない。そのため、修正したマーカデータ以降に入力された得点マーカデータの全てを修正しなければならない。つまり、マーカデータの得点の項目に合計点を格納すると、得点修正に手間がかかってしまう。 On the other hand, if the total score at that time is stored in the marker data score item, even if the marker data score to be corrected is corrected, it is stored in each score marker data to calculate the corrected total score thereafter. The total score obtained cannot be used. For this reason, all of the score marker data input after the corrected marker data must be corrected. That is, if a total score is stored in the score item of the marker data, it takes time to correct the score.
試合データファイル(イベントデータファイル)55は、1つ以上の試合データを含むファイルである。試合データは、当該試合が記録された動画ファイルに対応付けられている。 The game data file (event data file) 55 is a file including one or more game data. The game data is associated with a moving image file in which the game is recorded.
図7に試合データファイル55の一例を示す。図7に示す試合データファイル55は、3つの試合データが含まれている。図7に示した例においては、試合データは、試合名と、試合日時と、試合に参加するチームを示すチームIDと、動画ファイルのファイル名と、を含む。動画ファイルのファイル名とは、動画ファイルを識別するための情報であり、例えば、5桁のIDと拡張子とを含む。動画ファイルのファイル名を格納することにより、撮像装置1は、当該動画ファイルに容易にアクセス可能となる。 An example of the game data file 55 is shown in FIG. The game data file 55 shown in FIG. 7 includes three game data. In the example shown in FIG. 7, the game data includes a game name, a game date and time, a team ID indicating a team participating in the game, and a file name of a moving image file. The file name of the moving image file is information for identifying the moving image file, and includes, for example, a 5-digit ID and an extension. By storing the file name of the moving image file, the imaging apparatus 1 can easily access the moving image file.
例えば、図7に示した試合データファイルの一番上の試合データは、試合名「新人戦」、試合日時「2012年4月15日 10時00分〜13時30分」、試合チームのチームID「1、2」、ファイル名「00000.MTS」を示す試合データである。 For example, the top game data in the game data file shown in FIG. 7 includes the game name “Rookie Battle”, the game date and time “April 15, 2012, 10:00 to 13:30”, the team of the game team This is game data indicating ID “1, 2” and file name “00000.MTS”.
このとき、チーム名や試合日時、スコア等の試合に関する情報は、チームテーブル及びマーカデータファイルを参照すれば、取得可能である。しかし、マーカデータファイルは、動画ファイル毎に格納されている。また、1つのマーカデータファイルに複数の試合に
関する情報が含まれていたり、複数のマーカデータファイルに1つの試合に関する情報が含まれていたりする。このため、ユーザが手動で試合に関する情報を探すことは手間がかかる。
At this time, information on the game such as the team name, the game date and time, and the score can be acquired by referring to the team table and the marker data file. However, the marker data file is stored for each moving image file. In addition, information regarding a plurality of matches is included in one marker data file, or information regarding one match is included in a plurality of marker data files. For this reason, it is troublesome for the user to manually search for information about the game.
これに対して、本実施の形態の撮像装置1は、試合データを作成することにより、試合に関する情報が試合毎に格納されたテーブル(試合データファイル55)を作成できる。つまり、カード型記録媒体302に格納された試合のインデックスを作成することができる。例えば、撮像装置1は、試合名と試合日時をリスト化したインデックスを液晶モニタ304に表示する(図7に示すテーブルをそのまま表示してもよい)。これにより、ユーザは、観戦したい試合を容易に選択することができる。なお、試合データに含まれるデータは、図7に示すものに限られない。例えば、動画ファイルの一部に試合のシーンが含まれる場合、つまり、動画ファイルの途中で試合が開始または終了している場合、当該動画ファイルの先頭から試合開始または終了までの時間を試合データに含めてもよい。これにより、試合インデックスから観戦したい試合を選択された場合、撮像装置1は、その動画ファイルに含まれる試合の開始位置や終了位置を容易に認識できる。 On the other hand, the imaging device 1 according to the present embodiment can create a table (match data file 55) in which information about matches is stored for each match by creating match data. That is, an index of matches stored in the card type recording medium 302 can be created. For example, the imaging device 1 displays an index listing the game names and game dates and times on the liquid crystal monitor 304 (the table shown in FIG. 7 may be displayed as it is). Thereby, the user can easily select a game to watch. Note that the data included in the game data is not limited to that shown in FIG. For example, if a game scene is included in a part of the video file, that is, if the game starts or ends in the middle of the video file, the time from the beginning of the video file to the start or end of the game is used as the game data. May be included. Thereby, when the game which wants to watch from the game index is selected, the imaging device 1 can easily recognize the start position and the end position of the game included in the moving image file.
<中央制御部400の詳細>
続いて、中央制御部400の内部構成について図8を参照して説明する。中央制御部400は、動画ファイル管理部401と、マーカデータ管理部402と、チームテーブル管理部403と、試合データ管理部404と、表示画像データ生成部405と、を有する。
<Details of Central Controller 400>
Next, the internal configuration of the central control unit 400 will be described with reference to FIG. The central control unit 400 includes a moving image file management unit 401, a marker data management unit 402, a team table management unit 403, a game data management unit 404, and a display image data generation unit 405.
動画ファイル管理部401は、ユーザの操作に基づいて、動画ファイルの記録、再生、コピー、及び削除等の処理を実行する。 The moving image file management unit 401 executes processing such as recording, reproduction, copying, and deletion of a moving image file based on a user operation.
マーカデータ管理部402は、動画ファイルのコピーや削除等に応じて、当該動画ファイルに対応付けられたマーカデータファイルのコピーや削除等を実行する。 The marker data management unit 402 executes copying or deleting of the marker data file associated with the moving image file in accordance with copying or deleting of the moving image file.
チームテーブル管理部403は、チームテーブルの生成、編集、コピー、及び削除等を実行する。具体的には、チームテーブル管理部403は、ユーザの入力に基づいて、チームデータを生成したり、編集したりする。また、チームテーブル管理部403は、他の装置から送信されたチームデータに基づいて、チームテーブルを更新する。 The team table management unit 403 executes team table generation, editing, copying, deletion, and the like. Specifically, the team table management unit 403 generates or edits team data based on user input. The team table management unit 403 updates the team table based on team data transmitted from another device.
試合データ管理部404は、試合データファイルの生成、編集、コピー、及び削除等を実行する。試合データ管理部404は、試合開始マーカデータや得点マーカデータ等の内容に基づいて、試合データを生成する。 The game data management unit 404 executes generation, editing, copying, and deletion of a game data file. The game data management unit 404 generates game data based on the contents such as game start marker data and score marker data.
表示画像データ生成部405は、インターフェイス画像やマーカと共に動画を表示するための表示画像データを生成する。つまり、表示画像データ生成部405は、動画ファイルに、インターフェイス画像データやマーカ画像データを重畳させる。表示画像データ生成部405は、液晶モニタ304に、生成した表示画像データを出力する。 The display image data generation unit 405 generates display image data for displaying a moving image together with the interface image and the marker. That is, the display image data generation unit 405 superimposes interface image data and marker image data on the moving image file. The display image data generation unit 405 outputs the generated display image data to the liquid crystal monitor 304.
インターフェイス画像を表示するためのインターフェイス画像データは、例えば予めカード型記録媒体302内に格納されていてもよく、図示しないサーバや撮像装置1に着脱可能な任意の記憶装置(いわゆるUSBメモリ等)から取得してもよい。 The interface image data for displaying the interface image may be stored in the card type recording medium 302 in advance, for example, from a server (not shown) or any storage device (so-called USB memory) that can be attached to and detached from the imaging device 1. You may get it.
表示画像データ生成部405が生成した表示画像データは、入出力I/F303から液晶モニタ304に出力される。液晶モニタ304は、供給された表示画像データに係る表示画像を表示する。図9は、液晶モニタ304に表示された表示画像の一例を示す図である。図9に示すように、液晶モニタ304には、現在撮像中の動画と関連するインターフェイス画像を合成した表示画像が表示される。ユーザは動画を確認しながら、マーカ入力用のインターフェイス画像(マーカアイコン)を使用して動画または実際の試合を目視しながらマーカを適宜入力する。 The display image data generated by the display image data generation unit 405 is output from the input / output I / F 303 to the liquid crystal monitor 304. The liquid crystal monitor 304 displays a display image related to the supplied display image data. FIG. 9 is a diagram illustrating an example of a display image displayed on the liquid crystal monitor 304. As shown in FIG. 9, the liquid crystal monitor 304 displays a display image obtained by synthesizing an interface image related to a moving image currently being captured. While confirming the moving image, the user uses the marker input interface image (marker icon) to appropriately input the marker while viewing the moving image or the actual game.
図9に示す表示画像には、バスケットボールの試合の撮像画像に、マーカを入力するためのインターフェイス画像が重畳して表示されている。図示するように、当該インターフェイス画像は、マーカアイコンとして、試合開始マーカアイコン901(GAME START)、グッドマーカアイコン902(GOOD)、チェックマーカアイコン903(CHECK)、フリーマーカアイコン904(FREE)、得点マーカアイコン905(GOAL)、及び選手交代マーカアイコン906(SUBST)を有し、各マーカが入力できる構成である。なお、フリーマーカとは、ユーザが自由に設定可能なマーカを意味している。また、インターフェイス画像は、マーカ取消しアイコン907(UNDO)を有し、最後に入力したマーカを取り消すことができる。また、表示画面上部には、得点マーカアイコン905の操作に応じて更新されるスコアを示すスコアウインドウ908が、インターフェイス画像の一つとして動画上に表示されている。 In the display image shown in FIG. 9, an interface image for inputting a marker is superimposed on a captured image of a basketball game. As shown in the figure, the interface image includes, as marker icons, a game start marker icon 901 (GAME START), a good marker icon 902 (GOOD), a check marker icon 903 (CHECK), a free marker icon 904 (FREE), and a score marker. An icon 905 (GOAL) and a player change marker icon 906 (SUBST) are provided so that each marker can be input. The free marker means a marker that can be freely set by the user. Further, the interface image has a marker cancel icon 907 (UNDO), and the last input marker can be canceled. In addition, a score window 908 indicating a score updated in response to an operation of the score marker icon 905 is displayed on the moving image as one of the interface images on the upper part of the display screen.
例えば、ユーザが試合開始マーカアイコン901をタッチすると、その時刻情報(入力時刻情報)と試合開始マーカのマーカIDとが関連付けられて、マーカデータとしてカード型記録媒体302に格納される。このとき、ユーザは、図示しないチーム選択画面から試合を行うチームも選択する。なお、チームテーブルに格納されるチームデータは、ユーザが予め入力しておく。これにより、試合開始マーカデータには、マーカID、時刻情報、及び試合チーム(チームID)が対応付けられる(図6参照)。グッドマーカアイコン902、チェックマーカアイコン903、フリーマーカアイコン904、及び選手交代マーカアイコン906についても同様である。 For example, when the user touches the game start marker icon 901, the time information (input time information) and the marker ID of the game start marker are associated with each other and stored in the card-type recording medium 302 as marker data. At this time, the user also selects a team playing a game from a team selection screen (not shown). The team data stored in the team table is input in advance by the user. Thereby, marker ID, time information, and a game team (team ID) are matched with game start marker data (refer to Drawing 6). The same applies to the good marker icon 902, the check marker icon 903, the free marker icon 904, and the player substitution marker icon 906.
試合開始マーカアイコン901がタッチされると、試合開始マーカアイコン901が試合終了マーカアイコン909(GAME FINAL)に変化する(図10参照)。ユーザは、試合が終了したときに、試合終了マーカアイコンをタッチして、動画に試合終了マーカを入力する。これにより、試合終了マーカと入力時刻とが対応付けられた試合終了マーカデータが、マーカデータファイルに格納される。 When the game start marker icon 901 is touched, the game start marker icon 901 changes to a game end marker icon 909 (GAME FINAL) (see FIG. 10). When the game is over, the user touches the game end marker icon and inputs the game end marker in the video. Thereby, the game end marker data in which the game end marker is associated with the input time are stored in the marker data file.
同様に、得点が入った場合には、ユーザは、得点マーカアイコン905をタッチする。すると、その入力時刻と得点マーカとが関連付けられて、得点マーカデータとしてマーカデータファイルに格納される。そして、図11に示すように、液晶モニタ304に表示されている動画上に得点マーカ910が表示される。 Similarly, when a score is entered, the user touches the score marker icon 905. Then, the input time and the score marker are associated with each other and stored as score marker data in the marker data file. Then, as shown in FIG. 11, a score marker 910 is displayed on the moving image displayed on the liquid crystal monitor 304.
その後、図12に示すように、得点を取ったチーム及び取得した得点を選択できるインターフェイス画像が表示される。図12に示したインターフェイス画像は、1点マーカアイコン911〜5点マーカアイコン915と、チームアイコン916、917と、操作を取り消すためのキャンセルアイコン918と、1画面前に戻るためのリターンアイコン919と、を有する。ユーザは、チームアイコン916に表示された「Team A」が得点を取った場合には、画面の左半分に表示された1点マーカアイコン911〜5点マーカアイコン915のいずれか1つをタッチする。一方、チームアイコン917に表示された「Team B」が得点を取った場合には、画面の右半分に表示された1点マーカアイコン911〜5点マーカアイコン915のいずれか1つをタッチする。これにより、得点マーカIDに、得点を取ったチームのチームID及び取得された得点が対応付けられて、マーカデータとしてマーカデータファイルに格納される。なお、インターフェイス画像(マーカアイコン)の配置や大きさは、図9〜図12に示すものに限られない。また、マーカアイコンの数や種類は、ユーザが適宜カスタマイズできるようにしてもよい。 After that, as shown in FIG. 12, an interface image is displayed in which the team that has scored and the score obtained can be selected. The interface image shown in FIG. 12 includes a one-point marker icon 911 to a five-point marker icon 915, team icons 916 and 917, a cancel icon 918 for canceling the operation, and a return icon 919 for returning to the previous screen. Have. When “Team A” displayed on the team icon 916 has scored, the user touches any one of the 1-point marker icon 911 to the 5-point marker icon 915 displayed on the left half of the screen. . On the other hand, when “Team B” displayed on the team icon 917 has scored, one of the 1-point marker icon 911 to the 5-point marker icon 915 displayed on the right half of the screen is touched. Thereby, the team ID of the team that has scored and the acquired score are associated with the score marker ID and stored in the marker data file as marker data. The arrangement and size of the interface image (marker icon) are not limited to those shown in FIGS. The number and type of marker icons may be appropriately customized by the user.
なお、同一スポーツに対して、異なる種類及び内容のマーカを入力するために、複数のインターフェイス画像が用意されていても良い。例えば、試合用のインターフェイス画像と、練習用のインターフェイス画像が別の構成となっていてもよい。さらに、スポーツに限らず、演劇や音楽コンサートの撮像用のインターフェイス画像等が存在してもよいこと
は勿論である。
A plurality of interface images may be prepared in order to input markers of different types and contents for the same sport. For example, a game interface image and a practice interface image may have different configurations. Furthermore, it is a matter of course that there may be an interface image for imaging a theater or a music concert, not limited to sports.
<撮像装置1の動作>
続いて、図13〜図18に示すフローチャートを参照して、本実施の形態にかかる撮像装置1の各種動作について説明する。
<Operation of Imaging Device 1>
Next, various operations of the imaging apparatus 1 according to the present embodiment will be described with reference to flowcharts shown in FIGS.
<メディアのマウント>
はじめに、メディアのマウント処理動作について説明する。図13は、メディアマウント処理を示すフローチャートである。まず、マーカデータ管理部402は、カード型記録媒体302にデフォルトのマーカ種別テーブルが格納されているか否かを判定する(ステップS101)。
<Mounting media>
First, the media mount processing operation will be described. FIG. 13 is a flowchart showing the media mounting process. First, the marker data management unit 402 determines whether or not a default marker type table is stored in the card type recording medium 302 (step S101).
カード型記録媒体302にマーカ種別テーブルが格納されていない場合(ステップS101:No)、マーカデータ管理部402は、デフォルトのマーカ種別テーブルを作成する(ステップS102)。具体的には、マーカデータ管理部402が処理を行う際に参照するプログラムに、予めデフォルトのマーカ種別テーブルに関する情報を書き込んでおく。そして、マーカデータ管理部402は、デフォルトのマーカ種別テーブルを作成する際に、上記のプログラムを読み出して、デフォルトのマーカ種別テーブルをカード型記録媒体302内に作成する。一方、カード型記録媒体302にマーカ種別テーブルが格納されている場合(ステップS101:Yes)、マーカ種別テーブルの作成は行われず、次の処理に進む。 When the marker type table is not stored in the card type recording medium 302 (step S101: No), the marker data management unit 402 creates a default marker type table (step S102). Specifically, information related to the default marker type table is written in advance in a program that is referred to when the marker data management unit 402 performs processing. Then, when creating the default marker type table, the marker data management unit 402 reads the above program and creates the default marker type table in the card type recording medium 302. On the other hand, when the marker type table is stored in the card-type recording medium 302 (step S101: Yes), the marker type table is not created and the process proceeds to the next process.
次に、試合データ管理部404は、カード型記録媒体302に試合データファイルが格納されているか否かを判定する(ステップS103)。カード型記録媒体302に試合データファイルが格納されていない場合(ステップS103:No)、試合データ管理部404は、カード型記録媒体302に格納されたマーカデータファイルの全てのマーカデータを解析する。そして、試合データ管理部404は、マーカデータに基づいて、試合データファイルを作成する(ステップS104)。 Next, the game data management unit 404 determines whether or not a game data file is stored in the card type recording medium 302 (step S103). When the game data file is not stored in the card type recording medium 302 (step S103: No), the game data management unit 404 analyzes all the marker data in the marker data file stored in the card type recording medium 302. Then, the game data management unit 404 creates a game data file based on the marker data (step S104).
具体的には、試合データ管理部404は、動画ファイルの作成日時を参照し、試合データ中の試合日時を作成する。また、試合データ管理部404は、マーカデータファイルのうち、試合開始マーカデータを参照し、試合チーム(チームID)を特定する。そして、試合データ管理部404は、試合データ中のチームIDを作成する。一方、カード型記録媒体302に試合データファイルが格納されている場合(ステップS103:Yes)、試合データファイルの作成は行われず、次の処理に進む。 Specifically, the game data management unit 404 refers to the creation date and time of the moving image file and creates the game date and time in the game data. Moreover, the game data management part 404 refers to game start marker data among marker data files, and specifies a game team (team ID). Then, the game data management unit 404 creates a team ID in the game data. On the other hand, when the game data file is stored in the card-type recording medium 302 (step S103: Yes), the game data file is not created, and the process proceeds to the next process.
次に、マーカデータ管理部402は、マーカデータファイルを解析して、試合終了マーカを入力する必要があるか否かを判定する(ステップS105)。具体的には、マーカデータ管理部402は、(a)最後に試合開始マーカが入力されて以降、試合終了マーカが入力されていないこと、(b)撮像装置1の時計が未設定、最後に試合開始マーカが入力された動画ファイルの作成日時が不明、または、最後の試合開始マーカが入力された時刻からの経過時間が12時間を超えたこと、の条件のうち(a)、(b)両方の条件を満たす場合に、試合終了マーカが必要であると判定する。 Next, the marker data management unit 402 analyzes the marker data file and determines whether or not it is necessary to input a match end marker (step S105). Specifically, the marker data management unit 402 determines that (a) the match end marker has not been input since the last match start marker is input, (b) the clock of the imaging device 1 is not set, and finally (A), (b) among the conditions that the creation date and time of the moving image file in which the game start marker is input is unknown, or that the elapsed time from the time when the last game start marker is input has exceeded 12 hours When both conditions are satisfied, it is determined that a match end marker is necessary.
試合終了マーカを入力する必要がある場合(ステップS105:Yes)、マーカデータ管理部402は、最後に記録された動画ファイル、すなわち作成日時が最も新しい動画ファイルの終端位置(マーカデータファイルの末尾)に試合終了マーカを入力する(ステップS106)。なお、試合終了マーカを入力する必要がない場合(ステップS105:No)、メディアのマウント処理を終了する。 When it is necessary to input a match end marker (step S105: Yes), the marker data management unit 402 displays the last recorded video file, that is, the end position of the video file with the latest creation date (end of the marker data file). The game end marker is input to (Step S106). If it is not necessary to input a match end marker (step S105: No), the media mounting process ends.
<動画記録>
続いて、動画記録の処理動作について説明する。図13は、動画記録処理を示すフローチャートである。まず、ユーザが、操作部306を用いて記録操作することにより、撮像装置1は、記録動作を開始する(ステップS201)。マーカデータ管理部402は、マーカデータファイルを解析して、試合終了マーカを入力する必要があるか否かを判定する(ステップS202)。
<Movie recording>
Next, the moving image recording processing operation will be described. FIG. 13 is a flowchart showing the moving image recording process. First, when the user performs a recording operation using the operation unit 306, the imaging apparatus 1 starts a recording operation (step S201). The marker data management unit 402 analyzes the marker data file and determines whether or not it is necessary to input a match end marker (step S202).
このとき、マーカデータ管理部402は、図13のステップS105において説明した条件(a)、(b)の全ての条件を満たす場合、試合終了マーカを入力する必要があると判定する。そして、試合終了マーカを入力する必要がある場合(ステップS202:Yes)、マーカデータ管理部402は、記録開始する前の動画ファイルの終端位置に試合終了マーカを入力する(ステップS203)。つまり、マーカデータ管理部402は、動画ファイルに対応するマーカデータファイルの末尾に、試合終了マーカを入力(追加)する。なお、試合終了マーカを入力する必要がない場合(ステップS202:No)、試合終了マーカの入力は行われず、次の処理に進む。 At this time, the marker data management unit 402 determines that it is necessary to input a match end marker when all the conditions (a) and (b) described in step S105 of FIG. 13 are satisfied. When it is necessary to input a match end marker (step S202: Yes), the marker data management unit 402 inputs a match end marker at the end position of the moving image file before starting recording (step S203). That is, the marker data management unit 402 inputs (adds) the game end marker at the end of the marker data file corresponding to the moving image file. If it is not necessary to input the match end marker (step S202: No), the match end marker is not input and the process proceeds to the next process.
次に、撮像装置1は、記録開始時のクロックを記憶する(ステップS204)。例えば、動画ファイル管理部401が、記録開始時のクロックをカード型記録媒体302等のメモリに格納する。なお、クロックとは、中央制御部400のCPUの動作クロックのことである。そして、動画ファイル管理部401は、撮像データをカード型記録媒体302に格納していく。つまり、動画ファイル管理部401は、記録を開始する(ステップS205)。 Next, the imaging device 1 stores a clock at the start of recording (step S204). For example, the moving image file management unit 401 stores a clock at the start of recording in a memory such as the card type recording medium 302. The clock is an operation clock of the CPU of the central control unit 400. Then, the moving image file management unit 401 stores the imaging data in the card type recording medium 302. That is, the moving image file management unit 401 starts recording (step S205).
そして、マーカデータ管理部402は、ユーザがマーカを入力したか否かを判定する(ステップS206)。マーカが入力された場合、マーカデータ管理部402は、入力されたマーカに応じてマーカデータを作成する(ステップS207)。具体的には、マーカデータ管理部402は、マーカが入力されたクロックと、ステップS204において記憶した記録開始時のクロックと、の差分からメディア内時刻(動画記録開始時からの時刻)を算出する。そして、マーカデータ管理部402は、メディア内時刻と入力されたマーカのマーカIDとを対応付けて、マーカデータを作成する(ステップS207)。 Then, the marker data management unit 402 determines whether or not the user has input a marker (step S206). When a marker is input, the marker data management unit 402 creates marker data according to the input marker (step S207). Specifically, the marker data management unit 402 calculates the media time (the time from the start of moving image recording) from the difference between the clock at which the marker is input and the recording start clock stored in step S204. . Then, the marker data management unit 402 creates marker data by associating the time in the medium with the marker ID of the input marker (step S207).
次に、動画ファイル管理部401は、ユーザが操作部306を用いて記録終了の操作を行ったか否かを判定する(ステップS208)。記録終了操作が行われた場合(ステップS208:Yes)、動画ファイル管理部401は、撮像データをカード型記録媒体302に格納する処理を停止し、記録を終了する。また、動画ファイル管理部401は、記録終了時のメディア内時刻をカード型記録媒体302等に格納する。さらに、マーカデータ管理部402は、作成したマーカデータをマーカデータファイルに格納する(ステップS209)。 Next, the moving image file management unit 401 determines whether or not the user has performed a recording end operation using the operation unit 306 (step S208). When the recording end operation is performed (step S208: Yes), the moving image file management unit 401 stops the process of storing the imaging data in the card type recording medium 302 and ends the recording. Also, the moving image file management unit 401 stores the media time at the end of recording in the card-type recording medium 302 or the like. Further, the marker data management unit 402 stores the created marker data in the marker data file (step S209).
次に、動画ファイル管理部401は、新たに動画記録が開始されたか否かを判定する(ステップS210)。具体的には、動画ファイル管理部401は、4GB制限による動画ファイルの分割により、新たな動画記録が開始されたか否かを判定する。新たな動画記録が開始されない場合(ステップS210:No)、動画記録動作を終了する。なお、4GBによる動画ファイルの分割とは、1つの動画ファイルとして格納できる容量の上限が4GBであるために、撮像データが複数の動画ファイルに分割されることを意味する。 Next, the moving image file management unit 401 determines whether moving image recording is newly started (step S210). Specifically, the moving image file management unit 401 determines whether or not new moving image recording has been started by dividing the moving image file by the 4 GB restriction. When new moving image recording is not started (step S210: No), the moving image recording operation is terminated. Note that the division of a moving image file by 4 GB means that imaging data is divided into a plurality of moving image files because the upper limit of the capacity that can be stored as one moving image file is 4 GB.
一方、新たな動画記録が開始された場合(ステップS210:Yes)、動画ファイル管理部401は、記録終了時のメディア内時刻をクロック(CPUの動作クロック)に換算する。そして動画ファイル管理部401は、ステップS204においてカード型記録媒体302に格納した記録開始時のクロックに、換算したクロックを加算する(ステップS211)。これにより、4GB制限による動画ファイルの分割により新たな動画ファイルの記録が開始された場合であっても、当該動画ファイルの記録開始時のクロックを正確に把握することができる。その後の処理(ステップS204〜S210)は、上述の動作と同様であるため、説明を省略する。 On the other hand, when a new moving image recording is started (step S210: Yes), the moving image file management unit 401 converts the time in the medium at the end of the recording into a clock (CPU operation clock). The moving image file management unit 401 adds the converted clock to the clock at the start of recording stored in the card type recording medium 302 in step S204 (step S211). Thereby, even when recording of a new moving image file is started by dividing the moving image file due to the 4 GB limitation, the clock at the start of recording of the moving image file can be accurately grasped. Subsequent processing (steps S204 to S210) is the same as the above-described operation, and thus description thereof is omitted.
なお、新たな動画記録を開始した後、新たなマーカが入力される前に、アンドゥ処理(直前に入力されたマーカを削除する処理)が行われた場合、マーカデータ管理部402は、削除すべきマーカデータを含むマーカデータファイルをカード型記録媒体302から読み出す。そして、マーカデータ管理部402は、読み出したマーカデータファイルの最後のマーカデータを削除して、再度マーカデータファイルをカード型記録媒体302に格納する。 If an undo process (a process for deleting the marker input immediately before) is performed after a new moving image recording is started and before a new marker is input, the marker data management unit 402 deletes the marker. A marker data file including the marker data to be read is read from the card type recording medium 302. Then, the marker data management unit 402 deletes the last marker data of the read marker data file and stores the marker data file in the card-type recording medium 302 again.
<動画再生>
続いて、動画再生の処理動作について説明する。図15は、動画再生処理を示すフローチャートである。まず、ユーザが、操作部306を用いて再生操作することにより、撮像装置1は、動画再生動作を開始する(ステップS301)。
<Video playback>
Next, the moving image playback processing operation will be described. FIG. 15 is a flowchart showing the moving image reproduction process. First, when the user performs a reproduction operation using the operation unit 306, the imaging apparatus 1 starts a moving image reproduction operation (step S301).
次に、マーカデータ管理部402は、再生を開始する動画ファイルに対応付けられたマーカデータファイルをカード型記録媒体302から読み込む(ステップS302)。 Next, the marker data management unit 402 reads the marker data file associated with the moving image file to be reproduced from the card type recording medium 302 (step S302).
次に、動画ファイル管理部401は、動画ファイルの再生が終了したか否かを判定する(ステップS303)。再生終了していない場合(ステップS303)、マーカデータ管理部402は、マーカ関連情報を更新する(ステップS304)。具体的には、マーカデータ管理部402は、動画ファイルの時刻を取得して、当該時刻において、更新されるべきマーカ関連情報を更新する。 Next, the moving image file management unit 401 determines whether or not reproduction of the moving image file has ended (step S303). When reproduction has not ended (step S303), the marker data management unit 402 updates the marker related information (step S304). Specifically, the marker data management unit 402 acquires the time of the moving image file and updates the marker related information to be updated at the time.
このとき、マーカ関連情報とは、例えば、「アイコン表示すべきマーカ種別」、「マーカを入力可能か否か」、「マーカを削除可能か否か」、「試合中か否か」、「試合の対戦チーム名」、及び「試合の現在の得点」等に関する情報である。マーカデータ管理部402は、これらのマーカ関連情報を更新し、再生中の動画において、表示、変更、または削除すべきマーカがあれば、動画の表示を更新する(ステップS305)。 At this time, the marker related information includes, for example, “a marker type to be displayed as an icon”, “whether or not a marker can be input”, “whether or not a marker can be deleted”, “whether or not a game is in progress”, “a game Is the information on the “matching team name”, “the current score of the game”, and the like. The marker data management unit 402 updates the marker related information, and if there is a marker to be displayed, changed, or deleted in the moving image being played back, the display of the moving image is updated (step S305).
例えば、マーカ関連情報の更新によって、動画ファイルの時刻において表示すべきマーカが存在すれば、表示画像データ生成部405は、表示すべきマーカの画像データを再生中の動画データに重畳させた表示画像データを生成する。そして、動画ファイル管理部401は、例えば、図11に示すように、再生中の動画にマーカを表示させる。また、マーカ関連情報の更新によって、得点が変更された場合、表示画像データ生成部405は、変更後の得点を表示した表示画像データを生成する(例えば、図11に示したように、スコアウインドウの表示を変更した表示画像データを生成する)。 For example, if there is a marker to be displayed at the time of the moving image file by updating the marker related information, the display image data generation unit 405 displays the display image in which the image data of the marker to be displayed is superimposed on the moving image data being reproduced. Generate data. Then, the moving image file management unit 401 displays a marker on the moving image being reproduced, for example, as shown in FIG. When the score is changed by updating the marker related information, the display image data generation unit 405 generates display image data displaying the score after the change (for example, as shown in FIG. 11, a score window). Display image data in which the display of is changed).
その後、動画ファイル管理部401は、再生終了したか否かを再度判定する(ステップS303)。未だ再生終了していない場合(ステップS303:No)、マーカデータ管理部402は、再度マーカ関連情報を更新する(ステップS304)。つまり、再生を終了するまで、マーカ関連情報の更新(ステップS304)及び表示更新(ステップS305)は定期的(例えば、500ms周期)に行われる。 Thereafter, the moving image file management unit 401 determines again whether or not the reproduction has ended (step S303). When the reproduction has not been finished yet (step S303: No), the marker data management unit 402 updates the marker related information again (step S304). That is, the marker-related information is updated (step S304) and the display is updated (step S305) periodically (for example, at a cycle of 500 ms) until the reproduction is finished.
一方、再生終了した場合(ステップS303:Yes)、マーカデータ管理部402は、動画ファイルの再生中に、当該動画ファイルに対応するマーカデータファイルが更新(追加、削除、または変更)されたか否かを判定する(ステップS306)。マーカデータファイルが更新されていない場合(ステップS306:No)、動画再生の動作は終了する。 On the other hand, when the reproduction ends (step S303: Yes), the marker data management unit 402 determines whether the marker data file corresponding to the moving image file is updated (added, deleted, or changed) during the reproduction of the moving image file. Is determined (step S306). If the marker data file has not been updated (step S306: No), the moving image playback operation ends.
一方、マーカデータファイルが更新された場合(ステップS306:Yes)、マーカデータ管理部402は、更新後のマーカデータファイルを再生した動画ファイルに対応付けてカード型記録媒体302に格納する(ステップS307)。 On the other hand, when the marker data file is updated (step S306: Yes), the marker data management unit 402 stores the updated marker data file in the card type recording medium 302 in association with the reproduced moving image file (step S307). ).
なお、上記の動画ファイルの再生開始には、分割された動画ファイルにおけるファイルの切り替わりによって、次の動画ファイルを再生する場合も含まれる。また、動画ファイルの再生終了には、分割された動画ファイルにおけるファイルの切り替わりによって、前の動画ファイルの再生が終了することも含まれる。 It should be noted that the start of playback of the moving image file includes a case where the next moving image file is played by switching the files in the divided moving image file. In addition, the end of reproduction of a moving image file includes termination of reproduction of a previous moving image file due to switching of files in the divided moving image file.
また、動画ファイル管理部401は、ダイジェスト再生を行うこともできる。ダイジェスト再生とは、ダイジェスト再生する動画ファイルのうち、当該動画ファイル対応付けられたマーカデータファイルに含まれる各マーカデータの入力時刻周辺の動画のみを再生することを意味する。入力時刻周辺の動画とは、例えば、マーカの入力時刻の前後3秒間の動画等である。これにより、ユーザは、試合のダイジェストを鑑賞することができる。なお、ダイジェスト再生の対象となるマーカをユーザが適宜設定できるようにしてもよい。例えば、得点シーンのみのダイジェストを鑑賞したい場合、ユーザは、ダイジェスト再生の対象となるマーカを得点マーカに設定する。これにより、動画ファイル管理部401は、得点マーカの入力時刻周辺の動画のみを再生する。 The moving image file management unit 401 can also perform digest reproduction. Digest playback means that only the video around the input time of each marker data included in the marker data file associated with the video file among the video files to be digest-played is played. The moving image around the input time is, for example, a moving image for 3 seconds before and after the marker input time. Thereby, the user can appreciate the digest of the game. It should be noted that the user may appropriately set the marker to be digest playback target. For example, when the user wants to appreciate the digest of only the scoring scene, the user sets the marker to be digest reproduced as the score marker. Thereby, the moving image file management unit 401 reproduces only the moving image around the input time of the score marker.
<動画コピー>
続いて、動画コピーの処理動作について説明する。動画コピーとは、撮像装置1の内蔵型記録媒体209に格納された動画ファイルを、カード型記録媒体302に複製することを意味する。なお、コピーされた動画ファイルの記録先(コピー先)となる記録媒体が複数存在する場合、ユーザが記録先を選択できるようにしてもよい。図16は、動画コピー処理を示すフローチャートである。まず、ユーザが、操作部306を用いてコピーする動画ファイルを選択し、コピー操作する。これにより、動画ファイル管理部401は、選択された動画ファイルをコピーし、コピー先に送信する(ステップS401)。
<Video copy>
Next, the moving image copy processing operation will be described. The moving image copy means copying a moving image file stored in the built-in recording medium 209 of the imaging apparatus 1 to the card type recording medium 302. When there are a plurality of recording media that are recording destinations (copy destinations) of the copied moving image file, the user may be able to select the recording destination. FIG. 16 is a flowchart showing the moving image copy process. First, the user selects a moving image file to be copied using the operation unit 306 and performs a copy operation. Thereby, the moving image file management unit 401 copies the selected moving image file and transmits it to the copy destination (step S401).
次に、マーカデータ管理部402は、コピーされた動画に対応付けられたマーカデータファイル(以下、コピー対象マーカデータファイルと称す)を解析する(ステップS402)。具体的には、マーカデータ管理部402は、コピー対象マーカデータファイル及びその前後のマーカデータファイルに試合開始マーカ及び試合終了マーカが含まれるか否かを検索する。 Next, the marker data management unit 402 analyzes a marker data file (hereinafter referred to as a copy target marker data file) associated with the copied moving image (step S402). Specifically, the marker data management unit 402 searches for a match start marker and a match end marker in the copy target marker data file and the marker data files before and after the copy target marker data file.
次に、チームテーブル管理部403は、コピー対象マーカデータファイルに含まれる試合開始マーカの対戦チームについて、チームテーブルに含まれるチームデータをコピー先のチームテーブルにコピーする(ステップS403)。このとき、チームテーブル管理部403は、コピー先のチームテーブルにおいて、コピーしたチームデータに新たなIDを割り当てる。 Next, the team table management unit 403 copies the team data included in the team table to the team table of the copy destination for the match team of the match start marker included in the copy target marker data file (step S403). At this time, the team table management unit 403 assigns a new ID to the copied team data in the copy destination team table.
マーカデータ管理部402は、コピー先の既存マーカデータを解析する(ステップS404)。そして、マーカデータ管理部402は、試合開始マーカが存在し、試合終了マーカがない場合(試合中の場合)、最後のマーカデータファイルの終端に試合終了マーカを入力する。 The marker data management unit 402 analyzes the existing marker data at the copy destination (step S404). And marker data management part 402 inputs a game end marker at the end of the last marker data file, when a game start marker exists and there is no game end marker (in the case of a game).
マーカデータ管理部402は、コピー対象マーカデータファイルをコピーする(ステップS405)。つまり、マーカデータ管理部402は、コピー先にコピー対象マーカデータファイルを作成する。 The marker data management unit 402 copies the copy target marker data file (step S405). That is, the marker data management unit 402 creates a copy target marker data file at the copy destination.
次に、マーカデータ管理部402は、コピーされたマーカデータファイル(撮像装置1の内部の他のメモリに複製されたマーカデータファイル)に試合開始マーカデータが含まれるか否かを判定する(ステップS406)。試合開始マーカデータがコピー対象である場合(ステップS406:Yes)、チームテーブル管理部403は、試合開始マーカデータに含まれるチームIDを、ステップS403においてコピー先で新たに割り当てたチームIDに変更する(ステップS407)。 Next, the marker data management unit 402 determines whether or not the game start marker data is included in the copied marker data file (marker data file copied to another memory inside the imaging device 1) (step S1). S406). If the match start marker data is to be copied (step S406: Yes), the team table management unit 403 changes the team ID included in the match start marker data to the team ID newly assigned at the copy destination in step S403. (Step S407).
その後、マーカデータ管理部402は、ステップS406において検出された試合開始マーカデータに対応する試合終了マーカデータが、コピー対象か否かを判定する(ステップS408)。 Thereafter, the marker data management unit 402 determines whether or not the game end marker data corresponding to the game start marker data detected in step S406 is a copy target (step S408).
試合終了マーカデータがコピー対象ではない場合(ステップS408:No)、マーカデータ管理部402は、コピー対象の動画ファイルの終端位置(コピー対象マーカデータファイルの最後)に、試合終了マーカを入力する(ステップS409)。なお、試合終了マーカデータがコピー対象である場合(ステップS408:Yes)、試合終了マーカの入力処理は行われず、次の処理に進む。 When the match end marker data is not the copy target (step S408: No), the marker data management unit 402 inputs the match end marker at the end position of the copy target moving image file (the end of the copy target marker data file) ( Step S409). If the game end marker data is to be copied (step S408: Yes), the game end marker input process is not performed, and the process proceeds to the next process.
最後に、試合データ管理部404は、コピーされたマーカデータファイルに含まれる試合の情報(チーム、得点等)に基づいて、試合データを作成し、コピー先の試合データファイルに追加する(ステップS411)。 Finally, the game data management unit 404 creates game data based on the game information (team, score, etc.) included in the copied marker data file and adds it to the copy destination game data file (step S411). ).
一方、試合開始マーカデータがコピー対象ではない場合(ステップS406:No)、マーカデータ管理部402は、コピーされたマーカデータファイルから、試合関連マーカデータ(試合終了マーカ、得点マーカ)を削除する(ステップS410)。 On the other hand, when the match start marker data is not a copy target (step S406: No), the marker data management unit 402 deletes the match related marker data (match end marker, score marker) from the copied marker data file ( Step S410).
なお、1つの試合が複数の動画ファイルに亘って記録され、それらの動画ファイルが別々にコピーされる場合、各動画ファイルに対応するマーカデータファイルをそのままコピーすることも考えられる。この場合、各マーカデータファイルに含まれる試合関連マーカもコピーされる。このため、各マーカデータファイルに含まれる試合関連マーカに基づいて、同じ試合に関する試合データが複数作成されてしまう。そのため、試合データファイルに、同じチームで行われる同じ試合の試合データが複数格納されてしまい、試合のインデックスが煩雑で分かりづらくなる。 In addition, when one game is recorded over several moving image files and those moving image files are copied separately, it is also possible to copy the marker data file corresponding to each moving image file as it is. In this case, the game-related marker included in each marker data file is also copied. For this reason, based on the game related marker contained in each marker data file, multiple game data regarding the same game will be produced. For this reason, a plurality of pieces of game data of the same game played by the same team are stored in the game data file, and the index of the game is complicated and difficult to understand.
これに対して、撮像装置1の構成によれば、上記のように、ステップS410において、マーカデータ管理部402は、試合開始マーカデータがコピー対象マーカデータでない場合、試合関連マーカデータをコピーしない。このため、試合データ管理部404は、コピー先においては、コピーされた動画ファイルに対する試合に関する情報は取得できない。つまり、コピーされた動画ファイルに対応する試合データを生成できない。そのため、1つの試合が複数の動画ファイルに亘って記録され、それらの動画ファイルが別々にコピーされる場合でも、試合データがコピーされるのは、試合開始マーカデータを含むマーカデータファイルに対応付けられた動画ファイルがコピーされる場合のみである。このため、1つの試合について作成される試合データは1つとなる。そのため、同じ試合の試合データが複数作成されてしまうことを防止できる。 On the other hand, according to the configuration of the imaging device 1, as described above, in step S410, the marker data management unit 402 does not copy the game related marker data when the game start marker data is not the copy target marker data. For this reason, the game data management unit 404 cannot acquire information regarding the game for the copied video file at the copy destination. That is, the game data corresponding to the copied video file cannot be generated. Therefore, even when a single game is recorded over a plurality of video files and the video files are copied separately, the game data is copied in association with the marker data file including the game start marker data. This is only when the recorded video file is copied. For this reason, one game data is created for one game. Therefore, it is possible to prevent a plurality of game data for the same game from being created.
<動画削除>
続いて、動画削除の処理動作について説明する。動画削除とは、カード型記録媒体302に格納された動画ファイルを、削除することを意味する。図17は、動画削除処理を示すフローチャートである。まず、ユーザが、操作部306を用いて削除する動画ファイルを選択し、削除操作する。これにより、撮像装置1は、選択された動画ファイルの削除動作を開始する(ステップS501)。
<Delete video>
Next, the moving image deletion processing operation will be described. Moving image deletion means deleting a moving image file stored in the card type recording medium 302. FIG. 17 is a flowchart showing the moving image deletion process. First, the user selects a moving image file to be deleted using the operation unit 306 and performs a deletion operation. Thereby, the imaging device 1 starts the deletion operation | movement of the selected moving image file (step S501).
次に、マーカデータ管理部402は、削除する動画ファイルに対応付けられたマーカデータファイル(以下、削除対象マーカデータファイルと称す)を解析する(ステップS502)。具体的には、マーカデータ管理部402は、削除対象マーカデータファイルに試合開始マーカデータ及び試合終了マーカデータが含まれるか検索する。 Next, the marker data management unit 402 analyzes a marker data file (hereinafter referred to as a deletion target marker data file) associated with the moving image file to be deleted (step S502). Specifically, the marker data management unit 402 searches whether the deletion start marker data file includes game start marker data and game end marker data.
削除対象マーカデータファイルに試合開始マーカデータが含まれる場合(ステップS503:Yes)、試合データ管理部404は、削除対象となった試合に関する試合データを、試合データファイルから削除する(ステップS504)。 When the game start marker data is included in the deletion target marker data file (step S503: Yes), the game data management unit 404 deletes the game data related to the deletion target game from the game data file (step S504).
次に、チームテーブル管理部403は、削除した試合データが参照していたチームIDが、その他の削除されない試合データで参照されているか否かを判定する(ステップS505)。 Next, the team table management unit 403 determines whether or not the team ID referred to by the deleted game data is referred to by other game data that is not deleted (step S505).
削除した試合データが参照していたチームIDが、その他の削除されない試合データで参照されていない場合(ステップS505:No)、チームテーブル管理部403は、参照されていないチームIDに対応するチームデータを、チームテーブルから削除する(ステップS506)。なお、削除した試合データが参照していたチームIDが、その他の削除されない試合データで参照されている場合(ステップS505:Yes)、チームデータの削除は行われず、次の処理に進む。 When the team ID referred to by the deleted game data is not referred to by other game data that is not deleted (step S505: No), the team table management unit 403 displays the team data corresponding to the team ID that is not referenced. Is deleted from the team table (step S506). If the team ID referenced by the deleted game data is referenced by other game data that is not deleted (step S505: Yes), the team data is not deleted, and the process proceeds to the next process.
次に、マーカデータ管理部402は、試合開始マーカに対応する試合終了マーカまでの間に、削除対象マーカデータファイルではないマーカデータファイルが存在するか否かを判定する(ステップS507)。削除対象マーカデータファイルではないマーカデータファイルが存在する場合(ステップS507:Yes)、マーカデータ管理部402は、削除対象ではないマーカデータファイルから試合関連マーカ(試合終了マーカ及び得点マーカ)を削除する(ステップS508)。なお、削除対象マーカデータファイルではないマーカデータファイルが存在しない場合(ステップS507:No)、試合関連マーカの削除処理は行われない。 Next, the marker data management unit 402 determines whether or not there is a marker data file that is not a deletion target marker data file before the match end marker corresponding to the match start marker (step S507). When there is a marker data file that is not the deletion target marker data file (step S507: Yes), the marker data management unit 402 deletes the game related markers (match end marker and score marker) from the marker data file that is not the deletion target. (Step S508). If there is no marker data file that is not the marker data file to be deleted (step S507: No), the game related marker deletion process is not performed.
そして、マーカデータ管理部402は、削除対象マーカデータファイルを削除する(ステップS511)。最後に、動画ファイル管理部401は、削除対象の動画ファイルを削除する(ステップS512)。 Then, the marker data management unit 402 deletes the deletion target marker data file (step S511). Finally, the moving image file management unit 401 deletes the moving image file to be deleted (step S512).
一方、削除対象マーカデータファイルに試合開始マーカデータが含まれない場合(ステップS503:No)、マーカデータ管理部402は、削除対象マーカデータファイルに試合終了マーカデータが含まれるか否かを判定する(ステップS509)。 On the other hand, when the game start marker data is not included in the deletion target marker data file (step S503: No), the marker data management unit 402 determines whether the deletion target marker data file includes game end marker data. (Step S509).
削除対象マーカデータファイルに試合終了マーカデータが含まれる場合(ステップS509:Yes)、マーカデータ管理部402は、試合を含む削除対象ではない動画ファイルの終端位置(動画ファイルに対応するマーカデータファイルの末尾)に試合終了マーカを入力する(ステップS510)。そして、マーカデータ管理部402は、削除対象マーカデータファイルを削除する(ステップS511)。最後に、動画ファイル管理部401は、削除対象の動画ファイルを削除する(ステップS512)。なお、削除対象マーカデータファイルに試合終了マーカデータが含まれない場合(ステップS509:No)、試合終了マーカの入力は行われない。 When game end marker data is included in the deletion target marker data file (step S509: Yes), the marker data management unit 402 determines the end position of the video file that is not the deletion target including the game (the marker data file corresponding to the video file). At the end, a match end marker is input (step S510). Then, the marker data management unit 402 deletes the deletion target marker data file (step S511). Finally, the moving image file management unit 401 deletes the moving image file to be deleted (step S512). In addition, when game end marker data is not included in the deletion target marker data file (step S509: No), the game end marker is not input.
なお、上述のコピー処理と削除処理とを合わせることにより、動画移動(コピー元には動画ファイルを残さずに、コピー先に動画ファイルをコピーすること)も実現できる。 Note that moving images (copying a moving image file to a copy destination without leaving a moving image file at the copy source) can be realized by combining the above-described copy processing and deletion processing.
また、マーカデータ管理部402は、1つの試合が複数の動画ファイルに亘る場合において、マーカデータファイルを作成する際に、マーカデータファイルの先頭に、直前のマーカデータファイルにおける合計点(合計スコア)を格納するようにしてもよい。これにより、1つの試合が記録された複数の動画ファイル及びマーカデータファイルの一部が削除された場合であっても、他のマーカデータファイルは、それまでの各チームの合計点を格納している。これにより、マーカデータ管理部402は、マーカデータファイルの作成時点における各チームの合計点を参照できる。 When the marker data file is created when one game covers a plurality of video files, the marker data management unit 402 adds the total score (total score) in the previous marker data file to the top of the marker data file. May be stored. As a result, even if a part of a plurality of video files and marker data files in which one game is recorded is deleted, the other marker data files store the total points of each team so far. Yes. Thereby, the marker data management unit 402 can refer to the total score of each team at the time of creation of the marker data file.
さらに、マーカデータファイルは、直前のマーカデータファイルの合計点に対する得点の加算分も格納する。言い換えると、得点の加算分とは、当該マーカデータファイルにおいて、各チームが取得した得点の合計である。 Furthermore, the marker data file also stores the added amount of the score with respect to the total score of the previous marker data file. In other words, the score addition is the total score obtained by each team in the marker data file.
例えば、直前のマーカデータファイルにおけるAチームの合計点が35点で、Bチームの合計点が41点だとする。そして、現在のマーカデータファイルにおいて、Aチームが11点、Bチームが15点取得したとする。この場合、現在のマーカデータファイルは、直前のマーカデータファイルにおける合計点「Aチームが35点」、「Bチームが41点」という情報(直前マーカデータファイルまでの合計点)と、「Aチームが11点取得」、「Bチームが15点取得」という情報(直前のマーカデータファイルの合計点に対する得点の加算分)と、を格納する。これにより、1つの試合を記録する複数の動画ファイルの一部が削除された後に合計点を再計算する際に、各マーカデータファイルにおける得点の加算分及び合計点のみを用いて合計点を算出できる。その結果、全ての得点の加算分を参照して計算する必要が無く、撮像装置1の演算処理の負担を軽減することができる。 For example, it is assumed that the total score of Team A in the previous marker data file is 35 points, and the total score of Team B is 41 points. Then, it is assumed that team A has acquired 11 points and team B has acquired 15 points in the current marker data file. In this case, the current marker data file includes information (total points up to the previous marker data file) of the total points “A team is 35 points” and “B team is 41 points” in the previous marker data file, and “A team” Is “11 points are acquired” and “B team 15 points are acquired” (addition of points to the total points of the previous marker data file). As a result, when recalculating the total score after deleting a part of multiple video files that record a single game, the total score is calculated using only the added score and total score in each marker data file. it can. As a result, there is no need to calculate with reference to the sum of all the scores, and the burden of the arithmetic processing of the imaging apparatus 1 can be reduced.
<動画トリミング>
続いて、動画トリミングの処理動作について説明する。動画トリミングとは、動画ファイルのうち、ユーザが指定した範囲(例えば、試合の開始から終了まで)の前後の動画データを削除することを意味する。これにより、試合開始マーカよりも前の動画データ、及び、試合終了マーカよりも後の動画データが削除され、試合の開始から終了までの動画ファイルが抽出される。図18は、動画トリミング処理を示すフローチャートである。まず、ユーザが、操作部306を用いてトリミングする動画ファイル及び抽出範囲を指定する。これにより、撮像装置1は、指定された動画ファイルの抽出範囲についてトリミング動作を開始する(ステップS601)。このとき、動画ファイル管理部401は、指定された動画ファイルの指定された範囲の動画データを、抽出先(トリミングした動画ファイルを記憶する場所。例えば、他のメモリや、指定された動画ファイルの終端等)にコピーする。
<Video trimming>
Next, the moving image trimming processing operation will be described. The moving image trimming means deleting moving image data before and after a range specified by the user (for example, from the start to the end of the game) in the moving image file. Thereby, the moving image data before the game start marker and the moving image data after the game end marker are deleted, and a moving image file from the start to the end of the game is extracted. FIG. 18 is a flowchart showing the moving image trimming process. First, the user designates a moving image file to be trimmed and an extraction range using the operation unit 306. As a result, the imaging apparatus 1 starts a trimming operation for the designated moving image file extraction range (step S601). At this time, the moving image file management unit 401 extracts the moving image data in the specified range of the specified moving image file (where to store the trimmed moving image file. For example, other memory or the specified moving image file To the end).
次に、マーカデータ管理部402は、抽出された動画データに対応付けられたマーカデータ及び当該マーカデータの前後のマーカデータを解析する(ステップS602)。具体的には、マーカデータ管理部402は、マーカデータに試合開始マーカデータまたは試合終了マーカデータが含まれるか否かを検索する。 Next, the marker data management unit 402 analyzes the marker data associated with the extracted moving image data and the marker data before and after the marker data (step S602). Specifically, the marker data management unit 402 searches whether the marker data includes match start marker data or match end marker data.
また、マーカデータ管理部402は、抽出先に既に格納されているマーカデータ(既存マーカデータ)を解析する。具体的には、マーカデータ管理部402は、抽出先の既存マーカデータが試合中か否かを判定する(ステップS603)。より詳細には、マーカデータ管理部402は、抽出先の既存マーカデータファイルに、試合開始マーカデータが含まれ、かつ、試合終了マーカデータが含まれないことを判定する。 In addition, the marker data management unit 402 analyzes marker data (existing marker data) already stored in the extraction destination. Specifically, the marker data management unit 402 determines whether or not the existing marker data of the extraction destination is in a game (step S603). More specifically, the marker data management unit 402 determines that the existing marker data file of the extraction destination includes game start marker data and does not include game end marker data.
抽出先の既存マーカデータファイルが試合中である場合(ステップS603:Yes)、マーカデータ管理部402は、既存マーカデータファイルの終端に試合終了マーカを入力する(ステップS604)。なお、抽出先の既存マーカデータファイルが試合中でない場合(ステップS603:No)、試合終了マーカの入力は行われず、次の処理に進む。 When the existing marker data file of the extraction destination is in a match (step S603: Yes), the marker data management unit 402 inputs a match end marker at the end of the existing marker data file (step S604). If the existing marker data file of the extraction destination is not in a game (step S603: No), the game end marker is not input and the process proceeds to the next process.
次に、マーカデータ管理部402は、抽出された部分のマーカデータをコピーする(ステップS605)。そして、マーカデータ管理部402は、コピーしたマーカデータのそれぞれの時刻情報を変更する(ステップS606)。より詳細には、マーカデータ管理部402は、動画先頭からの相対時間(メディア内時刻)を抽出開始時刻からの相対時間(抽出開始時刻を0としてカウントされた時間)に変更する処理を、それぞれのマーカデータに対して行う。 Next, the marker data management unit 402 copies the extracted part of the marker data (step S605). Then, the marker data management unit 402 changes each time information of the copied marker data (step S606). More specifically, the marker data management unit 402 changes the relative time from the beginning of the moving image (in-media time) to the relative time from the extraction start time (the time counted when the extraction start time is 0). For the marker data.
そして、マーカデータ管理部402は、抽出された部分のマーカデータに試合開始マーカデータが含まれるか否かを判定する(ステップS607)。抽出された部分のマーカデータに試合開始マーカデータが含まれる場合(ステップS607:Yes)、マーカデータ管理部402は、抽出された部分のマーカデータに試合終了マーカデータが含まれるか否かを判定する(ステップS608)。 Then, the marker data management unit 402 determines whether or not the game start marker data is included in the extracted part of the marker data (step S607). When the game start marker data is included in the extracted part of the marker data (step S607: Yes), the marker data management unit 402 determines whether or not the extracted part of the marker data includes the game end marker data. (Step S608).
抽出された部分のマーカデータに試合終了マーカデータが含まれない場合(ステップS608:No)、マーカデータ管理部402は、抽出された部分のマーカデータの終端に試合終了マーカを入力する(ステップS609)。なお、抽出された部分のマーカデータに試合終了マーカデータが含まれる場合(ステップS609:Yes)、試合終了マーカの入力処理は行われず、次の処理に進む。 When game marker data is not included in the extracted part marker data (step S608: No), the marker data management unit 402 inputs a game end marker at the end of the extracted part marker data (step S609). ). In addition, when game end marker data is contained in the extracted marker data (step S609: Yes), the game end marker input process is not performed, and the process proceeds to the next process.
最後に、試合データ管理部404は、抽出された部分のマーカデータに含まれる試合開始マーカデータに基づいて、試合データを生成し、試合データファイルに追加する(ステップS610)。つまり、トリミングされた試合の試合データが試合データファイルに追加される。 Finally, the game data management unit 404 generates game data based on the game start marker data included in the extracted part of the marker data, and adds it to the game data file (step S610). That is, the trimmed game data is added to the game data file.
一方、抽出された部分のマーカデータに試合開始マーカデータが含まれない場合(ステップS607:No)、マーカデータ管理部402は、抽出された部分のマーカデータに含まれる試合関連マーカデータ(試合終了マーカデータ、得点マーカデータ)を削除する(ステップS611)。 On the other hand, when game start marker data is not included in the extracted marker data (step S607: No), the marker data management unit 402 displays match-related marker data (match end) included in the extracted portion of marker data. Marker data and score marker data) are deleted (step S611).
以上のように、本実施の形態にかかる撮像装置1の構成によれば、カード型記録媒体302が、1つの試合(イベント)の撮像データを分割して複数の動画ファイルとして格納する。このため、1つの試合が複数の動画ファイルに亘って記録されている。また、マーカデータ管理部402は、入力された試合開始マーカ及び試合終了マーカを含むマーカデータを、複数の動画ファイルに対応付けて、複数のマーカデータファイルとしてカード型記録媒体302に記憶させる。そのため、複数の動画ファイルに亘って記録された試合の開始と終了を、試合開始マーカ及び試合終了マーカを参照して容易に検索することができ、動画ファイルを容易に管理することができる。 As described above, according to the configuration of the imaging apparatus 1 according to the present embodiment, the card-type recording medium 302 divides the imaging data of one game (event) and stores it as a plurality of moving image files. For this reason, one game is recorded over a plurality of moving image files. The marker data management unit 402 stores the input marker data including the game start marker and the game end marker in the card-type recording medium 302 as a plurality of marker data files in association with the plurality of moving image files. Therefore, the start and end of a game recorded over a plurality of moving image files can be easily searched with reference to the game start marker and the game end marker, and the moving image file can be easily managed.
<実施の形態2>
本発明にかかる実施の形態2について説明する。本実施の形態にかかる撮像装置2においては、当該撮像装置2に接続された携帯端末装置3を用いて、各種マーカの入力を行うことができる。なお、撮像装置2の構成については上述した撮像装置1と同様であるので、説明を適宜省略する。
<Embodiment 2>
A second embodiment according to the present invention will be described. In the imaging device 2 according to the present embodiment, various markers can be input using the mobile terminal device 3 connected to the imaging device 2. Note that the configuration of the imaging apparatus 2 is the same as that of the imaging apparatus 1 described above, and thus description thereof will be omitted as appropriate.
本実施の形態にかかる携帯端末装置3の構成について説明する。図19に携帯端末装置3のブロック図を示す。携帯端末装置3は、少なくとも表示部31と、入力部32と、制御部33と、通信部34と、メモリ35と、を備える。 The configuration of the mobile terminal device 3 according to the present embodiment will be described. FIG. 19 shows a block diagram of the mobile terminal device 3. The mobile terminal device 3 includes at least a display unit 31, an input unit 32, a control unit 33, a communication unit 34, and a memory 35.
なお、携帯端末装置3には、予めマーカ入力用のアプリケーションがダウンロードされているものとする。当該アプリケーションには、マーカ入力の際に用いられるUI(User Interface)画像等が含まれる。携帯端末装置3の表示部31に表示されるUI画像の一例を図20に示す。携帯端末装置3は、UI画像として、テレアイコン931、ワイドアイコン932、録画開始/録画停止アイコン933、試合開始マーカアイコン934、グッドマーカアイコン935、チェックマーカアイコン936、フリーマーカアイコン937、得点マーカアイコン938、及び選手交代マーカアイコン939を有する。 It is assumed that a marker input application has been downloaded to the mobile terminal device 3 in advance. The application includes a UI (User Interface) image and the like used for marker input. An example of a UI image displayed on the display unit 31 of the mobile terminal device 3 is shown in FIG. The mobile terminal device 3 includes a tele icon 931, a wide icon 932, a recording start / recording stop icon 933, a game start marker icon 934, a good marker icon 935, a check marker icon 936, a free marker icon 937, and a score marker icon as UI images. 938 and a player change marker icon 939.
続いて、携帯端末装置3を用いたマーカの入力処理について説明する。図21は、携帯端末装置3を用いたマーカの入力処理を示すフローチャートである。まず、携帯端末装置3は、通信部34を用いて、撮像装置2と接続する(ステップS701)。なお、撮像装置2と携帯端末装置3との接続は、例えば、Bluetooth(登録商標)やWi−Fiダイレクト等の無線通信を用いることができる。勿論、撮像装置2と携帯端末装置3との接続は、有線通信であってもよい。 Next, marker input processing using the mobile terminal device 3 will be described. FIG. 21 is a flowchart showing marker input processing using the mobile terminal device 3. First, the mobile terminal device 3 connects to the imaging device 2 using the communication unit 34 (step S701). The connection between the imaging device 2 and the mobile terminal device 3 can use, for example, wireless communication such as Bluetooth (registered trademark) or Wi-Fi Direct. Of course, the connection between the imaging device 2 and the mobile terminal device 3 may be wired communication.
次に、制御部33は、撮像装置2から仕様データを取得する(ステップS702)。そして、制御部33は、取得した仕様データをメモリ35に格納する。ここで、仕様データとは、例えば、デフォルトのマーカ種別テーブルのURI(Uniform Resource Identifier)、デフォルトのチームテーブルのURI、及びマーカ入力間隔等のマーカ入力アプリケーションの仕様に関する情報である。なお、マーカ入力間隔とは、あるマーカを入力してから次のマーカを入力できるまでにかかる最小の時間である。 Next, the control unit 33 acquires specification data from the imaging device 2 (step S702). Then, the control unit 33 stores the acquired specification data in the memory 35. Here, the specification data is information regarding the specifications of the marker input application such as the URI (Uniform Resource Identifier) of the default marker type table, the URI of the default team table, and the marker input interval, for example. Note that the marker input interval is the minimum time required from inputting a certain marker until the next marker can be input.
制御部33は、仕様データに含まれるURIを参照して、撮像装置2からマーカ種別テーブルやチームテーブルを取得する(ステップS703)。なお、マーカの種類が固定されている場合には、マーカ種別テーブルを携帯端末装置3がダウンロードするアプリケーション内に含めてもよい。 The control unit 33 refers to the URI included in the specification data, and acquires a marker type table and a team table from the imaging device 2 (step S703). If the marker type is fixed, the marker type table may be included in the application downloaded by the mobile terminal device 3.
次に、制御部33は、状態データを取得する(ステップS704)。ここで、状態データとは、撮像装置2におけるインターフェイス画像及びマーカに関する状態を示す情報である。状態データは、例えば、「試合中か否か」、「チーム名」、「チーム色」、「得点表示」、「マーカ入力ボタンの有効/無効」、「試合開始マーカ入力ボタンの有効/無効」、「試合終了マーカ入力ボタンの有効/無効」、「得点マーカ入力ボタンの有効/無効」、及び「UNDOボタンの有効/無効」等を含む。制御部33は、状態データを取得すると、メモリ35に格納する。 Next, the control unit 33 acquires state data (step S704). Here, the state data is information indicating a state related to the interface image and the marker in the imaging apparatus 2. The status data includes, for example, “whether or not the game is in progress”, “team name”, “team color”, “score display”, “validity / invalidity of marker input button”, “validity / invalidity of game start marker input button” , “Valid / invalid of game end marker input button”, “valid / invalid of score marker input button”, “valid / invalid of UNDO button”, and the like. When acquiring the state data, the control unit 33 stores the state data in the memory 35.
そして、制御部33は、取得した状態データに基づいて、表示部31及び入力部32を更新する(ステップS705)。例えば、表示画面中の得点を更新したり、入力部32の得点ボタンを有効から無効に変更したりする。つまり、携帯端末装置3のUI画像が更新される。 And the control part 33 updates the display part 31 and the input part 32 based on the acquired state data (step S705). For example, the score on the display screen is updated, or the score button of the input unit 32 is changed from valid to invalid. That is, the UI image of the mobile terminal device 3 is updated.
更新が完了すると、制御部33は、現在も撮像装置2と携帯端末装置3とが接続されているか否かを判定する(ステップS706)。既に撮像装置2と携帯端末装置3との接続が終了している場合(ステップS706:No)、携帯端末装置3は、マーカ入力動作を終了する。 When the update is completed, the control unit 33 determines whether or not the imaging device 2 and the mobile terminal device 3 are still connected (step S706). When the connection between the imaging device 2 and the mobile terminal device 3 has already been completed (step S706: No), the mobile terminal device 3 ends the marker input operation.
一方、撮像装置2と携帯端末装置3との接続が継続している場合(ステップS706:Yes)、制御部33は、ユーザが入力部32(図20に示すUI画像)を用いてマーカ入力を行ったか否かを判定する(ステップS707)。 On the other hand, when the connection between the imaging device 2 and the mobile terminal device 3 is continued (step S706: Yes), the control unit 33 allows the user to input a marker using the input unit 32 (UI image shown in FIG. 20). It is determined whether or not it has been performed (step S707).
マーカ入力操作が行われていない場合(ステップS707:No)、制御部33は、再度撮像装置2から状態データを取得する(ステップS704)。つまり、制御部33は、状態データの更新を行う。状態データに何らかの変更があった場合には、UI画像の更新(ステップS705)において、状態データの変更が携帯端末装置3に反映される。なお、制御部33は、ステップS704の状態データの取得(更新)を、例えば、5秒に1回程度の頻度で行う。 When the marker input operation is not performed (step S707: No), the control unit 33 acquires state data from the imaging device 2 again (step S704). That is, the control unit 33 updates the state data. If there is any change in the state data, the change of the state data is reflected on the mobile terminal device 3 in the UI image update (step S705). Note that the control unit 33 acquires (updates) the state data in step S704 at a frequency of about once every 5 seconds, for example.
一方、マーカ入力操作が行われた場合(ステップS707:Yes)、制御部33は、入力されたマーカについて、マーカが入力された旨を示すマーカ入力情報を撮像装置2に送信する(ステップS708)。 On the other hand, when a marker input operation is performed (step S707: Yes), the control unit 33 transmits marker input information indicating that a marker has been input to the imaging device 2 for the input marker (step S708). .
撮像装置2は、マーカ入力情報を受信すると、当該マーカ入力情報に対応するマーカの入力を行う。そして、撮像装置2は、状態データを更新する。 When receiving the marker input information, the imaging device 2 inputs a marker corresponding to the marker input information. Then, the imaging device 2 updates the state data.
制御部33は、マーカ入力情報の送信に応じて変更された状態データを取得する(ステップS704)。そして、制御部33は、UIの更新(ステップS705)を行い、状態データの変更を携帯端末装置3に反映する。携帯端末装置3は、撮像装置2との接続が終了するまで上記の動作を繰り返す。 The control unit 33 acquires the state data changed according to the transmission of the marker input information (step S704). And the control part 33 updates UI (step S705), and reflects the change of state data in the portable terminal device 3. FIG. The mobile terminal device 3 repeats the above operation until the connection with the imaging device 2 is completed.
以上のように、本実施の形態にかかる撮像装置2の構成によれば、携帯端末装置3を用いてマーカを入力することができる。そのため、ユーザは撮像装置2から離れた場所においても、マーカを入力することができる。その結果、ユーザの位置が拘束されず、利便性が向上する。 As described above, according to the configuration of the imaging device 2 according to the present embodiment, a marker can be input using the mobile terminal device 3. Therefore, the user can input a marker even at a location away from the imaging device 2. As a result, the position of the user is not constrained and convenience is improved.
<実施の形態3>
本発明にかかる実施の形態3について説明する。本実施の形態においては、上記の実施の形態2と同様に、ユーザは、携帯端末装置を操作して、撮像装置の操作及びマーカの入力を行う。なお、撮像装置の構成については上述した実施の形態2と同様であるので、説明を適宜省略する。
<Embodiment 3>
A third embodiment according to the present invention will be described. In the present embodiment, as in the second embodiment, the user operates the portable terminal device to operate the imaging device and input a marker. Note that the configuration of the imaging apparatus is the same as that of the above-described second embodiment, and thus description thereof will be omitted as appropriate.
また、本実施の形態にかかる携帯端末装置4の構成は、図19に示した携帯端末装置3のブロック図と同様である。ただし、本実施の形態にかかる携帯端末装置4においては、UI画像が携帯端末装置3とは異なる。また、携帯端末装置4は、時間を計測するための計測部(例えば、ストップウォッチ機能部)を有する。携帯端末装置4は、無線通信回線または有線通信回線を介して、撮像装置と接続される。 The configuration of the mobile terminal device 4 according to the present embodiment is the same as the block diagram of the mobile terminal device 3 shown in FIG. However, in the mobile terminal device 4 according to the present embodiment, the UI image is different from the mobile terminal device 3. Moreover, the portable terminal device 4 has a measuring unit (for example, a stopwatch function unit) for measuring time. The portable terminal device 4 is connected to the imaging device via a wireless communication line or a wired communication line.
携帯端末装置4の表示部31に表示されるUI画像の一例を図22に示す。携帯端末装置4は、UI画像として、テレアイコン931、ワイドアイコン932、及び、録画開始/録画停止アイコン933に加えて、計測開始マーカアイコン951、計測終了マーカアイコン952、ラップマーカアイコン953、及び、リセットアイコン954を有する。また、表示部31には、録画時間940、スプリットタイム941、及びラップタイム942が表示されている。 An example of a UI image displayed on the display unit 31 of the mobile terminal device 4 is shown in FIG. In addition to the tele icon 931, the wide icon 932, and the recording start / stop recording icon 933, the mobile terminal device 4 includes a measurement start marker icon 951, a measurement end marker icon 952, a lap marker icon 953, and a UI image. It has a reset icon 954. The display unit 31 displays a recording time 940, a split time 941, and a lap time 942.
本実施の形態にかかる携帯端末装置4のUIは、コースを周回するレーススポーツ(長距離走やモータスポーツ等)に特化している。具体的には、携帯端末装置4のUIは、ストップウォッチ機能を有しており、スタートからの時間を示すスプリットタイムと、コース1周の時間を示すラップタイムと、を計測することができる。 The UI of the mobile terminal device 4 according to the present embodiment is specialized in race sports (long-distance running, motor sports, etc.) that go around the course. Specifically, the UI of the mobile terminal device 4 has a stopwatch function, and can measure a split time indicating the time from the start and a lap time indicating the time of one round of the course.
録画時間940は、録画開始から経過した時間を示す。つまり、録画時間940は、録画開始/録画停止アイコン933がタッチされてから経過した時間である。図22に示す例においては、録画時間940は、録画開始から2時間29分1秒経過していることを示している。 The recording time 940 indicates the time that has elapsed since the start of recording. That is, the recording time 940 is the time that has elapsed since the recording start / recording stop icon 933 was touched. In the example shown in FIG. 22, the recording time 940 indicates that 2 hours, 29 minutes, and 1 second have elapsed since the start of recording.
スプリットタイム941は、計測開始マーカアイコン951がタッチされたときから(レースが開始してから)経過した時間を示している。図22に示す例においては、スプリットタイム941は、レース開始から1時間2分55秒91経過していることを示している。 The split time 941 indicates the time that has elapsed since the measurement start marker icon 951 was touched (after the race started). In the example shown in FIG. 22, the split time 941 indicates that one hour, two minutes, and 55 seconds 91 have elapsed since the start of the race.
ラップタイム942は、ラップマーカアイコン953が直前にタッチされたときから経過した時間を示している。つまり、ラップタイム942は、周回が始まってから経過した時間であり、コース1周のタイムを意味する。図22に示す例においては、ラップタイム942は、10分0秒43経過していることを示している。なお、1周目の場合は、計測開始マーカアイコン951がタッチされたときから経過した時間がラップタイム942となる。つまり、1周目の場合は、スプリットタイム941とラップタイム942とは同じ時間になる。 A lap time 942 indicates the time that has elapsed since the lap marker icon 953 was touched immediately before. That is, the lap time 942 is the time that has elapsed since the lap started, and means the time of one lap of the course. In the example shown in FIG. 22, the lap time 942 indicates that 10 minutes 0 seconds 43 have elapsed. In the case of the first round, the elapsed time from when the measurement start marker icon 951 is touched is the lap time 942. That is, in the first round, the split time 941 and the lap time 942 are the same time.
計測開始マーカアイコン951は、レースの計測を開始するためのアイコンである。計測開始マーカアイコン951がタッチされると、スプリットタイム941及びラップタイム942の計測が開始される。また、計測開始マーカアイコン951は、上述
の実施の形態1、2における試合開始マーカアイコンに対応している。計測開始マーカアイコン951がタッチされると、携帯端末装置4の通信部34(送信部)は、マーカが入力された旨を示すマーカの入力指示を撮像装置に送信する。撮像装置の無線モジュール309(受信部)は、マーカ入力指示を受信すると、当該マーカ入力指示に対応するマーカの入力を行う。つまり、撮像装置は、計測開始マーカ(スタートマーカ)が入力されたメディア内時刻(動画記録開始時からの時刻)と計測開始マーカのマーカIDとを関連付けて、マーカデータを作成する。
The measurement start marker icon 951 is an icon for starting the measurement of the race. When measurement start marker icon 951 is touched, measurement of split time 941 and lap time 942 is started. The measurement start marker icon 951 corresponds to the game start marker icon in the first and second embodiments described above. When the measurement start marker icon 951 is touched, the communication unit 34 (transmission unit) of the mobile terminal device 4 transmits a marker input instruction indicating that the marker is input to the imaging device. When receiving the marker input instruction, the wireless module 309 (reception unit) of the imaging apparatus inputs a marker corresponding to the marker input instruction. That is, the imaging apparatus creates marker data by associating the time in the medium (time from the start of moving image recording) to which the measurement start marker (start marker) is input with the marker ID of the measurement start marker.
計測終了マーカアイコン952は、レースの計測を終了するためのアイコンである。計測終了マーカアイコン952がタッチされると、スプリットタイム941及びラップタイム942の計測が終了する。 The measurement end marker icon 952 is an icon for ending the race measurement. When measurement end marker icon 952 is touched, measurement of split time 941 and lap time 942 ends.
ラップマーカアイコン953は、ラップタイムを計測するためのアイコンである。ラップマーカアイコン953がタッチされると、計測中のラップタイム942が停止し、選手等が1周にかかった時間がラップタイム942に表示される。ラップマーカアイコン953がタッチされたとき、計測中のラップタイム942が停止すると共に、次の周回のラップタイムの計測が開始される。また、ラップタイムアイコン953がタッチされると、計測中のスプリットタイム941が表示される。つまり、ラップマーカアイコン953がタッチされると、その時点のスプリットタイム(各周回時のスタートからの時間)とラップタイム(各周回時の前周回時からの時間)とが表示される。このとき、スプリットタイム941及びラップタイム942は、計測された時間を表示してから一定時間後に現在の周回の計測中のタイムを表示するようにしてもよい。または、携帯端末装置4は、計測している時間の表示は停止せず、表示部31の任意の領域に過去のスプリットタイム941及びラップタイム942の履歴をリストとして表示してもよい。 A lap marker icon 953 is an icon for measuring a lap time. When the lap marker icon 953 is touched, the lap time 942 being measured is stopped, and the time taken by the player or the like for one lap is displayed in the lap time 942. When the lap marker icon 953 is touched, the lap time 942 being measured is stopped and the measurement of the next lap time is started. When the lap time icon 953 is touched, the split time 941 being measured is displayed. That is, when the lap marker icon 953 is touched, the split time (time from the start at each lap) and the lap time (time from the previous lap at each lap) are displayed. At this time, the split time 941 and the lap time 942 may display the time during the measurement of the current lap after a certain time after displaying the measured time. Alternatively, the mobile terminal device 4 may display the history of past split times 941 and lap times 942 as a list in an arbitrary area of the display unit 31 without stopping the display of the measured time.
計測終了マーカアイコン952またはラップマーカアイコン953がタッチされた場合、上記の計測開始マーカアイコン951と同様にマーカが入力される。具体的には、携帯端末装置4は、計測終了マーカまたはラップマーカの入力指示と共に、そのときのスプリットタイム及びラップタイムも撮像装置に送信する。そして、撮像装置は、計測終了マーカまたはラップマーカ(マーカID)と、スプリットタイムと、ラップタイムと、マーカが入力されたメディア内時刻(動画記録開始時からの時刻)と、を対応付けて、マーカデータを作成する。なお、計測終了マーカは、競技者がゴール地点を通過したことを示すマーカである。また、ラップマーカは、競技者が予め決められた地点(周回レースの場合には、ゴール(スタート)位置)を通過したこと示すマーカである。 When the measurement end marker icon 952 or the lap marker icon 953 is touched, a marker is input in the same manner as the measurement start marker icon 951 described above. Specifically, the mobile terminal device 4 transmits the measurement end marker or the lap marker input instruction and the split time and lap time at that time to the imaging device. Then, the imaging device associates the measurement end marker or lap marker (marker ID), the split time, the lap time, and the time in the medium where the marker is input (the time from the start of moving image recording). Create data. The measurement end marker is a marker indicating that the player has passed the goal point. The lap marker is a marker indicating that the athlete has passed a predetermined point (goal (start) position in the case of a round race).
リセットアイコン954は、スプリットタイム941及びラップタイム942の表示をリセットするためのアイコンである。 The reset icon 954 is an icon for resetting the display of the split time 941 and the lap time 942.
続いて、本実施の形態にかかる撮像装置及び携帯端末装置4の動作について説明する。まず、マーカの入力動作について説明する。図23は、マーカの入力タイミングを時系列で示した図である。また、図24は、図23に示したタイミングで入力されたマーカのマーカデータファイルを示す図である。なお、マーカデータファイルは、上述の実施の形態と同様に、例えばカード型記録媒体302(記憶部)に格納される。 Next, operations of the imaging device and the mobile terminal device 4 according to the present embodiment will be described. First, the marker input operation will be described. FIG. 23 is a diagram showing the input timing of the markers in time series. FIG. 24 is a diagram showing a marker data file of markers input at the timing shown in FIG. The marker data file is stored in, for example, the card-type recording medium 302 (storage unit) as in the above-described embodiment.
図23に示すように、はじめに、ユーザは、携帯端末装置4の録画開始/録画停止アイコン933にタッチして、撮像装置に録画開始を指示する。これにより、撮像装置は録画を開始する(時刻t0)。 As shown in FIG. 23, first, the user touches the recording start / recording stop icon 933 of the mobile terminal device 4 to instruct the imaging device to start recording. Thereby, the imaging apparatus starts recording (time t0).
次に、レースの準備が整ったら、ユーザは、レースの開始に合わせて、携帯端末装置4の計測開始マーカアイコン951をタッチする(時刻t1)。これにより、スプリットタイム941及びラップタイム942の計測が開始される。また、計測開始マーカアイコン
951がタッチされたことにより、携帯端末装置4は、撮像装置に計測開始マーカの入力指示を送信する。そして、撮像装置は、計測開始マーカと入力時刻t1とを関連付けて、マーカデータを作成し、マーカデータファイルに格納する。図24において、計測開始マーカはマーカID10に対応する。なお、マーカの入力時刻は、マーカアイコンがタッチされたときの携帯端末装置4の内部の時刻でもよいし、撮像装置がマーカ入力指示を受信したときの撮像装置の内部の時刻でもよい。
Next, when preparation for the race is completed, the user touches the measurement start marker icon 951 of the mobile terminal device 4 at the start of the race (time t1). Thereby, measurement of the split time 941 and the lap time 942 is started. Further, when the measurement start marker icon 951 is touched, the mobile terminal device 4 transmits an input instruction for the measurement start marker to the imaging device. Then, the imaging device associates the measurement start marker with the input time t1, creates marker data, and stores it in the marker data file. In FIG. 24, the measurement start marker corresponds to marker ID10. The marker input time may be the time inside the portable terminal device 4 when the marker icon is touched, or the time inside the imaging device when the imaging device receives a marker input instruction.
次に、選手がコースを1周回った時点で、ユーザは、ラップマーカアイコン953にタッチする(時刻t2)。これにより、最初の1周目のタイムが、スプリットタイム941及びラップタイム942として携帯端末装置4に表示される。また、ラップマーカアイコン953がタッチされたことにより、携帯端末装置4は、撮像装置にラップマーカの入力指示を送信する。さらに、携帯端末装置4は、ラップマーカの入力指示と共に、計測したスプリットタイム及びラップタイムを撮像装置に送信する。 Next, when the player goes around the course once, the user touches the lap marker icon 953 (time t2). Thereby, the first round time is displayed on the portable terminal device 4 as the split time 941 and the lap time 942. In addition, when the lap marker icon 953 is touched, the mobile terminal device 4 transmits a lap marker input instruction to the imaging device. Furthermore, the portable terminal device 4 transmits the measured split time and lap time to the imaging device together with an input instruction for the lap marker.
撮像装置は、ラップマーカと時刻t2とスプリットタイムとラップタイムとを関連付けて、マーカデータを作成し、マーカデータファイルに格納する。図24において、ラップマーカはマーカID11に対応する。 The imaging device associates the lap marker, time t2, the split time, and the lap time, creates marker data, and stores it in the marker data file. In FIG. 24, the lap marker corresponds to the marker ID11.
その後、時刻t3、t4においても、時刻t2と同様に、撮像装置は、マーカの入力時刻とスプリットタイムとラップタイムとラップマーカとを関連付けて、マーカデータを作成し、マーカデータファイルに格納する。 Thereafter, at times t3 and t4, similarly to time t2, the imaging apparatus creates marker data by associating the marker input time, the split time, the lap time, and the lap marker, and stores the marker data in the marker data file.
そして、選手がレースの最終周を回り終えた時点(ゴールしたとき)で、ユーザは、計測終了マーカアイコン952をタッチする(時刻t5)。これにより、スタートからゴールまでのタイムが、スプリットタイム941として携帯端末装置4に表示される。最終周のタイムが、ラップタイム942として携帯端末装置4に表示される。また、計測終了マーカアイコン952がタッチされたことにより、撮像装置に計測終了マーカの入力が指示される。さらに、携帯端末装置4は、計測終了マーカの入力指示と共に、計測したスプリットタイム及びラップタイムを撮像装置に送信する。 Then, when the player finishes going around the final lap of the race (when the goal is reached), the user touches the measurement end marker icon 952 (time t5). Thereby, the time from the start to the goal is displayed on the portable terminal device 4 as the split time 941. The time of the last lap is displayed on the mobile terminal device 4 as a lap time 942. Further, when the measurement end marker icon 952 is touched, the imaging apparatus is instructed to input the measurement end marker. Furthermore, the portable terminal device 4 transmits the measured split time and lap time to the imaging device together with an instruction to input the measurement end marker.
撮像装置は、計測終了マーカと時刻t5とスプリットタイムとラップタイムとを関連付けて、マーカデータを作成し、マーカデータファイルに格納する。図24において、計測終了マーカはマーカID20に対応する。 The imaging apparatus associates the measurement end marker, time t5, split time, and lap time, creates marker data, and stores it in the marker data file. In FIG. 24, the measurement end marker corresponds to the marker ID 20.
その後、時刻t6まで休憩が入り、時刻t6において、ユーザは、2回目のレースの開始に合わせて、携帯端末装置4の計測開始マーカアイコン951をタッチする(時刻t6)。これにより、スプリットタイム941及びラップタイム942の計測が開始する。以降、ユーザは、上述した時刻t2〜t5と同様に、携帯端末装置4を操作し、当該操作に応じて、撮像装置がマーカデータファイルを作成する。このような処理によって、図24のマーカデータファイルが作成される。 Thereafter, there is a break until time t6, and at time t6, the user touches the measurement start marker icon 951 of the mobile terminal device 4 at the start of the second race (time t6). Thereby, measurement of the split time 941 and the lap time 942 is started. Thereafter, the user operates the mobile terminal device 4 similarly to the above-described times t2 to t5, and the imaging device creates a marker data file in accordance with the operation. Through such processing, the marker data file of FIG. 24 is created.
次に、図25及び図26を参照して、撮像装置の再生動作について説明する。撮像装置は、図24に示したマーカデータファイルの「LAP TIME」の欄を液晶モニタ304にリスト表示する。そして、ユーザは、操作部306を用いて再生したいラップタイムを選択する。 Next, with reference to FIGS. 25 and 26, the reproduction operation of the imaging apparatus will be described. The imaging apparatus displays a list of the “LAP TIME” field in the marker data file shown in FIG. Then, the user uses the operation unit 306 to select a lap time to be reproduced.
撮像装置は、選択されたラップタイムに関連付けられたラップマーカまたは計測終了マーカが入力された時刻に基づいて、動画を再生する。例えば、図25に示すように、「LAP TIME」のラップタイム「0:10'07"42」が選択された場合、動画ファイル管理部401(再生部)は、当該ラップタイムに関連付けられたラップマーカが入力された時刻t4ではなく、時刻t4から当該ラップタイム(Lt)だけ遡った時点から動画を再生する。つまり、t4(1908675ms)からラップタイム(607420ms)を減じた時刻から動画を再生する。これにより、選択されたラップタイムを出した周回の始めから動画が再生される。 The imaging device reproduces the moving image based on the time when the lap marker or the measurement end marker associated with the selected lap time is input. For example, as shown in FIG. 25, when the lap time “0: 10'07” 42 ”of“ LAP TIME ”is selected, the moving image file management unit 401 (playback unit) displays the lap marker associated with the lap time. The moving image is played back not from the input time t4 but from the time point that is earlier than the lap time (Lt) from the time t4. That is, the moving image is reproduced from the time obtained by subtracting the lap time (607420 ms) from t4 (1908675 ms). Thereby, the moving image is reproduced from the beginning of the lap when the selected lap time is given.
同様に、撮像装置は、「LAP TIME」の欄と同じ画面、または、異なる画面において、「SPLIT TIME」の欄を液晶モニタ304にリスト表示する。そして、ユーザは、再生したいスプリットタイムを選択する。 Similarly, the imaging apparatus displays a list of the “SPLIT TIME” field on the liquid crystal monitor 304 in the same screen as the “LAP TIME” field or a different screen. Then, the user selects a split time to be reproduced.
撮像装置は、選択されたスプリットタイムに関連付けられたラップマーカまたは計測終了マーカが入力された時刻に基づいて、動画を再生する。例えば、図26に示すように、動画ファイル管理部401は、選択されたスプリットタイムに関連付けられた計測終了マーカが入力された時刻t5ではなく、時刻t5から当該スプリットタイム(St)だけ遡った時点から動画を再生する。つまり、t5(2513147ms)からスプリットタイム(2410950ms)を減じた時刻から動画を再生する。これにより、選択されたスプリットタイムを出したレースの始めから動画が再生される。 The imaging device reproduces the moving image based on the time when the lap marker or the measurement end marker associated with the selected split time is input. For example, as shown in FIG. 26, the moving image file management unit 401 does not go back to time t5 when the measurement end marker associated with the selected split time is input, but points back from the time t5 by the split time (St). Play a video from That is, the moving image is reproduced from the time obtained by subtracting the split time (2410950 ms) from t5 (2513147 ms). Thereby, the moving image is reproduced from the beginning of the race where the selected split time is given.
なお、レース開始時点からタイム計測は行っていたが、録画はレースの途中から始めた場合、スプリットタイムだけ遡った位置に動画が存在しないケースが考えられる。このような場合、動画ファイル管理部401は、録画開始の位置(動画の最初)から動画を再生する。 Although the time measurement has been performed from the start of the race, there may be a case in which there is no moving image at a position that is traced back by the split time when recording is started from the middle of the race. In such a case, the moving image file management unit 401 reproduces the moving image from the recording start position (the beginning of the moving image).
以上のように、本実施の形態にかかる撮像装置の構成によれば、動画ファイル管理部401は、マーカの再生指示を受けた場合、マーカの入力時刻から、当該マーカに関連付けられた時間情報(ラップタイムまたはスプリットタイム)だけ遡った位置から動画を再生する。このため、タイムを選択すれば、そのタイムを出したレースのスタート位置や、周回の開始位置から動画を再生することができる。また、レーススタート時や周回開始時にマーカが入力されていないような場合であっても、スプリットタイムまたはラップタイムだけ遡った適切な位置から再生することができる。 As described above, according to the configuration of the imaging device according to the present embodiment, when the moving image file management unit 401 receives an instruction to reproduce a marker, the moving image file management unit 401 starts with the time information ( Play the movie from a position that is back by (lap time or split time). For this reason, if the time is selected, the moving image can be reproduced from the start position of the race where the time is given or the start position of the lap. Further, even when the marker is not input at the start of the race or at the start of the lap, the reproduction can be performed from an appropriate position that is traced back by the split time or the lap time.
<実施の形態4>
本発明にかかる実施の形態4について説明する。本実施の形態に撮像装置5のブロック図を図27に示す。図27に示す撮像装置5は、圧縮・伸張処理部201が、第1コーデック2011と、第2コーデック2012と、を有する。つまり、本実施の形態にかかる圧縮・伸張処理部201は、デュアルコーデックを有する。なお、その他の構成については図2に示した撮像装置1と同様であるので、説明を適宜省略する。
<Embodiment 4>
A fourth embodiment according to the present invention will be described. FIG. 27 shows a block diagram of the imaging device 5 in this embodiment. In the imaging device 5 illustrated in FIG. 27, the compression / decompression processing unit 201 includes a first codec 2011 and a second codec 2012. That is, the compression / decompression processing unit 201 according to the present embodiment has a dual codec. The other configuration is the same as that of the imaging apparatus 1 shown in FIG.
また、本実施の形態にかかる撮像装置5は、撮像した映像をライブ配信システムに送信する。具体的には、撮像装置5は、第1コーデック2011を用いてライブ配信用の映像をエンコードし、第2コーデックを用いて記録用の映像をエンコードする。つまり、撮像装置5は、録画しながら映像配信を行う。 In addition, the imaging device 5 according to the present embodiment transmits the captured video to the live distribution system. Specifically, the imaging device 5 encodes a video for live distribution using the first codec 2011 and encodes a video for recording using the second codec. That is, the imaging device 5 performs video distribution while recording.
第1コーデック2011は、MPEG2規格やAVC/H.264規格に準拠した圧縮方式に基づいて、メインメモリ205に格納された撮像データ及びデジタル音声データを圧縮し、圧縮データを生成する。このとき、第1コーデック2011は、撮像装置5または携帯端末装置を用いて入力されたマーカの画像データを、撮像データに重畳してエンコードすることにより送信用の映像(第1の動画ファイル)を生成する。そして、第1コーデック2011は、生成した送信用の映像を、無線モジュール309を介して、図示しない外部のライブ配信システム(外部サーバ)に映像を送信する。なお、本実施の形態にかかるマーカの種類は特に限定されるものではなく、撮像対象となるイベントの特定の状態を示すマーカである。例えば、上述した実施の形態におけるマーカ(試合開始マーカ、試合終了マーカ、計測開始マーカ、計測終了マーカ、グッドマーカ、チェックマーカ、得点マーカ等)をマーカとして用いることができる。 The first codec 2011 is based on the MPEG2 standard, AVC / H. Based on a compression method compliant with the H.264 standard, the imaging data and digital audio data stored in the main memory 205 are compressed to generate compressed data. At this time, the first codec 2011 superimposes and encodes the image data of the marker input using the imaging device 5 or the mobile terminal device on the imaging data, thereby transmitting a transmission video (first moving image file). Generate. The first codec 2011 transmits the generated transmission video to the external live distribution system (external server) (not shown) via the wireless module 309. In addition, the kind of marker concerning this Embodiment is not specifically limited, It is a marker which shows the specific state of the event used as imaging object. For example, the markers (game start marker, game end marker, measurement start marker, measurement end marker, good marker, check marker, score marker, etc.) in the above-described embodiment can be used as markers.
第2コーデック2012は、第1コーデック2011と同様に、MPEG2規格やAVC/H.264規格に準拠した圧縮方式に基づいて、メインメモリ205に格納された撮像データ及びデジタル音声データを圧縮し、圧縮データを生成する。ただし、第2コーデック2012は、撮像装置5または携帯端末装置を用いて入力されたマーカの画像データを、撮像データに重畳しない。つまり、第2コーデック2012は、撮像データ及びデジタル音声データのみをエンコードすることにより、動画ファイル(第2の動画ファイル)を生成する。マーカデータ管理部402(制御部)は、マーカ入力時のメディア内時刻と入力されたマーカのマーカIDとを対応付けて、マーカデータを作成する。そして、マーカデータ管理部402は、作成したマーカデータを動画ファイル(第2の動画ファイル)に対応付けてマーカデータファイルとしてカード型記録媒体302に格納する。 The second codec 2012 is similar to the first codec 2011 in that the MPEG2 standard, AVC / H. Based on a compression method compliant with the H.264 standard, the imaging data and digital audio data stored in the main memory 205 are compressed to generate compressed data. However, the second codec 2012 does not superimpose the marker image data input using the imaging device 5 or the mobile terminal device on the imaging data. That is, the second codec 2012 generates a moving image file (second moving image file) by encoding only the imaging data and the digital audio data. The marker data management unit 402 (control unit) creates marker data by associating the media time at the time of marker input with the marker ID of the input marker. Then, the marker data management unit 402 stores the created marker data in the card type recording medium 302 as a marker data file in association with the moving image file (second moving image file).
なお、本実施の形態にかかるマーカの種類は特に限定されるものではなく、撮像対象となるイベントの特定の状況(試合開始、試合終了、計測開始、計測終了、良いプレー時、要確認時、得点時等)を示すマーカである。例えば、上述した実施の形態におけるマーカ(試合開始マーカ、試合終了マーカ、計測開始マーカ、計測終了マーカ、グッドマーカ、チェックマーカ、得点マーカ等)をマーカとして用いることができる。 In addition, the kind of marker concerning this Embodiment is not specifically limited, The specific condition of the event used as an imaging target (game start, game end, measurement start, measurement end, good play, confirmation required, This is a marker indicating the score). For example, the markers (game start marker, game end marker, measurement start marker, measurement end marker, good marker, check marker, score marker, etc.) in the above-described embodiment can be used as markers.
続いて、本実施の形態にかかる撮像装置5の動作について、図28及び図29に示すフローチャートを参照して説明する。図28に示すフローチャートは、第1コーデック2011の動作を示す。図29に示すフローチャートは、第2コーデック2012の動作を示す。 Next, the operation of the imaging device 5 according to the present embodiment will be described with reference to the flowcharts shown in FIGS. The flowchart shown in FIG. 28 shows the operation of the first codec 2011. The flowchart shown in FIG. 29 shows the operation of the second codec 2012.
はじめに、第1コーデック2011の動作について説明する。まず、撮像部100が撮像処理を行う(ステップS801)。これにより、撮像データが生成される。 First, the operation of the first codec 2011 will be described. First, the imaging unit 100 performs an imaging process (step S801). Thereby, imaging data is generated.
次に、マーカデータ管理部402は、撮像装置5の操作部306または携帯端末装置を用いてマーカが入力されたか否かを判定する(ステップS802)。マーカが入力された場合(ステップS802:Yes)、マーカデータ管理部402は、入力されたマーカに対応するマーカの画像データを第1コーデック2011に送信する。なお、マーカの画像データは、例えばフラッシュROM204内に予め格納されている。 Next, the marker data management unit 402 determines whether or not a marker is input using the operation unit 306 or the mobile terminal device of the imaging device 5 (step S802). When the marker is input (step S802: Yes), the marker data management unit 402 transmits image data of the marker corresponding to the input marker to the first codec 2011. The marker image data is stored in advance in the flash ROM 204, for example.
そして、第1コーデック2011は、撮像データにマーカの画像データを重畳して、圧縮データを生成する(ステップS803)。一方、マーカが入力されていない場合(ステップS804)、第1コーデック2011は、撮像データ及びデジタル音声データのみを用いて圧縮データを生成する(ステップS805)。つまり、第1コーデック2011は、通常のエンコード処理を行う。 Then, the first codec 2011 generates compressed data by superimposing the marker image data on the imaging data (step S803). On the other hand, when no marker is input (step S804), the first codec 2011 generates compressed data using only the imaging data and the digital audio data (step S805). That is, the first codec 2011 performs a normal encoding process.
次に、第1コーデック2011は、圧縮データ(第1の動画ファイル)をライブ配信システムに送信する。これにより、撮像装置5が撮像した映像が配信される(ステップS805)。このとき、マーカが入力されている場合、マーカの画像データが重畳された映像が配信される。 Next, the first codec 2011 transmits the compressed data (first moving image file) to the live distribution system. Thereby, the video imaged by the imaging device 5 is distributed (step S805). At this time, when a marker is input, a video on which the marker image data is superimposed is distributed.
そして、中央制御部400は、ユーザにより撮影停止操作が行われたか否かを判定する(ステップS806)。撮影停止操作があった場合(ステップS806:Yes)、撮像装置5は撮影を終了する。一方、撮影停止操作がない場合(ステップS806:No)、ステップS801に戻り、上記の動作を繰り返す。 Then, the central control unit 400 determines whether or not a shooting stop operation has been performed by the user (step S806). If there is a shooting stop operation (step S806: Yes), the imaging device 5 ends the shooting. On the other hand, when there is no photographing stop operation (step S806: No), the process returns to step S801 and the above operation is repeated.
続いて、第2コーデック2012の動作について説明する。まず、撮像部100が撮像処理を行う(ステップS901)。これにより、撮像データが生成される。 Next, the operation of the second codec 2012 will be described. First, the imaging unit 100 performs an imaging process (step S901). Thereby, imaging data is generated.
次に、第2コーデック2012は、撮像データ及びデジタル音声データのみを圧縮し、圧縮データ(第2の動画ファイル)を生成する(ステップS902)。つまり、第2コーデック2012は、マーカの入力の有無に拘わらず、通常のエンコード処理を行う。そして、第2コーデック2012は、生成した圧縮データを動画ファイルとしてカード型記録媒体302に格納する(ステップS903)。 Next, the second codec 2012 compresses only the imaging data and the digital audio data, and generates compressed data (second moving image file) (step S902). That is, the second codec 2012 performs a normal encoding process regardless of whether or not a marker is input. Then, the second codec 2012 stores the generated compressed data as a moving image file in the card type recording medium 302 (step S903).
また、マーカデータ管理部402は、撮像装置5の操作部306または携帯端末装置を用いてマーカが入力されたか否かを判定する(ステップS904)。マーカが入力された場合(ステップS904:Yes)、マーカデータ管理部402は、マーカの入力時刻とマーカIDとを関連付けてマーカデータを作成し、作成したマーカデータを第2コーデック2012により圧縮された動画ファイルに対応付けて、マーカデータファイルとしてカード型記録媒体302に格納する(ステップS905)。一方、マーカが入力されていない場合(ステップS904:No)、マーカデータは作成されず、ステップS906に進む。 In addition, the marker data management unit 402 determines whether or not a marker is input using the operation unit 306 or the mobile terminal device of the imaging device 5 (step S904). When the marker is input (step S904: Yes), the marker data management unit 402 creates marker data by associating the marker input time with the marker ID, and the created marker data is compressed by the second codec 2012. In association with the moving image file, it is stored in the card-type recording medium 302 as a marker data file (step S905). On the other hand, if no marker is input (step S904: No), marker data is not created, and the process proceeds to step S906.
そして、中央制御部400は、ユーザにより撮影停止操作が行われたか否かを判定する(ステップS906)。撮影停止操作があった場合(ステップS906:Yes)、撮像装置5は撮影を終了する。一方、撮影停止操作がない場合(ステップS906:No)、ステップS901に戻り、上記の動作を繰り返す。 Then, the central control unit 400 determines whether or not a shooting stop operation has been performed by the user (step S906). If there is a shooting stop operation (step S906: Yes), the imaging device 5 ends the shooting. On the other hand, when there is no photographing stop operation (step S906: No), the process returns to step S901 and the above operation is repeated.
なお、説明の便宜のため、第1コーデック2011の動作と第2コーデック2012の動作とを別のフローチャート(図28、図29)を用いて説明したが、図28及び図29に示すフローは並行して行われている。つまり、圧縮・伸張処理部201は、第1コーデック2011における圧縮と第2コーデック2012における圧縮とを並列処理している。 For convenience of explanation, the operation of the first codec 2011 and the operation of the second codec 2012 have been described using different flowcharts (FIGS. 28 and 29), but the flows shown in FIGS. 28 and 29 are parallel. Has been done. That is, the compression / decompression processing unit 201 performs parallel processing on the compression in the first codec 2011 and the compression in the second codec 2012.
以上のように、本実施の形態にかかる撮像装置5の構成によれば、第1コーデック2011は、入力されたマーカの画像データを撮像データに重畳させて圧縮データを生成する。そして、第1コーデック2011は、マーカの画像データを重畳した映像を配信システムに送信する。一方、第2コーデック2012は、マーカの画像データを重畳させず、撮像データを用いて圧縮データを生成し、カード型記録媒体302に格納する。このため、配信システム側にマーカの画像データを重畳させる機能が無い場合であっても、マーカの画像データを重畳させた映像を配信することができる。さらに、カード型記録媒体302には、マーカの画像データが重畳されていない通常の映像が格納されているため、マーカの画像データが表示されない映像を見たり、映像の編集をしたりすることができる。 As described above, according to the configuration of the imaging device 5 according to the present embodiment, the first codec 2011 generates compressed data by superimposing the input marker image data on the imaging data. Then, the first codec 2011 transmits the video on which the marker image data is superimposed to the distribution system. On the other hand, the second codec 2012 generates compressed data using the imaging data without superimposing the marker image data, and stores the compressed data in the card-type recording medium 302. For this reason, even if the distribution system does not have a function of superimposing the marker image data, the video with the marker image data superimposed can be distributed. Furthermore, since the card-type recording medium 302 stores a normal video on which the marker image data is not superimposed, it is possible to view or edit the video on which the marker image data is not displayed. it can.
なお、上記の例においては、マーカの画像を重畳させた映像はメモリ等に格納されることなく、配信システムに送信されるが、重畳させた映像を、例えばカード型記録媒体302に格納してもよい。これにより、画像を重畳させる機能が無い再生装置においても、画像重畳後の映像を再生することができる。 In the above example, the video on which the marker image is superimposed is transmitted to the distribution system without being stored in the memory or the like, but the superimposed video is stored in, for example, the card-type recording medium 302. Also good. As a result, even after a playback device that does not have a function for superimposing an image, it is possible to reproduce the video after the image is superimposed.
また、マーカデータ管理部402は、第2コーデック2012が生成した動画ファイルに対応づけて格納されたマーカデータファイルが編集されたか否かを検出してもよい。マーカデータ編集された場合、マーカデータ管理部402は、編集後のマーカデータを第1コーデック2011に送信する。第1コーデック2011は、カード型記録媒体302に格納された動画ファイル(マーカ重畳なし)に、編集後のマーカの画像データを重畳させる。これにより、撮像装置5は、編集後のマーカの画像を重畳した映像を生成することができる。 Further, the marker data management unit 402 may detect whether or not the marker data file stored in association with the moving image file generated by the second codec 2012 has been edited. When the marker data is edited, the marker data management unit 402 transmits the edited marker data to the first codec 2011. The first codec 2011 superimposes the edited marker image data on the moving image file (without marker superimposition) stored in the card type recording medium 302. Thereby, the imaging device 5 can generate | occur | produce the image | video which superimposed the image of the marker after editing.
以上、本発明を上記実施形態に即して説明したが、上記実施形態の構成にのみ限定されるものではなく、本願発明の範囲内で当業者であればなし得る各種変形、修正、組み合わせを含むことは勿論である。 The present invention has been described with reference to the above embodiment, but is not limited to the configuration of the above embodiment, and includes various modifications, corrections, and combinations that can be made by those skilled in the art within the scope of the present invention. Of course.
例えば、カード型記録媒体302内に記憶する情報の一部は、撮像装置1に着脱可能な記憶装置(例えばUSBメモリ)に記憶されても良いことは言うまでもない。また、撮像装置1は、ネットワーク上からメカード型記録媒体302内に保持すべき情報を適宜ダウンロードしても良い。また、カード型記録媒体302内に記憶されている情報の少なくとも一部は、中央制御部400内の記憶部(図示せず)に記憶されていても良い。 For example, it goes without saying that a part of the information stored in the card-type recording medium 302 may be stored in a storage device (for example, a USB memory) that is detachable from the imaging device 1. Further, the imaging device 1 may appropriately download information to be stored in the mecard type recording medium 302 from the network. Further, at least a part of the information stored in the card type recording medium 302 may be stored in a storage unit (not shown) in the central control unit 400.
また、上述の撮像装置及び携帯端末装置の任意の処理は、CPU(Central Processing Unit)にコンピュータプログラムを実行させることにより実現することも可能である。この場合、コンピュータプログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)、CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 In addition, arbitrary processing of the above-described imaging device and portable terminal device can also be realized by causing a CPU (Central Processing Unit) to execute a computer program. In this case, the computer program can be stored using various types of non-transitory computer readable media and supplied to the computer. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (for example, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (for example, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W and semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (random access memory)) are included. The program may also be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
また、コンピュータが上述の実施の形態の機能を実現するプログラムを実行することにより、上述の実施の形態の機能が実現される場合だけでなく、このプログラムが、コンピュータ上で稼動しているOS(Operating System)もしくはアプリケーションソフトウェアと共同して、上述の実施の形態の機能を実現する場合も、本発明の実施の形態に含まれる。さらに、このプログラムの処理の全てもしくは一部がコンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットによって行われて、上述の実施の形態の機能が実現される場合も、本発明の実施の形態に含まれる。 In addition to the case where the function of the above-described embodiment is realized by the computer executing the program that realizes the function of the above-described embodiment, this program is not limited to the OS ( A case where the functions of the above-described embodiment are realized in cooperation with an operating system or application software is also included in the embodiment of the present invention. Furthermore, the present invention is also applicable to the case where the functions of the above-described embodiment are realized by performing all or part of the processing of the program by a function expansion board inserted into the computer or a function expansion unit connected to the computer. It is included in the embodiment.
1、2、5 撮像装置
3、4 携帯端末装置
11 本体部
12 モニタ部
13 ヒンジ
14 レンズ
31 表示部
32 入力部
33 制御部
34 通信部
35 メモリ
51 動画ファイル
52 マーカ種別テーブル
53 チームテーブル
54 マーカデータファイル
55 試合データファイル
100 撮像部
101 ズームレンズ
102 フォーカスレンズ
103 絞り
104 撮像素子
105 アナログ画像信号処理部
106 画像A/D変換部
107 画像入力コントローラ
108 デジタル信号処理部
109 マイク
110 アナログ音声信号処理部
111 音声A/D変換部
112 音声入力コントローラ
113 多重化部
200 バス
201 圧縮・伸張処理部
202 音声・画像処理部
203 ROM
204 フラッシュROM
205 メインメモリ
206 メディア制御部
207 ジャイロセンサ
208 時計
209 内蔵型記録媒体
301 カードI/F
302 カード型記録媒体
303 入出力I/F
304 液晶モニタ
305 スピーカ
306 操作部
307 入出力端子
308 無線I/F
309 無線モジュール
400 中央制御部
401 動画ファイル管理部
402 マーカデータ管理部
403 チームテーブル管理部
404 試合データ管理部
405 表示画像データ生成部
1, 2, 5 Imaging device 3, 4 Mobile terminal device 11 Main unit 12 Monitor unit 13 Hinge 14 Lens 31 Display unit 32 Input unit 33 Control unit 34 Communication unit 35 Memory 51 Movie file 52 Marker type table 53 Team table 54 Marker data File 55 Game data file 100 Imaging unit 101 Zoom lens 102 Focus lens 103 Aperture 104 Imaging element 105 Analog image signal processing unit 106 Image A / D conversion unit 107 Image input controller 108 Digital signal processing unit 109 Microphone 110 Analog audio signal processing unit 111 Audio A / D converter 112 Audio input controller 113 Multiplexer 200 Bus 201 Compression / decompression processor 202 Audio / image processor 203 ROM
204 Flash ROM
205 Main memory 206 Media control unit 207 Gyro sensor 208 Clock 209 Built-in recording medium 301 Card I / F
302 Card type recording medium 303 Input / output I / F
304 LCD monitor 305 Speaker 306 Operation unit 307 Input / output terminal 308 Wireless I / F
309 Wireless module 400 Central control unit 401 Movie file management unit 402 Marker data management unit 403 Team table management unit 404 Game data management unit 405 Display image data generation unit
Claims (4)
撮像処理により動画の撮像データを生成する撮像部と、 An imaging unit that generates imaging data of a moving image by imaging processing;
前記撮像データを動画ファイルとして記憶する記憶部と、 A storage unit for storing the imaging data as a moving image file;
前記動画ファイルに対する前記マーカの入力指示と、前記計測部が計測した前記時間に関する時間情報と、を前記携帯端末装置から受信する受信部と、 A receiving unit that receives, from the mobile terminal device, an input instruction of the marker for the moving image file and time information about the time measured by the measuring unit;
前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させる制御部と、 The marker corresponding to the input instruction of the marker, the time when the marker is input, and the time information are associated to generate marker data, the marker data is associated with the moving image file, and the storage unit A control unit to be stored in
前記マーカデータを選択するための操作部と、 An operation unit for selecting the marker data;
前記操作部の操作により選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生する再生部と、 A playback unit that plays back the moving image file from a time that is back by the time corresponding to the time information associated with the marker from the time when the marker of the marker data selected by the operation of the operation unit is input; ,
を備える撮像装置。 An imaging apparatus comprising:
撮像処理により動画の撮像データを生成するステップと、 Generating moving image imaging data by imaging processing;
前記撮像データを動画ファイルとして記憶部に記憶させるステップと、 Storing the imaging data in a storage unit as a moving image file;
前記動画ファイルに対する前記マーカの入力指示と、前記計測部が計測した前記時間に関する時間情報と、を前記携帯端末装置から受信するステップと、 Receiving from the mobile terminal device an instruction to input the marker for the moving image file and time information about the time measured by the measurement unit;
前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させるステップと、 The marker corresponding to the input instruction of the marker, the time when the marker is input, and the time information are associated to generate marker data, the marker data is associated with the moving image file, and the storage unit Memorizing steps,
前記マーカデータを選択するステップと、 Selecting the marker data;
選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生するステップと、 Replaying the moving image file from a time that is back by a time corresponding to the time information associated with the marker from a time when the marker of the selected marker data is input;
を備える撮像方法。 An imaging method comprising:
前記携帯端末装置は、 The portable terminal device
時間を計測する計測部と、 A measuring unit for measuring time;
競技者が予め決められた地点を通過したことを示すマーカを動画に入力するマーカ入力部と、 A marker input unit for inputting a marker indicating that the player has passed a predetermined point into the video;
前記マーカ入力部の操作に応じて、前記マーカの入力指示と前記計測部が計測した前記時間に関連する時間情報とを対応付けて、前記撮像装置に送信する送信部と、を有し、 A transmission unit that associates an input instruction of the marker with time information related to the time measured by the measurement unit in accordance with an operation of the marker input unit, and transmits the information to the imaging device;
前記撮像装置は、 The imaging device
撮像処理により動画の撮像データを生成する撮像部と、 An imaging unit that generates imaging data of a moving image by imaging processing;
前記撮像データを動画ファイルとして記憶する記憶部と、 A storage unit for storing the imaging data as a moving image file;
前記動画ファイルに対する前記マーカの入力指示及び前記時間情報を前記携帯端末装置から受信する受信部と、 A receiving unit for receiving the marker input instruction and the time information for the moving image file from the mobile terminal device;
前記マーカの入力指示に対応する前記マーカと、前記マーカが入力された時刻と、前記時間情報と、を対応付けてマーカデータを生成し、前記マーカデータを前記動画ファイルに対応付けて前記記憶部に記憶させる制御部と、 The marker corresponding to the input instruction of the marker, the time when the marker is input, and the time information are associated to generate marker data, the marker data is associated with the moving image file, and the storage unit A control unit to be stored in
前記マーカデータを選択するための操作部と、 An operation unit for selecting the marker data;
前記操作部の操作により選択された前記マーカデータの前記マーカが入力された時刻から当該マーカに対応付けられた前記時間情報に対応する時間だけ遡った時刻から、前記動画ファイルを再生する再生部と、を有する撮像システム。 A playback unit that plays back the moving image file from a time that is back by the time corresponding to the time information associated with the marker from the time when the marker of the marker data selected by the operation of the operation unit is input; , An imaging system.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012214277 | 2012-09-27 | ||
JP2012214277 | 2012-09-27 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013118896A Division JP6079450B2 (en) | 2012-09-27 | 2013-06-05 | Imaging apparatus, imaging method, and imaging program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017240392A Division JP6424945B2 (en) | 2012-09-27 | 2017-12-15 | Imaging device, imaging method, and imaging program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017085654A true JP2017085654A (en) | 2017-05-18 |
JP6264478B2 JP6264478B2 (en) | 2018-01-24 |
Family
ID=50786523
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013118896A Active JP6079450B2 (en) | 2012-09-27 | 2013-06-05 | Imaging apparatus, imaging method, and imaging program |
JP2017005700A Active JP6264478B2 (en) | 2012-09-27 | 2017-01-17 | Imaging apparatus, imaging method, and imaging program |
JP2017240392A Active JP6424945B2 (en) | 2012-09-27 | 2017-12-15 | Imaging device, imaging method, and imaging program |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013118896A Active JP6079450B2 (en) | 2012-09-27 | 2013-06-05 | Imaging apparatus, imaging method, and imaging program |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017240392A Active JP6424945B2 (en) | 2012-09-27 | 2017-12-15 | Imaging device, imaging method, and imaging program |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP6079450B2 (en) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001285780A (en) * | 2000-03-28 | 2001-10-12 | Pioneer Electronic Corp | Image editing method and device and storage medium therefor |
JP2004040140A (en) * | 2002-06-28 | 2004-02-05 | Ntt Docomo Tokai Inc | Information producing method, information producing apparatus, program and information distribution system |
JP2004112153A (en) * | 2002-09-17 | 2004-04-08 | Fujitsu Ltd | Image processing system |
JP2004221665A (en) * | 2003-01-09 | 2004-08-05 | Canon Inc | Imaging apparatus |
JP2006303766A (en) * | 2005-04-19 | 2006-11-02 | Sanshin Kinzoku Kogyo Kk | Animation imaging system |
JP2006340108A (en) * | 2005-06-02 | 2006-12-14 | Canon Inc | Image processing unit, image processing method, program, and storage medium |
JP2007093432A (en) * | 2005-09-29 | 2007-04-12 | Casio Comput Co Ltd | Photographing device and travel time measuring device |
JP2009503922A (en) * | 2005-07-22 | 2009-01-29 | カンガルー メディア インコーポレイテッド | Systems and methods for promoting the spectator experience of live sports events |
JP2009296526A (en) * | 2008-06-09 | 2009-12-17 | Sony Corp | Signal processing apparatus, marking method, and program |
JP2010539746A (en) * | 2007-09-10 | 2010-12-16 | トムソン ライセンシング | Video playback device |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3392316B2 (en) * | 1997-02-27 | 2003-03-31 | 日本電信電話株式会社 | Index-added video camera |
JPH10304234A (en) * | 1997-04-24 | 1998-11-13 | Sony Corp | Image pickup system and video camera apparatus |
JPH1155613A (en) * | 1997-07-30 | 1999-02-26 | Hitachi Ltd | Recording and/or reproducing device and recording medium using same device |
JP4396567B2 (en) * | 2005-04-15 | 2010-01-13 | ソニー株式会社 | Material recording apparatus and material recording method |
JP2007201988A (en) * | 2006-01-30 | 2007-08-09 | Sanyo Electric Co Ltd | Recording and reproducing apparatus |
JP4775322B2 (en) * | 2007-05-29 | 2011-09-21 | ソニー株式会社 | Data processing device, data processing method and data processing program, and recording device, recording method and recording program |
JP2010183301A (en) * | 2009-02-04 | 2010-08-19 | Sony Corp | Video processing device, video processing method, and program |
-
2013
- 2013-06-05 JP JP2013118896A patent/JP6079450B2/en active Active
-
2017
- 2017-01-17 JP JP2017005700A patent/JP6264478B2/en active Active
- 2017-12-15 JP JP2017240392A patent/JP6424945B2/en active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001285780A (en) * | 2000-03-28 | 2001-10-12 | Pioneer Electronic Corp | Image editing method and device and storage medium therefor |
JP2004040140A (en) * | 2002-06-28 | 2004-02-05 | Ntt Docomo Tokai Inc | Information producing method, information producing apparatus, program and information distribution system |
JP2004112153A (en) * | 2002-09-17 | 2004-04-08 | Fujitsu Ltd | Image processing system |
JP2004221665A (en) * | 2003-01-09 | 2004-08-05 | Canon Inc | Imaging apparatus |
JP2006303766A (en) * | 2005-04-19 | 2006-11-02 | Sanshin Kinzoku Kogyo Kk | Animation imaging system |
JP2006340108A (en) * | 2005-06-02 | 2006-12-14 | Canon Inc | Image processing unit, image processing method, program, and storage medium |
JP2009503922A (en) * | 2005-07-22 | 2009-01-29 | カンガルー メディア インコーポレイテッド | Systems and methods for promoting the spectator experience of live sports events |
JP2007093432A (en) * | 2005-09-29 | 2007-04-12 | Casio Comput Co Ltd | Photographing device and travel time measuring device |
JP2010539746A (en) * | 2007-09-10 | 2010-12-16 | トムソン ライセンシング | Video playback device |
JP2009296526A (en) * | 2008-06-09 | 2009-12-17 | Sony Corp | Signal processing apparatus, marking method, and program |
Also Published As
Publication number | Publication date |
---|---|
JP6264478B2 (en) | 2018-01-24 |
JP6079450B2 (en) | 2017-02-15 |
JP2018085735A (en) | 2018-05-31 |
JP2014082742A (en) | 2014-05-08 |
JP6424945B2 (en) | 2018-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101022343B1 (en) | Information generating apparatus, recording apparatus, playback apparatus, information generating method, recording method, playback method, and recording/reproducing system | |
CN103842936A (en) | Recording, editing and combining multiple live video clips and still photographs into a finished composition | |
JP7248437B2 (en) | Programs, electronics and data recording methods | |
JP2010183187A (en) | Imaging apparatus and control method of the same, program | |
JP4937592B2 (en) | Electronics | |
JP6098796B2 (en) | Image processing apparatus, imaging apparatus, and computer program | |
JP5821699B2 (en) | Image processing apparatus, image processing method, and program | |
JP2012084052A (en) | Imaging apparatus, control method and program | |
JP6264478B2 (en) | Imaging apparatus, imaging method, and imaging program | |
EP2713371A2 (en) | Imaging device, image processing device, imaging method, image processing method, and computer program product | |
JP6146162B2 (en) | Image processing apparatus, imaging apparatus, image processing method, imaging method, and image processing program | |
JP2013135459A (en) | Imaging apparatus and control method and program thereof | |
JP6265621B2 (en) | Display control apparatus and program | |
US8648925B2 (en) | Control apparatus, control method, and control system for reproducing captured image data | |
JP6089988B2 (en) | Imaging system, imaging apparatus, and program | |
JP2009232114A (en) | Image reproducing apparatus, its method and image reproducing program | |
JP6295634B2 (en) | Information processing system and program | |
CN113473224A (en) | Video processing method and device, electronic equipment and computer readable storage medium | |
JP5794934B2 (en) | Collaboration song recording system | |
JP6952584B2 (en) | Imaging device, imaging method and imaging program | |
JP4798215B2 (en) | Electronics | |
JP2016071235A (en) | Karaoke control system, program, and karaoke systeme | |
JP6315475B2 (en) | Karaoke management system, program and karaoke system | |
JP2014131155A (en) | Imaging apparatus, image processor, imaging method, image processing method and program | |
JP2019114847A (en) | Image recording control apparatus, image recording method, image recording program, imaging apparatus, and image recording control system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6264478 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |