JP5962200B2 - Imaging apparatus and imaging processing method - Google Patents

Imaging apparatus and imaging processing method Download PDF

Info

Publication number
JP5962200B2
JP5962200B2 JP2012115604A JP2012115604A JP5962200B2 JP 5962200 B2 JP5962200 B2 JP 5962200B2 JP 2012115604 A JP2012115604 A JP 2012115604A JP 2012115604 A JP2012115604 A JP 2012115604A JP 5962200 B2 JP5962200 B2 JP 5962200B2
Authority
JP
Japan
Prior art keywords
distribution
moving image
image
still image
shooting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012115604A
Other languages
Japanese (ja)
Other versions
JP2013243531A (en
Inventor
和也 奈良
和也 奈良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2012115604A priority Critical patent/JP5962200B2/en
Publication of JP2013243531A publication Critical patent/JP2013243531A/en
Application granted granted Critical
Publication of JP5962200B2 publication Critical patent/JP5962200B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、動画撮影手段を備えた撮像装置、撮像処理方法に関する。 The present invention relates to an imaging apparatus having a video recording means relates to the imaging processing how.

一般に、動画撮影機能が備えられているデジタルコンパクトカメラやビデオカメラなどの撮像装置を利用した映像配信システムとしては、例えば、特許文献1のように、撮像装置により撮影されている動画像を、通信ネットワークを介して管理サーバに送信すると、この管理サーバは受信した動画像を再生用端末に送信することにより端末側では動画像をリアルタイムにストリーミング再生することを可能とした技術が開示されている。   In general, as a video distribution system using an imaging device such as a digital compact camera or a video camera having a moving image shooting function, for example, as disclosed in Patent Document 1, a moving image shot by an imaging device is communicated. A technique is disclosed in which, when transmitted to a management server via a network, the management server transmits a received moving image to a reproduction terminal, thereby enabling the terminal to perform streaming reproduction of the moving image in real time.

特開2004−32228号公報JP 2004-32228 A

しかしながら、上述した特許文献1の技術にあっては、動画像のリアルタイムなストリーミング配信を可能とした技術であるが、例えば、バラエティに富んだ動画像を視聴可能とするには高価で重装備な機材が必要となるために個人によるストリーミング配信での再生映像では、撮影画像をそのまま再現したものとなってしまい、変化に乏しい再生映像しか視認することができず、コミュニケーション手段としては不十分なものとなっていた。   However, the technique disclosed in Patent Document 1 described above is a technique that enables real-time streaming distribution of moving images. For example, it is expensive and heavy equipment to be able to view a variety of moving images. Because the equipment is required, the playback video in the streaming distribution by the individual is a reproduction of the captured image as it is, and only the playback video with little change can be seen, which is insufficient as a communication means It was.

本発明の課題は、撮影されている動画像をリアルタイムにストリーミング配信する場合に、既存の撮影機能を活用するだけでバラエティに富んだ画像を配信できるようにすることである。   An object of the present invention is to make it possible to distribute a variety of images simply by utilizing an existing shooting function when streaming a moving image being shot in real time.

上述した課題を解決するために本発明の撮像装置は、
動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備え
静止画撮影手段を更に備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、前記静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記配信中の動画像の所定表示領域内に前記静止画撮影手段により撮影された静止画像を合成した画像を、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
In order to solve the above-described problems, an imaging apparatus of the present invention
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
Distribution control means for performing distribution control for causing the distribution means to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed by the determination means;
Equipped with a,
It further includes a still image shooting means,
The determining unit determines whether or not a still image shooting operation for instructing shooting by the still image shooting unit is performed as a predetermined operation during streaming distribution of the moving image by the distributing unit;
The distribution control unit combines the still image captured by the still image capturing unit within a predetermined display area of the moving image being distributed when the determination unit determines that a still image capturing operation has been performed. Performing distribution control for causing the distribution means to distribute the image for a predetermined time;
The imaging apparatus is characterized by the above.

上述した課題を解決するために本発明の撮像処理方法は、
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する処理と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する処理と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う処理と、
を含み
前記動画像のストリーミング配信中における所定の操作として、静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
静止画撮影操作が行われたと判別された際に、前記配信中の動画像の所定表示領域内に前記静止画撮影手段により撮影された静止画像を合成した画像を、所定時間配信する、
ことを特徴とする撮像処理方法である。
In order to solve the above-described problem, the imaging processing method of the present invention provides:
A process of streaming a moving image shot by a moving image shooting means in real time via a communication network;
Processing for determining whether or not a predetermined operation is performed during streaming distribution of the moving image;
Processing for performing distribution control to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
It includes,
As a predetermined operation during streaming distribution of the moving image, it is determined whether or not a still image shooting operation instructing shooting by the still image shooting means has been performed,
When it is determined that a still image shooting operation has been performed, an image obtained by synthesizing a still image shot by the still image shooting unit within a predetermined display area of the moving image being distributed is distributed for a predetermined time.
An imaging processing method characterized by this.

本発明によれば、撮影されている動画像をリアルタイムにストリーミング配信する場合に、既存の機能を活用するだけでバラエティに富んだ画像を配信することができると共に、個人によるストリーミング配信の普及にも貢献することができる。   According to the present invention, when streaming a moving image that has been shot in real time, it is possible to distribute a variety of images simply by utilizing existing functions, and also to popularize streaming distribution by individuals. Can contribute.

撮像装置1が利用可能な通信ネットワークシステム(撮像処理システム)を示したブロック図。1 is a block diagram showing a communication network system (imaging processing system) that can be used by an imaging apparatus 1; 撮像装置1の基本的な構成要素を示したブロック図。FIG. 3 is a block diagram illustrating basic components of the imaging apparatus 1. ワークメモリ13bに一時的に記憶される各種のフラグを説明するための図。The figure for demonstrating the various flags temporarily memorize | stored in the work memory 13b. 動画像と静止画像とを合成して配信された場合にその受信側端末での表示例を示した図。The figure which showed the example of a display in the receiving side terminal, when a moving image and a still image are synthesize | combined and delivered. 動画像のストリーミング配信処理を示したフローチャート。The flowchart which showed the streaming delivery process of a moving image. 図5の動作に続くフローチャート。6 is a flowchart following the operation of FIG. 図5の動作に続くフローチャート。6 is a flowchart following the operation of FIG. 動画像のストリーミング配信中での静止画像配信を説明するための図。The figure for demonstrating the still image delivery in the streaming delivery of a moving image. 動画像のストリーミング配信中での動画像・静止画像交互配信を説明するための図。The figure for demonstrating the moving image and still image alternate delivery in the streaming delivery of a moving image. 動画像のストリーミング配信中での動画像・静止画像合成配信を説明するための図。The figure for demonstrating the moving image and still image synthetic | combination delivery in the streaming delivery of a moving image. 動画像のストリーミング配信中での静止画像配信及び追っかけ配信を説明するための図。The figure for demonstrating the still image delivery and chasing delivery in the streaming delivery of a moving image. 高速度撮影動画像の間引きストリーミング配信中での静止画像配信を説明するための図。The figure for demonstrating the still image delivery in the thinning-out streaming delivery of a high speed photography moving image. 高速度撮影動画像の間引きストリーミング配信中でのスローモーション配信を説明するための図。The figure for demonstrating slow motion delivery in the thinning-out streaming delivery of a high speed imaging | photography moving image. 高速度撮影動画像の間引きストリーミング配信中でのスローモーション配信及び追っかけ配信を説明するための図。The figure for demonstrating slow motion delivery and chasing delivery in the thinning-out streaming delivery of a high speed imaging | photography moving image.

以下、図1〜図14を参照して本発明の実施形態を説明する。
図1は、撮像装置が利用可能な通信ネットワークシステム(撮像処理システム)を示したブロック図である。
撮像処理システムは、撮像装置1によって撮影された動画像を、広域通信網(公衆通信網)を介してリアルタイムにストリーミング配信する通信ネットワークシステムである。この撮像装置1は、静止画像のほかに動画像の撮影も可能なデジタルコンパクトカメラで、撮像機能、計時機能、集音機能などの基本的な機能のほか、動画撮影中においても静止画像を撮影可能としたスチルインムービー機能、高速度での動画撮影を可能とした高速動画撮影機能を備え、更に、携帯端末装置2との間でデータ(動画像、静止画像、音声など)の送受信を行う近距離通信機能、撮影された動画像や静止画像、集音された音声を、近距離通信を介してストリーミング配信するストリーミング配信機能を備えている。
Embodiments of the present invention will be described below with reference to FIGS.
FIG. 1 is a block diagram illustrating a communication network system (imaging processing system) that can be used by an imaging apparatus.
The imaging processing system is a communication network system that distributes a moving image captured by the imaging apparatus 1 in real time via a wide-area communication network (public communication network). This imaging device 1 is a digital compact camera capable of shooting moving images in addition to still images. In addition to basic functions such as imaging functions, timing functions, and sound collection functions, still images are shot even during movie shooting. It has a still-in movie function that enables it and a high-speed movie shooting function that enables high-speed movie shooting, and also transmits and receives data (moving images, still images, audio, etc.) to and from the mobile terminal device 2. It has a short distance communication function, a streaming distribution function for streaming a captured moving image, still image, and collected sound via short distance communication.

撮像装置1との間で近距離通信を介してデータの送受信を可能とした携帯端末装置2は、例えば、スマートフォンと呼ばれる多機能型携帯電話機であり、その基本機能として通話機能、電子メール機能、インターネット接続機能(Webアクセス機能)、近距離通信機能などを備え、最寄りの基地局(図示省略)を介して無線通信網(移動体通信網)3に接続されると、この無線通信網3を介して他の携帯端末装置4との間で通話可能な状態となる。また、携帯端末装置2は、無線通信網3を介してインターネット5に接続されると、Webサイトをアクセスして閲覧可能な状態となる。   A mobile terminal device 2 that can transmit and receive data to and from the imaging device 1 via short-range communication is, for example, a multi-function mobile phone called a smartphone, whose basic functions are a call function, an e-mail function, When it is connected to a wireless communication network (mobile communication network) 3 via a nearby base station (not shown), it has an Internet connection function (Web access function), a short-range communication function, etc. Thus, it becomes possible to make a call with another mobile terminal device 4. In addition, when the mobile terminal device 2 is connected to the Internet 5 via the wireless communication network 3, the mobile terminal device 2 can be accessed and browsed.

また、携帯端末装置2は、無線通信網3、インターネット5を介して動画共有サービスを提供する業者側の管理装置(管理サーバ)6に接続可能であり、撮像装置1によって撮影された動画像を、近距離通信を介して受信取得すると、通信ネットワーク(無線通信網3、インターネット5)を介して管理サーバ6にリアルタイムにストリーミング配信するようにしている。管理サーバ6は、動画共有サービスを提供する業者側のサーバ装置で、会員ユーザ(視聴者や視認者)同士のチャット機能や動画投稿機能などを有し、携帯端末装置2からの受信した動画像を、視聴者や視認者側のPC(パーソナルコンピュータ)7、テレビ受信機8、他の携帯端末装置4などの受信端末(視聴者や視認者側の端末装置)に対してリアルタイムにストリーミング配信するようにしている。このように撮像処理システムは、動画像を撮影する撮像装置1と、撮像装置1によって撮影された動画像を通信ネットワークを介して受信する管理サーバ6と、この管理サーバ6から動画像を通信ネットワークを介して受信する受信側の端末装置4、7、8を備えた構成となっている。   In addition, the mobile terminal device 2 can be connected to a management device (management server) 6 that provides a video sharing service via the wireless communication network 3 and the Internet 5, and the moving image captured by the imaging device 1 can be captured. When receiving and acquiring via short-range communication, streaming distribution is performed in real time to the management server 6 via a communication network (wireless communication network 3 and Internet 5). The management server 6 is a server device on the supplier side that provides a video sharing service, has a chat function and a video posting function between member users (viewers and viewers), and receives a moving image received from the mobile terminal device 2. Is streamed in real time to a receiving terminal (a terminal device on the viewer or viewer side) such as a PC (personal computer) 7 on the viewer or viewer side, a television receiver 8, or another portable terminal device 4. I am doing so. Thus, the imaging processing system includes an imaging device 1 that captures a moving image, a management server 6 that receives the moving image captured by the imaging device 1 via a communication network, and a moving image that is transmitted from the management server 6 to the communication network. It is the structure provided with the terminal device 4, 7, 8 of the receiving side which receives via.

図2は、撮像装置1の基本的な構成要素を示したブロック図である。
制御部11は、電源部(二次電池)12からの電力供給によって動作し、記憶部13内の各種のプログラムに応じてこの撮像装置1の全体動作を制御するもので、この制御部11には図示しないCPU(中央演算処理装置)やメモリなどが設けられている。記憶部13は、例えば、ROM、フラッシュメモリなどを有する構成で、後述する図5〜図7に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されているプログラムメモリ13aと、この撮像装置が動作するために必要となる各種の情報(例えば、フラグ、ソフトタイマ計測値など)を一時的に記憶するワークメモリ13bなどのほか、後述するが、追っかけ配信用バッファ13c、スローモーション配信用バッファ13dを有している。なお、記憶部13は、例えば、SDカード、ICカードなど、着脱自在な可搬型メモリ(記録メディア)を含む構成であってもよく、図示しないが、通信機能を介してネットワークに接続されている状態においては所定のサーバ装置側の記憶領域を含むものであってもよい。
FIG. 2 is a block diagram illustrating basic components of the imaging apparatus 1.
The control unit 11 operates by supplying power from the power source unit (secondary battery) 12 and controls the overall operation of the imaging apparatus 1 according to various programs in the storage unit 13. Are provided with a CPU (Central Processing Unit) and a memory (not shown). The storage unit 13 includes, for example, a ROM, a flash memory, and the like, and stores programs, various applications, and the like for realizing the present embodiment in accordance with operation procedures illustrated in FIGS. Program memory 13a and work memory 13b that temporarily stores various information necessary for the operation of the imaging apparatus (for example, flags, soft timer measurement values, etc.), as will be described later, chasing distribution Buffer 13c and slow motion distribution buffer 13d. The storage unit 13 may include a removable portable memory (recording medium) such as an SD card or an IC card, and is connected to a network via a communication function (not shown). The state may include a storage area on a predetermined server device side.

操作部14は、図示省略したが、押しボタン式のキーとして、撮影可能な状態とする撮影モード、撮影済み画像を再生する再生モードなどを切り替えるモード変更キーを備えているほか、撮影開始を指示するレリーズボタン、露出やシャッタスピードなどの撮影条件の設定操作などを行うための各種のキー(図示省略)を備え、制御部11は、この操作部14から操作キーに対応して出力される入力操作信号に応じて、例えば、モード変更処理、撮影処理、撮影条件の設定処理などを行う。   Although not shown in the figure, the operation unit 14 includes a mode change key for switching a shooting mode for enabling shooting, a playback mode for playing back a shot image, and the like to instruct to start shooting as a push button type key. The control unit 11 includes an input that is output from the operation unit 14 corresponding to the operation key. In accordance with the operation signal, for example, mode change processing, shooting processing, shooting condition setting processing, and the like are performed.

撮像部15は、図示省略したが、光学レンズからの被写体像が撮像素子(CCDやCMOSなど)に結像されることにより被写体を高精細に撮影可能なカメラ部を構成するもので、撮影レンズ(ズームレンズ)、撮像素子、ストロボ、各種のセンサ、アナログ処理部、デジタル処理部を有している。そして、撮像部15は、光電変換された画像信号(アナログ値の信号)は、色分離やRGBの色成分毎のゲイン調整などが行われた後、デジタル値のデータに変換される。デジタル変換された画像データは、色補間処理(デモザイク処理)が施されて表示部16にフルカラー表示される。また、本実施形態においては、オートフォーカス処理(AF処理)、露出調整処理(AE処理)、オートホワイトバランス調整処理(AWB)、画像圧縮処理、画像復元処理なども実行可能となっている。また、撮像部15は、通常、秒30コマ(30fps)で動画撮影を行うようにしているが、高速度撮影が指示された際には、例えば、フレームレートが秒240コマ(240fps)、秒120コマ(120fps)のような高速度撮影が可能となっている。   Although not shown, the imaging unit 15 constitutes a camera unit capable of photographing a subject with high definition by forming a subject image from an optical lens on an imaging element (CCD, CMOS, etc.). (Zoom lens), image sensor, strobe, various sensors, analog processing unit, and digital processing unit. The imaging unit 15 converts the photoelectrically converted image signal (analog value signal) into digital value data after color separation and gain adjustment for each of the RGB color components. The digitally converted image data is subjected to color interpolation processing (demosaic processing) and displayed in full color on the display unit 16. In the present embodiment, autofocus processing (AF processing), exposure adjustment processing (AE processing), auto white balance adjustment processing (AWB), image compression processing, image restoration processing, and the like can also be executed. The imaging unit 15 normally performs moving image shooting at 30 frames per second (30 fps), but when high-speed shooting is instructed, for example, the frame rate is 240 frames per second (240 fps), seconds High-speed shooting such as 120 frames (120 fps) is possible.

表示部16は、例えば、縦横比(横4:縦3)の異なる画面を有した高精細液晶ディスライブあるいは有機EL(Electro Luminescence)ディスライブで、撮影画像(ライブビュー画像)を表示するモニタ画面(ライブビュー画面)となったり、撮影済み画像を再生する再生画面となったりする。集音部17は、撮像部15による動画像撮影時に周囲音を録音するもので、制御部11は、撮影された動画像と集音された音声を対応付けて記憶部13内の可搬型メモリ(例えば、SDカード)に記憶させる。なお、以下、画像配信のみ説明し、音声配信についてはその説明を省略するものとする。近距離無線通信部18は、高速大容量の通信が可能なもので、例えば、非接触型ICカードあるいは無線LAN(Local Area Network)モジュールを使用し、ストリーミング配信時には、動画像、静止画像、音声などを携帯端末装置2に対して配信する構成となっている。   The display unit 16 is, for example, a monitor screen that displays a captured image (live view image) with a high-definition liquid crystal display or an organic EL (Electro Luminescence) display having screens with different aspect ratios (width 4: height 3). (Live View screen) or a playback screen for playing back captured images. The sound collecting unit 17 records ambient sounds when the image capturing unit 15 captures a moving image. The control unit 11 associates the captured moving image with the collected sound, and is a portable memory in the storage unit 13. (For example, an SD card). Hereinafter, only image distribution will be described, and description of audio distribution will be omitted. The short-range wireless communication unit 18 is capable of high-speed and large-capacity communication. For example, a non-contact type IC card or a wireless LAN (Local Area Network) module is used. Are distributed to the mobile terminal device 2.

図3は、ワークメモリ13bに一時的に記憶される各種のフラグを説明するための図である。
ワークメモリ13bには、動画像のストリーミング配信処理用の静止画配信フラグF1及び追っかけ再生フラグF2が記憶されている。静止画配信フラグF1は、撮像部15によって撮影された動画像がリアルタイムにストリーミング配信されている場合に、その配信中の動画像に代えて静止画像をどのようにして配信するかの配信方法を指定するためのフラグであ。本実施形態においては、静止画像の配信方法として予め用意されている3種類の配信方法のうち、そのいずれかをユーザ操作により任意に選択指定すると、静止画配信フラグF1は、その指定された配信方法を示す値となる。
FIG. 3 is a diagram for explaining various flags temporarily stored in the work memory 13b.
The work memory 13b stores a still image distribution flag F1 and a chasing playback flag F2 for streaming distribution processing of moving images. The still image distribution flag F1 is a distribution method of how to distribute a still image instead of the moving image being distributed when the moving image captured by the imaging unit 15 is distributed in real time. Flag to specify. In the present embodiment, when any one of three types of distribution methods prepared in advance as still image distribution methods is arbitrarily selected and designated by a user operation, the still image distribution flag F1 is set to the specified distribution. The value indicates the method.

制御部11は、撮影されている動画像から配信用の通常動画像をリアルタイムに生成して、このリアルタイムに生成される配信用の通常動画像を、通信ネットワークを介してリアルタイムにストリーミング配信している配信中において、所定操作が行われた場合に、リアルタイムに生成されている配信用の通常動画像に代えて、所定の操作に対応した画像を、通信ネットワークを介してストリーミング配信するようにしている。すなわち、制御部11は、動画像のストリーミング配信中において、所定の操作が行われたか否かを判別し、所定の操作が行われた際には、その所定の操作に対応した画像を、配信中の動画像に代えて所定時間(例えば、2〜3秒間)配信させ、その後、動画像のストリーミング配信を再開することにより通常状態に戻すようにしている。ここで、上述の所定の操作が静止画撮影を指示する操作であれば、この静止画撮影操作が行われた際に静止画配信フラグF1を参照することによって配信方法を決定し、この配信方法で静止画像を所定時間配信するようにしている。   The control unit 11 generates a normal moving image for distribution from the captured moving image in real time, and distributes the normal moving image for distribution generated in real time by streaming through the communication network in real time. When a predetermined operation is performed during distribution, an image corresponding to the predetermined operation is streamed via a communication network instead of a normal moving image generated in real time. Yes. That is, the control unit 11 determines whether or not a predetermined operation has been performed during streaming distribution of the moving image, and when the predetermined operation is performed, distributes an image corresponding to the predetermined operation. The video is distributed for a predetermined time (for example, for 2 to 3 seconds) instead of the moving image in the middle, and thereafter, the streaming distribution of the moving image is resumed to return to the normal state. If the predetermined operation described above is an operation for instructing still image shooting, the distribution method is determined by referring to the still image distribution flag F1 when the still image shooting operation is performed. To deliver still images for a predetermined time.

このように本実施形態においては、動画像のストリーミング配信中に静止画撮影操作が行われた際に、配信中の動画像に代えて所定時間、静止画像を配信する動作(リアルタイム・ストップモーション)を行うようにしている。ここで、静止画像を配信する所定時間は、静止画像の配信を開始してからの経過時間(設定時間)であり、例えば、2〜3秒間に限らず、3秒、4秒、5秒などであってもよい。本実施形態においては、操作部14のキー操作により任意の時間を上述の所定時間として設定可能としているほか、レリーズボタンの押下操作(撮影開始操作)からその押下が解除されるまでの時間も所定時間としているが、この押下時間と設定時間のいずれか一方(短い方)を所定時間としている。   As described above, in this embodiment, when a still image shooting operation is performed during streaming distribution of a moving image, an operation for distributing a still image for a predetermined time instead of the moving image being distributed (real-time stop motion) Like to do. Here, the predetermined time for distributing the still image is an elapsed time (set time) after starting the distribution of the still image, and is not limited to 2 to 3 seconds, for example, 3 seconds, 4 seconds, 5 seconds, etc. It may be. In the present embodiment, an arbitrary time can be set as the above-mentioned predetermined time by the key operation of the operation unit 14, and the time from the release button pressing operation (shooting start operation) until the pressing is released is also predetermined. Although the time is set, either one of the pressing time and the set time (the shorter one) is set as the predetermined time.

図示の例において、静止画配信フラグF1の“0”は、同じ静止画像のみを続けて配信する配信方法を指定し、“1”は、静止画像と動画像とを交互に配信する配信方法を指定し、“2”は、動画像と静止画像とを合成して配信する配信方法を指定するフラグである。図4は、静止画配信フラグF1の値が“2”の場合、つまり、動画像と静止画像とを合成して配信した場合に、その合成画像を受信した受信側端末での表示例を示した図で、動画像表示領域の一部に静止画像表示領域を重ね合せた状態で合成画像が表示される。   In the illustrated example, “0” of the still image distribution flag F1 designates a distribution method for continuously distributing only the same still image, and “1” indicates a distribution method for alternately distributing still images and moving images. Designated, and “2” is a flag that designates a delivery method for synthesizing and delivering a moving image and a still image. FIG. 4 shows a display example at the receiving terminal that has received the composite image when the value of the still image distribution flag F1 is “2”, that is, when the moving image and the still image are combined and distributed. In the figure, the composite image is displayed in a state where the still image display area is superimposed on a part of the moving image display area.

追っかけ再生フラグF2は、ストリーミング配信中の動画像に代えて所定の操作に対応した画像を所定時間配信することによって配信されなかった未配信の動画像を、通常のストリーミング配信の再開に先立って、その所定時間経過後に追っかけ配信(後追い配信:高速間引き配信)させるか否かを示すフラグである。ここで、追っかけ再生フラグF2の“0”は、追っかけ配信を実行しないことを指定し、“1”は、追っかけ配信を実行することを指定するフラグである。このような追っかけ配信を実現可能とするために本実施形態においては、未配信の動画像を追っかけ配信用バッファ13cに一時記憶させるようにしている。   The chasing playback flag F2 indicates that an undelivered moving image that has not been distributed by distributing an image corresponding to a predetermined operation for a predetermined time instead of a moving image that is being distributed for streaming before resuming normal streaming distribution, This is a flag indicating whether or not to perform chasing distribution (follow-up distribution: high-speed thinning distribution) after the predetermined time has elapsed. Here, “0” of the chasing playback flag F2 designates that the chasing delivery is not executed, and “1” is a flag that designates that the chasing delivery is executed. In order to make it possible to realize such chasing distribution, in the present embodiment, undistributed moving images are temporarily stored in the chasing distribution buffer 13c.

一方、本実施形態においては、フレームレートが秒240コマ(240fps)、秒120コマ(120fps)のような高速度撮影時では通信ネットワークのスループットを大きく超えてしまうためにコマ(画像)を間引いてストリーミング配信(間引き配信)を行うようにしている。例えば、フレームレートが秒120コマ(120fps)の高速度撮影の場合には、8.33ms毎に画像が生成されるが、ストリーミング配信よりも画像が生成される方が4倍速いために1/4の画像間引き(4フレーム当たり1回の配信)を行うことによりフレームレートを30fpsとすることにより33.33msでストリーミング配信するようにしている。このような高速度撮影動画像の間引きストリーミング配信中に所定の操作が行われた際に、その所定の操作がスローモーション再生配信を指示する操作であれば、撮像部15によって撮影された高速度撮影動画像をスローモーション画像として、配信中の動画像に代えて所定時間配信するようにしている。   On the other hand, in the present embodiment, frames (images) are thinned out because the frame rate greatly exceeds the throughput of the communication network at high-speed shooting such as 240 frames (240 fps) and 120 frames (120 fps) per second. Streaming distribution (thinning distribution) is performed. For example, in the case of high-speed shooting at a frame rate of 120 frames per second (120 fps), an image is generated every 8.33 ms, but because the image is generated four times faster than streaming delivery, it is 1/4. Thus, streaming distribution is performed at 33.33 ms by setting the frame rate to 30 fps by performing image thinning (distribution once per four frames). When a predetermined operation is performed during thinned streaming distribution of such a high-speed captured moving image, if the predetermined operation is an operation instructing slow motion playback distribution, the high-speed captured by the imaging unit 15 The captured moving image is distributed as a slow motion image for a predetermined time instead of the moving image being distributed.

すなわち、例えば、秒120コマ(120fps)により高速度撮影された動画像を、通信ネットワークの通信速度で配信可能となるフレームレート(例えば、30fps)まで間引いてストリーミング配信(高速度撮影動画像の間引きストリーミング配信)を行っている場合に、所定の操作としてスローモーション再生操作が行われると、スローモーション用配信バッファ13dに高速度撮影動画像を順次記憶すると共に、このスローモーション用配信バッファ13d内の高速度撮影動画像を、間引きストリーミング配信中の動画像に代えて所定時間配信するようにしている。   That is, for example, a moving image captured at a high speed of 120 frames per second (120 fps) is thinned out to a frame rate (for example, 30 fps) that can be distributed at the communication speed of the communication network, and streamed distribution (decimated high-speed captured moving images When a slow motion playback operation is performed as a predetermined operation when streaming delivery is being performed, high-speed captured moving images are sequentially stored in the slow motion delivery buffer 13d, and the slow motion delivery buffer 13d The high-speed captured moving image is distributed for a predetermined time instead of the moving image being thinned streaming-distributed.

このように本実施形態においては、高速度撮影のストリーミング配信中にスローモーション再生操作が行われた際に、ストリーミング配信(間引き配信)に代えて、所定時間、間引きのないストリーミング配信として高速度撮影動画像を配信する動作(リアルタイム・スローモーション)を行うようにしている。ここで、スローモーション配信が行われる所定時間は、スローモーション配信用バッファ13dに高速度撮影動画像を記憶可能なフレーム数に応じて決められる時間あるいはスローモーション配信の停止を指示する操作が行われるまでの時間である。このようなスローモーション再生配信の後には高速度撮影動画像の間引きストリーミング配信を再開することにより通常状態に戻すようにしている。また、スローモーション配信時にも上述の追っかけ配信を可能とするためにスローモーション配信されなかった未配信の動画像を追っかけ配信用バッファ13cに一時記憶させるようにしている。   As described above, in the present embodiment, when a slow motion playback operation is performed during high-speed shooting streaming distribution, high-speed shooting is performed as streaming distribution without thinning for a predetermined time instead of streaming distribution (thinning distribution). An operation for distributing moving images (real-time slow motion) is performed. Here, the predetermined time during which the slow motion distribution is performed is a time determined according to the number of frames in which the high-speed captured moving image can be stored in the slow motion distribution buffer 13d or an operation for instructing to stop the slow motion distribution. It is time until. After such slow motion playback distribution, the thinned streaming distribution of the high-speed captured moving image is resumed to return to the normal state. Further, in order to enable the above-mentioned chasing distribution even during slow motion distribution, undistributed moving images that have not been distributed in slow motion are temporarily stored in the chasing distribution buffer 13c.

次に、本実施形態における撮像装置の動作概念を図5〜図7に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。すなわち、記録媒体のほかに、伝送媒体を介して外部供給されたプログラム/データを利用して本実施形態特有の動作を実行することもできる。なお、図5〜図7は、撮像装置の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、この図5〜図7のフローから抜けた際には、全体動作のメインフロー(図示省略)に戻る。   Next, the operation concept of the imaging apparatus according to the present embodiment will be described with reference to the flowcharts shown in FIGS. Here, each function described in these flowcharts is stored in the form of a readable program code, and operations according to the program code are sequentially executed. Further, it is possible to sequentially execute the operation according to the above-described program code transmitted via a transmission medium such as a network. In other words, in addition to the recording medium, an operation unique to the present embodiment can be executed using a program / data supplied externally via a transmission medium. 5 to 7 are flowcharts showing an outline of the operation of the characteristic part of the present embodiment in the entire operation of the imaging apparatus. When the flow of FIGS. Return to the main flow (not shown).

図5〜図7は、動画像のストリーミング配信がユーザ操作により指定された際に実行開始されるストリーミング配信処理を示したフローチャートである。以下、図8〜図14を参照して、ストリーミング配信処理を具体的に説明するものとする。なお、図8〜図12は、動画像のストリーミング配信の動作としてのリアルタイム・ストップモーションを説明するための図、また、図13及び図14は、動画像のストリーミング配信の動作としてのリアルタイム・スローモーションを説明するための図である。   FIG. 5 to FIG. 7 are flowcharts showing a streaming distribution process that is started when moving image streaming distribution is designated by a user operation. Hereinafter, the streaming distribution process will be specifically described with reference to FIGS. 8 to 12 are diagrams for explaining real-time stop motion as an operation of streaming distribution of moving images, and FIGS. 13 and 14 are real-time slow motions as an operation of streaming distribution of moving images. It is a figure for demonstrating a motion.

先ず、撮像装置1の制御部11は、携帯端末装置2、通信ネットワーク(公衆通信網の無線通信網3、インターネット5)を介して管理サーバ6にリアルタイムにストリーミング配信する画像を記憶部13内の可搬型メモリ(例えば、SDカード)に順次記録保存させる動作を開始する(図5のステップS1)。次に、動画像のストリーミング配信用として、高速度撮影が予めユーザ操作により指定されているかを調べ(ステップS2)、高速度撮影が指示されていなければ(ステップS2でNO)、図6のフローに移る。この場合、撮像部15では、通常、30fpsで動画撮影を行っているので、33.33ms間隔で撮影された動画像をリアルタイムにストリーミング配信(通常配信)する処理を開始する(ステップS14)。   First, the control unit 11 of the imaging device 1 stores in the storage unit 13 an image that is streamed in real time to the management server 6 via the mobile terminal device 2 and the communication network (wireless communication network 3 of the public communication network, the Internet 5). An operation of sequentially recording and saving data in a portable memory (for example, an SD card) is started (step S1 in FIG. 5). Next, for streaming distribution of moving images, it is checked whether or not high-speed shooting is designated in advance by a user operation (step S2). If high-speed shooting is not instructed (NO in step S2), the flow of FIG. Move on. In this case, since the imaging unit 15 normally performs moving image shooting at 30 fps, processing for streaming distribution (normal distribution) of moving images captured at intervals of 33.33 ms is started (step S14).

このように動画像のストリーミング配信中において、所定の操作(静止画撮影操作)が行われたか否かを調べたり(ステップS15)、その他の操作が行われたか否かを調べたりする(ステップS16)。いま、その他の操作が行われたときには(ステップS16でYES)、その操作に応じた処理を行う(ステップS17)。例えば、ストリーミング配信の一時停止を指示する操作が行われたときには、ストリーミング配信一時停止処理を行った後、上述したステップS15に移るが、ストリーミング配信の終了を指示する操作が行われたときには、ストリーミング配信を終了させるために図5〜図7のフローから抜ける(図示省略)。   In this way, during streaming distribution of moving images, it is checked whether a predetermined operation (still image shooting operation) has been performed (step S15), or whether other operations have been performed (step S16). ). If another operation is performed (YES in step S16), a process corresponding to the operation is performed (step S17). For example, when an operation for instructing suspension of streaming distribution is performed, the streaming distribution suspension process is performed, and then the process proceeds to step S15 described above. However, when an operation for instructing termination of streaming distribution is performed, streaming operation is performed. In order to end the distribution, the flow of FIGS. 5 to 7 is exited (not shown).

また、ストリーミング配信中において所定の操作(静止画撮影操作)が行われたときには(ステップS15でYES)、静止画撮影操作時に撮像部15によって撮影されたフレーム画像を静止画像として取得する静止画取得処理を行う(ステップS18)。そして、静止画配信フラグF1を参照して、この静止画像の配信方法を決定(ステップS19)した後、配信中の動画像に代えて所定の操作(静止画撮影操作)に対応した画像として、静止画撮影操作時に取得した静止画像を静止画配信フラグF1の値で示される配信方法に従って配信する静止画配信処理を開始すると共に、静止画像の配信を開始してからの経過時間を計測するタイマ(図示省略)の動作を開始する(ステップS20)。   Also, when a predetermined operation (still image shooting operation) is performed during streaming delivery (YES in step S15), still image acquisition that acquires a frame image captured by the imaging unit 15 during the still image shooting operation as a still image Processing is performed (step S18). Then, referring to the still image distribution flag F1, after determining the distribution method of this still image (step S19), as an image corresponding to a predetermined operation (still image shooting operation) instead of the moving image being distributed, A timer that starts a still image distribution process for distributing a still image acquired at the time of still image shooting operation according to a distribution method indicated by the value of the still image distribution flag F1 and measures an elapsed time after starting the distribution of the still image The operation (not shown) is started (step S20).

そして、追っかけ再生フラグF2の値は“1”であるかを調べるが(ステップS21)、いま、追っかけ再生フラグF2の値が“0”であれば(ステップS21でNO)、上述のタイマがタイムアウトになったか、つまり、静止画像の配信を開始してから所定時間を経過したかを調べたり(ステップS23)、静止画配信の停止を指示する操作(例えば、レリーズボタンの解除操作)が行われたかを調べたりする(ステップS24)。以下、タイムアウトになるまで(ステップS23でYES)あるいは静止画配信停止操作が行われるまで(ステップS24でYES)、上述のステップS23に戻り、静止画配信処理を継続させる。   Then, it is checked whether the value of the chasing playback flag F2 is “1” (step S21). If the value of the chasing playback flag F2 is “0” (NO in step S21), the above-mentioned timer times out. That is, that is, whether or not a predetermined time has elapsed since the start of still image distribution (step S23), or an operation to stop still image distribution (for example, release button release operation) is performed. Or the like is checked (step S24). Thereafter, until time-out (YES in step S23) or until a still image distribution stop operation is performed (YES in step S24), the process returns to step S23 and the still image distribution process is continued.

ここで、タイムアウトになって所定時間が経過したとき(ステップS23でYES)あるいは静止画配信停止操作が行われたときには(ステップS24でYES)、追っかけ再生フラグF2の値が“0”であるかを調べるが(ステップS25)、いま、その値は“0”であるから(ステップS25でNO)、静止画配信を停止して動画像のストリーミング配信を再開することにより通常状態に戻す(ステップS27)。その後、上述した図5のステップS2に移る。   Here, when a predetermined time has elapsed since the timeout occurred (YES in step S23) or when a still image distribution stop operation is performed (YES in step S24), whether the value of the chasing playback flag F2 is “0”? However, since the value is “0” (NO in step S25), the still image distribution is stopped and the moving image streaming distribution is resumed to return to the normal state (step S27). ). Thereafter, the process proceeds to step S2 in FIG.

図8〜図10は、ストリーミング配信の動作(リアルタイム・ストップモーション)において、静止画像の配信方法を説明するための図である。図11は、ストリーミング配信の動作(リアルタイム・ストップモーション)において、追っかけ再生を説明するための図である。なお、図中、上段側の撮影動画像とは、撮像部15によって33.33msの間隔で撮影された動画像を示し、また、下段側のストリーミング画像とは、33.33msの間隔でストリーミング配信される画像を示している。なお、図中、四角形内の数値は、一連の動画像を特定するために付されたフレーム番号であり、図示の場合は、フレーム番号「10」から「35」までを例示している。   8 to 10 are diagrams for explaining a still image distribution method in the streaming distribution operation (real-time stop motion). FIG. 11 is a diagram for explaining chasing playback in the streaming delivery operation (real-time stop motion). In the figure, the upper-side captured moving image indicates a moving image captured at an interval of 33.33 ms by the imaging unit 15, and the lower-stage streaming image is streamed at an interval of 33.33 ms. An image to be displayed is shown. In the figure, the numerical values in the rectangles are frame numbers assigned to identify a series of moving images. In the illustrated example, frame numbers “10” to “35” are illustrated.

更に、図8は、静止画配信フラグF1の値が“0”の場合の配信方法を説明するための図で、静止画配信フラグF1の値が“0”の場合において、動画像のストリーミング配信中に所定の操作(静止画撮影操作)が行われると、この静止画撮影操作時に撮影されたフレーム画像(静止画像)を、配信中の動画像に代えて所定時間配信する。図示の例では、撮影動画像のフレーム番号が「12」のタイミングで静止画撮影操作が行われた場合で、図中、aは、静止画撮影操作時に撮影された画像(フレーム番号「12」の画像)を示している(以下、同様)。そして、図示の例では、この画像(静止画像)をフレーム番号「12」〜「19」の間、その動画像に代えて33.33msの間隔で配信し、その後、この静止画配信から動画像のストリーミング配信に戻した場合を例示している。   Further, FIG. 8 is a diagram for explaining a distribution method when the value of the still image distribution flag F1 is “0”. When the value of the still image distribution flag F1 is “0”, streaming distribution of moving images is performed. When a predetermined operation (still image shooting operation) is performed during this time, the frame image (still image) shot during the still image shooting operation is distributed for a predetermined time instead of the moving image being distributed. In the illustrated example, a still image shooting operation is performed at the timing when the frame number of the captured moving image is “12”. In the figure, “a” indicates an image (frame number “12”) that was captured during the still image shooting operation. (Hereinafter the same). In the example shown in the figure, this image (still image) is distributed between frame numbers “12” to “19” at intervals of 33.33 ms instead of the moving image. The case where it returns to streaming delivery of is illustrated.

図9は、静止画配信フラグF1の値が“1”の場合の配信方法を説明するための図で、静止画配信フラグF1の値が“1”の場合において、動画像のストリーミング配信中に所定の操作(静止画撮影操作)が行われると、配信中の動画像に代えて、この静止画撮影操作時に撮影されたフレーム画像(静止画像)と動画像とを交互に所定時間配信する。図示の場合は、撮影動画像のフレーム番号が「12」のタイミングで静止画撮影操作が行われた場合で、静止画撮影操作時に撮影された画像(静止画像)と動画像とを33.33msの間隔でフレーム番号「12」〜「19」の間、「a」、「13」、「a」、「15」、「a」、「17」、「a」、「19」のように交互に配信し、その後、この動画像・静止画像交互配信から動画像のストリーミング配信に戻した場合を例示している。   FIG. 9 is a diagram for explaining a distribution method when the value of the still image distribution flag F1 is “1”. When the value of the still image distribution flag F1 is “1”, the moving image is being streamed. When a predetermined operation (still image shooting operation) is performed, a frame image (still image) and a moving image captured during the still image shooting operation are alternately distributed for a predetermined time instead of the moving image being distributed. In the case shown in the figure, when a still image shooting operation is performed at the timing when the frame number of the captured moving image is “12”, an image (still image) and a moving image captured at the time of the still image shooting operation are 33.33 ms. Between frame numbers “12” to “19” at intervals of “a”, “13”, “a”, “15”, “a”, “17”, “a”, “19” In this example, the distribution is then returned to the streaming distribution of moving images from the moving image / still image alternate distribution.

図10は、静止画配信フラグF1の値が“2”の場合の配信方法を説明するための図で、静止画配信フラグF1の値が“2”の場合において、動画像のストリーミング配信中に所定の操作(静止画撮影操作)が行われると、配信中の動画像に代えて、この静止画撮影操作時に撮影されたフレーム画像(静止画像)を動画像に合成した画像を生成し、この合成画像を所定時間配信する。図示の場合は、撮影動画像のフレーム番号が「12」のタイミングで静止画撮影操作が行われた場合で、この静止画撮影操作時に撮影された画像(静止画像)と動画像とを合成した画像を33.33msの間隔で順次生成し、フレーム番号が「12」〜「19」の間、各合成画像「12+a」、「13+a」、…、「18+a」、「19+a」を配信し、その後、この動画像・静止画像合成配信から動画像のストリーミング配信に戻した場合を例示している。   FIG. 10 is a diagram for explaining a distribution method when the value of the still image distribution flag F1 is “2”. When the value of the still image distribution flag F1 is “2”, the moving image is being streamed. When a predetermined operation (still image shooting operation) is performed, an image is generated by combining the frame image (still image) shot during the still image shooting operation with the moving image instead of the moving image being distributed. Deliver the composite image for a predetermined time. In the case shown in the figure, a still image shooting operation is performed at the timing when the frame number of the captured moving image is “12”, and the image (still image) captured during the still image shooting operation is combined with the moving image. Images are generated sequentially at intervals of 33.33 ms, and each composite image “12 + a”, “13 + a”,..., “18 + a”, “19 + a” is distributed between frame numbers “12” to “19”. In this example, the moving image / still image synthesis distribution is returned to the moving image streaming distribution.

一方、上述のように静止画配信処理(図6のステップS20)を開始した場合に、追っかけ再生フラグF2の値が“1”であれば(ステップS21でYES)、撮影動画像を間引いて、追っかけ配信用バッファ13cに順次記憶させる書き込み動作を開始するが(ステップS22)、その値が“0”であれば(ステップS21でNO)、追っかけ配信用バッファ13cへの書き込みをスキップする。図11は、図8と同様、静止画配信フラグF1の値が“0”の場合で、図示のように撮影動画像のフレーム番号が「12」のタイミングで静止画撮影操作が行われると、制御部11は、静止画撮影操作時に撮影された画像(静止画像)を、配信中の撮影動画像に代えて33.33msの間隔で配信する動作を開始する。この場合、追っかけ再生フラグF2の値が“1”であるから撮影動画像を間引いて(図示の例では1/2に間引いて)、追っかけ配信用バッファ13cに順次記憶させる書き込み動作を開始する。図示の場合、追っかけ配信用バッファ13cには静止画撮影操作時を起点として、1/2に間引きしたフレーム番号「12」、「14」、「16」、「18」、…の各画像が順次記憶された場合を例示している。   On the other hand, when the still image distribution process (step S20 in FIG. 6) is started as described above, if the value of the chasing playback flag F2 is “1” (YES in step S21), the captured moving image is thinned out. The write operation for sequentially storing in the chasing distribution buffer 13c is started (step S22). If the value is “0” (NO in step S21), the writing to the chasing distribution buffer 13c is skipped. FIG. 11 shows a case where the value of the still image distribution flag F1 is “0”, as in FIG. 8, and when a still image shooting operation is performed at the timing when the frame number of the shooting moving image is “12” as shown in FIG. The control unit 11 starts an operation of distributing an image (still image) captured at the time of still image capturing operation at intervals of 33.33 ms instead of the captured moving image being distributed. In this case, since the value of the chasing playback flag F2 is “1”, the shooting operation is thinned out (thinned in the example in the figure) and the writing operation of sequentially storing the chasing delivery buffer 13c is started. In the case shown in the figure, the chasing distribution buffer 13c sequentially contains images of frame numbers “12”, “14”, “16”, “18”,. The case where it memorize | stores is illustrated.

また、追っかけ再生フラグF2の値が“1”であれば(ステップS25でYES)、静止画配信に代えて、追っかけ配信用バッファ13c内の動画像を順次読み出しながら追っかけ再生配信(高速間引き配信)する処理に移る(ステップS26)。図11の場合には、フレーム番号が「19」のタイミングで静止画配信が終了し、「20」のタイミングで追っかけ再生配信を開始した場合で、追っかけ配信用バッファ13c内の各画像は、33.33msの間隔で順次読み出されて追っかけ再生配信される。   If the value of the chasing playback flag F2 is “1” (YES in step S25), the chasing playback distribution (high-speed thinning distribution) is performed while sequentially reading the moving images in the chasing distribution buffer 13c instead of the still image distribution. The process proceeds to step S26. In the case of FIG. 11, the still image distribution ends at the timing of the frame number “19” and the chasing playback distribution starts at the timing of “20”, and each image in the chasing distribution buffer 13c is 33. .Sequentially read out at 33 ms intervals for chasing playback distribution.

その結果、追っかけ配信用バッファ13c内の一番目の画像(フレーム番号「12」の画像)は、撮影動画像のフレーム番号「20」のタイミングで読み出されて配信され、二番目の画像(フレーム番号「14」の画像)は、「21」のタイミングで読み出されて配信され、三番目の画像(フレーム番号「16」の画像)は、「22」のタイミングで読み出されて配信され、四番目の画像(フレーム番号「18」の画像)は、「23」のタイミングで読み出されて配信され、以下、同様。なお、追っかけ配信用バッファ13cには撮影動画像を間引いて順次記憶されているので、その間引き量に応じて高速な追っかけが可能となる。   As a result, the first image (image with the frame number “12”) in the chasing distribution buffer 13c is read and distributed at the timing of the frame number “20” of the captured moving image, and the second image (frame) The image with the number “14”) is read and distributed at the timing “21”, and the third image (the image with the frame number “16”) is read and distributed at the timing “22”. The fourth image (image with frame number “18”) is read and distributed at the timing “23”, and so on. Note that the chasing distribution buffer 13c sequentially stores the captured moving images, so that high-speed chasing can be performed according to the thinning amount.

この追っかけ配信用バッファ13cへの書き込み動作と追っかけ再生配信は、撮影動画像に追いつくまで継続される。すなわち、図11の例において撮影動画像に追いつくのは、フレーム番号「28」の場合であるから、追っかけ配信用バッファ13cにはフレーム番号「12」、「14」、…、「26」の各画像が順次記憶され、その「26」の画像が配信されるまで上述の書き込み動作及び追っかけ再生配信が継続される。これによって撮影動画像に追いつくと、その時点で追っかけ再生配信処理が終了する。そして、ステップS27に移り、動画像のストリーミング配信を再開することにより通常状態に戻す。その後、上述した図5のステップS2に移る。   The writing operation to the chasing distribution buffer 13c and chasing reproduction distribution are continued until the captured moving image is caught up. That is, in the example of FIG. 11, it is the case of frame number “28” that catches up with the captured moving image, so that each of the frame numbers “12”, “14”,. The images are sequentially stored, and the above-described writing operation and chasing playback distribution are continued until the “26” image is distributed. Thus, when the captured moving image catches up, the chasing playback distribution process ends at that point. Then, the process proceeds to step S27 to resume the normal state by restarting the streaming distribution of the moving image. Thereafter, the process proceeds to step S2 in FIG.

他方、動画像の高速度撮影が指示されている場合には(図5のステップS2でYES)、撮像部15ではフレームレート(120fps)で高速度撮影が行われているので、8.33ms毎に画像が撮影されるが、ストリーミング配信よりも画像が生成される間隔の方が4倍速いために1/4の画像間引きでストリーミング配信(間引き配信)を行う(ステップS3)。このように高速度撮影のストリーミング配信(間引き配信)中において、所定の操作として静止画撮影操作が行われたか否かを調べたり(ステップS4)、他の所定の操作としてスローモーション再生を指示する操作が行われたか否かを調べたり(図7のステップS28)、その他の操作が行われたか否かを調べたりするが(ステップS29)、いま、その他の操作が行われたときには(ステップS29でYES)、その操作に応じた処理を行う(ステップS30)。例えば、ストリーミング配信の一時停止を指示する操作が行われたときには、ストリーミング配信一時停止処理を行った後、上述した図5のステップS4に移るが、ストリーミング配信の終了を指示する操作が行われたときには、ストリーミング配信を終了させるために図5〜図7のフローから抜ける(図示省略)。   On the other hand, when high-speed shooting of a moving image is instructed (YES in step S2 in FIG. 5), since high-speed shooting is performed at the frame rate (120 fps) in the imaging unit 15, every 8.33 ms. However, since the interval at which images are generated is four times faster than streaming delivery, streaming delivery (decimation delivery) is performed with 1/4 image skipping (step S3). In this way, during streaming delivery (thinning delivery) of high-speed shooting, it is checked whether or not a still image shooting operation has been performed as a predetermined operation (step S4), and slow motion playback is instructed as another predetermined operation. It is checked whether or not an operation has been performed (step S28 in FIG. 7), or whether or not another operation has been performed (step S29). Now, when another operation is performed (step S29). And YES), processing corresponding to the operation is performed (step S30). For example, when an operation for instructing to pause streaming distribution is performed, after performing streaming distribution suspension processing, the process proceeds to step S4 in FIG. 5 described above, but an operation for instructing termination of streaming distribution has been performed. Sometimes, the flow of FIGS. 5 to 7 is exited (not shown) in order to end the streaming distribution.

また、高速度撮影のストリーミング配信中において所定の操作(静止画撮影操作)が行われたときには(図5のステップS4でYES)、静止画撮影操作時に撮像部15によって撮影された画像を静止画像として取得する(ステップS5)。そして、静止画配信フラグF1を参照して、この静止画像の配信方法を決定(ステップS6)した後、配信中の動画像に代えて所定の操作(静止画撮影操作)に対応した画像として静止画撮影操作時に取得した画像(静止画像)を、静止画配信フラグF1の値で示される配信方法に従って配信する静止画配信処理を開始すると共に、静止画像の配信を開始してからの経過時間を計測するタイマの動作を開始する(ステップS7)。   Further, when a predetermined operation (still image shooting operation) is performed during streaming distribution of high-speed shooting (YES in step S4 in FIG. 5), an image shot by the imaging unit 15 during the still image shooting operation is a still image. (Step S5). Then, with reference to the still image distribution flag F1, after determining the distribution method of this still image (step S6), the still image is still captured as an image corresponding to a predetermined operation (still image shooting operation) instead of the moving image being distributed. The still image distribution processing for distributing the image (still image) acquired at the time of image shooting operation according to the distribution method indicated by the value of the still image distribution flag F1 is started, and the elapsed time from the start of the distribution of the still image is set. The timer operation to be measured is started (step S7).

図12〜図14は、高速度撮影が指示されている場合の動作を示した図である。なお、図中、上段側の高速度撮影動画像とは、撮像部15によって8.33msの間隔で撮影された動画像を示し、また、中段側の間引きストリーミング画像(1)とは、高速度撮影動画像を1/4に間引きした画像を示し、この1/4間引きによって各画像は33.33msの間隔となる。下段側の間引きストリーミング画像(2)とは、実際に配信される画像を示し、各画像は33.33msの間隔で配信される。なお、図中、四角形内の数値は、一連の動画像を特定するために付されたフレーム番号であり、図示の例では、フレーム番号「10」から「59」までを示している。   12 to 14 are diagrams showing operations when high-speed shooting is instructed. In the figure, the high-speed captured moving image on the upper side indicates a moving image captured at an interval of 8.33 ms by the imaging unit 15, and the thinned streaming image (1) on the middle side indicates the high-speed An image obtained by thinning a photographic moving image to ¼ is shown, and by this ¼ thinning, each image has an interval of 33.33 ms. The thinned streaming image (2) on the lower side indicates an image that is actually distributed, and each image is distributed at an interval of 33.33 ms. In the figure, the numerical values in the rectangles are frame numbers assigned to specify a series of moving images, and in the example shown, frame numbers “10” to “59” are shown.

更に、図12は、ストリーミング配信の動作(リアルタイム・ストップモーション)において、図8と同様に、静止画撮影操作が行われた場合に静止画配信フラグF1の値が“0”の場合で、高速度撮影の間引きストリーミング配信中に静止画撮影操作が行われると、その静止画撮影操作時に撮影された画像(静止画像)を、配信中の動画像に代えて所定時間配信する。図示の例は、フレーム番号が「18」のタイミングで静止画撮影操作が行われた場合で、この静止画像をフレーム番号「18」〜「50」の間、33.33msの間隔で配信し、その後、この静止画配信から高速度撮影の間引きストリーミング配信に戻した場合を例示している。   Further, FIG. 12 shows a case where the value of the still image distribution flag F1 is “0” when the still image shooting operation is performed in the streaming distribution operation (real-time stop motion) as in FIG. When a still image shooting operation is performed during thin-out streaming distribution of speed shooting, an image (still image) shot during the still image shooting operation is distributed for a predetermined time instead of the moving image being distributed. In the example shown in the figure, when a still image shooting operation is performed at the timing of the frame number “18”, this still image is distributed at intervals of 33.33 ms between the frame numbers “18” to “50”. Then, the case where it returns to the thinning-out streaming delivery from this still image delivery to high-speed imaging is illustrated.

次に、追っかけ再生フラグF2の値は“1”であるかを調べ(ステップS8)、その値が1”であれば(ステップS8でYES)、間引きストリーミング画像(1)を1/2に間引いて追っかけ配信用バッファ13cに順次記憶させる書き込み動作を開始するが(ステップS9)、“0”であれば(ステップS8でNO)、追っかけ配信用バッファ13cへの書き込みをスキップする。そして、上述のタイマがタイムアウトになったか、つまり、静止画像の配信を開始してから所定時間を経過したかを調べたり(ステップS10)、静止画配信の停止を指示する操作が行われたかを調べたりする(ステップS11)。   Next, it is checked whether or not the value of the chasing playback flag F2 is “1” (step S8). If the value is 1 (YES in step S8), the thinned-out streaming image (1) is thinned by half. Then, the write operation for sequentially storing in the chasing distribution buffer 13c is started (step S9), but if it is “0” (NO in step S8), the writing to the chasing distribution buffer 13c is skipped. It is checked whether the timer has timed out, that is, whether a predetermined time has elapsed since the start of still image delivery (step S10), or whether an operation to stop still image delivery has been performed (step S10). Step S11).

以下、タイムアウトになるまで(ステップS10でYES)あるいは静止画配信停止操作が行われるまで(ステップS11でYES)、静止画配信処理を継続させるが、タイムアウトになったとき(ステップS10でYES)あるいは静止画配信停止操作が行われたときには(ステップS11でYES)、追っかけ再生フラグF2の値が“0”であるかを調べ(ステップS12)、その値が“0”であれば(ステップS12でNO)、図7のステップS39に移り、静止画配信を停止してストリーミング配信(間引き配信)を再開することにより通常状態に戻す。その後、上述した図5のステップS2に移る。   Thereafter, the still image distribution process is continued until a time-out occurs (YES in step S10) or until a still image distribution stop operation is performed (YES in step S11). However, when a time-out occurs (YES in step S10) or When the still image distribution stop operation is performed (YES in step S11), it is checked whether the value of the chasing playback flag F2 is “0” (step S12). If the value is “0” (in step S12). NO), the process proceeds to step S39 in FIG. 7 to return to the normal state by stopping still image distribution and restarting streaming distribution (thinning distribution). Thereafter, the process proceeds to step S2 in FIG.

また、追っかけ再生フラグF2の値が“1”であれば(ステップS12でYES)、静止画配信に代えて、追っかけ配信用バッファ13c内の動画像を順次読み出しながら33.33msの間隔でストリーミング配信する追っかけ再生配信処理に移る(ステップS13)。この場合、追っかけ配信用バッファ13cへの書き込み動作及び追っかけ再生配信は、高速度撮影動画像に追いつくまで継続される。そして、追っかけ再生が高速度撮影動画像に追いつくことにより追っかけ再生配信が終了すると、高速度撮影のストリーミング配信(間引き配信)を再開することにより通常状態に戻す(図7のステップS39)。   If the value of the chasing playback flag F2 is “1” (YES in step S12), instead of still image distribution, streaming distribution is performed at intervals of 33.33 ms while sequentially reading the moving images in the chasing distribution buffer 13c. The process proceeds to the chasing playback distribution process (step S13). In this case, the writing operation to the chasing distribution buffer 13c and the chasing reproduction distribution are continued until the high-speed shooting moving image is caught up. Then, when the chasing playback is over by the chasing playback catching up with the high-speed shooting moving image, the high-speed shooting streaming delivery (thinning delivery) is resumed to return to the normal state (step S39 in FIG. 7).

また、高速度撮影の間引きストリーミング配信中に所定の操作としてスローモーション再生操作が行われたときには(図7のステップS28でYES)、高速度撮影動画像をスローモーション配信用バッファ13dに順次記憶させる書き込み動作を開始すると共に(ステップS31)、間引き配信に代えて、スローモーション配信用バッファ13dから動画像を順次読み出して33.33msの間隔でスローモーション配信(ストリーミング配信)する動作を開始する(ステップS32)。   Further, when a slow motion playback operation is performed as a predetermined operation during thin streaming distribution of high-speed shooting (YES in step S28 in FIG. 7), the high-speed shooting moving image is sequentially stored in the slow motion distribution buffer 13d. In addition to starting the writing operation (step S31), in place of the thinned-out distribution, the moving image is sequentially read out from the slow motion distribution buffer 13d, and the operation of performing the slow motion distribution (streaming distribution) at an interval of 33.33 ms is started (step S31). S32).

図13は、高速度撮影のストリーミング配信の動作(リアルタイム・スローモーション)において、フレーム番号が「18」のタイミングでスローモーション再生操作が行われた場合である。図示の場合、スローモーション配信用バッファ13dには、8.33msの間隔で撮影された高速度撮影動画像としてフレーム番号が「19」、「20」、「21」、「22」の各画像が順次記憶され、また、このスローモーション配信用バッファ13dから順次読み出された「19」、「20」、「21」、「22」の各画像が33.33msの間隔でスローモーション配信されることを例示している。   FIG. 13 shows a case where the slow motion playback operation is performed at the timing of the frame number “18” in the streaming delivery operation (real-time / slow motion) of high-speed shooting. In the case shown in the figure, the slow motion distribution buffer 13d has images with frame numbers “19”, “20”, “21”, and “22” as high-speed captured moving images captured at intervals of 8.33 ms. The images “19”, “20”, “21”, and “22” that are sequentially stored and sequentially read from the slow motion delivery buffer 13d are delivered in slow motion at intervals of 33.33 ms. Is illustrated.

その結果、スローモーション配信用バッファ13d内の一番目の画像(フレーム番号「19」の画像)は、高速度撮影動画像のフレーム番号「22」のタイミングで読み出されて配信され、二番目の画像(フレーム番号「20」の画像)は、「26」のタイミングで読み出されて配信され、三番目の画像(フレーム番号「21」の画像)は、「30」のタイミングで読み出されて配信され、四番目の画像(フレーム番号「22」の画像)は、「34」のタイミングで読み出されて配信される。   As a result, the first image (image with the frame number “19”) in the slow motion distribution buffer 13d is read and distributed at the timing of the frame number “22” of the high-speed moving image, and the second image is distributed. The image (image with frame number “20”) is read and distributed at timing “26”, and the third image (image with frame number “21”) is read at timing “30”. The fourth image (the image with the frame number “22”) is read and distributed at the timing “34”.

そして、追っかけ再生フラグF2の値は“1”であるかを調べるが(ステップS33)、図13は、追っかけ再生が指定されていない場合であり、その値は“0”であるから(ステップS33でNO)、以下、スローモーション配信用バッファ13dに残容量(空き容量)があるかを調べたり(ステップS35)、スローモーション再生の停止を指示する操作が行われたかを調べたりし(ステップS36)、スローモーション配信用バッファ13dに残容量が無くなるまで(ステップS35でNO)あるいはスローモーション再生停止操作が行われるまで(ステップS36でYES)、スローモーション再生を継続させる。   Then, it is checked whether or not the value of the chasing playback flag F2 is “1” (step S33). FIG. 13 shows the case where chasing playback is not designated, and the value is “0” (step S33). In step S36, it is checked whether there is a remaining capacity (free capacity) in the slow motion distribution buffer 13d (step S35), or whether an operation to stop the slow motion playback has been performed (step S36). ) Slow motion playback is continued until there is no remaining capacity in the slow motion distribution buffer 13d (NO in step S35) or until a slow motion playback stop operation is performed (YES in step S36).

いま、スローモーション配信用バッファ13dに残容量が無くなったとき(ステップS35でNO)あるいはスローモーション再生停止操作が行われたときには(ステップS36でYES)、追っかけ再生フラグF2の値が“0”であるかを調べ(ステップS37)、その値が“0”であれば(ステップS37でNO)、スローモーション再生配信を停止して高速度撮影のストリーミング配信(間引き配信)を再開することにより通常状態に戻す(ステップS39)。その後、図5のステップS4に移る。図13の場合、スローモーション配信は、高速度撮影動画像のフレーム番号が「19」〜「34」の間で行われた後、高速度撮影のストリーミング配信(間引き配信)に戻った場合を例示している。   Now, when there is no remaining capacity in the slow motion delivery buffer 13d (NO in step S35) or when a slow motion playback stop operation is performed (YES in step S36), the value of the chasing playback flag F2 is “0”. If the value is “0” (NO in step S37), the slow motion playback distribution is stopped and the high-speed shooting streaming distribution (thinning distribution) is resumed. (Step S39). Thereafter, the process proceeds to step S4 in FIG. In the case of FIG. 13, the case where the slow motion distribution is performed when the frame number of the high-speed shooting moving image is “19” to “34” and then returns to the high-speed shooting streaming distribution (thinning distribution). doing.

一方、追っかけ再生フラグF2の値が“1”であれば(ステップS33でYES)、間引きストリーミング画像(1)を間引いて(例えば、1/2に間引いて)、追っかけ配信用バッファ13cに順次記憶させる書き込み動作を開始する(ステップS34)。その後、
ステップS37で追っかけ再生フラグF2の値が“1”であることが検出されてステップS38に移り、スローモーション再生配信に代えて、追っかけ配信用バッファ13c内の動画像を順次読み出しながら33.33msの間隔でストリーミング配信する追っかけ再生配信(高速間引き配信)に移る。この場合、追っかけ配信用バッファ13cへの書き込み動作及び追っかけ再生配信は、高速度撮影動画像に追いつくまで継続される。
On the other hand, if the value of the chasing playback flag F2 is “1” (YES in step S33), the thinned-out streaming image (1) is thinned out (for example, thinned down to 1/2) and sequentially stored in the chasing distribution buffer 13c. The write operation to be started is started (step S34). after that,
In step S37, it is detected that the value of the chasing playback flag F2 is “1”, the process proceeds to step S38, and instead of slow motion playback distribution, the moving image in the chasing distribution buffer 13c is sequentially read out for 33.33 ms. Moves to chasing playback distribution (high-speed thinning distribution) that performs streaming distribution at intervals. In this case, the writing operation to the chasing distribution buffer 13c and the chasing reproduction distribution are continued until the high-speed shooting moving image is caught up.

図14は、図13と同様、高速度撮影のストリーミング配信の動作(リアルタイム・スローモーション)においてフレーム番号が「18」のタイミングでスローモーション再生操作が行われた場合を示し、更に、追っかけ再生フラグF2の値が“1の場合”である。図示の場合、追っかけ配信用バッファ13cにはスローモーション再生操作時を起点として、間引きストリーミング画像(1)を更に1/2に間引きしたフレーム番号「26」、「34」、「42」の各画像が順次記憶された場合を例示している。   FIG. 14 shows a case where the slow motion playback operation is performed at the timing of the frame number “18” in the high-speed shooting streaming delivery operation (real-time slow motion) as in FIG. The value of F2 is “when 1”. In the case shown in the drawing, each image of frame numbers “26”, “34”, and “42” obtained by further thinning out the thinned streaming image (1) to 1/2 in the chasing distribution buffer 13c from the time of the slow motion playback operation. The case where is sequentially stored is illustrated.

このようにスローモーション再生配信に代えて追っかけ配信が行われると、追っかけ配信用バッファ13c内の各画像は、33.33msの間隔で順次読み出されて追っかけ再生配信される。その結果、追っかけ配信用バッファ13c内の一番目の画像(フレーム番号「26」の画像)は、高速度撮影動画像のフレーム番号「38」のタイミングで読み出されて配信され、二番目の画像(フレーム番号「34」の画像)は、「42」のタイミングで読み出されて配信され、三番目の画像(フレーム番号「42」の画像)は、「46」のタイミングで読み出されて配信される。この場合、図14の例では、フレーム番号「50」の時点で追いつくので、この時点で追っかけ再生配信処理を終了し、ステップS39に移り、高速度撮影のストリーミング配信(間引き配信)を再開することにより通常状態に戻す。その後、図5のステップS4に移る。   In this way, when chasing distribution is performed instead of slow motion reproduction distribution, each image in the chasing distribution buffer 13c is sequentially read out at intervals of 33.33 ms and chased reproduction distribution is performed. As a result, the first image (image with frame number “26”) in the chasing distribution buffer 13c is read out and distributed at the timing of frame number “38” of the high-speed shooting moving image, and the second image. (Image with frame number “34”) is read and distributed at timing “42”, and the third image (image with frame number “42”) is read and distributed at timing “46”. Is done. In this case, in the example of FIG. 14, the catch-up playback distribution process is terminated at this point because the frame number “50” is reached, and the flow moves to step S39 to resume the high-speed shooting streaming distribution (decimation distribution). To return to the normal state. Thereafter, the process proceeds to step S4 in FIG.

他方、上述のような画像の配信中には配信された動画像と所定の操作に対応した画像とを記憶部13内の可搬型メモリ(例えば、SDカード)に順次記録保存させる動作は、配信開始から配信終了までの間(図5〜図7のフローを実行している間)、継続される結果、この記憶部13内の可搬型メモリには、配信開始から配信終了までに配信された全ての画像がそのまま記録保存される。   On the other hand, during the distribution of the image as described above, the operation of sequentially recording and storing the distributed moving image and the image corresponding to the predetermined operation in the portable memory (for example, SD card) in the storage unit 13 is performed. As a result of continuing from the start to the end of distribution (while executing the flow of FIGS. 5 to 7), the portable memory in the storage unit 13 was distributed from the start of distribution to the end of distribution. All images are recorded and saved as they are.

以上のように、本実施形態において撮像装置1は、その撮像部15により撮影されている動画像を、携帯端末装置2、通信ネットワーク(無線通信網3、インターネット5)を介してリアルタイムにストリーミング配信している状態において、そのストリーミング配信中に所定の操作が行われた場合に、所定の操作に対応した画像を所定時間配信するようにしたので、撮影されている動画像をリアルタイムにストリーミング配信する場合に、既存の機能を活用するだけでバラエティに富んだ画像を配信することができ、個人によるストリーミング配信の普及にも貢献することができるなど、実用性に富んだものとなる。   As described above, in the present embodiment, the imaging device 1 performs streaming distribution of the moving image captured by the imaging unit 15 in real time via the mobile terminal device 2 and the communication network (the wireless communication network 3 and the Internet 5). In this state, when a predetermined operation is performed during the streaming distribution, an image corresponding to the predetermined operation is distributed for a predetermined time, so that the moving image being shot is distributed in real time. In this case, a variety of images can be distributed simply by utilizing existing functions, and it is possible to contribute to the spread of streaming distribution by individuals.

ストリーミング配信中に所定の操作が行われた場合に、配信中の動画像に代えてその所定の操作に対応した画像を所定時間配信するようにしたので、視認者(視聴者)にあっては、配信中の動画像と置き換えられた画像を時間限定で見ることができる。   When a predetermined operation is performed during streaming distribution, an image corresponding to the predetermined operation is distributed for a predetermined time instead of the moving image being distributed. The images replaced with the moving images being distributed can be viewed for a limited time.

所定の操作として静止画像の撮影操作が行われた場合に、その撮影された静止画像を配信中の動画像に代えて所定時間配信するようにしたので、動画像のストリーミング配信中に静止画撮影操作を行うだけで動画像から静止画像の配信に代えることができる。   When a still image shooting operation is performed as a predetermined operation, the captured still image is distributed for a predetermined time instead of the moving image being distributed. It is possible to switch from moving images to still image distribution by simply performing an operation.

静止画像の撮影操作が行われた場合に、配信中の動画像の所定表示領域内に静止画像を合成した合成画像を配信中の動画像に代えて所定時間配信するようにしたので、視認者(視聴者)にあっては、静止画像と動画像の両方を同時に見ることが可能となる。   When a still image shooting operation is performed, a synthesized image obtained by synthesizing a still image within a predetermined display area of a moving image being distributed is distributed for a predetermined time instead of the moving image being distributed. The (viewer) can view both a still image and a moving image at the same time.

静止画像の撮影操作が行われた場合に、配信中の動画像と静止画像を交互に所定時間配信するようにしたので、視認者(視聴者)にあっては、静止画像と動画像の両方を同時に見ることが可能となる。   When a still image shooting operation is performed, the moving image being delivered and the still image are distributed alternately for a predetermined time, so that the viewer (viewer) can view both the still image and the moving image. At the same time.

静止画像配信中に配信されなかった未配信の動画像を追っかけ配信用バッファ13cに一時記憶させると共に、静止画像の配信後、追っかけ配信用バッファ13cに記憶されている未配信の動画像を基に追っかけ配信するようにしたので、視認者(視聴者)にあっては、静止画像の配信を割り込ませても、その割り込み期間内の動画像を見ることができる。   An undelivered moving image that has not been distributed during still image distribution is temporarily stored in the chasing distribution buffer 13c, and after distribution of the still image, based on the undistributed moving image stored in the chasing distribution buffer 13c. Since the chasing distribution is performed, the viewer (viewer) can view the moving image within the interruption period even if the distribution of the still image is interrupted.

追っかけ配信用バッファ13cは、静止画像の配信中に配信されなかった未配信の動画像を間引いて記憶するようにしたので、間引きに応じた高速な追っかけ配信が可能となる。   The chasing distribution buffer 13c thins out and stores undelivered moving images that were not distributed during the distribution of still images, so that high-speed chasing distribution according to the decimation is possible.

操作部14のキー操作により任意の時間を上述の所定時間として設定可能としたので、単一静止画像を連続して配信する静止画像配信、動画像内に静止画像を合成して配信する合成画像配信、静止画像と動画像とを交互に配信する交互配信を行う場合の時間をユーザの意向に応じて任意に制御することができる。   Since an arbitrary time can be set as the above-mentioned predetermined time by the key operation of the operation unit 14, still image distribution that continuously distributes a single still image, and a combined image that combines and distributes still images in a moving image It is possible to arbitrarily control the time for performing distribution and alternate distribution in which still images and moving images are alternately distributed according to the intention of the user.

レリーズボタンの押下操作(撮影開始操作)からその押下が解除されるまでの時間も所定時間とするようにしたので、レリーズボタンの押下操作で上述の所定時間を変更することが可能となる。   Since the time from the release button pressing operation (shooting start operation) to the release of the pressing is also set to the predetermined time, the predetermined time can be changed by pressing the release button.

配信中の動画像よりもスローモーションな配信を指示するスローモーション配信操作が行われた場合に、スローモーション画像を配信中の動画像に代えて所定時間配信するようにしたので、動画像のストリーミング配信中にスローモーション配信操作を行うだけでスローモーション画像の配信に代えることができる。   When a slow motion delivery operation that instructs delivery in a slower motion than the moving image being delivered is performed, the slow motion image is delivered for a predetermined time instead of the moving image being delivered. It is possible to replace slow motion image delivery simply by performing a slow motion delivery operation during delivery.

通信ネットワークの通信速度を超える速度で高速撮影が可能な撮像部15により高速度撮影された動画像を、通信ネットワークの通信速度で配信可能となるフレームレートまで間引いてストリーミング配信を行っている場合に、所定の操作としてスローモーション再生操作が行われると、スローモーション用配信バッファ13dに高速度撮影動画像を順次記憶すると共に、このスローモーション用配信バッファ13d内の高速度撮影動画像を、間引き配信中の動画像に代えて所定時間配信するようにしたので、間引いて配信している動画像に代えて間引きの無い高速度撮影動画像の配信によりスローモーション配信が可能となる。   When streaming delivery is performed by thinning out a moving image shot at a high speed by the imaging unit 15 capable of high-speed shooting at a speed exceeding the communication speed of the communication network to a frame rate that can be distributed at the communication speed of the communication network. When a slow motion playback operation is performed as a predetermined operation, the high speed shooting moving images are sequentially stored in the slow motion distribution buffer 13d, and the high speed shooting moving images in the slow motion distribution buffer 13d are thinned and distributed. Since the video is distributed for a predetermined time instead of the moving image in the middle, it is possible to perform the slow motion distribution by distributing the high-speed shooting moving image without thinning instead of the moving image distributed by thinning.

スローモーション配信中に配信されなかった未配信の動画像を追っかけ配信用バッファ13cに記憶させると共に、スローモーション配信後、追っかけ配信用バッファ13cに記憶されている未配信の動画像を基に追っかけ配信するようにしたので、視認者(視聴者)にあっては、スローモーション配信を割り込ませても、その割り込み期間内の動画像を見ることができる。   The undelivered moving image that was not distributed during the slow motion distribution is stored in the chasing distribution buffer 13c, and after the slow motion distribution, the chasing distribution is performed based on the undistributed moving image stored in the chasing distribution buffer 13c. As a result, a viewer (viewer) can view a moving image within the interruption period even if the slow motion distribution is interrupted.

追っかけ配信用バッファ13cは、スローモーション配信中に配信されなかった未配信の動画像を通常の間引き配信時のよりも更に間引いて記憶するようにしたので、間引き応じた高速な追っかけ配信が可能となる。   The chasing distribution buffer 13c stores undelivered moving images that were not distributed during the slow motion distribution more thinly than in the normal thinning distribution, so that high-speed chasing distribution according to thinning is possible. Become.

撮像部15で高速度撮影を行っている場合に、スローモーション配信操作が行われたか否かを判別するようにしたので、高速度撮影を行っている場合のみスローモーション配信を可能とすることができる。   Since it is determined whether or not a slow motion delivery operation has been performed when high-speed shooting is performed by the imaging unit 15, it is possible to enable slow motion distribution only when high-speed shooting is performed. it can.

スローモーション配信が行われる所定時間は、スローモーション配信用バッファ13dに高速度撮影動画像を記憶可能なフレーム数に応じて決められる時間であるから、スローモーション配信する時間をその時々で任意に変更することができる。   The predetermined time during which the slow motion distribution is performed is a time determined according to the number of frames in which the high-speed captured moving image can be stored in the slow motion distribution buffer 13d. Therefore, the slow motion distribution time is arbitrarily changed from time to time. can do.

スローモーション配信が行われる所定時間は、スローモーション配信の停止を指示する操作が行われるまでの時間であるので、スローモーション配信する時間をその時々で任意に変更することができる。   Since the predetermined time during which the slow motion distribution is performed is a time until an operation for instructing the stop of the slow motion distribution is performed, the time during which the slow motion distribution is performed can be arbitrarily changed from time to time.

撮像部15により撮影された画像を記憶部13に順次記憶するようにしたので、配信中の動画像をそのまま記録保存することが可能となる。   Since the images taken by the imaging unit 15 are sequentially stored in the storage unit 13, the moving image being distributed can be recorded and saved as it is.

ストリーミング配信される動画像と所定の操作に対応した画像とを記憶部13に順次記憶するようにしたので、動画像のストリーミング配信中に静止画像の配信やスローモーション配信に切り換えられたとしても、その切り換えられた画像も記録保存することが可能となる。   Since the moving image to be streamed and the image corresponding to the predetermined operation are sequentially stored in the storage unit 13, even if switching to still image distribution or slow motion distribution during streaming distribution of the moving image, The switched image can also be recorded and saved.

なお、上述した実施形態においては、撮像部15で高速度撮影を行っている場合にスローモーション配信操作に応じてスローモーション配信を行うようにしたが、スローモーション配信は、高速度撮影時に限らず、例えば、33.33ms間隔で撮影を行っている撮影時でも同様に適用可能である。この場合、図6のフローチャートにおいて、静止画撮影操作の有無を判別するステップS15でNOと判別された位置に、スローモーション配信操作の有無を判別するステップを挿入すると共に、このステップでスローモーション配信操作が行われたと判別された際にスローモーション配信処理を行うステップを挿入するようにすればよい。このスローモーション配信処理は、図7のステップS31〜ステップS39と基本的には同様の処理であるが、この場合、通常配信に代えてスローモーション配信用バッファ13dの内容を配信する際には、例えば、通常配信の1.5倍や2倍の間隔で配信するようにすればよい。   In the above-described embodiment, the slow motion delivery is performed in response to the slow motion delivery operation when the imaging unit 15 performs the high speed photography. However, the slow motion delivery is not limited to the high speed photography. For example, the present invention can be similarly applied even when shooting is performed at intervals of 33.33 ms. In this case, in the flowchart of FIG. 6, a step of determining the presence / absence of the slow motion distribution operation is inserted at the position determined as NO in step S15 for determining the presence / absence of the still image shooting operation. What is necessary is just to insert the step which performs a slow motion delivery process, when it determines with operation having been performed. This slow motion delivery process is basically the same process as steps S31 to S39 in FIG. 7, but in this case, when delivering the contents of the slow motion delivery buffer 13d instead of the normal delivery, For example, distribution may be performed at intervals of 1.5 times or twice that of normal distribution.

また、上述した実施形態においては、追っかけ配信用に撮影動画像を間引いて追っかけ配信用バッファ13cに記憶させたが、間引かずに記憶し、追っかけ配信を行う際に間引いて配信してもよい。   In the above-described embodiment, the captured moving image is thinned for chasing distribution and stored in the chasing distribution buffer 13c. However, the moving image may be stored without being thinned and distributed when chasing distribution is performed. .

また、上述した実施形態においては、動画像のストリーミング配信中の動画像に代えて、この静止画撮影操作時に撮影されたフレーム画像を静止画像として配信するようにしたが、動画撮影手段とは別個独立の静止画撮影手段を設け、この静止画撮影手段により撮影された静止画像を配信中の動画像に代えて割り込み配信するようにしてもよい。   In the above-described embodiment, the frame image captured during the still image capturing operation is distributed as a still image instead of the moving image during the streaming distribution of the moving image. An independent still image capturing unit may be provided, and the still image captured by the still image capturing unit may be interrupted and distributed instead of the moving image being distributed.

上述した実施形態においては、配信中の動画像に代えて所定の操作に対応した画像として、撮影された静止画像やスローモーション用の高速度撮影動画像としたが、予め用意されている撮影済みの画像を所定の操作に対応して読み出して割り込み配信するようにしてもよい。   In the above-described embodiment, a captured still image or a high-speed shooting moving image for slow motion is used as an image corresponding to a predetermined operation instead of the moving image being distributed. These images may be read out in correspondence with a predetermined operation and delivered by interruption.

上述した実施形態においては、撮影された静止画像を配信中の動画像に代えて所定時間配信する場合に、単一静止画像の連続して配信する静止画像配信、動画像内に静止画像を合成して配信する合成画像配信、静止画像と動画像とを交互に配信する交互配信を行うようにしたが、複数種の静止画像(例えば、静止画像A、静止画像B)を交互に配信するようにしてもよい。また、複数種の静止画像を合成して配信するようにしてもよい。   In the above-described embodiment, when a captured still image is distributed for a predetermined time instead of a moving image being distributed, still image distribution in which a single still image is distributed continuously, and still images are synthesized within the moving image The composite image distribution to be distributed and the alternate distribution to alternately distribute the still image and the moving image are performed, but a plurality of types of still images (for example, still image A and still image B) are alternately distributed. It may be. Further, a plurality of types of still images may be combined and distributed.

上述した実施形態においては、撮像装置1と携帯端末装置2との間で近距離通信を行うことにより携帯端末装置2を介して通信ネットワーク(無線通信網3、インターネット5)に接続するようにしたが、無線通信網3に接続可能な無線通信機能を撮像装置1に内蔵するようにしてもよい。   In the above-described embodiment, the short-distance communication is performed between the imaging device 1 and the mobile terminal device 2, thereby connecting to the communication network (wireless communication network 3, Internet 5) via the mobile terminal device 2. However, a wireless communication function that can be connected to the wireless communication network 3 may be built in the imaging apparatus 1.

上述した実施形態においては、デジタルコンパクトカメラに適用した場合を示したが、デジタル一眼レフカメラであってもよく、また、カメラ機能付きパーソナルコンピュータ・PDA(個人向け携帯型情報通信機器)・音楽プレイヤー・電子ゲームなどであってもよい。   In the above-described embodiments, a case where the present invention is applied to a digital compact camera has been described. However, a digital single-lens reflex camera may be used, and a personal computer with a camera function, a PDA (personal portable information communication device), a music player -It may be an electronic game.

また、上述した実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。   Further, the “apparatus” and “unit” shown in the above-described embodiments may be separated into a plurality of cases by function, and are not limited to a single case. In addition, each step described in the above-described flowchart is not limited to time-series processing, and a plurality of steps may be processed in parallel or separately.

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
(付記)
(請求項1)
請求項1に記載の発明は、
動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配設手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備えるようにしたことを特徴とする撮像装置である。
(請求項2)
請求項2に記載の発明は、請求項1に記載の撮像装置において、
前記配信手段は、前記動画撮影手段により撮影されている動画像から配信用の通常動画像をリアルタイムに生成して、このリアルタイムに生成される配信用の通常動画像を、前記通信ネットワークを介してリアルタイムにストリーミング配信し、
前記配信制御手段は、前記所定操作が行われたと判別された場合に、前記リアルタイムに生成されている配信用の通常動画像に代えて前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介してストリーミング配信させる、
ようにしたことを特徴とする撮像装置。
(請求項3)
請求項3に記載の発明は、請求項1あるいは請求項2に記載の撮像装置において、
静止画撮影手段を更に備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、前記静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記静止画撮影手段により撮影された静止画像を、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項4)
請求項4に記載の発明は、請求項3に記載の撮像装置において、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記配信中の動画像の所定表示領域内に前記静止画撮影手段により撮影された静止画像を合成した画像を、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項5)
請求項4に記載の発明は、請求項3に記載の撮像装置において、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記配信中の動画像と前記静止画撮影手段により撮影された静止画像を、前記配信手段に交互に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項6)
請求項5に記載の発明は、請求項3〜請求項5のいずれかに記載の撮像装置において、
前記配信制御手段による静止画像の配信中に配信されなかった未配信の動画像を一時的に記憶する追っかけ配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記静止画像を所定時間配信させた後、前記追っかけ配信用の一時記憶手段に記憶されている未配信の動画像を基に、前記配信手段に追っかけ配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項7)
請求項7に記載の発明は、請求項6に記載の撮像装置において、
前記追っかけ配信用の一時記憶手段は、前記静止画像の配信中に配信されなかった未配信の動画像を間引いて記憶し、
前記配信制御手段は、前記追っかけ配信用の一時記憶手段に間引いて記憶されている未配信の動画像を順次読み出すことによって、前記配信手段に追っかけ配信させる、
ようにしたことを特徴とする撮像装置である。
(請求項8)
請求項8に記載の発明は、請求項1〜請求項7のいずれかに記載の撮像装置において、
前記所定時間を任意に設定する設定手段を更に備える、
ようにしたことを特徴とする撮像装置である。
(請求項9)
請求項9に記載の発明は、請求項3〜請求項7のいずれかに記載の撮像装置において、
前記所定時間は、前記静止画撮影手段による撮影を指示する撮影操作子の操作開始から解除までの時間である、
ようにしたことを特徴とする撮像装置である。
(請求項10)
請求項9に記載の発明は、請求項1あるいは請求項2に記載の撮像装置において、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、配信中の動画像よりもスローモーションな配信を指示するスローモーション配信操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段によりスローモーション配信操作が行われたと判別された場合に、前記動画撮影手段により撮影されている動画像から配用のスローモーション画像をリアルタイムに生成し、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項11)
請求項11に記載の発明は、請求項9に記載の撮像装置において、
前記動画撮影手段は、前記通信ネットワークの通信速度を超える速度で高速撮影が可能であり、
前記配信手段は、前記動画撮影手段により高速撮影が行われた高速度撮影動画像を前記通信ネットワークの通信速度で配信可能となるフレームレートまで間引いて配信し、
前記配信手段による間引き配信中に前記判別手段によりスローモーション配信操作が行われたと判別された場合に、それ以降の前記高速度撮影動画像を一時記憶するスローモーション配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記スローモーション配信用の一時記憶手段に記憶されている高速度撮影動画像を、前記配信手段に所定時間順次読み出して配信させることによってスローモーション配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項12)
請求項12に記載の発明は、請求項10あるいは請求項11に記載の撮像装置において、
前記配信制御手段によるスローモーション配信中に配信されなかった未配信の動画像を一時記憶する追っかけ配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記スローモーション撮影画像を所定時間配信させた後、前記追っかけ配信用の一時記憶手段に記憶されている未配信の動画像を基に、前記配信手段に追っかけ配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置である。
(請求項13)
請求項13に記載の発明は、請求項12に記載の撮像装置において、
前記追っかけ配信用の一時記憶手段は、前記スローモーション配信中に配信されなかった未配信の動画像を前記配信手段による間引きよりも間引いて記憶し、
前記配信制御手段は、前記追っかけ配信用の一時記憶手段に間引いて記憶されている未配信の動画像を順次読み出すことによって、前記配信手段に追っかけ配信させる、
ようにしたことを特徴とする撮像装置である。
(請求項14)
請求項14に記載の発明は、請求項11〜請求項13のいずれかに記載の撮像装置において、
前記判別手段は、前記高速度撮影を行っているか否かを更に判別し、前記高速度撮影を行っていると判別した場合に、前記スローモーション配信操作が行われたか否かを判別する、
ようにしたことを特徴とする撮像装置である。
(請求項15)
請求項15に記載の発明は、請求項11に記載の撮像装置において、
前記所定時間は、前記スローモーション配信用の一時記憶手段に前記高速度撮影動画像を記憶可能なフレーム数に応じて決められる時間である、
ことを特徴とする撮像装置である。
(請求項16)
請求項16に記載の発明は、請求項10〜請求項14のいずれかに記載の撮像装置において、
前記所定時間は、前記スローモーション配信の停止を指示する操作が行われるまでの時間である、
ことを特徴とする撮像装置である。
(請求項17)
請求項17に記載の発明は、請求項1に記載の撮像装置において、
前記動画撮影手段により撮影された画像を順次記憶する記憶手段を更に備える、
ようにしたことを特徴とする撮像装置である。
(請求項18)
請求項18に記載の発明は、請求項17に記載の撮像装置において、
前記記憶手段は、前記配信手段により配信された動画像と前記所定の操作に対応した画像とを順次記憶する、
ようにしたことを特徴とする撮像装置である。
(請求項19)
請求項18に記載の発明は、
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信するステップと、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別するステップと、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行うステップと、
を含むことを特徴とする撮像処理方法である。
(請求項20)
請求項20に記載の発明は、
コンピュータに対して、
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する機能と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する機能と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う機能と、
を実現させるためのプログラムである。
(請求項21)
請求項21に記載の発明は、
動画像を撮影する撮像装置と、前記撮像装置によって撮影された動画像を通信ネットワークを介して受信する管理装置と、前記管理装置から前記動画像を通信ネットワークを介して受信する受信側の端末装置と、を備えた撮像処理システムであって、
前記撮像装置は、動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、を備え、
前記管理装置は、前記撮像装置からリアルタイムにストリーミング配信される動画像、前記所定の操作に対応した画像を受信してリアルタイムに前記端末装置にストリーミング配信する、
ようにしたことを特徴とする撮像処理システムである。
The embodiment of the present invention has been described above. However, the present invention is not limited to this, and includes the invention described in the claims and the equivalent scope thereof.
Hereinafter, the invention described in the claims of the present application will be appended.
(Appendix)
(Claim 1)
The invention described in claim 1
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
A distribution control unit that performs distribution control to distribute an image corresponding to the predetermined operation to the arrangement unit for a predetermined period of time via the communication network when the determination unit determines that the predetermined operation has been performed; ,
It is an imaging device characterized by comprising.
(Claim 2)
The invention according to claim 2 is the imaging apparatus according to claim 1,
The distribution unit generates a normal moving image for distribution in real time from the moving image captured by the moving image capturing unit, and transmits the normal moving image for distribution generated in real time via the communication network. Stream in real time,
When it is determined that the predetermined operation has been performed, the distribution control unit sends an image corresponding to the predetermined operation to the distribution unit instead of the normal moving image for distribution generated in real time. Streaming via a communication network,
An imaging apparatus characterized by being configured as described above.
(Claim 3)
According to a third aspect of the present invention, in the imaging device according to the first or second aspect,
It further includes a still image shooting means,
The determining unit determines whether or not a still image shooting operation for instructing shooting by the still image shooting unit is performed as a predetermined operation during streaming distribution of the moving image by the distributing unit;
The distribution control means performs distribution control for distributing a still image captured by the still image capturing means to the distribution means for a predetermined time when it is determined that the still image capturing operation is performed by the determining means.
The imaging apparatus is characterized by the above.
(Claim 4)
The invention according to claim 4 is the imaging apparatus according to claim 3,
The distribution control unit combines the still image captured by the still image capturing unit within a predetermined display area of the moving image being distributed when the determination unit determines that a still image capturing operation has been performed. Performing distribution control for causing the distribution means to distribute the image for a predetermined time;
The imaging apparatus is characterized by the above.
(Claim 5)
The invention according to claim 4 is the imaging apparatus according to claim 3,
The distribution control unit alternately sends the moving image being distributed and the still image captured by the still image capturing unit to the distribution unit when the determination unit determines that a still image capturing operation has been performed. Perform distribution control to distribute for a predetermined time,
The imaging apparatus is characterized by the above.
(Claim 6)
The invention according to claim 5 is the imaging apparatus according to any one of claims 3 to 5,
A temporary storage means for chasing distribution that temporarily stores undelivered moving images that were not distributed during distribution of still images by the distribution control means;
The distribution control unit performs distribution control for causing the distribution unit to perform chasing distribution based on an undistributed moving image stored in the chasing distribution temporary storage unit after distributing the still image for a predetermined time. ,
The imaging apparatus is characterized by the above.
(Claim 7)
The invention according to claim 7 is the imaging apparatus according to claim 6,
The temporary storage means for chasing distribution thins out and stores undelivered moving images that were not distributed during the distribution of the still image,
The distribution control means causes the distribution means to follow and distribute by sequentially reading out undistributed moving images stored in the temporary storage means for chasing distribution.
The imaging apparatus is characterized by the above.
(Claim 8)
The invention according to claim 8 is the imaging device according to any one of claims 1 to 7,
A setting means for arbitrarily setting the predetermined time;
The imaging apparatus is characterized by the above.
(Claim 9)
The invention according to claim 9 is the imaging apparatus according to any one of claims 3 to 7,
The predetermined time is a time from the start to the release of the operation of the photographing operator that instructs photographing by the still image photographing means.
The imaging apparatus is characterized by the above.
(Claim 10)
The invention described in claim 9 is the imaging apparatus according to claim 1 or 2,
The determining means determines whether or not a slow motion distribution operation for instructing a slower motion distribution than the moving image being distributed as a predetermined operation during the streaming distribution of the moving image by the distributing means,
The distribution control unit generates a distributed slow motion image in real time from the moving image captured by the moving image capturing unit when the determination unit determines that the slow motion distribution operation has been performed, and the distribution Perform distribution control to allow the means to distribute for a predetermined time,
The imaging apparatus is characterized by the above.
(Claim 11)
The invention according to claim 11 is the imaging apparatus according to claim 9,
The moving image shooting means is capable of high-speed shooting at a speed exceeding the communication speed of the communication network,
The distribution unit distributes the high-speed captured moving image captured at high speed by the moving image capturing unit by thinning out to a frame rate that can be distributed at the communication speed of the communication network,
Temporary storage means for slow motion distribution that temporarily stores the subsequent high-speed captured moving images when the determination means determines that a slow motion distribution operation has been performed during the thinning distribution by the distribution means. ,
The delivery control means performs delivery control for slow motion delivery by causing the delivery means to sequentially read and deliver the high-speed captured moving image stored in the temporary storage means for slow motion delivery for a predetermined time.
The imaging apparatus is characterized by the above.
(Claim 12)
The invention according to claim 12 is the imaging apparatus according to claim 10 or 11,
A temporary storage means for chasing distribution for temporarily storing undelivered moving images that were not distributed during slow motion distribution by the distribution control means;
The distribution control unit distributes the slow motion captured image for a predetermined time, and then distributes the chasing distribution to the distribution unit based on an undistributed moving image stored in the chasing distribution temporary storage unit. I do,
The imaging apparatus is characterized by the above.
(Claim 13)
The invention according to claim 13 is the imaging apparatus according to claim 12,
The temporary storage means for chasing distribution stores undelivered moving images that were not distributed during the slow motion distribution by thinning out the thinned out images by the distribution means,
The distribution control means causes the distribution means to follow and distribute by sequentially reading out undistributed moving images stored in the temporary storage means for chasing distribution.
The imaging apparatus is characterized by the above.
(Claim 14)
The invention according to claim 14 is the imaging apparatus according to any one of claims 11 to 13,
The determination means further determines whether or not the high-speed shooting is performed, and determines whether or not the slow motion delivery operation is performed when it is determined that the high-speed shooting is performed.
The imaging apparatus is characterized by the above.
(Claim 15)
According to a fifteenth aspect of the present invention, in the imaging apparatus according to the eleventh aspect,
The predetermined time is a time determined according to the number of frames in which the high-speed captured moving image can be stored in the temporary storage means for slow motion delivery.
This is an imaging apparatus.
(Claim 16)
The invention according to claim 16 is the imaging apparatus according to any one of claims 10 to 14,
The predetermined time is a time until an operation to instruct to stop the slow motion delivery is performed.
This is an imaging apparatus.
(Claim 17)
The invention described in claim 17 is the imaging apparatus according to claim 1,
A storage unit that sequentially stores images captured by the moving image capturing unit;
The imaging apparatus is characterized by the above.
(Claim 18)
The invention according to claim 18 is the imaging apparatus according to claim 17,
The storage means sequentially stores a moving image distributed by the distribution means and an image corresponding to the predetermined operation;
The imaging apparatus is characterized by the above.
(Claim 19)
The invention described in claim 18
Streaming the moving image captured by the moving image capturing means in real time via a communication network;
Determining whether a predetermined operation is performed during streaming distribution of the moving image;
Performing distribution control for distributing an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
It is the imaging processing method characterized by including this.
(Claim 20)
The invention according to claim 20 provides
Against the computer,
A function for streaming a moving image captured by a moving image capturing means in real time via a communication network;
A function of determining whether a predetermined operation is performed during streaming distribution of the moving image;
A function of performing distribution control for distributing an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
It is a program for realizing.
(Claim 21)
The invention according to claim 21
An imaging device that captures a moving image, a management device that receives a moving image captured by the imaging device via a communication network, and a receiving-side terminal device that receives the moving image from the management device via a communication network An imaging processing system comprising:
The imaging apparatus includes a distribution unit that performs real-time streaming distribution of a moving image captured by a moving image capturing unit via a communication network, and whether a predetermined operation has been performed during streaming distribution of the moving image by the distribution unit A distribution unit that distributes an image corresponding to the predetermined operation to the distribution unit for a predetermined time via the communication network when the determination unit determines that a predetermined operation has been performed. Distribution control means for performing control,
The management device receives a moving image that is streamed in real time from the imaging device and an image corresponding to the predetermined operation, and streams the image to the terminal device in real time.
This is an imaging processing system characterized by the above.

1 撮像装置
2 携帯端末装置
3 無線通信網
4 他の携帯端末装置
5 インターネット
6 管理サーバ
7 PC
8 テレビ受信機
11 制御部
13 記憶部
13a プログラムメモリ
13c 追っかけ配信用バッファ
13d スローモーション配信用バッファ
14 操作部
15 撮像部
16 表示部
18 近距離無線通信部
F1 静止画配信フラグ
F2 追っかけ再生フラグ
DESCRIPTION OF SYMBOLS 1 Imaging device 2 Portable terminal device 3 Wireless communication network 4 Other portable terminal devices 5 Internet 6 Management server 7 PC
8 TV receiver 11 Control unit 13 Storage unit 13a Program memory 13c Chasing distribution buffer 13d Slow motion distribution buffer 14 Operation unit 15 Imaging unit 16 Display unit 18 Near field communication unit F1 Still image distribution flag F2 Chasing reproduction flag

Claims (17)

動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備え、
静止画撮影手段を更に備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、前記静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記配信中の動画像の所定表示領域内に前記静止画撮影手段により撮影された静止画像を合成した画像を、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置。
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
Distribution control means for performing distribution control for causing the distribution means to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed by the determination means;
With
It further includes a still image shooting means,
The determining unit determines whether or not a still image shooting operation for instructing shooting by the still image shooting unit is performed as a predetermined operation during streaming distribution of the moving image by the distributing unit;
The distribution control unit combines the still image captured by the still image capturing unit within a predetermined display area of the moving image being distributed when the determination unit determines that a still image capturing operation has been performed. Performing distribution control for causing the distribution means to distribute the image for a predetermined time;
An imaging apparatus characterized by being configured as described above.
動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備え、
静止画撮影手段を更に備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、前記静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記配信中の動画像と前記静止画撮影手段により撮影された静止画像を、前記配信手段に交互に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置。
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
Distribution control means for performing distribution control for causing the distribution means to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed by the determination means;
With
It further includes a still image shooting means,
The determining unit determines whether or not a still image shooting operation for instructing shooting by the still image shooting unit is performed as a predetermined operation during streaming distribution of the moving image by the distributing unit;
The distribution control unit alternately sends the moving image being distributed and the still image captured by the still image capturing unit to the distribution unit when the determination unit determines that a still image capturing operation has been performed. Perform distribution control to distribute for a predetermined time,
An imaging apparatus characterized by being configured as described above.
動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備え、
静止画撮影手段を更に備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、前記静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段により静止画撮影操作が行われたと判別された際に、前記静止画撮影手段により撮影された静止画像を、前記配信手段に所定時間配信させる配信制御を行い、
前記配信制御手段による静止画像の配信中に配信されなかった未配信の動画像を一時的に記憶する追っかけ配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記静止画像を所定時間配信させた後、前記追っかけ配信用の一時記憶手段に記憶されている未配信の動画像を基に、前記配信手段に追っかけ配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置。
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
Distribution control means for performing distribution control for causing the distribution means to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed by the determination means;
With
It further includes a still image shooting means,
The determining unit determines whether or not a still image shooting operation for instructing shooting by the still image shooting unit is performed as a predetermined operation during streaming distribution of the moving image by the distributing unit;
The distribution control means performs distribution control for distributing a still image captured by the still image capturing means to the distribution means for a predetermined time when it is determined that the still image capturing operation has been performed by the determining means.
A temporary storage means for chasing distribution that temporarily stores undelivered moving images that were not distributed during distribution of still images by the distribution control means;
The distribution control unit performs distribution control for causing the distribution unit to perform chasing distribution based on an undistributed moving image stored in the chasing distribution temporary storage unit after distributing the still image for a predetermined time. ,
An imaging apparatus characterized by being configured as described above.
前記追っかけ配信用の一時記憶手段は、前記静止画像の配信中に配信されなかった未配信の動画像を間引いて記憶し、
前記配信制御手段は、前記追っかけ配信用の一時記憶手段に間引いて記憶されている未配信の動画像を順次読み出すことによって、前記配信手段に追っかけ配信させる、
ようにしたことを特徴とする請求項3記載の撮像装置。
The temporary storage means for chasing distribution thins out and stores undelivered moving images that were not distributed during the distribution of the still image,
The distribution control means causes the distribution means to follow and distribute by sequentially reading out undistributed moving images stored in the temporary storage means for chasing distribution.
The imaging apparatus according to claim 3, which is configured as described above.
前記所定時間は、前記静止画撮影手段による撮影を指示する撮影操作子の操作開始から解除までの時間である、
ようにしたことを特徴とする請求項1〜請求項4のいずれかに記載の撮像装置。
The predetermined time is a time from the start to the release of the operation of the photographing operator that instructs photographing by the still image photographing means.
The imaging apparatus according to claim 1, wherein the imaging apparatus is configured as described above.
動画撮影手段を備えた撮像装置であって、
前記動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムにストリーミング配信する配信手段と、
前記配信手段による動画像のストリーミング配信中に所定の操作が行われたか否かを判別する判別手段と、
前記判別手段により所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介して所定時間配信させる配信制御を行う配信制御手段と、
を備え、
前記判別手段は、前記配信手段による動画像のストリーミング配信中における所定の操作として、配信中の動画像よりもスローモーションな配信を指示するスローモーション配信操作が行われたか否かを判別し、
前記配信制御手段は、前記判別手段によりスローモーション配信操作が行われたと判別された場合に、前記動画撮影手段により撮影されている動画像から配信用のスローモーション画像をリアルタイムに生成し、前記配信手段に所定時間配信させる配信制御を行う、
ようにしたことを特徴とする撮像装置。
An imaging apparatus provided with a moving image shooting means,
A delivery means for streaming the moving image taken by the moving picture photographing means in real time via a communication network;
A discriminating unit for discriminating whether or not a predetermined operation has been performed during streaming delivery of a moving image by the distributing unit;
Distribution control means for performing distribution control for causing the distribution means to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed by the determination means;
With
The determining means determines whether or not a slow motion distribution operation for instructing a slower motion distribution than the moving image being distributed as a predetermined operation during the streaming distribution of the moving image by the distributing means,
The distribution control unit generates a slow motion image for distribution in real time from the moving image captured by the moving image capturing unit when the determination unit determines that the slow motion distribution operation has been performed, and the distribution Perform distribution control to allow the means to distribute for a predetermined time,
An imaging apparatus characterized by being configured as described above.
前記動画撮影手段は、前記通信ネットワークの通信速度を超える速度で高速撮影が可能であり、
前記配信手段は、前記動画撮影手段により高速撮影が行われた高速度撮影動画像を前記通信ネットワークの通信速度で配信可能となるフレームレートまで間引いて配信し、
前記配信手段による間引き配信中に前記判別手段によりスローモーション配信操作が行われたと判別された場合に、それ以降の前記高速度撮影動画像を一時記憶するスローモーション配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記スローモーション配信用の一時記憶手段に記憶されている高速度撮影動画像を、前記配信手段に所定時間順次読み出して配信させることによってスローモーション配信させる配信制御を行う、
ようにしたことを特徴とする請求項6に記載の撮像装置。
The moving image shooting means is capable of high-speed shooting at a speed exceeding the communication speed of the communication network,
The distribution unit distributes the high-speed captured moving image captured at high speed by the moving image capturing unit by thinning out to a frame rate that enables distribution at the communication speed of the communication network,
Temporary storage means for slow motion distribution that temporarily stores the subsequent high-speed captured moving images when the determination means determines that a slow motion distribution operation has been performed during the thinning distribution by the distribution means. ,
The delivery control means performs delivery control for slow motion delivery by causing the delivery means to sequentially read and deliver the high-speed captured moving image stored in the temporary storage means for slow motion delivery for a predetermined time.
The imaging apparatus according to claim 6, which is configured as described above.
前記配信制御手段によるスローモーション配信中に配信されなかった未配信の動画像を一時記憶する追っかけ配信用の一時記憶手段を更に備え、
前記配信制御手段は、前記スローモーション配信を所定時間させた後、前記追っかけ配信用の一時記憶手段に記憶されている未配信の動画像を基に、前記配信手段に追っかけ配信させる配信制御を行う、
ようにしたことを特徴とする請求項6あるいは請求項7に記載の撮像装置。
A temporary storage means for chasing distribution for temporarily storing undelivered moving images that were not distributed during slow motion distribution by the distribution control means;
The distribution control unit performs distribution control for causing the distribution unit to perform chasing distribution based on an undistributed moving image stored in the chasing distribution temporary storage unit after the slow motion distribution is performed for a predetermined time. ,
The imaging apparatus according to claim 6, wherein the imaging apparatus is configured as described above.
前記追っかけ配信用の一時記憶手段は、前記スローモーション配信中に配信されなかった未配信の動画像を前記配信手段による間引きよりも間引いて記憶し、
前記配信制御手段は、前記追っかけ配信用の一時記憶手段に間引いて記憶されている未配信の動画像を順次読み出すことによって、前記配信手段に追っかけ配信させる、
ようにしたことを特徴とする請求項8に記載の撮像装置。
The temporary storage means for chasing distribution stores undelivered moving images that were not distributed during the slow motion distribution by thinning out the thinned out images by the distribution means,
The distribution control means causes the distribution means to follow and distribute by sequentially reading out undistributed moving images stored in the temporary storage means for chasing distribution.
The imaging apparatus according to claim 8, which is configured as described above.
前記判別手段は、前記動画撮影手段が高速撮影を行っているか否かを更に判別し、高速撮影を行っていると判別した場合に、前記スローモーション配信操作が行われたか否かを判別する、
ようにしたことを特徴とする請求項7〜請求項9のいずれかに記載の撮像装置。
It said determining means, said video recording means is further judged whether or not subjected to high-speed shooting, when it is determined that performing a high-speed shooting, determine whether the slow-motion distribution operation is performed To
The imaging apparatus according to claim 7, wherein the imaging apparatus is configured as described above.
前記所定時間は、前記スローモーション配信用の一時記憶手段に高速度撮影動画像を記憶可能なフレーム数に応じて決められる時間である、
ことを特徴とする請求項8に記載の撮像装置。
The predetermined time is a time determined according to the number of frames that can store a high-speed captured moving image in the temporary storage means for slow motion delivery.
The imaging apparatus according to claim 8.
前記所定時間は、前記スローモーション配信の停止を指示する操作が行われるまでの時間である、
ことを特徴とする請求項6〜請求項10のいずれかに記載の撮像装置。
The predetermined time is a time until an operation to instruct to stop the slow motion delivery is performed.
The image pickup apparatus according to claim 6, wherein the image pickup apparatus is an image pickup apparatus.
前記配信手段は、前記動画撮影手段により撮影されている動画像から配信用の通常動画像をリアルタイムに生成して、このリアルタイムに生成される配信用の通常動画像を、前記通信ネットワークを介してリアルタイムにストリーミング配信し、
前記配信制御手段は、前記所定操作が行われたと判別された場合に、前記リアルタイムに生成されている配信用の通常動画像に代えて前記所定の操作に対応した画像を、前記配信手段に前記通信ネットワークを介してストリーミング配信させる、
ようにしたことを特徴とする請求項1〜請求項10のいずれかに記載の撮像装置。
The distribution unit generates a normal moving image for distribution in real time from the moving image captured by the moving image capturing unit, and transmits the normal moving image for distribution generated in real time via the communication network. Stream in real time,
When it is determined that the predetermined operation has been performed, the distribution control unit sends an image corresponding to the predetermined operation to the distribution unit instead of the normal moving image for distribution generated in real time. Streaming via a communication network,
The imaging apparatus according to claim 1, wherein the imaging apparatus is configured as described above.
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する処理と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する処理と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う処理と、
を含み、
前記動画像のストリーミング配信中における所定の操作として、静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
静止画撮影操作が行われたと判別された際に、前記配信中の動画像の所定表示領域内に前記静止画撮影手段により撮影された静止画像を合成した画像を、所定時間配信する、
ことを特徴とする撮像処理方法。
A process of streaming a moving image shot by a moving image shooting means in real time via a communication network;
Processing for determining whether or not a predetermined operation is performed during streaming distribution of the moving image;
Processing for performing distribution control to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
Including
As a predetermined operation during streaming distribution of the moving image, it is determined whether or not a still image shooting operation instructing shooting by the still image shooting means has been performed,
When it is determined that a still image shooting operation has been performed, an image obtained by synthesizing a still image shot by the still image shooting unit within a predetermined display area of the moving image being distributed is distributed for a predetermined time.
An imaging processing method characterized by the above.
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する処理と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する処理と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う処理と、
を含み、
前記動画像のストリーミング配信中における所定の操作として、静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
静止画撮影操作が行われたと判別された際に、前記配信中の動画像と前記静止画撮影手段により撮影された静止画像を、交互に所定時間配信する、
ことを特徴とする撮像処理方法。
A process of streaming a moving image shot by a moving image shooting means in real time via a communication network;
Processing for determining whether or not a predetermined operation is performed during streaming distribution of the moving image;
Processing for performing distribution control to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
Including
As a predetermined operation during streaming distribution of the moving image, it is determined whether or not a still image shooting operation instructing shooting by the still image shooting means has been performed,
When it is determined that a still image shooting operation has been performed, the moving image being distributed and the still image shot by the still image shooting unit are alternately distributed for a predetermined time,
An imaging processing method characterized by the above.
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する処理と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する処理と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う処理と、
を含み、
前記動画像のストリーミング配信中における所定の操作として、静止画撮影手段による撮影を指示する静止画撮影操作が行われたか否かを判別し、
静止画撮影操作が行われたと判別された際に、前記静止画撮影手段により撮影された静止画像を、所定時間配信し、
前記静止画像を所定時間配信させた後、当該静止画像の配信中に配信されなかった未配信の動画像を一時的に記憶する追っかけ配信用の一時記憶手段に記憶されている未配信の動画像を基に、追っかけ配信する、
ことを特徴とする撮像処理方法。
A process of streaming a moving image shot by a moving image shooting means in real time via a communication network;
Processing for determining whether or not a predetermined operation is performed during streaming distribution of the moving image;
Processing for performing distribution control to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
Including
As a predetermined operation during streaming distribution of the moving image, it is determined whether or not a still image shooting operation instructing shooting by the still image shooting means has been performed
When it is determined that a still image shooting operation has been performed, a still image shot by the still image shooting means is distributed for a predetermined time,
An undelivered moving image stored in a temporary storage means for chasing distribution that temporarily stores an undelivered moving image that was not distributed during distribution of the still image after distributing the still image for a predetermined time Based on
An imaging processing method characterized by the above.
動画撮影手段により撮影されている動画像を、通信ネットワークを介してリアルタイムでストリーミング配信する処理と、
前記動画像のストリーミング配信中に所定の操作が行われたか否かを判別する処理と、
前記所定の操作が行われたと判別された場合に、前記所定の操作に対応した画像を、前記通信ネットワークを介して所定時間配信させる配信制御を行う処理と、
を含み、
前記動画像のストリーミング配信中における所定の操作として、配信中の動画像よりもスローモーションな配信を指示するスローモーション配信操作が行われたか否かを判別し、
スローモーション配信操作が行われたと判別された場合に、前記動画撮影手段により撮影されている動画像から配信用のスローモーション画像をリアルタイムに生成し、所定時間配信する、
ことを特徴とする撮像処理方法。
A process of streaming a moving image shot by a moving image shooting means in real time via a communication network;
Processing for determining whether or not a predetermined operation is performed during streaming distribution of the moving image;
Processing for performing distribution control to distribute an image corresponding to the predetermined operation for a predetermined time via the communication network when it is determined that the predetermined operation has been performed;
Including
As a predetermined operation during streaming distribution of the moving image, it is determined whether or not a slow motion distribution operation is instructed to distribute slower motion than the moving image being distributed,
When it is determined that a slow motion distribution operation has been performed, a slow motion image for distribution is generated in real time from the moving image captured by the moving image capturing unit, and is distributed for a predetermined time.
An imaging processing method characterized by the above.
JP2012115604A 2012-05-21 2012-05-21 Imaging apparatus and imaging processing method Active JP5962200B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012115604A JP5962200B2 (en) 2012-05-21 2012-05-21 Imaging apparatus and imaging processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012115604A JP5962200B2 (en) 2012-05-21 2012-05-21 Imaging apparatus and imaging processing method

Publications (2)

Publication Number Publication Date
JP2013243531A JP2013243531A (en) 2013-12-05
JP5962200B2 true JP5962200B2 (en) 2016-08-03

Family

ID=49844014

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012115604A Active JP5962200B2 (en) 2012-05-21 2012-05-21 Imaging apparatus and imaging processing method

Country Status (1)

Country Link
JP (1) JP5962200B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6238735B2 (en) * 2013-12-26 2017-11-29 キヤノン株式会社 Imaging apparatus and control method thereof
JP6351260B2 (en) * 2013-12-26 2018-07-04 キヤノン株式会社 Imaging apparatus and control method thereof
US11128932B2 (en) 2018-05-09 2021-09-21 Gree, Inc. Video distribution system for live distributing video containing animation of character object generated based on motion of actors
JP7098575B2 (en) * 2019-06-25 2022-07-11 グリー株式会社 A video distribution system that delivers live video containing animations of character objects generated based on the movement of actors.
JP7288641B1 (en) 2022-08-08 2023-06-08 株式会社リモフィ Remote photography system and remote photography method

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3912841B2 (en) * 1997-04-10 2007-05-09 キヤノン株式会社 Data communication device
JPH10294938A (en) * 1997-04-22 1998-11-04 Canon Inc System and device for image transmission
JP4142184B2 (en) * 1998-12-14 2008-08-27 オリンパス株式会社 Imaging device
JP4564190B2 (en) * 2001-03-06 2010-10-20 株式会社リコー Digital camera suitable for image input in video conference system
JP3793520B2 (en) * 2002-04-22 2006-07-05 元井 成幸 Image providing apparatus and image providing program
JP2006074242A (en) * 2004-08-31 2006-03-16 Canon Inc Image communication system, image receiving device and imaging apparatus
JP2006115184A (en) * 2004-10-14 2006-04-27 Nec Infrontia Corp Video data transmitter, telephone system and method for transmitting video data

Also Published As

Publication number Publication date
JP2013243531A (en) 2013-12-05

Similar Documents

Publication Publication Date Title
WO2013132828A1 (en) Communication system and relay apparatus
JP5962200B2 (en) Imaging apparatus and imaging processing method
US9578233B2 (en) Imaging apparatus and method for controlling the same
CN103139475A (en) Imaging device
US9601158B2 (en) Moving image selection apparatus for selecting moving image to be combined, moving image selection method, and storage medium
US9281014B2 (en) Image processing apparatus and computer program
US20130177287A1 (en) Reproduction apparatus, image capturing apparatus, and program
US20130063621A1 (en) Imaging device
JP6032987B2 (en) Image output device and method of operating image output device
JP6800930B2 (en) Communication equipment, its control method, and its program
JP4912972B2 (en) Imaging apparatus and imaging system
CN105530426A (en) Image capturing apparatus, control method thereof, and storage medium
US20120020639A1 (en) Image processing apparatus and image pickup apparatus using the image processing appratus
JP2012147267A (en) Information recording apparatus and program
JP2011172092A (en) Imaging apparatus, image reproducing method, image reproducing program, recording medium with image reproducing program recorded, and image reproducing apparatus
JP5847230B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP6521734B2 (en) Movie recording system, movie recording method
JP2009189065A (en) Video camera and information transmitting method
JP5536926B2 (en) Display method for imaging apparatus, and imaging apparatus
JP5249437B2 (en) Image pickup and image reproduction system, image pickup and image reproduction method, received image reproduction device, and reproduction device reproduction method.
KR20080042462A (en) Apparatus and method for editing image in portable terminal
JP5230876B2 (en) Camera and image transmission system
JP5362927B2 (en) Camera, camera playback method and program
JP4979454B2 (en) Camera, camera image acquisition method, and image acquisition system
JP2021170808A (en) Electronic apparatus, control method, and recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150423

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160314

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160517

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160531

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160613

R150 Certificate of patent or registration of utility model

Ref document number: 5962200

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150