JP6930421B2 - 情報処理システム、情報処理方法、記録媒体、および、プログラム - Google Patents
情報処理システム、情報処理方法、記録媒体、および、プログラム Download PDFInfo
- Publication number
- JP6930421B2 JP6930421B2 JP2017532396A JP2017532396A JP6930421B2 JP 6930421 B2 JP6930421 B2 JP 6930421B2 JP 2017532396 A JP2017532396 A JP 2017532396A JP 2017532396 A JP2017532396 A JP 2017532396A JP 6930421 B2 JP6930421 B2 JP 6930421B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- time
- moving image
- image data
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 96
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000010191 image analysis Methods 0.000 claims description 73
- 238000012545 processing Methods 0.000 claims description 62
- 230000033001 locomotion Effects 0.000 claims description 41
- 238000004458 analytical method Methods 0.000 claims description 13
- 238000004891 communication Methods 0.000 claims description 9
- 238000007405 data analysis Methods 0.000 claims description 4
- 230000005236 sound signal Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 27
- 230000008569 process Effects 0.000 description 24
- 238000010586 diagram Methods 0.000 description 13
- 241000282326 Felis catus Species 0.000 description 11
- 238000012795 verification Methods 0.000 description 11
- 238000001556 precipitation Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000005856 abnormality Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 241000282412 Homo Species 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000002474 experimental method Methods 0.000 description 3
- 238000001454 recorded image Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 241000282414 Homo sapiens Species 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000009545 invasion Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000035900 sweating Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
- G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Description
1.本開示の一実施形態による動画像検索システムの概要
2.各実施形態
2−1.第1の実施形態
(2−1−1.構成)
(2−1−2.動作処理)
(2−1−3.応用例)
2−2.第2の実施形態
2−3.第3の実施形態
3.まとめ
図1は、本開示の一実施形態による動画像検索システムの概要について説明する図である。図1に示すように、本実施形態による動画像検索システムは、ユーザが情報処理装置10を用いて、例えば監視カメラ(図2に示すカメラ11a参照)により撮像された映像を確認する際における映像検索の支援を可能とする。
<2−1.第1の実施形態>
まず、図2〜図7を参照して本開示の第1の実施形態による動画像検索システムについて説明する。本実施形態による動画像検索システムは、情報処理装置10aにより実行される。
続いて、上述した第1の実施形態による情報処理装置10aの構成について、図3を参照して説明する。図3は、第1の実施形態による情報処理装置10aの構成例を示すブロック図である。
I/F111を介して入力されたクラウド15aの時系列データに対する各種入力信号処理を行い、整えた入力情報を制御部101に出力する。例えば入力信号処理部104は、入力信号の変換(例えば復号、復元)、ノイズ除去、波形処理等を行う。
I/F111は、ネットワーク(不図示)を介してクラウド15aからのデータを有線/無線により取得する受信部として機能する。また、NW I/F111は、カメラ11aおよびセンサ12aからのデータをネットワークを介して、若しくは近距離通信により受信してもよい。
続いて、上記構成を有する情報処理装置10aの動作処理について図4〜図7を参照して具体的に説明する。
&& G_Enable)}を求め、選択されたデータのフラグ全てがTrue にセットされている時刻をマーキングする(ステップS199)。
以上説明した第1の実施形態は、監視カメラの映像から空き巣侵入等の異常があった部分を検索する際の支援を想定しているため、ドア開閉センサデータ、犯罪統計データ、および被写体の辺りを見回す動作解析結果データを用いているが、本実施形態はこれに限定されない。例えば本実施形態による動画像検索システムは、他の状況においても、所定の動画像の検索支援を行うことが可能である。以下、図8を参照して説明する。
続いて、第2の実施形態について図9〜図12を参照して具体的に説明する。本実施形態では、オリンピックやサッカー、野球、テニス等のスポーツ中継のコンテンツを視聴する際に、長時間に及ぶ試合全てを見る時間は無いが、ニュース番組のダイジェストでは物足りないといった場合におけるコンテンツの再生シーンの検索支援を行う。
次に、第3の実施形態について図13〜図16を参照して具体的に説明する。本実施形態では、対象を長時間撮像して検証する際における映像検索の支援を行う。通常、対象を検証実験する際、対象を長時間撮像した映像を振り返って対象の状態変化を確認することが有効な方法になるが、長時間の映像を全て最初から見ることは大変な労力となる。このような場合にも、本実施形態による動画像検索システムにより、撮像画像の解析結果の他、撮像画像に関連するセンサデータや撮像時刻に対応する時系列データのグラフを表示することで、映像検索を支援することが可能となる。
上述したように、本開示の実施形態による動画像検索システムでは、動画像に関連する画像解析以外のデータのグラフを用いて動画像の検索を支援することが可能となる。
(1)
動画像データを取得する動画像データ取得部と、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信する通信部と、
前記動画像データの画像解析を行い、画像解析結果データを生成する画像信号処理部と、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフとを含むインタフェースを生成する制御部と、
を備える、情報処理システム。
(2)
前記制御部は、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくともいずれかを選択するためのユーザインタフェースを生成する、前記(1)に記載の情報処理システム。
(3)
前記制御部は、前記ユーザインタフェースにより選択された複数のデータに基づいて、所定時刻にマーキングを行う、前記(2)に記載の情報処理システム。
(4)
前記制御部は、前記選択された複数のデータのいずれにも所定の条件を満たすことを示すフラグがセットされている時刻に、マーキングを行う、前記(3)に記載の情報処理システム。
(5)
前記制御部は、前記マーキングした時刻を示すための、前記グラフの時間軸方向の軸の長さに対応するマーク結果バーを生成する、前記(3)または(4)に記載の情報処理システム。
(6)
前記制御部は、所望の時刻の画像を指定するための、前記グラフの時間軸方向の軸の長さに対応するシークバーを生成する、前記(1)〜(5)のいずれか1項に記載の情報処理システム。
(7)
前記制御部は、前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのグラフとを含むインタフェースを生成する、前記(1)〜(6)のいずれか1項に記載の情報処理システム。
(8)
前記センサデータは、前記動画像データの被写体に取り付けられたセンサにより検出される、前記(1)〜(7)のいずれか1項に記載の情報処理システム。
(9)
前記画像信号処理部は、前記動画像データの画像解析により被写体の特定の動きを検出し、
前記制御部は、前記特定の動きの頻度が所定の閾値を上回る時刻にマーキングを行う、前記(5)に記載の情報処理システム。
(10)
前記時系列データは、前記動画像データの撮影時刻に対応する所定の事象に関するデータであり、
前記制御部は、前記事象の値が所定の条件を満たす時刻にマーキングを行う、前記(1)〜(9)のいずれか1項に記載の情報処理システム。
(11)
前記センサデータは、動きセンサによって検出された、前記動画像データを視聴した被写体の動きを示す動きデータであり、
前記制御部は、前記動きデータの値が所定の条件を満たす時刻にマーキングを行う、前記(1)〜(7)のいずれか1項に記載の情報処理システム。
(12)
前記情報処理システムは、前記動画像データを音声解析し、音声解析結果データを生成する音声信号処理部をさらに備え、
前記制御部は、前記動画像データと、前記センサデータ、前記時系列データ、前記画像解析結果データ、および音声解析結果データのうち少なくとも一つのデータのグラフとを含むインタフェースを生成する、前記(1)〜(11)のいずれか1項に記載の情報処理システム。
(13)
プロセッサが、
動画像データを取得することと、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信することと、
前記動画像データの画像解析を行い、画像解析結果データを生成することと、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフとを含むインタフェースを生成すること、
を含む、情報処理方法。
(14)
コンピュータを、
動画像データを取得する動画像データ取得部と、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信する通信部と、
前記動画像データの画像解析を行い、画像解析結果データを生成する画像信号処理部と、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフとを含むインタフェースを生成する制御部と、
として機能させるためのプログラムが記録された、コンピュータ読み取り可能な記録媒体。
101 制御部
1011 記憶制御部
1012 マーキング部
1013 インタフェース生成部
102 画像信号処理部
103 入力デバイス
104 入力信号処理部
105 カレンダー・タイマー部
106 記憶部
107 外部記憶部
108 表示処理部
109 表示デバイス
110 I/F
111 NW I/F
112 コンテンツ取得部
113 音声信号処理部
11(11a、11b、11d) カメラ
12(12a、12b、12d) センサ
13 表示装置
15(15a、15b、15c、15d) クラウド
16 気圧センサ
17 降雨センサ
210、220、230、240、250 画面
211、241、251 動画像データ
212、242、252 グラフ
213 チェックボックス
214、244 マーク結果バー
215、245、255 シークバー
215 マーク結果バー
220 画面
231、232、233、243 選択画面
Claims (14)
- 動画像データを取得する動画像データ取得部と、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信する通信部と、
前記動画像データの画像解析を行い、前記動画像データの被写体の特定の動きを示す画像解析結果データを生成する画像信号処理部と、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフと、所望の時刻の画像を指定するための、前記グラフの時間軸方向の軸の長さに対応するシークバーとを含むインタフェースを生成する制御部と、
を備え、
前記制御部は、前記少なくとも2つのデータに基づいて、前記少なくとも2つのデータが所定の条件を満たす時刻にマーキングを行い、当該時刻が前記シークバーの操作により指定された場合に、指定された当該時刻の前記動画像データを再生する、情報処理システム。 - 前記制御部は、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくともいずれかを選択するためのユーザインタフェースを生成する、請求項1に記載の情報処理システム。
- 前記制御部は、前記ユーザインタフェースにより選択された複数のデータに基づいて、所定時刻にマーキングを行う、請求項2に記載の情報処理システム。
- 前記制御部は、前記選択された複数のデータのいずれにも所定の条件を満たすことを示すフラグがセットされている時刻に、マーキングを行う、請求項3に記載の情報処理システム。
- 前記制御部は、前記マーキングした時刻を示すための、前記グラフの時間軸方向の軸の長さに対応するマーク結果バーを生成する、請求項3または4に記載の情報処理システム。
- 前記制御部は、前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのグラフと、前記シークバーとを含むインタフェースを生成する、請求項1〜5のいずれか1項に記載の情報処理システム。
- 前記センサデータは、前記動画像データの被写体に取り付けられたセンサにより検出される、請求項1〜6のいずれか1項に記載の情報処理システム。
- 前記画像信号処理部は、前記動画像データの画像解析により被写体の特定の動きを検出し、
前記制御部は、前記特定の動きの頻度が所定の閾値を上回る時刻にマーキングを行う、請求項5に記載の情報処理システム。 - 前記時系列データは、前記動画像データの撮影時刻に対応する所定の事象に関するデータであり、
前記制御部は、前記事象の値が所定の条件を満たす時刻にマーキングを行う、請求項1〜8のいずれか1項に記載の情報処理システム。 - 前記センサデータは、動きセンサによって検出された、前記動画像データを視聴した被写体の動きを示す動きデータであり、
前記制御部は、前記動きデータの値が所定の条件を満たす時刻にマーキングを行う、請求項1〜6のいずれか1項に記載の情報処理システム。 - 前記情報処理システムは、前記動画像データを音声解析し、音声解析結果データを生成する音声信号処理部をさらに備え、
前記制御部は、前記動画像データと、前記センサデータ、前記時系列データ、前記画像解析結果データ、および音声解析結果データのうち少なくとも一つのデータのグラフと、前記シークバーとを含むインタフェースを生成する、請求項1〜10のいずれか1項に記載の情報処理システム。 - プロセッサが、
動画像データを取得することと、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信することと、
前記動画像データの画像解析を行い、前記動画像データの被写体の特定の動きを示す画像解析結果データを生成することと、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフと、所望の時刻の画像を指定するための、前記グラフの時間軸方向の軸の長さに対応するシークバーとを含むインタフェースを生成すること、
を含み、
前記プロセッサは、前記少なくとも2つのデータに基づいて、前記少なくとも2つのデータが所定の条件を満たす時刻にマーキングを行い、当該時刻が前記シークバーの操作により指定された場合に、指定された当該時刻の前記動画像データを再生する、情報処理方法。 - コンピュータを、
動画像データを取得する動画像データ取得部と、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信する通信部と、
前記動画像データの画像解析を行い、前記動画像データの被写体の特定の動きを示す画像解析結果データを生成する画像信号処理部と、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフと、所望の時刻の画像を指定するための、前記グラフの時間軸方向の軸の長さに対応するシークバーとを含むインタフェースを生成する制御部と、
として機能させ、
前記制御部は、前記少なくとも2つのデータに基づいて、前記少なくとも2つのデータが所定の条件を満たす時刻にマーキングを行い、当該時刻が前記シークバーの操作により指定された場合に、指定された当該時刻の前記動画像データを再生する、ためのプログラムが記録された、コンピュータ読み取り可能な記録媒体。 - コンピュータを、
動画像データを取得する動画像データ取得部と、
前記動画像データに関連するセンサデータ、および前記動画像データの撮影時刻に対応する時系列データを受信する通信部と、
前記動画像データの画像解析を行い、前記動画像データの被写体の特定の動きを示す画像解析結果データを生成する画像信号処理部と、
前記動画像データと、前記センサデータ、前記時系列データ、および前記画像解析結果データのうち少なくとも2つのデータのグラフと、所望の時刻の画像を指定するための、前記グラフの時間軸方向の軸の長さに対応するシークバーとを含むインタフェースを生成する制御部と、
として機能させ、
前記制御部は、前記少なくとも2つのデータに基づいて、前記少なくとも2つのデータが所定の条件を満たす時刻にマーキングを行い、当該時刻が前記シークバーの操作により指定された場合に、指定された当該時刻の前記動画像データを再生する、ための、プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015153240 | 2015-08-03 | ||
JP2015153240 | 2015-08-03 | ||
PCT/JP2016/063466 WO2017022286A1 (ja) | 2015-08-03 | 2016-04-28 | 情報処理システム、情報処理方法、および記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017022286A1 JPWO2017022286A1 (ja) | 2018-05-24 |
JP6930421B2 true JP6930421B2 (ja) | 2021-09-01 |
Family
ID=57942741
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017532396A Active JP6930421B2 (ja) | 2015-08-03 | 2016-04-28 | 情報処理システム、情報処理方法、記録媒体、および、プログラム |
Country Status (3)
Country | Link |
---|---|
US (3) | US10535375B2 (ja) |
JP (1) | JP6930421B2 (ja) |
WO (1) | WO2017022286A1 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9361011B1 (en) | 2015-06-14 | 2016-06-07 | Google Inc. | Methods and systems for presenting multiple live video feeds in a user interface |
US10607063B2 (en) * | 2015-07-28 | 2020-03-31 | Sony Corporation | Information processing system, information processing method, and recording medium for evaluating a target based on observers |
JP6897215B2 (ja) * | 2017-03-24 | 2021-06-30 | カシオ計算機株式会社 | 画像処理装置、画像処理方法及びプログラム |
US10769914B2 (en) * | 2017-06-07 | 2020-09-08 | Amazon Technologies, Inc. | Informative image data generation using audio/video recording and communication devices |
WO2020021785A1 (ja) * | 2018-07-25 | 2020-01-30 | コニカミノルタ株式会社 | ガス検出装置、ガス検出方法、表示制御方法、およびプログラム |
JP7246146B2 (ja) * | 2018-08-28 | 2023-03-27 | 株式会社Nttドコモ | 情報処理装置及び映像投影システム |
JP2022120214A (ja) * | 2019-06-27 | 2022-08-18 | コニカミノルタ株式会社 | ガス検出端末装置及びガス検出システム |
CN112752016B (zh) * | 2020-02-14 | 2023-06-16 | 腾讯科技(深圳)有限公司 | 一种拍摄方法、装置、计算机设备和存储介质 |
JP7247136B2 (ja) * | 2020-03-19 | 2023-03-28 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
US20220130223A1 (en) * | 2020-10-23 | 2022-04-28 | Marc Garbey | Wireless Presence Check System |
CN113011310B (zh) * | 2021-03-15 | 2022-03-11 | 中国地质大学(武汉) | 采集投篮运动量的方法、装置、计算机设备及存储介质 |
WO2022259488A1 (ja) * | 2021-06-10 | 2022-12-15 | 日本電信電話株式会社 | 対話再生方法、対話再生装置及びプログラム |
JP7265072B1 (ja) | 2022-06-01 | 2023-04-25 | セーフィー株式会社 | 情報処理システム、情報処理方法及びプログラム |
CN116204371B (zh) * | 2022-12-13 | 2023-11-24 | 远峰科技股份有限公司 | 摄像头图像数据流的监控方法及装置 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3293131B2 (ja) | 1999-06-21 | 2002-06-17 | 横河電機株式会社 | プラント監視システム |
JP3837316B2 (ja) * | 2001-10-03 | 2006-10-25 | 株式会社クエストエンジニア | 積雪監視装置および融氷雪システム |
US20030133614A1 (en) * | 2002-01-11 | 2003-07-17 | Robins Mark N. | Image capturing device for event monitoring |
JP2004005639A (ja) * | 2003-05-09 | 2004-01-08 | Hitachi Ltd | 監視装置 |
JP2005003563A (ja) | 2003-06-13 | 2005-01-06 | Niigata Denki Kk | 積雪情報提供システム |
JP4346998B2 (ja) | 2003-09-03 | 2009-10-21 | 富士通株式会社 | 動画像の蓄積管理方法及び蓄積管理装置 |
US7787935B2 (en) * | 2004-09-27 | 2010-08-31 | General Electric Company | System and method for correcting motion artifacts in imaging |
JP4871550B2 (ja) * | 2005-08-30 | 2012-02-08 | 株式会社日立製作所 | 録画再生装置 |
JP4704174B2 (ja) * | 2005-09-30 | 2011-06-15 | 富士フイルム株式会社 | 状態識別装置、プログラムおよび方法 |
JP2008028756A (ja) * | 2006-07-21 | 2008-02-07 | Hitachi Ltd | 遠隔監視システム |
US8131465B2 (en) * | 2007-12-14 | 2012-03-06 | Qualcomm Incorporated | Motion detection for tracking |
US20110165129A1 (en) * | 2008-05-06 | 2011-07-07 | Arnold Kriegstein | Ameliorating Nervous Systems Disorders |
US8793282B2 (en) * | 2009-04-14 | 2014-07-29 | Disney Enterprises, Inc. | Real-time media presentation using metadata clips |
JP5574719B2 (ja) | 2010-01-15 | 2014-08-20 | キヤノン株式会社 | 表示装置、表示方法及びプログラム |
US9699431B2 (en) * | 2010-02-10 | 2017-07-04 | Satarii, Inc. | Automatic tracking, recording, and teleprompting device using multimedia stream with video and digital slide |
US8594485B2 (en) * | 2010-12-30 | 2013-11-26 | Taser International, Inc. | Systems and methods for presenting incident information |
JP5927691B2 (ja) * | 2011-12-22 | 2016-06-01 | 株式会社日立製作所 | エリアモニタリングシステム |
EP2810216B1 (en) * | 2012-01-31 | 2017-11-15 | Given Imaging Ltd. | System and method for displaying motility events in an in vivo image stream |
US10049158B1 (en) * | 2012-02-24 | 2018-08-14 | Amazon Technologies, Inc. | Analyzing user behavior relative to media content |
US20140328570A1 (en) * | 2013-01-09 | 2014-11-06 | Sri International | Identifying, describing, and sharing salient events in images and videos |
US9610043B2 (en) * | 2012-06-13 | 2017-04-04 | Seno Medical Instruments, Inc. | System and method for producing parametric maps of optoacoustic data |
US9460057B2 (en) * | 2013-03-15 | 2016-10-04 | Filmstrip, Inc. | Theme-based media content generation system and method |
JP6532106B2 (ja) * | 2013-04-26 | 2019-06-19 | 日本電気株式会社 | 監視装置、監視方法および監視用プログラム |
JP6117621B2 (ja) | 2013-06-05 | 2017-04-19 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
US9728055B2 (en) * | 2014-04-11 | 2017-08-08 | Vivint, Inc. | Chronological activity monitoring and review |
US9213903B1 (en) * | 2014-07-07 | 2015-12-15 | Google Inc. | Method and system for cluster-based video monitoring and event categorization |
US9420331B2 (en) * | 2014-07-07 | 2016-08-16 | Google Inc. | Method and system for categorizing detected motion events |
US20160307142A1 (en) * | 2015-04-15 | 2016-10-20 | Xerox Corporation | Methods and systems for creating log of one or more events through crowdsourcing |
-
2016
- 2016-04-28 WO PCT/JP2016/063466 patent/WO2017022286A1/ja active Application Filing
- 2016-04-28 JP JP2017532396A patent/JP6930421B2/ja active Active
- 2016-04-28 US US15/745,760 patent/US10535375B2/en active Active
-
2019
- 2019-12-03 US US16/701,892 patent/US11158353B2/en active Active
-
2021
- 2021-10-08 US US17/497,077 patent/US20220028429A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
WO2017022286A1 (ja) | 2017-02-09 |
US20180211693A1 (en) | 2018-07-26 |
US10535375B2 (en) | 2020-01-14 |
US11158353B2 (en) | 2021-10-26 |
JPWO2017022286A1 (ja) | 2018-05-24 |
US20220028429A1 (en) | 2022-01-27 |
US20200105306A1 (en) | 2020-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6930421B2 (ja) | 情報処理システム、情報処理方法、記録媒体、および、プログラム | |
US11527070B2 (en) | Methods and apparatus to count people in images | |
CN112753226B (zh) | 用于从视频流中提取元数据的方法、介质和系统 | |
JP6984083B2 (ja) | 視聴者エンゲージメントを評価するためのシステム | |
US9124783B2 (en) | Method and system for automated labeling at scale of motion-detected events in video surveillance | |
US8990842B2 (en) | Presenting content and augmenting a broadcast | |
US8726304B2 (en) | Time varying evaluation of multimedia content | |
WO2017084308A1 (zh) | 视频播放方法及装置 | |
US20090249387A1 (en) | Personalized Event Notification Using Real-Time Video Analysis | |
WO2015196582A1 (zh) | 一种行为模式统计装置与方法 | |
US20180295420A1 (en) | Methods, systems and apparatus for media content control based on attention detection | |
JP2013054739A (ja) | 画像中の人をカウントするための方法及び装置 | |
KR20040082414A (ko) | 비사용자 이벤트에 기초하는 미디어 재생기를 제어하는방법 및 장치 | |
JP2012186621A (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2017018012A1 (ja) | 情報処理システム、情報処理方法、および記録媒体 | |
US20140240455A1 (en) | System and Method to Create Evidence of an Incident in Video Surveillance System | |
TW201709747A (zh) | 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 | |
US20200036909A1 (en) | System and method allowing simultaneous viewing of live and recorded video content | |
US20190266800A1 (en) | Methods and Systems for Displaying Augmented Reality Content Associated with a Media Content Instance | |
JP2001251607A (ja) | 画像監視システム及び画像監視方法 | |
KR102185700B1 (ko) | 디스플레이 장치 및 이의 정보 제공 방법 | |
CN112188221B (zh) | 播放控制方法、装置、计算机设备及存储介质 | |
KR101362630B1 (ko) | 디지털 비디오 레코더에서의 피사체 이동 경로 추적 방법 | |
JP7267341B2 (ja) | 広告評価システム、広告評価方法及び広告評価プログラム | |
US11270338B2 (en) | Optimizing a digital display |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190328 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190328 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200616 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200713 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201013 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201109 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210413 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210521 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20210521 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20210531 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20210601 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210713 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210726 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6930421 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |