WO2024014058A1 - 車両イベントの動画抽出システム及び動画抽出方法 - Google Patents

車両イベントの動画抽出システム及び動画抽出方法 Download PDF

Info

Publication number
WO2024014058A1
WO2024014058A1 PCT/JP2023/010709 JP2023010709W WO2024014058A1 WO 2024014058 A1 WO2024014058 A1 WO 2024014058A1 JP 2023010709 W JP2023010709 W JP 2023010709W WO 2024014058 A1 WO2024014058 A1 WO 2024014058A1
Authority
WO
WIPO (PCT)
Prior art keywords
event
video
vehicle
list
video data
Prior art date
Application number
PCT/JP2023/010709
Other languages
English (en)
French (fr)
Inventor
健斗 藤原
幸一 品田
良介 工藤
Original Assignee
株式会社カーメイト
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社カーメイト filed Critical 株式会社カーメイト
Publication of WO2024014058A1 publication Critical patent/WO2024014058A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback

Definitions

  • the present invention relates to a technology for recording videos taken while a vehicle is running, and in particular, extracts and reproduces portions related to vehicle events included in video data acquired via an on-vehicle device such as a drive recorder.
  • the present invention relates to a vehicle event video extraction system and a video extraction method suitable for the case where a vehicle event is performed.
  • the purpose of the present invention is to provide a video extraction system and a video extraction method for vehicle events.
  • a vehicle event video extraction system having the above features includes an in-vehicle terminal that can obtain video data and environmental information regarding the vehicle in association with time information of the video data;
  • a recordable storage means compares one or more arbitrarily determined event requirements with the environmental information to detect the timing of occurrence of a vehicle operation event and create an event list in chronological order. Based on the event list, a video extraction list is created with the video playback time set to a predetermined time period based on the occurrence timing of each motion event, and the video extraction list is selected from among the video data recorded in the storage means.
  • the present invention is characterized by comprising a system terminal including a calculation means for outputting a playback processing signal for reading out video data recorded in a corresponding time period.
  • the system terminal preferably includes display means for visually displaying the video data read out by the reproduction processing signal. With such features, extracted video data can be viewed and confirmed.
  • the event requirements in the vehicle event video extraction system having the characteristics described above may be recorded in the storage means, and the event requirements may be rewritten. By having such characteristics, it is possible to change the extracted moving image according to desired requirements.
  • the calculation means may perform a calculation method such that when the interval between occurrence timings of the continuously detected motion events is shorter than the predetermined time period, It is preferable to perform a process of combining a plurality of consecutively detected motion events into one video playback time period. By having such characteristics, it becomes possible to shorten the time of the entire video to be extracted.
  • the method for extracting moving images of vehicle events for achieving the above object is a method for extracting moving images related to vehicle operation events from moving image data recorded in a storage means, and is arbitrarily defined.
  • an event list creation step of detecting the timing of occurrence of vehicle operation events by comparing one or more event requirements with environmental information recorded in the storage means and listing them in chronological order, and the created events;
  • a video extraction list creation step of creating a list of predetermined time slots as video playback times based on the timing of occurrence of each motion event;
  • the present invention is characterized by comprising a playback processing signal output step of outputting a signal for reading out video data recorded in a time period corresponding to the video extraction list created in the creation step.
  • the vehicle event video extraction system and method having the characteristics described above, it is possible to efficiently view videos related to vehicle events included in videos acquired via the on-vehicle device. Further, since the requirements for event recognition can be determined according to the wishes of the person viewing the video (for example, the administrator), it is also possible to extract a video corresponding to an arbitrary event.
  • FIG. 1 is a block diagram showing a schematic configuration of a video extraction system according to an embodiment.
  • FIG. 3 is a block diagram for explaining the flow of creating an event list and a video extraction list by a calculation means. It is a figure showing an example of an event list. It is a figure which shows an example of a video extraction list.
  • FIG. 6 is an image diagram for explaining the difference between the application form of an event list and the application form of a video extraction list to video data.
  • FIG. 3 is a diagram for explaining features related to creation of a moving image extraction list in the embodiment. It is a flow diagram for explaining the flow of video extraction by the video extraction system according to the embodiment.
  • the vehicle event video extraction system (hereinafter simply referred to as video extraction system 10) according to the present embodiment is basically configured with an in-vehicle terminal 12 and a system terminal 14.
  • the in-vehicle terminal 12 is an element that plays the role of acquiring video data and environmental information that can be recorded in association with time information of the video data, and an example thereof is a drive recorder.
  • environmental information is based on, for example, position information, speed information, acceleration information, direction information, etc., and information that can be obtained secondarily based on these information (for example, current location on map data based on position information).
  • the in-vehicle terminal 12 may be any device that can acquire at least a portion of all the illustrated environmental information.
  • the environmental information does not necessarily need to be directly acquired by the in-vehicle terminal 12, but may be indirectly acquired through a terminal (not shown) (for example, a high-performance mobile phone (smartphone) or a mobile terminal such as a tablet terminal). Also good. Further, part of the environmental information may be acquired by the system terminal 14, which will be described in detail later.
  • the system terminal 14 may be a terminal having a storage means 16, a calculation means 18, and a display means 20, or a terminal having functions corresponding to each of these means. Furthermore, the system terminal 14 does not necessarily need to be composed of one device, but may be composed of a plurality of devices as long as it can perform each function such as the storage means 16, the calculation means 18, and the display means 20. .
  • the storage means 16 constituting the system terminal 14 stores at least video data acquired via the in-vehicle terminal 12, environmental information associated with this video data, and data processing by the calculation means 18, the details of which will be described later. Any element may be used as long as it can record various programs to be executed, event requirements for analyzing and detecting operation events, which will be described in detail later. Specifically, it may be a mass storage device such as a hard disk drive (HDD) or a solid state drive (SSD), or an external recording medium 22 such as a memory card or memory stick.
  • HDD hard disk drive
  • SSD solid state drive
  • the calculation means 18 reads out various environmental information recorded in the storage means 16 via a program recorded in the storage means 16, analyzes the information, and determines the presence or absence of an operational event. , and an element for performing detection, etc.
  • the calculation means 18 performs, for example, analysis and detection of the occurrence or non-occurrence of vehicle motion events, creates an event list that lists the occurrence timing of motion events in chronological order, and creates a video extraction list based on the event list. , performs processing such as reading video data according to the video extraction list.
  • the vehicle operation event is basically the operation of the vehicle such as turning left or right, starting, stopping, and reversing.
  • Detection of motion events may be performed by determining motion based on vehicle position information, acceleration information, vehicle operation signals (e.g., vehicle speed pulse, reverse gear signal), and predetermined event requirements.
  • event requirements are arbitrary requirements for determining what actions have been applied to the vehicle based on the timing of combinations of various signals, position information, acceleration information, speed information, etc. can be determined.
  • use external data such as map information, weather information, traffic regulation information, traffic accident statistical information, other open data, and information input by the user. You can do it like this.
  • the event list is a list in which the occurrences of operational events are summarized in chronological order.
  • the event list as shown in FIG. 3, it is desirable to record the occurrence time of the motion event in association with the motion event (event category) that has occurred.
  • the video extraction list created after creating the event list is a playback list of videos whose video playback time is a predetermined time period based on the time when the motion event occurred.
  • an example of the moving image extraction list may be one in which the start time and end time of the moving image for each motion event, the category of the motion event included in the moving image, etc. are recorded in association with each other.
  • the time period for video playback for each action event is an arbitrary value, and can be predetermined by the administrator.
  • the playback timing and playback time of the moving image may be determined within a desired range, such as 10 seconds before and after the action event occurrence time, or 5 seconds before and 15 seconds after the action event occurrence time.
  • FIG. 5 shows a schematic diagram of the difference between the event list for the video data recorded in the storage means 16 and the video extraction list.
  • the difference can be seen in that the event list is a flag set along the time axis of a video, and the video extraction list is a list that defines the range of videos to be played for each flag.
  • the time periods for video playback may overlap.
  • Figure 6 Example of video extraction pattern A
  • the reading of the moving image data by the calculation means 18 adopts a method of reading out the moving image of the time period specified in the moving image extraction list from the original moving image data recorded in the storage means 16.
  • the video data corresponding to the playback time period may be played back as link data or played back using a streaming method, without performing processing such as cutting out and saving a file of video data within the playback range. Since there is no need to directly copy or download the video data corresponding to the playback time period, there is no need for time or storage for copying or downloading. Furthermore, even if there is a request to play videos before and after a playback time slot, by simply specifying the desired time slot, it becomes possible to easily play back the videos in the corresponding time slot.
  • event categories are associated with the event list and video extraction list, it is easy to continuously play only video data related to events in a specific category from the video extraction list. It becomes possible to do so.
  • the display means 20 is an element for visually displaying the video data read out as described above. Therefore, the configuration and arrangement form of the display means 20 are not limited. That is, as shown in FIG. 1, it may be provided as a part of the system terminal 14, or it may be provided as a separate device to reproduce video data recorded in the storage means based on the reproduction processing signal of the calculation means 18. It may be something that is displayed.
  • the in-vehicle terminal 12 acquires video data and environmental information associated with this video data.
  • the system terminal 14 receives video data acquired by the in-vehicle terminal 12 and environmental information directly via a network or indirectly via an external recording medium 22 such as a memory card or a mobile terminal with a communication function (not shown). (S10).
  • the calculation means 18 of the system terminal 14 reads the environmental information recorded on the storage means 16 or the external recording medium 22 as a part of the storage means 16, and creates an event list (S20).
  • an event list is created by the calculation means 18, a video extraction list corresponding to this event list is created (S30).
  • the calculation means 18 outputs a reproduction processing signal for reproducing the video data of the time period corresponding to the created video extraction list, and the video data is reproduced for viewing via the display means 20 (S40).
  • the requirements for event recognition (event requirements) recorded in the storage means 16 can be arbitrarily rewritten according to the request of the person (administrator) who views the video, the video of the motion event according to the request can be rewritten. can be easily extracted. Furthermore, among the viewed video data, it is possible to easily reproduce video data that corresponds to a time slot in which specific video data is not being played back.
  • the operation events include turning the vehicle right or left, starting, stopping, reversing, etc.
  • the event list describes that these operation events are categorized and listed.
  • operational events can be increased or decreased in various categories by setting event requirements.
  • the vehicle can perform a U-turn, a curve with a small turning radius (R) such as a hairpin, a slope, a traffic jam, etc.
  • R turning radius
  • the system terminal 14 can also acquire and use external open data and provided traffic violation analysis services. (60km/h to 80km/h), difference in actual speed from general roads (up to 60km/h), etc.), violations of traffic classification such as temporary stops, permission to turn right or left, prohibition of entry, etc. are detected as motion events. It is also possible to do so.
  • the event requirements can also include requirements other than vehicle operation.
  • the driving timing under specific weather conditions such as sunny, rainy, cloudy, and snowy weather, as well as the scenery that matches conditions such as scenic locations and seasons. It is also possible to detect running timing as a movement event.
  • the timing at which the vehicle reaches or passes through an area or place arbitrarily determined by the vehicle user or the administrator who manages the video extraction system 10 can also be detected as an operation event.
  • the number of videos to be played can be increased or decreased by sorting the videos listed in the video extraction list by category or arbitrarily. Therefore, a new video extraction list may be created using videos arbitrarily selected by the administrator as a digest.
  • you want to further shorten the viewing time and understand the situation when a motion event occurs you can create a time-lapse video that displays a list of still images at the time corresponding to the event list, or still images at intervals of several seconds before and after that time. It may also be possible to perform playback.
  • system terminal 14 may be configured to be able to arbitrarily or automatically upload onto the network the video extraction list that can be customized in a manner desired by the administrator as described above. .

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】車載器を介して取得された動画に含まれる車両イベントに関連する動画を効率的に視聴することができる車両イベントの動画抽出システムを提供する。 【解決手段】動画データと環境情報とを関連付けて取得可能な車載端末１２と、動画データと、環境情報を記録可能な記憶手段１６と、任意に定めたイベント要件と環境情報とを比較して車両の動作イベントの発生タイミングを検出してイベントリストを作成し、イベントリストに基づいて動画抽出リストを作成し、記憶手段１６に記録されている動画データのうち、動画抽出リストに対応する時間帯に記録されている動画データを読み出す再生処理信号を出力する演算手段１８と、を備えるシステム端末１４と、を有することを特徴とする。

Description

車両イベントの動画抽出システム及び動画抽出方法
　本発明は、車両走行時に撮影される動画を記録するための技術に係り、特に、ドライブレコーダーなどの車載器を介して取得された動画データに含まれる車両イベントに関連する部分を抽出して再生する場合に好適な車両イベントの動画抽出システム、及び動画抽出方法に関する。
　一般的に、ドライブレコーダーを搭載した車両において車両イベントとは、車両に生じた衝撃等の事をさす事が多く、それらのイベントを認識し、イベント発生時の動画を再生する技術としては、特許文献１に開示されているようなものが知られている。すなわち、イベント発生時の情報をまとめたインデックスとイベント発生時に撮影された動画データとを関連付け、イベント発生時の動画データを切り出し、この切り出された動画データを個別に、あるいはイベント単位で連続的に再生するというものである。
　このような技術によれば、動画データが長時間に亙るものであったとしても、イベント発生時の動画のみを短時間で効率的に視聴する事ができる。また、動画データのファイルを転送する場合には、転送データの容量を抑制することが可能となる。
　しかし、特許文献１に開示されているような技術では、動画を取得するイベントは、予め定められたもの（例えば衝撃発生時）に限られ、任意の事項をイベントとして認識させるという事は困難である。また、転送先で動画を再生した際、切り出された動画データよりも前、あるいは後の動画も確認したいといった場合には、個別にデータを切り出して転送しなおすといった手間を要することとなる。
特開２０２２－３７５０号公報
　そこで本発明では、車載器を介して取得された動画に含まれる車両イベントに関連する動画を効率的に視聴することができ、かつ動画を視聴する者の要望に応じてイベント認識の要件を定められる車両イベントの動画抽出システム、及び動画抽出方法を提供することを目的とする。
　上記のような特徴を有する車両イベントの動画抽出システムは、動画データと、車両に関する環境情報とを前記動画データの時刻情報に関連付けて取得可能な車載端末と、前記動画データと、前記環境情報を記録可能な記憶手段と、任意に定めた１乃至複数のイベント要件と前記環境情報とを比較して車両の動作イベントの発生タイミングを検出して時系列にリスト化したイベントリストを作成し、前記イベントリストに基づいて、各動作イベントの発生タイミングを基点として所定の時間帯を動画再生時間とした動画抽出リストを作成し、前記記憶手段に記録されている動画データのうち、前記動画抽出リストに対応する時間帯に記録されている動画データを読み出す再生処理信号を出力する演算手段と、を備えるシステム端末と、を有することを特徴とする。
　また、上記のような特徴を有する車両イベントの動画抽出システムにおいて前記システ
ム端末は、前記再生処理信号によって読み出された動画データを視認可能に表示する表示手段を備えるようにすると良い。このような特徴を有する事によれば、抽出された動画データを視聴、確認することができる。
　また、上記のような特徴を有する車両イベントの動画抽出システムにおける前記イベント要件は、前記記憶手段に記録され、前記イベント要件を書き換える事を可能にすることもできる。このような特徴を有する事によれば、抽出される動画を所望する要件に合わせて変化させることができる。
　さらに、上記のような特徴を有する車両イベントの動画抽出システムにおいて前記演算手段は、連続して検出された前記動作イベントの発生タイミングの間隔が、前記所定の時間帯よりも短い時間である場合、連続して検出された複数の前記動作イベントを１つの動画再生時間帯としてまとめる処理を行うようにすると良い。このような特徴を有する事によれば、抽出される動画全体の時間を短縮することが可能となる。
　また、上記目的を達成するための本発明に係る車両イベントの動画抽出方法は、記憶手段に記録されている動画データから車両の動作イベントに関連する動画を抽出する方法であって、任意に定めた１乃至複数のイベント要件と、前記記憶手段に記録された環境情報とを比較して車両の動作イベントの発生タイミングを検出して時系列にリスト化するイベントリスト作成工程と、作成されたイベントリストに基づいて、各動作イベントの発生タイミングを基点として所定の時間帯を動画再生時間としてリスト化する動画抽出リスト作成工程と、前記記憶手段に記録されている動画データのうち、前記動画抽出リスト作成工程で作成された動画抽出リストに対応する時間帯に記録されている動画データを読み出す信号を出力する再生処理信号出力工程と、を有することを特徴とする。
　上記のような特徴を有する車両イベントの動画抽出システム、及び方法によれば、車載器を介して取得された動画に含まれる車両イベントに関連する動画を効率的に視聴することができる。また、動画を視聴する者（例えば、管理者）の要望に応じてイベント認識の要件を定めることができるため、任意のイベントに対応した動画を抽出することもできる。
実施形態に係る動画抽出システムの概略構成を示すブロック図である。 演算手段によるイベントリスト、動画抽出リストの作成の流れを説明するためのブロック図である。 イベントリストの一例を示す図である。 動画抽出リストの一例を示す図である。 動画データに対するイベントリストの適用形態と、動画抽出リストの適用形態の違いを説明するためのイメージ図である。 実施形態における動画抽出リストの作成に関する特徴を説明するための図である。 実施形態に係る動画抽出システムによる動画抽出の流れを説明するためのフロー図である。
　以下、本発明の車両イベントの動画抽出システム、及び車両イベントの動画抽出方法に係る実施の形態について、図面を参照して詳細に説明する。なお、以下に示す実施の形態は、本発明を実施する上で好適な形態の一部である。よって、その効果を奏する限りにおいて構成の一部に変更を加えたとしても、本発明の一部とみなすことができる。
［構成］
　本実施形態に係る車両イベントの動画抽出システム（以下、単に動画抽出システム１０と称す）は図１に示すように、車載端末１２と、システム端末１４とを基本として構成されている。車載端末１２は、動画データと、この動画データの時刻情報に関連付けて記録することができる環境情報を取得する役割を担う要素であり、一例としては、ドライブレコーダーを挙げることができる。ここで、環境情報とは、例えば位置情報や速度情報、加速度情報、方位情報などを基本とし、これらの情報に基づいて２次的に取得可能な情報（例えば位置情報に基づく地図データ上の現在地情報など）の他、ネットワークを介して取得可能な情報（例えば気象情報や交通規制情報、交通事故統計情報、その他各種オープンデータなど）も含まれる。なお、車載端末１２は、例示した全ての環境情報のうちの少なくとも一部を取得可能なものであれば良い。また、環境情報は、必ずしも車載端末１２が直接取得する必要は無く、図示しない端末（例えば高機能型携帯電話（スマートフォン）や、タブレット端末などの携帯端末）を介して間接的に取得する構成としても良い。また、環境情報のうちの一部は、詳細を後述するシステム端末１４により取得されるようにしても良い。
　システム端末１４は、記憶手段１６、演算手段１８、及び表示手段２０を有する端末、あるいはこれらの各手段に準ずる機能を有する端末であれば良い。また、システム端末１４は、必ずしも１つの機器により構成されている必要は無く、記憶手段１６や演算手段１８、及び表示手段２０等の各機能を発揮できれば、複数の機器により構成されていても良い。
　このようなシステム端末１４を構成する記憶手段１６は、少なくとも車載端末１２を介して取得された動画データや、この動画データに関連づけられた環境情報、及び詳細を後述する演算手段１８によるデータ処理を行うための各種プログラムや、詳細を後述する動作イベントを分析、検出するためのイベント要件等を記録可能な要素であれば良い。具体的には、ハードディスクドライブ（ＨＤＤ）や、ソリッドステートドライブ（ＳＳＤ）などの大容量記憶装置の他、メモリーカードやメモリースティックなどの外部記録媒体２２であっても良い。
　また、演算手段１８は図２に示すように、記憶手段１６に記録されたプログラム等を介して、記憶手段１６に記録された各種の環境情報を読み出し、その分析や、動作イベントの有無の判定、及び検出などを実行するための要素である。演算手段１８は、例えば車両の動作イベントの発生の有無に関する分析、及び検出や、動作イベントの発生タイミングを時系列にリスト化したイベントリストの作成の他、イベントリストに基づく動画抽出リストの作成や、動画抽出リストに応じた動画データの読み出しなどの処理を行う。
　ここで、車両の動作イベントとは、車両の右左折、発進、停止、及び後退などの動作を基本とする。動作イベントの検出は、車両の位置情報や加速度情報の他、車両の操作信号（例えば、車速パルスやバックギア信号）などと、予め定めたイベント要件に基づいて動作判定を行うようにすれば良い。なお、イベント要件とは、各種信号や位置情報、加速度情報、速度情報などの組み合わせのタイミングにより、車両にどのような動作が加えられたかを判定するための任意の要件であり、管理者が予め定めることができる。また、動作イベントに車両周辺の情報との関係を含める場合には、地図情報や気象情報、交通規制情報、交通事故統計情報、その他のオープンデータや、ユーザーによる入力情報などの外部データを活用するようにしても良い。
　また、イベントリストとは、動作イベントの発生を時系列にまとめたリストである。イベントリストでは、図３に示すように、動作イベントの発生時刻に、発生した動作イベン
ト（イベントカテゴリ）を関連付けて記録することが望ましい。
　イベントリスト作成後に作成される動画抽出リストとは、動作イベントの発生時刻を基点とした所定の時間帯を動画再生時間とした動画の再生リストである。動画抽出リストの一例としては図４に示すように、動作イベント毎の動画の開始時刻と終了時刻、及びその動画に含まれる動作イベントのカテゴリなどを関連付けて記録するものであれば良い。なお、各動作イベントに対する動画再生の時間帯は任意の値であり、管理者が予め定めることができる。例えば、動作イベント発生時刻を中心とした前後１０秒づつ、あるいは動作イベント発生時刻の前５秒、後ろ１５秒など、所望する範囲で、動画の再生タイミングや再生時間を定めるようにすれば良い。
　記憶手段１６に記録された動画データに対するイベントリストと、動画抽出リストの相違について、図５に模式図を示す。図５によれば、イベントリストは動画の時間軸に沿って立てたフラグであり、動画抽出リストは、各フラグ毎に再生する動画の範囲を定めたものであるという違いを読み取る事ができる。
　また、図５に示すイベントリストにおけるｔ３、ｔ４のように動作イベントの発生タイミングが近く、それぞれの動作イベント毎に所望する時間帯を設定すると、動画再生の時間帯が重複してしまうような場合には、１つの動画再生時間帯としてまとめるようにすると良い（図５で示す動画抽出リストでは、開始時刻ｔ３１、終了時刻ｔ４２で示す範囲）。動作イベント事に動画再生時間帯をそれぞれ定めた場合、時間帯が重複する部分を複数回視聴することとなってしまい、動画の再生時間が長くなってしまう（図６：動画抽出パターンＡの例）。これに対し、複数の動作イベントを１つの動画再生時間帯としてまとめることで、動画の再生時間を短縮することが可能となる（図６：動画抽出パターンＢの例）。
　演算手段１８による動画データの読み出しは、記憶手段１６に記録されている元の動画データから、動画抽出リストで指定された時間帯の動画を読み出すといった方式を採用する。つまり、再生する範囲の動画データのファイルを切り出して保存するといった処理を行わず、再生時間帯に対応した動画データをリンクデータとして再生したり、ストリーミング方式で再生したりすれば良い。再生時間帯に対応した動画データを直接コピー、あるいはダウンロードするといった処理を行う必要が無いため、コピーやダウンロードといった処理を行うための時間やストレージが不要となる。また、再生時間帯の前後の動画を再生したいといった要望があった場合でも、所望する時間帯を指定するだけで、対応する時間帯の動画を容易に再生することが可能となる。また、イベントリストや動画抽出リストには、イベントのカテゴリが関連付けられているため、動画抽出リストの中からさらに、特定のカテゴリのイベントに関連した動画データのみを連続して再生するといった処理も容易に行うことが可能となる。
　表示手段２０は、上記のようにして読み出された動画データを視認可能に表示するための要素である。このため、表示手段２０の構成や配置形態は限定されるものでは無い。すなわち、図１に示すようにシステム端末１４の一部として設けられていても良いし、別体の機器として演算手段１８の再生処理信号に基づいて、記憶手段に記録された動画データを再生、表示するものであっても良い。
［作用］
　上記のような構成の動画抽出システム１０では図７に示すようにして動画の抽出を行うこととなる。まず、車載端末１２によって動画データと、この動画データに関連づけられた環境情報が取得される。システム端末１４は、ネットワークを介して直接、あるいはメモリーカードなどの外部記録媒体２２や、図示しない通信機能を有する携帯端末を介して
間接的に、車載端末１２によって取得された動画データと、環境情報とを取得する（Ｓ１０）。
　システム端末１４の演算手段１８は、記憶手段１６、あるいは記憶手段１６の一部としての外部記録媒体２２に記録された環境情報を読み出し、イベントリストを作成する（Ｓ２０）。演算手段１８によりイベントリストが作成されると、このイベントリストに対応した動画抽出リストが作成される（Ｓ３０）。演算手段１８は、作成された動画抽出リストに対応した時間帯の動画データを再生するための再生処理信号を出力し、表示手段２０を介して動画データが視聴可能に再生される（Ｓ４０）。
［効果］
　このような動画抽出システム１０によれば、記録された動画データが長時間に亙るものであったとしても車両に特定の動作イベントが生じた時間帯の動画データのみを効率的に視聴することが可能となる。また、特定のイベントの中から、再生したいイベントのカテゴリを指定することで、任意のカテゴリに対応したイベントが生じた時間帯の動画のみを再生することもでき、さらに効率的な動画データの視聴を行うことができる。
　また、動画を視聴する者（管理者）の要望に応じて記憶手段１６に記録されたイベント認識のための要件（イベント要件）を任意に書き換えることができるため、要望に応じた動作イベントの動画を容易に抽出することができる。さらに、視聴した動画データのうち、特定の動画データの時間帯に対して、再生されていない範囲の時間帯に対応した動画データの再生も、容易に行うことが可能となる。
　上記実施形態では、動作イベントとして車両の右左折、発進、停止、及び後退などを挙げ、イベントリストでは、これらの動作イベントをカテゴリ分けしてリスト化する旨記載した。しかしながら、動作イベントは、イベント要件の設定により種々のカテゴリを増減させることができる。すなわち、環境情報の組み合わせにより、Ｕターンの動作や、ヘアピンなどの旋回半径（Ｒ）が小さなカーブを走行している際の動作、坂道を走行している際の動作、渋滞走行時の動作、ＥＴＣなどのチェックゲート通過時の動作、サービスエリアやパーキング立ち寄り時の動作などについて、個別にイベント要件を定め、動作イベントとしてカテゴリ分けして検出することも可能となる。
　また、システム端末１４が外部のオープンデータや、提供されている交通違反分析サービスなどを取得、利用可能とすることで、車両の速度制限違反（高速道路（８５ｋｍ／ｈ～１００ｋｍ／ｈ）やバイパス（６０ｋｍ／ｈ～８０ｋｍ／ｈ）、一般道（～６０ｋｍ／ｈ）などと実速度の相違）や、一時停止、や右左折の可否、進入禁止等の通行区分に関する違反等を動作イベントとして検出することも可能となる。
　さらに、イベント要件には、車両の動作以外の要件を含めることもできる。すなわち、気象情報や観光情報を取得、利用することで、晴天、雨天、曇天、雪など、特定の気象条件下での走行タイミングの他、景色が良い場所や季節などの条件に合った風景の走行タイミングを動作イベントとして検出することも可能となる。また、当然に、車両ユーザーや動画抽出システム１０を管理する管理者が任意に定めたエリアや場所に到達、あるいは通過したタイミングを動作イベントとして検出することもできる。
　また、上述したように、動画抽出リストに挙げられた動画は、カテゴリ別、あるいは任意に振り分けることで、再生する動画の数を増減させることができる。このため、管理者が任意に選択した動画をダイジェストとして、新たな動画抽出リストを作成するようにしても良い。また、さらに視聴時間を短縮して動作イベント発生時の状況を把握したい場合
には、イベントリストに対応した時刻の静止画、あるいはその時刻の前後数秒間隔の静止画をリスト化して再生する、タイムラプス再生を行うようにしても良い。
　また、実施形態に係るシステム端末１４は、上記のように管理者が所望するかたちにカスタマイズ可能な動画抽出リストについて、任意に、あるいは自動で、ネットワーク上にアップロードすることができるようにしても良い。
１０………動画抽出システム、１２………車載端末、１４………システム端末、１６………記憶手段、１８………演算手段、２０………表示手段、２２………外部記録媒体。

Claims (5)

  1. 　動画データと、車両に関する環境情報とを前記動画データの時刻情報に関連付けて取得可能な車載端末と、
    　前記動画データと、前記環境情報を記録可能な記憶手段と、任意に定めた１乃至複数のイベント要件と前記環境情報とを比較して車両の動作イベントの発生タイミングを検出して時系列にリスト化したイベントリストを作成し、前記イベントリストに基づいて、各動作イベントの発生タイミングを基点として所定の時間帯を動画再生時間とした動画抽出リストを作成し、前記記憶手段に記録されている動画データのうち、前記動画抽出リストに対応する時間帯に記録されている動画データを読み出す再生処理信号を出力する演算手段と、を備えるシステム端末と、を有することを特徴とする車両イベントの動画抽出システム。
  2. 　前記システム端末は、前記再生処理信号によって読み出された動画データを視認可能に表示する表示手段を備えることを特徴とする請求項１に記載の車両イベントの動画抽出システム。
  3. 　前記イベント要件は、前記記憶手段に記録され、前記イベント要件を書き換える事を可能にしたことを特徴とする請求項１または２に記載の車両イベントの動画抽出システム。
  4. 　前記演算手段は、連続して検出された前記動作イベントの発生タイミングの間隔が、前記所定の時間帯よりも短い時間である場合、連続して検出された複数の前記動作イベントを１つの動画再生時間帯としてまとめる処理を行うことを特徴とする請求項３に記載の車両イベントの動画抽出システム。
  5. 　記憶手段に記録されている動画データから車両の動作イベントに関連する動画を抽出する方法であって、
    　任意に定めた１乃至複数のイベント要件と、前記記憶手段に記録された環境情報とを比較して車両の動作イベントの発生タイミングを検出して時系列にリスト化するイベントリスト作成工程と、
    　作成されたイベントリストに基づいて、各動作イベントの発生タイミングを基点として所定の時間帯を動画再生時間としてリスト化する動画抽出リスト作成工程と、
    　前記記憶手段に記録されている動画データのうち、前記動画抽出リスト作成工程で作成された動画抽出リストに対応する時間帯に記録されている動画データを読み出す信号を出力する再生処理信号出力工程と、を有することを特徴とする車両イベントの動画抽出方法。
PCT/JP2023/010709 2022-07-12 2023-03-17 車両イベントの動画抽出システム及び動画抽出方法 WO2024014058A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022111683A JP2024010379A (ja) 2022-07-12 2022-07-12 車両イベントの動画抽出システム及び動画抽出方法
JP2022-111683 2022-07-12

Publications (1)

Publication Number Publication Date
WO2024014058A1 true WO2024014058A1 (ja) 2024-01-18

Family

ID=89536456

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/010709 WO2024014058A1 (ja) 2022-07-12 2023-03-17 車両イベントの動画抽出システム及び動画抽出方法

Country Status (2)

Country Link
JP (1) JP2024010379A (ja)
WO (1) WO2024014058A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016092464A (ja) * 2014-10-30 2016-05-23 株式会社ユピテル 電子機器及びプログラム
JP2021122114A (ja) * 2017-05-19 2021-08-26 株式会社ユピテル ドライブレコーダー、ドライブレコーダー用表示装置及びプログラム
JP2021170337A (ja) * 2019-07-09 2021-10-28 株式会社ユピテル 表示制御システム、表示制御方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016092464A (ja) * 2014-10-30 2016-05-23 株式会社ユピテル 電子機器及びプログラム
JP2021122114A (ja) * 2017-05-19 2021-08-26 株式会社ユピテル ドライブレコーダー、ドライブレコーダー用表示装置及びプログラム
JP2021170337A (ja) * 2019-07-09 2021-10-28 株式会社ユピテル 表示制御システム、表示制御方法及びプログラム

Also Published As

Publication number Publication date
JP2024010379A (ja) 2024-01-24

Similar Documents

Publication Publication Date Title
RU2314653C2 (ru) Способ и устройство обработки информации, программа и носитель записи
CN101055748B (zh) 提供多路径数据的方法和再现多路径数据的方法
KR101058054B1 (ko) 비디오 추출
CN1741178B (zh) 再现装置
JP4778231B2 (ja) ビデオシーケンスに対してインデックス付けするシステムおよび方法
JP2001157145A5 (ja) 記録装置および方法、再生装置および方法、並びに記録媒体
US20100316349A1 (en) Content reproduction apparatus, content provision apparatus, and content distribution system
US20040095812A1 (en) Information record medium and apparatus for recording the same
KR960038765A (ko) 데이타 기록매체
CN1195169A (zh) 信息信号记录和重放的装置及记录和重放的方法
CN103314602A (zh) 再生装置及其控制方法、生成装置及其控制方法、记录介质、数据结构、控制程序以及记录了该程序的记录介质
US20070031112A1 (en) Fast generation of a personalized DVD from a common template
WO2011046051A1 (ja) 動画追尾による情報提供システム
DE69715492T2 (de) Informationsaufzeichnungsmedium, Gerät zur Aufzeichnung auf demgleichen und Gerät zur Wiedergabe aus demgleichen
CN103747226A (zh) 视频信息再现方法和视频信息再现装置
FR2910769A1 (fr) Procede de creation d'un resume d'un document audiovisuel comportant un sommaire et des reportages, et recepteur mettant en oeuvre le procede
WO2024014058A1 (ja) 車両イベントの動画抽出システム及び動画抽出方法
JP7459866B2 (ja) 記録システム、及び、記録方法
CN102362489B (zh) 再现控制程序、再现控制方法和再现装置
EP1858017A1 (en) Image processing apparatus and file reproduce method
JP2006293697A5 (ja)
JP2006293697A (ja) 車載用音楽装置
JP7521191B2 (ja) 画像管理装置、画像管理方法、および画像管理プログラム
JP2012169856A (ja) 画像記録装置及びドライブレコーダシステム
US11902700B2 (en) Recording device, recording method, and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23839237

Country of ref document: EP

Kind code of ref document: A1