JP7289165B1 - Information processing system and program, etc. - Google Patents
Information processing system and program, etc. Download PDFInfo
- Publication number
- JP7289165B1 JP7289165B1 JP2022166653A JP2022166653A JP7289165B1 JP 7289165 B1 JP7289165 B1 JP 7289165B1 JP 2022166653 A JP2022166653 A JP 2022166653A JP 2022166653 A JP2022166653 A JP 2022166653A JP 7289165 B1 JP7289165 B1 JP 7289165B1
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- information
- control unit
- video data
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title abstract description 13
- 230000006870 function Effects 0.000 claims description 302
- 238000012790 confirmation Methods 0.000 claims description 11
- 230000009471 action Effects 0.000 abstract description 48
- 230000007246 mechanism Effects 0.000 abstract description 7
- 238000012545 processing Methods 0.000 description 259
- 238000003384 imaging method Methods 0.000 description 232
- 238000003860 storage Methods 0.000 description 154
- 238000007726 management method Methods 0.000 description 131
- 238000013523 data management Methods 0.000 description 112
- 238000012549 training Methods 0.000 description 68
- 230000008859 change Effects 0.000 description 50
- 230000006399 behavior Effects 0.000 description 35
- 230000033001 locomotion Effects 0.000 description 35
- 238000012546 transfer Methods 0.000 description 31
- 238000004458 analytical method Methods 0.000 description 30
- 238000000034 method Methods 0.000 description 28
- 238000004891 communication Methods 0.000 description 25
- 230000008569 process Effects 0.000 description 18
- 238000013459 approach Methods 0.000 description 16
- 208000027534 Emotional disease Diseases 0.000 description 12
- 230000004308 accommodation Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 11
- 239000011521 glass Substances 0.000 description 10
- 230000001133 acceleration Effects 0.000 description 9
- 238000013461 design Methods 0.000 description 9
- 230000008921 facial expression Effects 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 8
- 230000002265 prevention Effects 0.000 description 8
- 230000004913 activation Effects 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 7
- 230000008520 organization Effects 0.000 description 7
- 230000035945 sensitivity Effects 0.000 description 7
- 230000001568 sexual effect Effects 0.000 description 7
- 238000012384 transportation and delivery Methods 0.000 description 7
- 230000005856 abnormality Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 6
- 230000010354 integration Effects 0.000 description 6
- 230000015654 memory Effects 0.000 description 6
- 230000036961 partial effect Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 239000000470 constituent Substances 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 5
- 238000012795 verification Methods 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 230000036544 posture Effects 0.000 description 4
- 230000035935 pregnancy Effects 0.000 description 4
- 238000012552 review Methods 0.000 description 4
- 230000029305 taxis Effects 0.000 description 4
- 241000699666 Mus <mouse, genus> Species 0.000 description 3
- 230000033228 biological regulation Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 235000019640 taste Nutrition 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000002354 daily effect Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000000446 fuel Substances 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000474 nursing effect Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- LDXJRKWFNNFDSA-UHFFFAOYSA-N 2-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)-1-[4-[2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidin-5-yl]piperazin-1-yl]ethanone Chemical compound C1CN(CC2=NNN=C21)CC(=O)N3CCN(CC3)C4=CN=C(N=C4)NCC5=CC(=CC=C5)OC(F)(F)F LDXJRKWFNNFDSA-UHFFFAOYSA-N 0.000 description 1
- WZFUQSJFWNHZHM-UHFFFAOYSA-N 2-[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]-1-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethanone Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)CC(=O)N1CC2=C(CC1)NN=N2 WZFUQSJFWNHZHM-UHFFFAOYSA-N 0.000 description 1
- WTFUTSCZYYCBAY-SXBRIOAWSA-N 6-[(E)-C-[[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]methyl]-N-hydroxycarbonimidoyl]-3H-1,3-benzoxazol-2-one Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)C/C(=N/O)/C1=CC2=C(NC(O2)=O)C=C1 WTFUTSCZYYCBAY-SXBRIOAWSA-N 0.000 description 1
- 206010048909 Boredom Diseases 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 241000282376 Panthera tigris Species 0.000 description 1
- 241000156302 Porcine hemagglutinating encephalomyelitis virus Species 0.000 description 1
- 241001282135 Poromitra oscitans Species 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 206010048232 Yawning Diseases 0.000 description 1
- 239000002253 acid Substances 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- OJIJEKBXJYRIBZ-UHFFFAOYSA-N cadmium nickel Chemical compound [Ni].[Cd] OJIJEKBXJYRIBZ-UHFFFAOYSA-N 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 229910052739 hydrogen Inorganic materials 0.000 description 1
- 239000001257 hydrogen Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 235000012054 meals Nutrition 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000004801 process automation Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000036632 reaction speed Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 238000011076 safety test Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 238000007790 scraping Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】 車両を使用する人の状態又は動作に基づいて、前記車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する仕組みや、所定のサービスのための予約情報システムから予約情報を取得し、前記予約情報に基づいて、複数の前記車両に搭載される撮影機器の映像データを管理する仕組みを提供する。【解決手段】 情報処理システムが、車両を使用する人の状態又は動作に基づいて、前記車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する機能を有する。【選択図】 図8A mechanism for controlling a photographing device that creates video data of at least one of the interior and exterior of the vehicle based on the state or action of a person using the vehicle, and a reservation information system for a predetermined service. Information is acquired, and based on the reservation information, there is provided a mechanism for managing image data of photographing devices mounted on a plurality of the vehicles. SOLUTION: An information processing system has a function of controlling a photographing device that creates video data of at least one of the interior and exterior of the vehicle based on the state or action of a person using the vehicle. [Selection drawing] Fig. 8
Description
本発明は、情報処理システム及びプログラム等に関する。 The present invention relates to an information processing system, a program, and the like.
本技術分野の背景技術として、特開2018-160135号公報(特許文献1)がある。この公報には、「降車時注意喚起装置10は、自動運転車両に搭載されるシステムであり、前方車外音響取得用マイク22、後方車外音響取得用マイク23、前方カメラ24、後方カメラ25、カメラ26、前部車外音響用スピーカ31、後部車外音響用スピーカ32、第1表示器33、第2表示器34を備え、車両からの搭乗者の降車時の注意喚起を、車内または車外に報知するために用いられる。」と記載されている(要約参照)。
As a background art of this technical field, there is Japanese Patent Laying-Open No. 2018-160135 (Patent Document 1). In this publication, it is stated that "the
前記特許文献1には、例えば車両を使用する人の状態や動作に基づき撮影機器の制御する仕組みについて検討がなされていないなど、従来のシステムには様々な課題があった。
The conventional system has various problems, for example, in
上記課題に鑑み、本発明の目的の一つは、例えば、車両を使用する人の状態や動作に基づき撮影機器の制御する仕組み等、従来よりも優れたシステム等を提供することである。本発明の別の目的の一つは、例えば、所定のサービスのための予約情報システムから予約情報を取得し、前記予約情報に基づいて、複数の前記車両に搭載される撮影機器の映像データを管理する仕組み等、従来よりも優れたシステム等を提供することである。 SUMMARY OF THE INVENTION In view of the above problems, one of the objects of the present invention is to provide a system or the like that is superior to the conventional system, such as a mechanism for controlling photographing equipment based on the state or motion of a person using a vehicle. Another object of the present invention is, for example, to acquire reservation information from a reservation information system for a predetermined service, and based on the reservation information, image data of photographing equipment mounted on a plurality of the vehicles. It is to provide a system that is superior to the conventional system, such as a mechanism for management.
本発明の目的はこれに限定されず、本明細書及び図面等に開示される構成の部分から奏する効果を得ることを目的とする構成についても分割出願・補正等により権利取得する意思を有する。例えば本明細書において「~できる」「~可能である」などと記載した箇所を「~が課題である」と読み替えた課題が本明細書には開示されている。課題はそれぞれ独立したものとして記載しているものであり、各々の課題を解決するための構成についても単独で分割出願・補正等により権利取得する意思を有する。課題が明細書の記載から黙示的に把握されるものであっても、本出願人は本明細書に記載の構成の一部を補正又は分割出願にて特許請求の範囲とする意思を有する。またこれら独立の課題を組み合わせた課題を解決する構成についても開示しているものであり、権利取得する意思を有する。 The object of the present invention is not limited to this, and we have the intention to acquire rights by divisional application, amendment, etc. for the structure aiming to obtain the effect of the structure disclosed in the specification and drawings. For example, the present specification discloses a problem in which the descriptions such as "can do", "possible", etc. are replaced with "is a problem". The problems are described as independent ones, and we intend to acquire the rights for the structure for solving each problem independently by filing a divisional application, an amendment, etc. Even if the problem is implicitly grasped from the description of the specification, the applicant intends to claim part of the configuration described in this specification in an amended or divisional application. It also discloses a configuration that solves a problem that combines these independent problems, and has the intention to acquire the right.
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、車両を使用する人の状態又は動作に基づいて、前記車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する機能を有することや、を特徴とする。別の一例を挙げるならば、所定のサービスのための予約情報システムから予約情報を取得し、前記予約情報に基づいて、複数の前記車両に搭載される撮影機器の映像データを管理する機能を有すること、を特徴とする。
In order to solve the above problems, for example, the configurations described in the claims are adopted.
The present application includes a plurality of means for solving the above problems, and one example is to create image data of at least one of the interior and exterior of the vehicle based on the state or action of the person using the vehicle. It is characterized by having a function of controlling an imaging device. To give another example, it has a function of acquiring reservation information from a reservation information system for a predetermined service, and managing video data of photographing equipment mounted on a plurality of vehicles based on the reservation information. characterized by
本発明によれば、車両を使用する人の状態又は動作に基づいて、車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する仕組みや、車両を使用する人の状態又は動作に基づいて、所定のサービスのための予約情報を取得し、前記予約情報に基づいて、複数の前記車両に搭載される撮影機器の映像データを管理する仕組み等、従来よりも優れた情報処理システム等を提供することができる。
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
According to the present invention, a mechanism for controlling a photographing device that creates at least one of video data of the inside or outside of a vehicle based on the state or action of the person using the vehicle, or the state or action of the person using the vehicle An information processing system superior to the conventional one, such as a mechanism for acquiring reservation information for a predetermined service based on the above, and managing video data of shooting equipment mounted on a plurality of the vehicles based on the reservation information. etc. can be provided.
Problems, configurations, and effects other than those described above will be clarified by the following description of the embodiments.
なお、本願の発明の効果はこれに限定されず、本明細書及び図面等に開示される構成の部分から奏する効果についても開示されており、当該効果を奏する構成についても分割出願・補正等により権利取得する意思を有する。例えば本明細書において「~できる」「~可能である」などと記載した箇所などは奏する効果を明示する記載であり、また「~できる」「~可能である」などといった記載がなくとも効果を示す部分が存在する。またこのような記載がなくとも当該構成よって把握される効果が存在する。 In addition, the effect of the invention of the present application is not limited to this, and the effect exerted by the parts of the structure disclosed in the specification and drawings, etc. is also disclosed, and the structure exerting the effect is also obtained by divisional application, amendment, etc. Intend to acquire rights. For example, in this specification, the places described as "can do", "can be", etc. are descriptions that clearly show the effect, and even if there is no description such as "can be done", "can be done", etc. There are parts shown. Moreover, even without such a description, there is an effect that can be grasped by the configuration.
以下、図面を参照して本発明を実施するための形態について説明する。なお、以下に示す実施形態は、本発明を提供した一つの実施形態であり、以下の記載に基づいて本願発明の内容が限定して解釈されるものではない。
また、以下の説明では、車両を使用する人の状態又は動作に基づいて、車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する機能を有する、情報処理システムにおける、個々の構成要素について具体的に説明するが、本システムの構成要素は、それらに限定されるものではなく、個々の構成要素に関連して説明した機能を実行できるものであれば、別の構成や様態であっても構わない。
また、映像データは、静止画映像及び動画映像のいずれを構成するデータであってもよいが、動画映像とすると特によい。以下の説明における「映像」という用語は、人の目で見る静止画映像(静止画画像)又は動画映像(動画画像)とするとよい。更に、映像データは、音声データを含むものであるとよりよい。
EMBODIMENT OF THE INVENTION Hereinafter, the form for implementing this invention is demonstrated with reference to drawings. The embodiment shown below is one embodiment that provides the present invention, and the content of the present invention should not be construed as being limited based on the following description.
In addition, in the following description, based on the state or action of the person using the vehicle, individual Although the components will be specifically described, the components of this system are not limited to them, and other configurations and modes can be used as long as they can perform the functions described in relation to the individual components. It doesn't matter if it is.
Further, the video data may be data constituting either a still image or a moving image, but moving image data is particularly preferable. The term "image" in the following description may be a still image (still image) or a moving image (moving image) viewed by the human eye. Furthermore, it is preferable that the video data include audio data.
更に、撮影機器の制御は、撮影機器によって撮影する映像データのパラメータの変更や調整、撮影機器の動作モードの変更、撮影機器の機能の起動や停止等に関連する制御に加え、撮影機器と接続した装置や撮影機器と協働する装置に関連する制御であってもよい。 Furthermore, the control of the photographic equipment involves changing and adjusting the parameters of video data shot by the photographic equipment, changing the operation mode of the photographic equipment, starting and stopping the functions of the photographic equipment, and controlling the connection with the photographic equipment. It may also be control related to a device that cooperates with the device or the imaging equipment.
なお、各モードは、1つ又は複数の機能の組み合わせであるとよい。例えば、1つの動作モードは、少なくとも撮影機器の1つの動作機能を有効にして撮影機器を動作させる機能であるとよい。 Note that each mode may be a combination of one or more functions. For example, one operational mode may be the ability to operate the imaging device with at least one operational feature of the imaging device enabled.
図1は、本実施の形態のシステムにおける車両10内の撮影機器101(101F、101R)及び車室内撮影用カメラ102(102F、102R)の設置位置及び撮影方向等を説明する説明図の例である。
図1(a)は車両10の側面図であり、図1(b)は車両10の上面図である。
FIG. 1 is an example of an explanatory diagram for explaining the installation positions, shooting directions, etc. of shooting devices 101 (101F, 101R) and vehicle interior shooting cameras 102 (102F, 102R) in a
1(a) is a side view of the
図1(a)及び図1(b)に示すように、車両10は車室の前後に2つの撮影機器101(101F、101R)を有している。
図1の実施形態では、撮影機器101(101F、101R)には、車室内撮影用カメラ102(102F、102R)が車両10の左右方向に並んで取り付けられている。
As shown in FIGS. 1(a) and 1(b), the
In the embodiment of FIG. 1, vehicle interior photography cameras 102 (102F, 102R) are attached to the photographing equipment 101 (101F, 101R) side by side in the left-right direction of the
前方の車室内撮影用カメラ102Fは、車両10における前方側に取り付けられ、例えば、車両10の前後方向で見て少なくとも車両10の車室内において、前後方向における中心よりも前方側に取り付けられるとよい。車両10の車両室内の前方側は、特には前部座席のヘッドレストや背もたれの位置からフロントガラスの間の範囲に、配置されていると有利であり、フロントガラスに取り付ける位置とすると特によい。
The front vehicle
後方の車室内撮影用カメラ102Rは、車両10における後方側に取り付けられ、例えば、車両10の前後方向で見て少なくとも車両10の車室内において、前後方向における中心よりも後方側に取り付けられるとよい。車両10の車両室内の後方側は、特には後部座席のヘッドレストや背もたれの位置からリアガラスの間の範囲に、配置されていると有利であり、リアガラスに取り付ける位置とすると特によい。
それぞれ車室内撮影用カメラ102(102F、102R)は、撮影機器101(101F、101R)に機械的及び電気的に接続した状態で取り付けられている。
The rear vehicle
The vehicle interior photography cameras 102 (102F, 102R) are mounted in a state of being mechanically and electrically connected to the photography equipment 101 (101F, 101R).
撮影機器101(101F、101R)は撮影機能を有する電子機器であり、防犯や監視或いはその他のセンシング目的で設けられたカメラ等であってもよいが、ドライブレコーダと協働するカメラとするとよく、もっともよいのはドライブレコーダそのものである。 The photographing device 101 (101F, 101R) is an electronic device having a photographing function, and may be a camera provided for the purpose of crime prevention, surveillance, or other sensing purposes. The best thing is the drive recorder itself.
図1の実施形態では、車室前方に設けられた前方の撮影機器101Fは車両前方外部を撮影し、前方の車室内撮影用カメラ102Fは、車室前方から後方に向かって車内を撮影する構成であるが、前方の撮影機器101Fは車室前方から後方に向かって車内を撮影し、前方の車室内撮影用カメラ102Fは車両前方外部を撮影する構成であってもよい。
同様に、車室後方に設けられた後方の撮影機器101Rは車両後方外部を撮影し、後方の車室内撮影用カメラ102Rは、車室後方から前方に向かって車内を撮影する構成であるが、後方の撮影機器101Rは車室後方から前方に向かって車内を撮影し、後方の車室内撮影用カメラ102Rは車両後方外部を撮影する構成であってもよい。
In the embodiment of FIG. 1, the front photographing
Similarly, the rear photographing
図1の実施形態に代えて、1つの撮影機器101Fで車外と車内の双方を撮影する構成及び1つの撮影機器101Rで車外と車内の双方を撮影する構成を採用し、より簡潔な構成としてもよい。或いは、車両10は、撮影機器101F又は撮影機器101Rのうちの1つのみを有するものであってもよく、またカメラ102F又は102Rのうちの1つのみを有するもの又は上記のようにカメラ102(102F、102R)を有していなくてもよい。
図1の実施形態に加えて、更に別の撮影機器や別の車外撮影用カメラや車内撮影用カメラ等を追加することで、より多様な情報処理を実行する構成としてもよい。
本願に従う情報処理システムは、車両10に設けられた複数の撮影機器101(101F、101R)やカメラ102(102F、102R)を、車両10の制御部で制御する構成であってもよい。
Instead of the embodiment of FIG. 1, a simpler configuration may be adopted in which a
In addition to the embodiment shown in FIG. 1, a configuration for executing more diverse information processing may be adopted by adding another photographing device, another camera for photographing outside the vehicle, a camera for photographing inside the vehicle, or the like.
The information processing system according to the present application may be configured such that a plurality of photographing devices 101 (101F, 101R) and cameras 102 (102F, 102R) provided in the
図1の実施形態に加えて、撮影機器101(101F、101R)で車両10内を撮影し、車室内撮影用カメラ102(102F、102R)で車両10外を撮影する構成としてもよい。
In addition to the embodiment of FIG. 1, the inside of the
以上、撮影機器101(101F、101R)及び車室内撮影用カメラ102(102F、102R)の配置や撮影方向等の例について説明した。以下では、撮影機器101(101F、101R)及び車室内撮影用カメラ102(102F、102R)の機能や役割等の例について説明する。
なお、以下の説明では、各処理を主に撮影機器101(101F、101R)の制御部303が実行する構成について説明するが、それらの処理は、他の制御ユニットと連携して、分散的に行うことも可能である。更に、車両10の使用中に車両10内で実行する必要のない処理については、制御部303以外の制御ユニットが単独で実行することも可能である。
Examples of the arrangement, shooting direction, etc. of the shooting devices 101 (101F, 101R) and the vehicle interior shooting cameras 102 (102F, 102R) have been described above. Examples of functions, roles, etc., of the photographing devices 101 (101F, 101R) and the vehicle interior photographing cameras 102 (102F, 102R) will be described below.
In the following description, a configuration in which each process is mainly executed by the control unit 303 of the imaging device 101 (101F, 101R) will be described. It is also possible to Furthermore, processing that does not need to be executed in the
図1に示すような撮影機器101(101F、101R)及び車室内撮影用カメラ102(102F、102R)を用いることで、本情報処理システムは、車内及び車外の人の状態や動作、車内及び車外の車両10の状態や動作等を特定することができる
By using the photographing equipment 101 (101F, 101R) and the vehicle interior photographing cameras 102 (102F, 102R) as shown in FIG. can specify the state and operation of the
図1の実施形態では、車両10には収容スペース110が設けられている。収容スペース110には、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)で撮影した映像データを記憶するための記憶媒体が収容されている。
なお、記憶媒体は、記録媒体の一例であり、また、収容スペース110は、記録媒体収容部の一例である。
In the embodiment of FIG. 1, the
Note that the storage medium is an example of a recording medium, and the
収容スペース110は、車両10の乗員が車両10に乗車している状態で視認しにくい位置に設けられているとよく、例えばトランクや座席の下等に設けられた保護ケース等として構成されているとよい。
The
収容スペース110に収容された記憶媒体は、ネットワーク103の一部でもあるケーブル120を介して、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)と接続している。
それにより、収容スペース110に収容された記憶媒体は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)で撮影した映像データの少なくとも一部、例えば映像データのうちハラスメント行為が記録された映像データ、の記憶先として設定できるように構成されているとよい。
Storage media housed in the
As a result, the storage medium accommodated in the
このように、収容スペース110や、収容スペース110に収容された記憶媒体は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)とはセパレートで設けられている。これにより、記憶媒体は、隠された状態になる。特に、収容スペース110は、車両10の通常の使用状態では隠されているとよい。
更に、収容スペース110は施錠可能であり、管理者以外が、記憶媒体を取り出すことができない、記憶媒体に触れることができない等の構成であるとよりよい。
In this way, the
Further, it is preferable that the
撮影機器101(101F、101R)の制御部303は、収容スペース110に収容された記憶媒体に記憶されている映像データについては、無線のネットワーク103を介して、例えば無線LAN等を介して、通信電波に基づいて、施設端末105や外部管理サーバ107等に転送できる構成であるとよい。
それによりユーザは、収容スペース110に収容された記憶媒体に記憶されている映像データを取得するために、収容スペース110の解錠や開閉等を行わなくてよいので好ましい。
The control unit 303 of the imaging device 101 (101F, 101R) communicates the image data stored in the storage medium accommodated in the
Accordingly, the user does not have to unlock or open/close the
そのようにすれば、例えば車両10がサービスの提供に利用される車両10であり、車両10を複数の人物が交代であるいは交互に使用するような場合であって、その車両10内で発生した問題行動を起こした人物が、記憶媒体ごと映像データを処分しようとした場合であっても、管理者は映像データをより安全に確保し続けやすくなる。
そして、例えば管理者が問題行動の発生に事後しばらくして気がついたとしても、複数の人物の中から誰がその問題行動を起こしたのかを確認しやすくなる。
By doing so, for example, when the
Then, for example, even if the administrator notices the occurrence of the problem behavior after some time, it becomes easier for the administrator to confirm who caused the problem behavior from among the plurality of persons.
なお、本明細書において、「車両10を複数の人物が交代であるいは交互に使用する」等の表現は、車両10を利用する度に乗員が代わることや、車両10の利用開始から利用終了までの一度の利用の間で運転手やその他の乗員が交代すること、例えば運転手が交代したり、運転手以外の乗員が乗り代わったりすること、や、一定の期間の間で異なる乗員に利用されることや、平日と休日で車両10を利用する人物が代わること等を意味しており、更に1台の車両10だけでなく、複数台の車両10を、複数の人物が交代であるいは交互に使用することも意味している。
In this specification, expressions such as "a plurality of people use the
上記に追加して、収容スペース110は、車両10の衝突安全試験において安全性がより高い位置に配置されているとよい。それにより、例えば衝突事故等で撮影機器101(101F、101R)に内蔵の記憶部が破損等しても、収容スペース110に収容された記憶媒体がバックアップデータを維持することができる可能性が高まり、事故後に行われる状況の検証等に大いに役立つ。
In addition to the above, the
図1において、車両10は、4輪の乗用車として例示されているが、車両10は撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)を搭載することが可能な乗り物や移動体であればよい。
In FIG. 1, the
車両10は、例えば、4輪以上の大型車両であるバス(例えば送迎バス、観光バス、長距離バス、連節バス等)やトラック、あるいは、2輪又は3輪のオートバイやバギー等の車両であってもよいし、福祉車両、救急車両、災害対策用車両、その他各自治体や各省庁が運用する特殊車両や、フォークリフト、クレーン車、トレーラー連結車、重機や土工機といった建設機械等の特殊車両、であってもよい。
The
また、車両10の駆動方式は、内燃機関であってもよいが、電気モータ等によるもの、特にxEV車両等であると、車両10の電装化の容易さの観点でよりよい。
なお、xEVとは、BEV(Battery Electric Vehicle)、HEV(Hybrid Electric Vehicle)、PHEV/PHV(Plug-in Hybrid Electric Vehicle/Plug-in Hybrid Vehicle)、FCEV/FCV(Fuel Cell Electric Vehicle/Fuel Cell Vehicle)等の電動化された車両の総称である。
The driving system of the
xEV refers to BEV (Battery Electric Vehicle), HEV (Hybrid Electric Vehicle), PHEV/PHV (Plug-in Hybrid Electric Vehicle/Plug-in Hybrid Vehicle), FCEV/FCV (Fuel Cell Electric Vehicle/Fuel Cell Vehicle). ) is a general term for motorized vehicles such as
更に、車両10は、自転車、特には荷台を取り付けた自転車や、人力で運ばれる台車、特には開閉部を備えた収容部を備えた台車、であってもよい。
電車、新幹線、モノレール、リニアモーターカー、路面電車やトラム、等の交通機関の乗り物であってもよい。
Furthermore, the
It may be a vehicle of a transportation system such as a train, bullet train, monorail, linear motor car, streetcar or tram.
更に、以下に説明する各実施形態を同様に又は類似して適用できる場合、陸路を移動するもののみならず、空路や海路や海中を移動する航空機や船舶や調査船や潜水艇等や、スポーツジム等のエアロバイク(登録商標)やランニングマシーンのような装置等、を車両10とみなしてもよい。
上記の車両10が、複数の人物により交代で使用される場合、後述する撮影機器101(101F、101R)の様々な制御がより有効であるので、よりよい。
Furthermore, when the embodiments described below can be applied in the same or similar manner, not only those that move on land routes, but also aircraft, ships, research ships, submersibles, etc. that move on air routes, sea routes, and undersea, sports A device such as an exercise bike (registered trademark) such as a gym or a running machine may be regarded as the
When the
情報処理システムのそれぞれの端末や管理サーバは、例えば、スマートフォン、タブレット、携帯電話機、携帯情報端末(PDA)などの携帯端末(モバイル端末)でもよいし、メガネ型や腕時計型、着衣型などのウェアラブル端末でもよい。また、据置型又は携帯型のコンピュータや、クラウドやネットワーク上に配置されるサーバでもよい。また、機能としてはVR(仮想現実:Virtual Reality)端末、AR(拡張現実:Augmented Reality)端末、MR(複合現実:Mixed Reality)端末でもよい。あるいは、これらの複数の端末の組合せであってもよい。例えば、1台のスマートフォンと1台のウェアラブル端末との組合せが論理的に一つの端末として機能し得る。またこれら以外の情報処理端末であってもよい。 Each terminal and management server of the information processing system may be, for example, a portable terminal (mobile terminal) such as a smartphone, tablet, mobile phone, or personal digital assistant (PDA), or a wearable device such as glasses type, wristwatch type, or clothing type. It can be terminal. It may also be a stationary or portable computer, or a server arranged on a cloud or network. Also, the function may be a VR (Virtual Reality) terminal, an AR (Augmented Reality) terminal, or an MR (Mixed Reality) terminal. Alternatively, it may be a combination of these terminals. For example, a combination of one smart phone and one wearable terminal can logically function as one terminal. Information processing terminals other than these may also be used.
情報システムのそれぞれの端末や管理サーバは、それぞれオペレーティングシステムやアプリケーション、プログラムなどを実行するプロセッサと、RAM(Random Access Memory)等の主記憶装置と、ICカードやハードディスクドライブ、SSD(Solid State Drive)、フラッシュメモリ等の補助記憶装置と、ネットワークカードや無線通信モジュール、モバイル通信モジュール等の通信制御部と、タッチパネルやキーボード、マウス、音声入力、カメラ部の撮像による動き検知による入力などの入力装置と、モニタやディスプレイ等の出力装置と、を備える。なお、出力装置は、外部のモニタやディスプレイ、プリンタ、機器などに、出力するための情報を送信する装置や端子であってもよい。 Each terminal and management server of the information system has a processor that executes an operating system, applications, programs, etc., a main storage device such as RAM (Random Access Memory), an IC card, a hard disk drive, and an SSD (Solid State Drive). , auxiliary storage devices such as flash memory, communication control units such as network cards, wireless communication modules, mobile communication modules, etc., and input devices such as touch panels, keyboards, mice, voice input, and input by motion detection by imaging the camera unit. , and an output device such as a monitor or display. The output device may be a device or terminal that transmits information for output to an external monitor, display, printer, device, or the like.
主記憶装置には、各種プログラムやアプリケーションなど(モジュール)が記憶されており、これらのプログラムやアプリケーションをプロセッサが実行することで全体システムの各機能要素が実現される。なお、これらの各モジュールは集積化する等によりハードウェアで実装してもよい。また、各モジュールはそれぞれ独立したプログラムやアプリケーションでもよいが、1つの統合プログラムやアプリケーションの中の一部のサブプログラムや関数などの形で実装されていてもよい。 Various programs and applications (modules) are stored in the main storage device, and each functional element of the entire system is realized by the processor executing these programs and applications. Note that each of these modules may be implemented by hardware by integration or the like. Each module may be an independent program or application, or may be implemented in the form of a partial subprogram or function in one integrated program or application.
本明細書では、各モジュールが、処理を行う主体(主語)として記載をしているが、実際には各種プログラムやアプリケーションなど(モジュール)を処理するプロセッサが処理を実行する。
補助記憶装置には、各種データベース(DB)が記憶されている。「データベース」とは、プロセッサ又は外部のコンピュータからの任意のデータ操作(例えば、抽出、追加、削除、上書きなど)に対応できるようにデータ集合を記憶する機能要素(記憶部)である。データベースの実装方法は限定されず、例えばデータベース管理システムでもよいし、表計算ソフトウェアでもよいし、XML、JSONなどのテキストファイルでもよい。
In this specification, each module is described as an entity (subject) that performs processing, but actually a processor that processes various programs and applications (modules) executes processing.
Various databases (DB) are stored in the auxiliary storage device. A "database" is a functional element (storage unit) that stores a set of data so as to support arbitrary data manipulation (eg, extraction, addition, deletion, overwriting, etc.) from a processor or external computer. The database implementation method is not limited, and may be, for example, a database management system, spreadsheet software, or a text file such as XML or JSON.
図2は、撮影機器101(101F、101R)とネットワーク103の接続図の例である。
図2の実施形態では、撮影機器101(101F、101R)は、ネットワーク103を介して、車室内撮影用カメラ102(102F、102R)、予約管理サーバ104、施設端末105、ユーザ端末106、外部管理サーバ107、処理装置108と接続している。
ネットワーク103は、有線接続及び無線接続の組み合わせであるとよい。
以下の説明においては主に、施設端末105が第1の外部装置である構成について説明するが、施設端末105、ユーザ端末106、外部管理サーバ107、及び、処理装置108のそれぞれが、第1の外部装置の一例である。なお、後述するように、ユーザ端末106は、第2の外部装置の一例でもある。
FIG. 2 is an example of a connection diagram between the photographing equipment 101 (101F, 101R) and the
In the embodiment of FIG. 2, the photographing equipment 101 (101F, 101R) is connected via the
In the following description, a configuration in which the
図3は、車室内撮影用カメラ102(102F、102R)と接続した撮影機器101(101F、101R)のハードウェア構成の例である。
撮影機器コントローラ302(DVRコントローラ302)は、特には車両直前又は車両直後を含む主に車両外部の映像を撮影するカメラ304、加速度センサ305、SDカード306、GNSSセンサ307、入出力部315、図示しないその他センサ等と接続されており、これらを制御する。また、これらの要素から受信した情報に基づいて、撮影機器コントローラ302が、撮影機器コントローラ302の状態を示すステータス情報を生成する。また、撮影機器コントローラ302は生成したステータス情報をマイコン301に送信する。
FIG. 3 shows an example of the hardware configuration of the photographing equipment 101 (101F, 101R) connected to the vehicle interior photographing cameras 102 (102F, 102R).
The imaging equipment controller 302 (DVR controller 302) includes a
撮影機器コントローラ302は、入出力部315を介して、カメラ304とは異なる、前方から後方に向かって又は後方から前方に向かって車内を撮影する車室内撮影用カメラ102(102F、102R)と接続されている。
マイコン301は、例えば以下の各種処理を行う。
・通信処理部314を制御する。
・通信処理部314が取得した位置情報を撮影機器コントローラ302に通知する。
・撮影機器コントローラ302から取得したステータス情報や、通信処理部314から取得した位置情報を例えば16byteのデータに変換する。
・二次電池駆動時にスリープ制御を行う。
・製造、試験時のテストモードを実行する。
The photographing
The
• Control the
- The position information acquired by the
The status information acquired from the
・Sleep control is performed when the secondary battery is driven.
• Execute the test mode during manufacturing and testing.
マイコン301はプログラム可能であり、マイコン301には上記のような各種処理を実行するためのプログラムが記憶されており、このプログラムをマイコン301の処理部が実行することで、上記の各種処理を実現する。本実施形態においては、このマイコン301の処理部やマイコン301自体を制御部303と呼ぶこともある。
The
なお、撮影機器コントローラ302、マイコン301、通信処理部314は、それぞれSoC(System on a chip)等の集積回路(チップ)で実装することが可能であり、またこれらの複数をまとめて一つのチップに実装する構成であってもよい。特に、本実施形態では撮影機器コントローラ302及びマイコン301が連携して動作するため、これらを合わせて1つのチップで実装してもよい。
Note that the photographing
また、撮影機器コントローラ302の一部の機能をマイコン301が実行する構成としてもよいし、マイコン301の一部の機能を撮影機器コントローラ302が実行する構成としてもよい。本実施形態においては、撮影機器コントローラ302とマイコン301をあわせて制御部303と呼ぶ。制御部303は1つのチップであってもよいし、撮影機器コントローラ302とマイコン301の機能を分けた複数のチップからなる構成であってもよい。
Alternatively, the
なお、カメラ304のイメージセンサに前処理を行うAI処理機能を搭載することで、通常の撮影画像の生成とともに、又はそれに変えて、例えば以下の出力を行う構成とするとよい。AI処理機能は、これらのカメラ304で撮影した映像に基づいて画像認識を行う機能を有する。
・画像の中から対象物をメタデータで出力する。
・ISP(Image Signal Processor)出力形式の例えばYUVやRGBの画像を出力する。
・特定領域のみ切り出した画像を出力する。
上記のAI処理機能は、車室内撮影用カメラ102(102F、102R)から伝送された映像データに対しても同様の処理を実行する構成とするとよい。
By installing an AI processing function that performs pre-processing in the image sensor of the
・Output the object in the image as metadata.
- Output an ISP (Image Signal Processor) output format, such as a YUV or RGB image.
・Output an image that is cut out only in a specific area.
The AI processing function described above may be configured to perform similar processing on video data transmitted from the vehicle interior imaging cameras 102 (102F, 102R).
このようにイメージセンサ側で前処理を行うことで、データ量の削減や、高速AI処理による対象物のリアルタイムトラッキングが可能となる。
例えば、撮影機器101が、カメラ304のイメージセンサに前処理を行うAI処理機能を搭載している場合では、撮影機器101(101F、101R)が独自に映像処理や画像処理を実行し、撮影機器101(101F、101R)が、理想的な画質の画像情報を作成する構成とするとよい。
同様の処理は、車室内撮影用カメラ102(102F、102R)から伝送された映像データに対しても実行可能であり、撮影機器101(101F、101R)の更新により、接続する車室内撮影用カメラ102(102F、102R)の機種や種類に応じた処理を追加できる構成としてもよい。
By performing pre-processing on the image sensor side in this way, it becomes possible to reduce the amount of data and real-time tracking of an object by high-speed AI processing.
For example, if the
The same processing can be performed on the video data transmitted from the vehicle interior photography cameras 102 (102F, 102R), and by updating the photography equipment 101 (101F, 101R), the connected vehicle interior photography cameras 102 (102F, 102R) may be configured to add processing according to the model and type.
加速度センサ305は、加速度を検出し加速度情報を生成する。例えば衝撃、急ハンドル、急停車等に応じて加速度の急激な変化が生じた場合に、制御部303がイベント発生を検知する。制御部303は、この加速度情報の変化を解析することで自動車等に起きた事故等の状況を推測する構成とするとよい。
SDカード306は、画像情報や、その画像情報に対応する録画情報等、各種情報を記録する記憶装置である。なお、SDカードに限られず、データを記憶できる構成であればよいが、車載のために耐振動性の高いフラッシュメモリが好ましい。
The
The
通信処理部314は、無線通信アンテナ308を介して、ネットワーク経由で、撮影機器101Rの情報をユーザ端末106に送信する。
GNSSセンサ307は集積回路等で実装された位置情報取得部を有し、GPS(Global Positioning System)等のGNSS(Global Navigation Satellite System、全球測位衛星システム)に対応したGNSSアンテナから受信した信号に基づいて、位置情報を取得する。また、位置情報取得部は、時刻情報や移動速度情報や移動方位情報を取得する構成とするとよい。
The
The
撮影機器101Rは、車両電源310に接続される電源311を有する。
電源311は、車両電源310から受信(又は受電と呼ぶこともある)した電力を撮影機器コントローラ302に供給し、また二次電池312を充電する。なお、後述の入出力部315が電力の供給も行える構成としてもよく、この場合、撮影機器101(101F、101R)は、入出力部315を介して、車両電源310を受電する。
The
The
二次電池312は、例えばリチウムイオン電池、ニッケルカドミウム電池、ニッケル水素電池、鉛蓄電池等の充電可能な電池である。但し、充電式ではない一次電池であっても構わない。アクセサリ電源(ACC電源)がOFFになった場合や、事故による断線や配線が外れるなどの障害により、車両電源310から撮影機器101(101F、101R)の電源311への電力の供給が途切れた場合、又は電源311が故障等して電源供給できなくなった場合に、二次電池312がマイコン301や通信処理部314等へ電力を送信(又は送電や給電と呼ぶこともある)し、撮影機器101(101F、101R)の少なくとも一部の機能を維持する。
The
制御部303は、撮影機器101(101F、101R)のカメラ304からの画像情報を取得し、SDカード306等の記憶装置に記憶する。なお、本明細書において「記憶」は「記録」、「録画」、「録音」と呼ぶこともある。
The control unit 303 acquires image information from the
入出力部315は、カメラ304や車室内撮影用カメラ102(102F、102R)で撮影した映像データ、及び/又はSDカード306等の記憶部に記憶された映像データの入力及び/又は出力を行う。映像データの入力及び/又は出力は、基本的にはデジタル方式で行うが、これに限定されるものではない。
入出力部315は、撮影機器コントローラ302に接続されるが、その代わりにマイコン301に接続される構成としてもよい。
入出力部315は直接ネットワーク103に接続されているが、車室内撮影用カメラ102(102F、102R)を介して、ネットワーク103に接続される構成であってもよい。
また、上述の通り、入出力部315は車両電源310からの電力の入出力ができる構成としてもよい。
The input/
The input/
The input/
Further, as described above, the input/
車室内撮影用カメラ102(102F、102R)は、入出力部315を介して撮影機器101Rに接続された追加のカメラ102(102F、102R)である。
車室内撮影用カメラ102(102F、102R)は、車室内撮影用カメラ102(102F、102R)が撮影した映像データを、入出力部315を介して、撮影機器101Rの撮影機器コントローラ302に送信する。
Vehicle interior photography cameras 102 ( 102 F, 102 R) are additional cameras 102 ( 102 F, 102 R) connected to
The vehicle interior photography camera 102 (102F, 102R) transmits the image data captured by the vehicle interior photography camera 102 (102F, 102R) to the
また、車室内撮影用カメラ102(102F、102R)は、撮影機器101(101F、101R)から入力された映像データをネットワーク103に出力する構成としてもよい。また、車室内撮影用カメラ102(102F、102R)は、車両電源310から入力された電力を出力する構成としてもよい。
車室内撮影用カメラ102(102F、102R)が映像データや電力を入出力できる構成とすることで、入出力部315を有する撮影機器101(101F、101R)に、車室内撮影用カメラ102(102F、102R)を接続するだけで、映像データや電力を外部にパススルーすることができ、既存の撮影機器101(101F、101R)の構成を変える必要がなく新たなカメラ102(102F、102R)を追加することが可能となり便利である。
また、別の実施形態では、撮影機器101(101F、101R)と車室内撮影用カメラ102(102F、102R)の撮影方向を変えることができる。例えば、撮影機器101(101F、101R)で主に車室内を撮影し、車室内撮影用カメラ102(102F、102R)で主に車外を撮影する構成へ変更することができる。
Further, the vehicle interior imaging cameras 102 (102F, 102R) may be configured to output to the
By configuring the vehicle interior photography camera 102 (102F, 102R) to input/output video data and electric power, the vehicle interior photography camera 102 (102F) can , 102R), video data and power can be passed through to the outside, and new cameras 102 (102F, 102R) can be added without changing the configuration of the existing imaging equipment 101 (101F, 101R). It is convenient because it is possible to
In another embodiment, the shooting directions of the shooting equipment 101 (101F, 101R) and the vehicle interior shooting camera 102 (102F, 102R) can be changed. For example, it is possible to change the configuration so that the camera 101 (101F, 101R) mainly photographs the interior of the vehicle, and the camera 102 (102F, 102R) for photographing the interior of the vehicle mainly photographs the exterior of the vehicle.
以下、図4から図7及び図22を用いて説明する端末やサーバのそれぞれの構成要素やモジュール等は、実施形態に応じて、追加、省略、統合、代用することが可能である。
図4から図7及び図22は、ハードウェア構成の概略例であって、それらに記載の構成要素やモジュール等は、それぞれの端末やサーバにとって、それらの全てが必須の構成要素であることを意味してはいない。
Components, modules, and the like of the terminals and servers described below with reference to FIGS. 4 to 7 and 22 can be added, omitted, integrated, or substituted according to the embodiment.
4 to 7 and 22 are schematic examples of hardware configurations, and it should be noted that the components and modules described therein are all essential components for each terminal and server. I don't mean it.
図4から図7及び図22を用いて説明する端末やサーバのそれぞれの構成要素やモジュール等は、制御や処理に対してシステム全体において分散して配置や格納された状態で、存在する構成であってもよい。 Each component, module, etc. of the terminal and server described using FIGS. 4 to 7 and 22 are distributed and stored in the entire system for control and processing. There may be.
図4は、予約管理サーバ104のハードウェア構成の例である。
予約管理サーバ104は、予約システムの一例であって、自動車教習所、幼稚園・保育園、デイケア、タクシー、レンタカー、カーシェア、配車、観光、リムジンクルーズ等に関連する各種のサービスに関する情報や、運配送、引っ越し、搬送、搬入搬出、作業現場への移動、営業、出退勤、等に関連する各種の業務に関する情報、等を管理するサーバであり、例えばスマートフォン、タブレット、ノートPC、デスクトップPC等の端末で構成される。
FIG. 4 is an example of the hardware configuration of the
The
なお、以降の説明において「自動車教習所」や「教習所」に関する説明では、一般的な乗用車やオートバイや大型車両等の教習所について説明するが、それらの用語は、技術的にあるいは実務的に可能である限り、上述の重機や土工機や搬送車両、例えばショベルカーやホイールローダ、ブルドーザー、クレーン車、フォークリフト等、の運転技能講習や特別教育等を行う施設や、船舶や航空機についての訓練や教習を行う施設であってもよい。 In the explanations below, the explanations about "driving school" and "driving school" will explain general driving schools for passenger cars, motorcycles, large vehicles, etc., but these terms are technically or practically possible. As long as there are facilities for operating skill training and special education for heavy machinery, earthworking machines, and transport vehicles such as excavators, wheel loaders, bulldozers, crane vehicles, and forklifts, as well as training and lessons for ships and aircraft. It may be a facility.
また、本明細書中の「予約」や「予約管理」等の語句は、本明細書内で開示される各実施形態の実質的な内容を変更しない限り「予定」や「予定管理」と読み替えてもよい。
予約管理サーバ104の主記憶装置401には、予約管理モジュール410、連携モジュール411等のプログラムやアプリケーションが記憶されており、これらのプログラムやアプリケーションをプロセッサ403が実行することで予約管理サーバ104の各機能要素が実現される。
更に、予約管理サーバ104は、スポーツジムやパーソナルジム等に関連する各種のサービスに関する情報を管理するサーバであってもよい。
In addition, terms such as "reservation" and "reservation management" in this specification should be read as "schedule" and "schedule management" unless the substantial content of each embodiment disclosed in this specification is changed. may
Programs and applications such as a
Further, the
予約管理モジュール410は、各種のサービスに関する予約情報421を管理する。予約管理サーバ104の運営者であるユーザや、サービスの利用者は、入力装置404、出力装置405、通信制御部406、ネットワーク103を用いて、提供できるサービス内容の更新や公開をしたり、利用したいサービスの確認や予約をしたりすることができる。
The
例えば上記サービスが自動車の教習であれば、予約管理モジュール410は、教習所の予約システムである。
教習所の各教官1910は自己の担当可能な時間帯を入力し、予約管理モジュール410は、それらの入力情報を、従業員情報423として記憶する。予約管理モジュール410は、教官1910と、その教官1910により入力された担当可能な時間帯に利用可能な車両10や走行可能な車両10とを、例えば教官IDや車両IDを用いて、対応付けて記憶する構成であるとよりよい。
なお、従業員情報423は、サービスの提供者に関する提供者情報の一例である。
For example, if the service is driving lessons, the
Each
The
予約管理モジュール410は、教習所の各教習生1920が予約を行う場合、上記の各教官1910や各車両10に関する情報に基づき、各教習生1920に対して、各受講者の課程の段階に応じて予約可能な時間帯を提示し、その中で予約を受け付ける。
When each
それぞれの教官1910、車両10、教習生1920に関連するこれらの情報の少なくとも一部は、以下に説明する連携モジュール411を介して、例えば施設端末105と共有される。
At least some of this information associated with each
ない、別の実施形態では、車両10は営業周り等の業務を実行するために使用される車両10であってもよく、予約管理サーバ104は、例えば業務上のアポイントメントの内容、例えば日時や場所等、を管理するものであってもよい。
However, in another embodiment, the
連携モジュール411は、以下に図5から図7を用いて説明する施設端末105、ユーザ端末106、外部管理サーバ107のうちの少なくとも1つと連携し、予約管理サーバ104が所有する各種の予約情報421等を、本明細書で開示される各実施形態において利用可能とする役割を担う。
なお、連携モジュール411は、例えば、施設端末連携モジュール、ユーザ端末連携モジュール、外部管理サーバ連携モジュール等に別れて、個別のモジュールとして構成されていてもよい。
The
Note that the
具体的には、連携モジュール411は、教習の予約ID、教習生ID、教官ID、個々の車両10を識別する車両ID、車種や車両タイプを識別する車両属性ID、受講過程ID、予約時間帯、MT車又はAT車のどちらを用いるか、教習所内又は路上等のどちらの教習であるか、等に関する情報を、ネットワーク103を介してODBC(Open Database Connectivity)で接続された連携対象、例えば施設端末105、に提供する。
Specifically, the
上記の情報を提供する場合、連携モジュール411は、予約管理モジュール410が上記の情報をCSVファイルや表計算ソフトのファイル形式で出力したデータを、取得し、連携対象へ提供する構成であるとよい。
特に、連携モジュール411は、上記の情報を記憶しているデータベースへ接続して取得するか、予約管理モジュール410が上記の情報をCSVファイルや表計算ソフトのファイル形式で出力したものを取得するかを、切り替える機能を備えているとよい。
When providing the above information, the
In particular, the
予約管理サーバ104の補助記憶装置402には、各種のサービスに関する予約情報421、利用者情報422、従業員情報423等が格納されている。予約管理サーバ104は、それらの情報の少なくとも一部を、連携する施設端末105、ユーザ端末106、外部管理サーバ107等に提供する。
なお、それらの情報は、1つのサービスに関する情報に限らず、グループ会社や提携会社等の複数の組織等が提供する異なるサービスに関する情報であってもよい。例えば、幼稚園・保育園の送迎予約管理とタクシーの配車予約管理を組み合わせ、送迎の予約時間に間に合わなかった複数の園児を提携のタクシー会社のタクシーでまとめて送迎するといった、複数のサービスを組み合わせた情報であってもよい。
The
The information is not limited to information about one service, and may be information about different services provided by a plurality of organizations such as group companies and partner companies. For example, information that combines multiple services, such as pick-up reservation management for kindergartens and nursery schools and taxi dispatch reservation management, and pick-up and drop-off of multiple children who did not make the pick-up reservation time by taxis of affiliated taxi companies. may be
また、施設端末105等の装置の補助記憶装置502等に記憶された予約情報521等は、予約管理サーバ104の予約情報421に基づく情報であり、以降の説明において、技術的な齟齬を生じない範囲で、予約管理サーバ104の予約情報421と読み替えてもよい。
In addition, the
図5は、施設端末105のハードウェア構成の例である。
施設端末105は、自動車教習所、幼稚園・保育園、デイケア、タクシー、レンタカー、カーシェア、配車、観光、リムジンクルーズ等の各種のサービスに関する情報や、運配送、引っ越し、搬送、搬入搬出、作業現場への移動、営業、出退勤、等に関連する各種の業務に関する情報や、撮影機器101(101F、101R)で撮影された映像データ等を管理するサーバであり、例えばスマートフォン、タブレット、ノートPC、デスクトップPC等の端末で構成される。
FIG. 5 is an example of the hardware configuration of the
The
施設端末105は更に、スポーツジムやパーソナルジム等のサービスに関する情報や撮影データ等を管理するサーバであってもよい。
なお、後述するように、施設端末105が管理する各種のサービスに関する情報や各種の業務に関する情報は、予約管理サーバ104が管理する情報と同等又は類似のものである。
The
As will be described later, information on various services and information on various tasks managed by the
施設端末105の主記憶装置501には、予約管理サーバ連携モジュール510、撮影機器連携モジュール511、ユーザ端末連携モジュール512、外部管理サーバ連携モジュール513、表示制御モジュール515、データ管理モジュール516、データ処理モジュール517、処理装置連携モジュール518等のプログラムやアプリケーションが記憶されており、これらのプログラムやアプリケーションをプロセッサ503が実行することで施設端末105の各機能要素が実現される。
The
予約管理サーバ連携モジュール510は、予約管理サーバ104の連携モジュール411と連携し、施設端末105と予約管理サーバ104の接続や協働を可能とする。
更に、予約管理サーバ連携モジュール510は、予約管理サーバ104の補助記憶装置402に保存されている各種の情報、例えば予約情報421、利用者情報422、従業員情報423、設定情報420、の少なくとも一部を、取得する。
予約管理サーバ連携モジュール510は、それらの情報を、予約管理サーバ連携モジュール510の補助記憶装置502に、予約情報521、利用者情報522、従業員情報523、設定情報520、として記憶する。
The reservation management
Further, the reservation management
The reservation management
予約管理サーバ連携モジュール510は、予約管理サーバ104に対して毎定時にRPA(ロボティクスプロセスオートメーション)にて、予約システムの例えばCSV書き出しの画面操作を自動的に実行させ、予約システムから所定のディレクトリ内に書き出す処理を実行させる機能、を有しているとよい。
The reservation management
ディレクトリは、ファイルと読み替えてもよい。
所定のディレクトリとは、予約管理サーバ104の補助記憶装置402の予約情報421や設定情報420として、予め設けられているディレクトリであってもよいし、予約管理サーバ104の補助記憶装置402の予約情報421や設定情報420として、例えば予約管理サーバ104と施設端末105との間の接続が確立した後に、新たに設けられたディレクトリであってもよい。
A directory may be read as a file.
The predetermined directory may be a directory provided in advance as the
予約管理サーバ連携モジュール510は、当該所定のディレクトリを監視し、新たなCSVファイルがあるときには、予約管理サーバ104の連携モジュール411にその新たなCSVファイルを送信させ、自動的にそのCSVファイルを取り込んで、施設端末105の補助記憶装置502の内容を更新するとよい。
The reservation management
「毎定時」としては、車両10を用いて提供されるサービスの予約の締め切り時刻を経過した直後とするとよい。例えば、毎日0時にサービスの予約の受け付けを締め切るときは、例えば0時5分にRPAを起動させる処理を行うとよい。
The “every fixed hour” may be immediately after the deadline for booking the service provided using the
撮影機器連携モジュール511は、撮影機器101(101F、101R)の制御部303と連携し、施設端末105と撮影機器101(101F、101R)の接続や協働を可能とする。
ユーザ端末連携モジュール512は、ユーザ端末106の施設端末連携モジュール614と連携し、施設端末105とユーザ端末106の接続や協働を可能とする。
The imaging
The user
外部管理サーバ連携モジュール513は、外部管理サーバ107の施設端末連携モジュール714と連携し、施設端末105と外部管理サーバ107の接続や協働を可能とする。外部管理サーバ107は、図5を用いて後述するように、例えば撮影機器101(101F、101R)の製造や販売を行う企業等により運営されるサーバである。
The external management server cooperation module 513 cooperates with the facility
処理装置連携モジュール518は、処理装置108の連携モジュール2211と連携し、施設端末105と処理装置108の接続や協働を可能とする。処理装置108は、図14、図22を用いて後述するように、撮影機器101(101F、101R)の記憶媒体、例えばSDカード306、に記憶されている情報の転送、複製、記憶、加工等の処理に用いる装置であって、例えば撮影機器101(101F、101R)の製造や販売を行う企業等により製造や販売される装置である。
The processing
図5の実施形態では、予約管理サーバ連携モジュール510、撮影機器連携モジュール511、ユーザ端末連携モジュール512、外部管理サーバ連携モジュール513及び処理装置連携モジュール518は、個別のモジュールとして構成されているが、それらは図4の実施形態における連携モジュール411のように、1つの連携モジュールとして構成されていてもよい。また、場合によっては、一部が省略或いは統合された構成であってもよい。
In the embodiment of FIG. 5, the reservation management
更に、個々のモジュールやそれらの機能は、予め主記憶装置501にインストール済みであり、任意のタイミングでアクティベート可能又はディアクティベート可能な構成であるか、個々のモジュールやそれらの機能は、任意のタイミングで主記憶装置501にインストール可能あるいはアンイストール可能な構成であると、ユーザのその都度の要望や状況に柔軟に対応することができるのでよりよい。このような構成は、以下の図6、図7の実施形態でも同様に実施可能である。
Furthermore, individual modules and their functions are pre-installed in the
表示制御モジュール515は、補助記憶装置502に記憶された予約情報521や映像情報524に基づいて、ディスプレイ等の出力装置505上に様々な様態で映像情報を表示する。表示制御モジュール515による具体的な表示の様態については、図15から図19を用いて詳細に説明する。
The
データ管理モジュール516は、映像データの管理、及び、映像データに含まれる各種の情報の管理等を行う。
例えば、ユーザが自動車教習所の運営者や経営者である場合では、データ管理モジュール516は、下記の補助記憶装置502に記憶された映像情報524から、教官1910と教習生1920の間の距離、教官1910と教習生1920の間の接触、教官1910と教習生1920の表情や感情、教官1910と教習生1920の視線、教官1910と教習生1920の姿勢、教官1910と教習生1920の運転動作等を分析し、その結果を管理データとしてまとめる構成とするとよい。更には、それらの車内環境や車外環境との関連の分析やそれらの統計的な分析を行い、その結果を管理データとして、特に有利にはスコアリングして、まとめる構成とするとよりよい。
The
For example, if the user is an operator or manager of a driving school, the
上記のような構成では、ユーザは、教官1910による教習の適切さ、教習生1920の緊張状態やリラックス状態、教習生1920の運転の適切さ、教習生1920の運転の上達度、教習生1920と教官1910の相性、教習中の各種のハラスメントの有無、等の様々な項目を考慮したサービスを提供することができる。
With the configuration as described above, the user can determine the appropriateness of the training by the
なお、上記の分析の一部は、撮影機器101(101F、101R)の制御部303によって、完全にあるいは簡略化して、行われてもよい。更に、撮影機器101(101F、101R)の制御部303によって行われた各種の分析結果に基づいて、データ管理モジュール516がより精密な分析を行う構成であるとよりよい。
Note that part of the above analysis may be performed completely or in a simplified manner by the control unit 303 of the imaging equipment 101 (101F, 101R). Furthermore, it is preferable that the
データ処理モジュール517は、補助記憶装置502に映像情報524として記憶された映像データに対して、各種の処理を実行する。個々の処理の内容については後述するが、例えば、図17、図19から図21との関連で説明する映像の加工や情報の収集、分析、比較等を行う。
The
施設端末105の補助記憶装置502には、設定情報520、予約情報521、利用者情報522、従業員情報523、映像情報524等が記憶されている。
設定情報520は、主記憶装置501に記憶されている施設端末105の各モジュールのための設定情報に加えて、予約管理サーバ104の設定情報の少なくとも一部を含んでいる。
The auxiliary storage device 502 of the
The setting
予約情報521は、予約管理サーバ104から取得した予約情報421の少なくとも一部、例えば予約の日時や内容、予約に割り当てられた車両10、車両10の使用予定の地域、予約した人物、予約に対応する従業員、等の情報を含む。
更に、予約情報521は、例えば、映像データの画像加工処理の有無や、映像データから判定する出来事(イベント)の種類、等に関する情報を含んでいるとよい。
The
Further, the
利用者情報522は、予約管理サーバ104に登録されている各利用者に関する情報の少なくとも一部を含む。
従業員情報523は、予約管理サーバ104に登録されている各従業員に関する情報の少なくとも一部を含む。
映像情報524は、撮影機器101(101F、101R)により撮影された映像データに加えて、映像データに含まれる各種のイベント等に関連する情報等を含むとよい。本明細書では、映像データは、例えば静止画の情報や動画の情報、それらに関連する音声情報等、を意味している。主記憶装置501は、静止画を例えばJPEG形式、PNG形式、GIF形式等の静止画ファイル形式で記憶する、また動画を例えばMOV形式、MP4形式、AVI形式、WMV形式、WemM形式等の動画ファイル形式で記憶する。
The
施設端末105の補助記憶装置502は、施設端末105に接続された大容量記憶装置、例えば外付けのHDDやSSD、であってもよい。施設端末105の補助記憶装置502としては更に、後述する図15の実施形態における処理装置108内の記憶装置を利用してもよい。
別の実施形態では、施設端末105は、例えば図15の処理装置108の機能の一部又は全てを実行する機能を有していてもよい。
The auxiliary storage device 502 of the
In another embodiment,
図6は、ユーザ端末106のハードウェア構成の例である。
ユーザ端末106は、自動車教習所、幼稚園・保育園、デイケア、タクシー、レンタカー、カーシェア、配車、観光、リムジンクルーズ等の各種のサービスを利用する人物(例えば自動車教習所の教習生1920、園児の保護者、タクシーの乗客)やそれらのサービスの提供に関与する人物(例えば自動車教習所の教官1910、幼稚園教諭・保育士・送迎バスのドライバー、タクシーのドライバー等)が所有する端末であり、例えばスマートフォン、タブレット、ノートPC、デスクトップPC等の端末で構成される。
ユーザ端末106は更に、スポーツジムやパーソナルジム等の利用者やトレーナーが所有する端末であってもよい。
FIG. 6 is an example of the hardware configuration of the
The
The
主記憶装置601には、予約管理サーバ連携モジュール610、撮影機器連携モジュール611、外部管理サーバ連携モジュール613、施設端末連携モジュール614、表示制御モジュール615等のプログラムやアプリケーションが記憶されており、これらのプログラムやアプリケーションをプロセッサ603が実行することでユーザ端末106の各機能要素が実現される。
The
予約管理サーバ連携モジュール610は、ネットワーク103を介して、予約管理サーバ104の連携モジュール411と連携し、ユーザ端末106と予約管理サーバ104の接続や協働を可能とする。例えば、予約管理サーバ連携モジュール610は、予約管理サーバ104からの直接の情報の取得や、データの送受信等を実行する。
撮影機器連携モジュール611は、1つ又は複数の撮影機器101(101F、101R)との接続や機能的な連携を実行する。例えば、撮影機器連携モジュール611は、車両10内での撮影機器101(101F、101R)からの直接の映像データの取得や、撮影機器101(101F、101R)に対する撮影モードの変更等に関する情報の送信等を実行する。
The reservation management
The imaging
外部管理サーバ連携モジュール613は、ネットワーク103を介して、外部管理サーバ107と連携し、各種の機能や制御を実行する。
外部管理サーバ連携モジュール513は、外部管理サーバ107のユーザ端末連携モジュール512と連携し、ユーザ端末106と外部管理サーバ107の接続や協働を可能とする。外部管理サーバ107は、図5の実施形態と同様に、例えば撮影機器101(101F、101R)の製造や販売を担う企業等により運営されるサーバである。
The external management
The external management server cooperation module 513 cooperates with the user
上述の通り、各連携モジュール610、611、613は、1つの連携モジュールとして構成されていてもよい。また、場合によっては、一部が省略或いは統合された構成であってもよい。
As described above, each
ユーザ端末106の表示制御モジュール615、データ処理モジュール617は、施設端末105の表示制御モジュール515、データ処理モジュール517と同様に機能するものであるので説明は省略する。
The
更に、既に以下の図5の実施形態で説明したように、個々のモジュールやそれらの機能は、任意のタイミングでアクティベート可能又はディアクティベート可能な構成であるか、あるいは、任意のタイミングでインストール可能あるいはアンイストール可能な構成であると、ユーザのその都度の要望や状況に柔軟に対応することができるのでよりよい。 Furthermore, as already described in the embodiment of FIG. 5 below, individual modules and their functions can be activated or deactivated at any time, or can be installed or installed at any time. An uninstallable configuration is better because it can flexibly respond to the user's requests and situations on a case-by-case basis.
補助記憶装置602は、主記憶装置601に記憶されている各モジュールのための予約情報621や、撮影機器101(101F、101R)から受信し記憶した映像情報624等を保存する。映像情報624は、施設端末105の映像情報524と同様のものであるので説明は省略する。
The
図7は、外部管理サーバ107のハードウェア構成の例である。
外部管理サーバ107は、例えば撮影機器101(101F、101R)の製造や販売を行う企業等により運営されるサーバであり、例えばスマートフォン、タブレット、ノートPC、デスクトップPC等の端末で構成される。
FIG. 7 is an example of the hardware configuration of the
The
主記憶装置701には、予約管理サーバ連携モジュール710、撮影機器連携モジュール711、ユーザ端末連携モジュール712、施設端末連携モジュール714、データ管理モジュール716、データ処理モジュール717等のプログラムやアプリケーションが記憶されており、これらのプログラムやアプリケーションをプロセッサ703が実行することで外部管理サーバ107の各機能要素が実現される。
The
各連携モジュール710~714の役割や機能は、既に図4から図6の実施形態との関連で説明した対応するモジュールと同様のものであるので、説明は省略する。 The roles and functions of each cooperation module 710-714 are similar to the corresponding modules already described in connection with the embodiments of FIGS.
データ管理モジュール716は、映像データの管理、及び、映像データに含まれる各種の情報の管理等を行う。データ管理モジュール716の役割や機能は、既に図5の実施形態との関連で説明した対応するデータ管理モジュール516と同様のものである。
外部管理サーバ107のデータ管理モジュール716は、一般的な施設端末105に比べてより高い演算能力を有する構成であるとよく、それにより、より高い精度で分析された管理データ等をユーザへ提供することができる。
The
The
例えば、人物間の距離や接触、人物の表情や感情、人物の視線、人物の姿勢、運転動作等の分析や、それらの車内環境や車外環境との関連、それらの統計的な分析、それらの機械学習的な分析等を行い、ユーザが利用できる管理データとして提供する構成であると、ユーザは、高度な分析結果を、自身のサービス等に反映させることができるのでよりよい。 For example, analysis of the distance and contact between people, facial expressions and emotions of people, gaze of people, posture of people, driving behavior, etc., their relationships with the environment inside and outside the vehicle, their statistical analysis, and their A configuration in which machine-learning-like analysis or the like is performed and provided as management data that can be used by the user is better because the user can reflect the advanced analysis results in his/her own service or the like.
より具体的には、例えばユーザが自動車教習所の運営者や経営者であり、従業員である教官1910に対して、ハラスメント行為に関する苦情等を受けた場合、データ管理モジュール716は、データ処理モジュール717等と協働して、実際にハラスメント行為に該当する行為、あるいは、それと誤解され得るような行為、の有無等の分析結果を管理するだけでなく、映像データから、そのような苦情の原因となる行為が実際に生じる前のその教官1910の特徴的な行動、の有無等の分析結果を管理する構成であるとよい。なお、本明細書では、ハラスメント行為に関する苦情等を受けた行為や、ハラスメント行為と誤解され得るような行為等を、「ハラスメント類似行為」と称する。
なお、画像処理や分析等の高度な処理はデータ処理モジュール717が実行し、データや情報の管理をデータ管理モジュール716が実行するものであるがこれに限定されない。データ処理モジュール717又はデータ管理モジュール716が単独で処理を実行するものであってもよいし、協働して実行する構成であってもよい。
More specifically, for example, when the user is the operator or manager of a driving school and receives a complaint about harassment from the
Advanced processing such as image processing and analysis is performed by the
外部管理サーバ107の撮影機器連携モジュール711は、そのような特徴的な行動を、直接撮影機器101(101F、101R)の制御部303による新たな判定基準として送信する構成であるか、あるいは、外部管理サーバ107の施設端末連携モジュール714はそのような特徴的な行動を、施設端末105へ送信し、ユーザがそのような新たな判定基準を撮影機器101(101F、101R)の制御部303による判定に用いるかを決定することができる構成とするとよい。
The imaging
そして、撮影機器101(101F、101R)は、新たに追加された判定基準により、該当する教官1910が教習を行っている場合には、該当する教官1910が上記の特徴的な行動を行うと、それに関する通知を発する構成とするとよい。特にそのような通知は、教習生1920にとっては違和感のない通知を、ユーザが設定できるとよりよい。
それにより、教官1910は、ハラスメント行為と受け取られる可能性のある行為に対する気づきを得やすくなり、それに伴う苦情等が発生することが少なくなるように自ら対応を改善しやすくなる。それにより教習生1920は、ハラスメント行為や、ハラスメント行為と感じるかもしれない行為自体を、経験せずに済むようになる。
Then, according to the newly added determination criteria, the photographing equipment 101 (101F, 101R), when the
This makes it easier for the
制御部303は、人ごとに判定基準を変更する構成であるとよりよい。例えば、ある教習生1920が他の多数の教習生1920に比べて教官1910との接近を嫌う傾向にあることが判明している場合には、普段の対応に問題のない教官1910であっても、ハラスメント行為に関する苦情が生じる可能性がある。そのような状況では、より厳しい判定基準を採用すること、例えば、通常の接近判定よりもより遠い距離での接近でもハラスメント類似行為として判定することで、ユーザは、接近を嫌う傾向にある教習生1920に対しても、より快適な教習環境を提供することができる。
It is preferable that the control unit 303 is configured to change the determination criteria for each person. For example, if it is known that a
データ処理モジュール717は、後述する映像データの加工のうち、比較的高い演算負荷を要する処理や、個別の追加的なサービスとして提供する映像データの加工処理を実行する。このような構成では、ユーザは、自身の端末の演算処理能力が、所望の加工処理に対する推奨の演算処理能力に達していない場合であっても、外部管理サーバ107から所望の加工を施された映像データを容易に入手することができる。そのような構成では、ユーザは、例えば必要な場合にだけ料金を支払うことで、又は、定額の利用料金を支払うことで、既存のシステムを維持したままで、加工された映像データを入手することができる。
The
図22は、処理装置108のハードウェア構成の例である。
処理装置108は、撮影機器101(101F、101R)の記憶媒体、例えばSDカード306等、に記憶されている情報の転送、複製、記憶、加工等の処理を実行する装置である。このような処理装置108は、一般的なカードリーダにさらに機能を追加した装置であるが、そのスペックとしては、例えば、一般的なカードリーダ以上パーソナルコンピュータ以下であるとよい。
なお、処理装置108は、例えば施設端末105等と一体の構成であってよい。そのような構成では、施設端末105等の主記憶装置501に格納されたモジュールやアプリケーションが、以下に説明する処理装置108の機能の少なくとも一部を実施することができるとよい。
FIG. 22 is an example of the hardware configuration of the
The
Note that the
特に、処理装置108は、撮影機器101(101F、101R)の記憶媒体に記憶された映像データ等の、施設端末105等への転送や複製等を実行する機能を有するとよい。
処理装置108の具体的な使用例については、図14を用いて後述する。
In particular, the
A specific usage example of the
処理装置108の主記憶装置2201には、データ読み込みモジュール2210、連携モジュール2211、表示制御モジュール2215、データ管理モジュール2216、データ処理モジュール2217、情報統合モジュール2219等のプログラムやアプリケーションが記憶されており、これらのプログラムやアプリケーションをプロセッサ2203が実行することで処理装置108の各機能要素が実現される。
The
データ読み込みモジュール2210は、撮影機器101(101F、101R)の記憶媒体から各種の情報、例えば映像データ等の映像情報2224等、を読み込む機能を有している。
データ管理モジュール2216は、読み込まれた情報、例えば映像データ等の映像情報2224、等を、処理装置108の補助記憶装置2202に転送、記憶、複製等をする機能を有している。
The
The
連携モジュール2211は、処理装置108に接続された装置の対応する連携モジュール、例えば施設端末105の処理装置連携モジュール518、と連携し、データ読み込みモジュール2210が読み込んだ情報を、例えば施設端末105へ転送し、施設端末105の補助記憶装置502に記憶や複製させ機能を有している。
The
表示制御モジュール2215は、処理装置108の出力装置2205、例えば液晶モニタやインジケータ等、に映像情報524の転送状態等を表示する機能を有している。
表示制御モジュール2215は更に、処理装置108に接続された装置、例えば施設端末105、の出力装置での表示に関連する情報を作成する。
The
The
処理装置108のデータ管理モジュール2216は、映像データの管理、及び、映像データに含まれる各種の情報の管理等を行う機能を有しており、その詳細は例えば前述の施設端末105のデータ管理モジュール516と同様であるので説明は省略する。
The
処理装置108のデータ処理モジュール2217は、施設端末105のデータ処理モジュール517と同様に、補助記憶装置2202に映像情報2224として記憶された映像データに対して、各種の処理を実行する。個々の処理の内容については後述するが、例えば、図17、図19から図21との関連で説明する映像の加工や情報の収集、分析、比較等を行う。
The
処理装置108の情報統合モジュール2219は、複数の記憶媒体に記録された情報、例えば映像データやの統合を行う機能を有している。
「情報の統合」とは、異なる記憶媒体、例えば異なるSDカード306、に記憶された情報に、まとめてあるいはより効率的に、アクセスすることができるように、関連付けや識別等を行うことを意味している。
The
"Information integration" means to associate, identify, etc. information stored on different storage media, such as
処理装置108の情報統合モジュール2219は、例えば、異なる記憶媒体に記憶された情報に関連して、個々の映像データの関連付けや、被撮影者、サービスや業務の予約情報421等、サービスや業務の内容、イベント情報等の関連付けや識別を行うとよい。
なお、イベント情報は、記録情報の一例である。また、イベントや出来事とは、事象の一例である。
The
Note that the event information is an example of recorded information. Also, an event or occurrence is an example of a phenomenon.
処理装置108の補助記憶装置2202には、設定情報2220、予約情報2221、利用者情報2222、従業員情報2223、映像情報2224、ユーザ情報2225等が記憶されている。
設定情報2220、予約情報2221、利用者情報2222、従業員情報2223、映像情報2224は、施設端末105の設定情報520、予約情報521、利用者情報522、従業員情報523、映像情報524と同様のものであるので説明は省略する。
ユーザ情報2225は、施設端末105を所有するユーザに関する情報である。
The
The setting
ユーザ情報2225には、例えば、ユーザが設定した撮影機器101(101F、101R)の制御パラメータや、施設端末105の一部又は全ての設定情報520等を含んでいるとよい。
処理装置108の入力装置2204は、撮影機器101(101F、101R)の記憶媒体等を差し込むことができるスロット1401~1410を有している。
スロット1401~1410については、図14を用いて詳述する。
The
The
Slots 1401-1410 will be described in detail with reference to FIG.
図8は、撮影機器101(101F、101R)の制御フロー800の例である。
撮影機器101(101F、101R)の制御部303は、人の状態又は動作の特定を行い(S810)、その都度得られる特定結果に基づいて撮影機器101(101F、101R)を制御する(S820)。
FIG. 8 is an example of a
The control unit 303 of the imaging device 101 (101F, 101R) identifies the state or motion of the person (S810), and controls the imaging device 101 (101F, 101R) based on the identification result obtained each time (S820). .
図8の制御フロー800では、人の状態又は動作を特定するステップS810は、1つのみ例示されているが、制御部303は、人の状態又は動作を特定するステップS810を複数回実行し、複数の特定結果に基づき撮影機器101(101F、101R)を制御してもよい。
In the
なお、撮影機器101(101F、101R)の制御部303は制御フロー800の前後で、撮影機器101(101F、101R)の別の制御フローが実施してもよく、それにより、撮影機器101(101F、101R)をより柔軟に制御することができる。
Before and after the
なお、人とは、車両10の乗員であり、特には車両10の運転手、助手席や後部座席の同乗者である。以下の説明においては、それらをまとめて「乗員」とも称する。
S810での「人の状態又は動作の特定」は、例えば以下の図9、図10を用いて詳述する特定フロー900や別の特定フロー1000によって行われる。
In addition, a person is an occupant of the
"Identification of the state or action of the person" in S810 is performed, for example, by a
また、S820における特定結果に基づく撮影機器101(101F、101R)の制御には、撮影機器101(101F、101R)そのものの制御に加えて、撮影機器101(101F、101R)に接続した装置の制御や撮影機器101(101F、101R)の制御部303からの命令や情報に基づいて制御可能な車両10の機能の制御を含む。
Further, in controlling the imaging equipment 101 (101F, 101R) based on the identification result in S820, in addition to controlling the imaging equipment 101 (101F, 101R) itself, control of devices connected to the imaging equipment 101 (101F, 101R) is performed. and control of the functions of the
撮影機器101(101F、101R)に接続した装置とは主に、車両10に装備された各種の装置やユーザによって車両10に後付された装置、例えば、スピーカやモニタ、コンソール、制御タブレット、外部スピーカや外部モニタ、カーナビゲーション装置、レーダ検知装置、パーソナルアシスタント装置、広告タブレット、緊急事態表示装置、等であるが、撮影機器101(101F、101R)と接続可能な車外の装置であってもよい。
Devices connected to the imaging equipment 101 (101F, 101R) mainly include various devices installed in the
なお、前方の撮影機器101Fの制御部303及び後方の撮影機器101Rの制御部303は、それぞれ独立して前方の撮影機器101F及び後方の撮影機器101Rを制御することも、協働してあるいは同期してそれらを制御することもできる構成であるとよい。更に別の実施形態では、前方の撮影機器101Fの制御部303又は後方の撮影機器101Rの制御部303の一方が、共通の制御部303として機能する構成であってもよい。
Note that the control unit 303 of the front photographing
図9は、人の状態又は動作の特定フロー900の例である。
撮影機器101(101F、101R)の制御部303は、人の状態又は動作の特定フロー900に従い、以下の処理を実行する。以下の説明では、撮影機器101(101F、101R)の制御部303による画像処理や映像処理の具体的なアルゴリズムや設定等の説明は省略する。
FIG. 9 is an
The control unit 303 of the photographing equipment 101 (101F, 101R) executes the following processing according to the human state or
制御部303は、撮影機器101(101F、101R)及び車室内撮影用カメラ102(102F、102R)から、画像(静止画像や動画像等の映像データ)や音声を取得し(S910)、それらを解析する(S920)。なお、音声は映像データに含まれる音声であるとよいが、映像データとは別に記録された複数の音声から選択できるとよりよい。
また、解析する内容によっては、画像のみ、又は音声のみを取得し、解析する構成であってもよい。
The control unit 303 acquires images (video data such as still images and moving images) and sounds from the imaging devices 101 (101F, 101R) and the vehicle interior imaging cameras 102 (102F, 102R) (S910), Analyze (S920). In addition, it is preferable that the audio is the audio included in the video data, but it is more preferable that the audio can be selected from a plurality of audios recorded separately from the video data.
Also, depending on the content to be analyzed, only an image or only a sound may be acquired and analyzed.
制御部303は、解析結果に基づき、車両10を使用する人の後述する設定された個々の状態や動作の特定を行う(S930)。
制御部303は、特定された内容に関する情報を例えばデータ又は信号等の形で出力し(S940)、制御部303は出力された情報に基づいて、対応する制御を実行する(S820)。
Based on the analysis result, the control unit 303 identifies each set state and action of the person who uses the vehicle 10 (S930).
The control unit 303 outputs information about the specified content in the form of data or signals, for example (S940), and the control unit 303 executes corresponding control based on the output information (S820).
なお、以下の説明では、各ステップS910~S930における処理の主体が制御部303である例について説明するが、個々のステップは、例えば制御部303内の又は制御部303とデータ接続状態にある個々のモジュールが行ってもよい。これは、以下に説明する別の特定フロー1000等でも同様である。
In the following description, an example in which the main body of processing in steps S910 to S930 is the control unit 303 will be described. module may do. This also applies to another
例えば、画像取得モジュールが画像取得ステップS910を実行し、画像解析モジュールが画像解析ステップS920を実行し、特定モジュールが特定ステップS930を実行し、制御部303がそれぞれのモジュールと連携する構成としてもよい。
更に、個々のモジュールはハードウェア的に実装されていてもよいし、ソフトウェア的に実装されていてもよい。
For example, the image acquisition module may execute the image acquisition step S910, the image analysis module may execute the image analysis step S920, the specific module may execute the specific step S930, and the control unit 303 may cooperate with each module. .
Furthermore, individual modules may be implemented in hardware or in software.
図10は、人の状態又は動作の別の特定フロー1000の例である。
撮影機器101(101F、101R)の制御部303は、外部の予約管理サーバ104等に記憶された人の状態情報や属性情報、例えば予約情報421、利用者情報422、従業員情報423等、を取得し(S1010)、その情報に基づいて車両10を利用する人の状態を特定する(S1020)。制御部303は、特定された内容に関する情報を例えばデータ又は信号等の形で出力する(S1030)。
FIG. 10 is an example of another human state or
The control unit 303 of the photographing equipment 101 (101F, 101R) receives status information and attribute information of persons stored in the external
図10の特定フロー1000で取得する状態情報や属性情報は、複数であるとよりよく、制御部303は、複数の状態情報や属性情報の組み合わせから、更に詳細な特定を行い、撮影機器101(101F、101R)を制御してもよい。
It is preferable that the number of pieces of state information and attribute information acquired in the
外部からの情報の取得は、例えば、制御部303が、撮影機器101(101F、101R)を予約管理サーバ104や施設端末105との通信接続を確立し、予約管理サーバ104や施設端末105から、それらの補助記憶装置402、502に記憶されている各種の情報を取得することによって、行われる。
For example, the control unit 303 establishes a communication connection between the imaging device 101 (101F, 101R) and the
制御部303は、予約管理サーバ104から直接上記の情報を取得する構成であってもよいが、施設端末105を介して、例えば施設端末105の撮影機器連携モジュール511によって各撮影機器101(101F、101R)に適合した状態の情報を取得する構成であるとよりよい。
制御部303は、例えば後述する図13に記載の予約情報システムとの連携フロー1300に従って、予約管理サーバ104の予約情報システムと接続する構成であるとよい。
The control unit 303 may be configured to acquire the above information directly from the
The control unit 303 may be configured to connect with the reservation information system of the
以下、図8、図9、図10を用いて、制御部303が図8の制御フロー800に従って実行する撮影機器101(101F、101R)の制御について、その具体例を説明する。
なお、説明中の「通知」という用語は、例えば「報知」、「警告」、「告知」、「説明」、「解説」、「補助」、「運転補助」等に読み替えてもよい。更に、「撮影機器101(101F、101R)からの出力」等の表現は、「撮影機器101(101F、101R)と協働する装置からの出力」等と読み替えてもよい。
A specific example of the control of the imaging equipment 101 (101F, 101R) executed by the control unit 303 according to the
Note that the term "notification" in the description may be replaced with, for example, "notification", "warning", "notification", "explanation", "commentary", "assistance", "driving assistance", and the like. Further, expressions such as "output from the imaging equipment 101 (101F, 101R)" may be read as "output from a device cooperating with the imaging equipment 101 (101F, 101R)".
図8の撮影機器101(101F、101R)の制御フロー800では、制御部303は、図9の人の状態又は動作の特定フロー900のS910で取得した映像データの画像や音声等に基づいて、以下に列挙する人の状態又は動作の一部又は組み合わせを特定し、これらに対応した撮影機器101(101F、101R)の制御を行う(S820)。
又は、図10の人の状態又は動作の別の特定フロー1000で予約システム等から取得した人の状態情報や属性情報等に基づいて、以下に列挙する人の状態や属性の一部又は組み合わせを特定し、これらに対応した撮影機器101(101F、101R)の制御を行う(S820)。
又は、図9の人の状態又は動作の特定フロー900及び図10の人の状態又は動作の別の特定フロー1000を組み合わせて、以下に列挙する人の状態や動作や属性の一部又は組み合わせを特定し、これらに対応した撮影機器101(101F、101R)の制御を行う(S820)。
In the
Alternatively, based on the state information, attribute information, etc. of the person acquired from the reservation system or the like in another
Alternatively, by combining the
人の状態や動作や属性の例:
車両10に人が乗り込んだか、
車両10から人が降りたか、
ハラスメント行為があったか、
車両10に乗り込んだ乗員の人数が何人であるか、
車内で確認できる乗員の人数が何人であるか、
車両10から降りた乗員の人数が何人であるか、
乗員が特定のユーザであるか、
乗員が予約した人物であるか、
乗員に幼児が含まれるか、
乗員が正規のユーザであるか、
乗員がサービスの利用者であるか、
乗員がブレーキを操作したか、
車両10に乗り込んだ人にとってその日初めての乗車であるか、
乗員が仕事着であるか、
映像内に占める人物の割合が設定値よりも大きいか、
乗員がリラックスしているか、あるいは、緊張しているか、
乗員が車両10のコンソールを操作したか、
乗員が車両10のシートベルトを操作したか、
乗員が所定の行動を行ったか、
乗員が特定の表情や生体反応を示したか、
乗員が会話をしたか、
乗員が車両10の開閉部を操作したか、
乗員が極端な行動をしたか、
乗員が極端なハンドリングやブレーキングを行ったか、
運転手と助手席の乗員の距離が第1の設定値よりも離れているか、
運転手と後部座席の乗員の距離が第2の設定値よりも離れているか、
後部座席で隣り合う乗員の距離が第3の設定値よりも離れているか、
乗員が発声したか、あるいは、会話を開始したかや会話しているか、
乗員が利用するサービスのどの段階にあるか、
乗員が何回目のサービス利用者であるか。
Examples of human states, behaviors and attributes:
Whether a person got into the
Has a person gotten out of the
Has there been an act of harassment?
how many passengers boarded the
How many passengers can be confirmed inside the vehicle?
how many passengers got off the
whether the occupant is a specific user,
the passenger is the person who made the reservation;
Whether there are infants in the crew,
whether the occupant is a legitimate user;
whether the crew is a user of the service;
Did the occupant operate the brakes?
Whether it is the first ride of the day for the person who got into the
whether the occupants are in work clothes;
Whether the percentage of people in the video is larger than the set value, or
whether the occupants are relaxed or tense,
whether the occupant operated the console of the
whether the occupant has operated the seat belt of the
Whether the crew has taken the prescribed action,
Whether the occupant showed a specific facial expression or biological reaction,
Did the crew have a conversation?
Whether the occupant has operated the opening/closing part of the
Whether the crew acted in an extreme manner,
Whether the occupant has used extreme handling or braking,
whether the distance between the driver and the occupant in the front passenger seat is greater than the first set value;
whether the distance between the driver and the passenger in the rear seat is greater than the second set value;
whether the distance between adjacent occupants in the rear seats is greater than the third set value;
whether the occupant has spoken or initiated or engaged in a conversation;
what stage of service the crew is at,
How many times the crew has used the service.
特に、制御部303が上記の複数の解析や判定を行い、複数の解析や判定結果の組み合わせに基づいて、人の状態や動作や属性の一部又は組み合わせを特定し、撮影機器101(101F、101R)を制御する構成であるとよく、ユーザがそれらの解析や判定の対象を、選択できる構成であるとよりよい。 In particular, the control unit 303 performs a plurality of analyzes and determinations described above, and based on a combination of a plurality of analyzes and determination results, specifies a part or combination of human states, motions, and attributes, 101R), and it is more preferable that the user can select the target of analysis and judgment.
なお、制御部303は、上記の特定処理を、図11に記載の「人の状態又は動作の第1の特定」のステップS1110でも同様に実行することができる。 It should be noted that the control unit 303 can similarly execute the above identification processing in step S1110 of "first identification of human state or motion" described in FIG.
以下に、上記の解析内容に関連するいくつかの特定内容に基づく具体的な撮影機器101(101F、101R)等の制御の例を説明する。
また、以下の説明では、表現の簡潔化を目的として単に「撮影機器101(101F、101R)」と記載して説明するが、「車室内撮影用カメラ102(102F、102R)」であってもよいし、「撮影機器101(101F、101R)」と「車室内撮影用カメラ102(102F、102R)」の組み合わせであってもよい。
A specific example of control of the photographing equipment 101 (101F, 101R) and the like based on some specific contents related to the above analysis contents will be described below.
In addition, in the following description, for the purpose of simplification of expression, the description will be made simply by referring to the “photographing device 101 (101F, 101R)”, but the “vehicle interior photographing camera 102 (102F, 102R)” Alternatively, it may be a combination of the "photographing equipment 101 (101F, 101R)" and the "vehicle interior photographing camera 102 (102F, 102R)".
なお、制御部303は、以下に説明する個々の制御例における制御を別の特定内容と組み合わせて実行したり、個々の制御例を組み合わせて実行したり、任意の制御例のみを実行あるいは停止したり、する機能を有しているとよりよい。
例えば、制御部303は、以下に説明する制御例に関して、1つの制御例について説明した特定ステップ(S810、S930、S1010)で実施する特定に、別の少なくとも1つの制御例の制御ステップ(S820)で実施する制御を組み合わせてもよい。
Note that the control unit 303 executes the control in each control example described below in combination with another specific content, executes the individual control examples in combination, or executes or stops only an arbitrary control example. It is better to have a function to
For example, with respect to the control examples described below, the control unit 303 performs at least one control step (S820) of another control example in addition to the identification performed in the identification steps (S810, S930, S1010) described for one control example. may be combined.
また、以下では、各制御例を、撮影機器101(101F、101R)の制御部303が、車両10の利用中に実行する構成について説明するが、それらの制御例のうち、車両10の利用中以外に実行可能な制御例、例えば映像データに処理を施す制御等、は、施設端末105、ユーザ端末106、外部管理サーバ107、処理装置108の各モジュールによっても、同様に実行可能である、あるいは、各モジュールが協働して実行可能である。
例えば、映像データの画像や音声の加工に関連する制御等は、撮影機器101(101F、101R)の制御部303が車両10の利用中に実行することもできるし、施設端末105のデータ処理モジュール517、ユーザ端末106のデータ処理モジュール617、外部管理サーバ107のデータ処理モジュール717、処理装置108のデータ処理モジュール2217が、単独で又は協働して、対応する映像データを受け取った後に実行することもできる。
In the following description, each control example is executed by the control unit 303 of the imaging device 101 (101F, 101R) while the
For example, control related to image and sound processing of video data can be executed by the control unit 303 of the imaging equipment 101 (101F, 101R) while the
以下具体的な制御例を説明する。
第1の制御例
入力例:車両10に人が乗り込んだことや、車両10から人が降りたことを特定できる映像。
出力例:映像データの品質の変更。
A specific control example will be described below.
First control example Input example: An image that can specify that a person got into the
Output example: Change the quality of video data.
制御部303は車両10に人が乗り込んだことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)の撮影設定に関して、映像データのフレームレート、解像度、ビットレートの少なくとも1つをより高い値へ変更する(S820)。
なお車両10に人が乗り込んだこととは、人の乗車動作の一例である。
When the control unit 303 identifies that a person has boarded the vehicle 10 (S810, S930), the control unit 303 sets the frame rate, resolution, and bit rate of the video data for the shooting settings of the shooting equipment 101 (101F, 101R). to a higher value (S820).
It should be noted that the fact that a person has boarded the
制御部303は車両10から人が降りたことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)の撮影設定に関して、映像データに含まれる各種のパラメータ、例えばフレームレート、解像度、ビットレート等の少なくとも1つをより低い値へ変更する(S820)。 When the control unit 303 identifies that a person has gotten off the vehicle 10 (S810, S930), the control unit 303 sets various parameters included in the video data, for example, At least one of frame rate, resolution, bit rate, etc. is changed to a lower value (S820).
これらの構成では、例えば、制御部303は、車両10に人がいない状態では、撮影機器101(101F、101R)を映像データの画質や音質は低いが長時間の録画が可能である長時間録画モードで動作させ、車両10に人が乗り込んでからは、映像データ内での乗員の状態をより詳細に識別することができる乗員録画モードで動作させることができる。
With these configurations, for example, the control unit 303 controls the image capturing device 101 (101F, 101R) to perform long-time recording, which is capable of recording for a long time, although the image quality and sound quality of the video data are low, when there is no one in the
上記の長時間録画モードは、長時間に渡って常時録画を実行するモードである。長時間録画モードでは、制御部303は、例えば車両10が自動車教習所等で使用される車両10であれば、自動車教習所の営業時間の間、常時録画を続ける。
The long time recording mode is a mode in which continuous recording is performed over a long period of time. In the long-time recording mode, if the
制御部303は、常時録画を続ける時間の長さや撮影機器101(101F、101R)のSDカード306等の容量等に応じて、長時間録画モードで撮影する「映像データに含まれる各種のパラメータ、例えばフレームレート、解像度、ビットレート等、の映像データの質」(以下単に「映像データの質」とも称する)を、変更することができるとよい。
The control unit 303 performs shooting in the long-time recording mode according to the length of time for continuous recording and the capacity of the
なお、「映像データの質の変更」は、映像データに含まれる各種のパラメータ、例えばフレームレート、解像度、ビットレート等のうち少なくとも1つの変更であるとよい。 It should be noted that "change in quality of video data" is preferably a change in at least one of various parameters included in the video data, such as frame rate, resolution, bit rate, and the like.
上記の乗員録画モードは、長時間録画モードに比べてより高い質で映像データを撮影するモードである。乗員録画モードでは、制御部303は、例えば車両10が自動車教習所等で使用される車両10であれば、教官1910と教習生1920の距離、表情、視線、動き、ハンドリング操作、会話、等を、後で解析できる程度の質で、映像データを撮影、記録する。
制御部303は、特定する対象に応じて、乗員録画モードで撮影する映像データのフレームレート、解像度、ビットレート等の映像データの質を、変更できるとよい。
The occupant recording mode described above is a mode for capturing video data with higher quality than the long-time recording mode. In the crew recording mode, for example, if the
The control unit 303 is preferably capable of changing the quality of video data such as the frame rate, resolution, and bit rate of video data shot in the passenger recording mode according to the specified target.
なお、乗員録画モードでは、制御部303は、その都度特定される出来事(イベント)に応じて、更に映像データの質を変更することができるとよい。それにより、後述するように、各種のハラスメント行為あるいはハラスメント類似行為の発生が特定された場合、映像データの質をより高品質に変更し記録することで、制御部303がその時点で、より高い精度で発生した行為がハラスメント行為に該当するか否かを判定することができる、又は、映像データを確認するユーザが事後により詳細に発生した行為がハラスメント行為に該当するか否かを検討することができる。 In the passenger recording mode, it is preferable that the control unit 303 can further change the quality of the video data according to the occurrence (event) specified each time. As a result, as will be described later, when occurrence of various harassment acts or harassment-like acts is identified, the quality of the video data is changed to a higher quality for recording, so that the control unit 303 can achieve a higher image quality at that time. It is possible to accurately determine whether or not an act that has occurred corresponds to an act of harassment, or the user who checks the video data can consider later in detail whether an act that has occurred corresponds to an act of harassment. can be done.
このようにすれば、制御部303は、限られた電力量や記憶容量であっても、長時間の録画と、必要に応じた高画質の録画を、両立して実行しやすくなる。
なお、上記の映像データの質の変更は、後述の制御例においても同様に理解されるものであり、以下の記載では概略的にのみ説明する。
This makes it easier for the control unit 303 to perform both long-time recording and high-quality recording as necessary, even with limited power and storage capacity.
It should be noted that the change in the quality of the video data described above is understood in the same way in the control examples described later, and will be described only schematically in the following description.
第2の制御例
入力例:ハラスメント行為があったことを特定できる映像。
出力例:映像データの質の変更。
Second control example Input example: A video that can identify the occurrence of harassment.
Output example: change the quality of video data.
制御部303は、設定された基準に従うハラスメント行為があったことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)の撮影設定に関して、映像データの質をより高く変更する(S820)。
なお、この第2の制御例においてより高く変更される映像データの質は、上記の第1の制御例に関して説明した長時間録画モードよりも高品質であればよいが、乗員録画モードよりも、高品質であるとよりよい。
When the control unit 303 identifies that there has been an act of harassment according to the set criteria (S810, S930), the control unit 303 further improves the quality of the video data with respect to the shooting settings of the shooting devices 101 (101F, 101R). Change to high (S820).
It should be noted that the quality of the video data that is changed to a higher level in this second control example should be higher than in the long-time recording mode described in connection with the first control example. Higher quality is better.
制御部303は、1種類のパラメータに基づいて、ハラスメント行為として、例えば乗員間の距離が0になったら接触や暴力が行われたと特定したり、乗員間の距離が急激に0に近づいたりマイナス値となったりしたら威嚇が行われたと特定したり、乗員の一方が突然大きな声量で発話をしたと特定したりする構成であるとよい。 Based on one type of parameter, the control unit 303 identifies, as harassment behavior, that contact or violence has occurred when the distance between crew members becomes 0, for example, or when the distance between crew members suddenly approaches 0 or becomes negative. It is preferable to specify that a threat has been made or that one of the occupants has suddenly spoken in a loud volume.
制御部303は、2種類以上のパラメータに基づいて、ハラスメント行為として、例えば乗員間の距離が0になったり急激に0に近づいたりした状況と、車内の音量が急激に上昇した状況が同時に発生した場合に、パワハラ等が行われたと特定する構成であるとより高い精度で且つより細やかなバリエーションの状況を特定することができるのでよい。 Based on two or more types of parameters, the control unit 303 detects, as harassment, a situation in which, for example, the distance between passengers becomes 0 or rapidly approaches 0, and a situation in which the volume inside the vehicle suddenly increases. In such a case, it is preferable to use a configuration that specifies that power harassment or the like has occurred, because it is possible to specify the situation of variations with higher accuracy and more detail.
それらの特定に関しては、図17、図21との関連でより具体的に後述する。 Their identification will be described later in more detail in connection with FIGS. 17 and 21. FIG.
追加的に又は代替的に、制御部303は、2種類以上のパラメータに基づいて、ハラスメント行為として、例えば乗員間の距離が0になったり急激に0に近づいたりした状況と、乗員の会話内容に拒絶を示す内容が含まれていたり、乗員の発話内容に「ヤメテクダサイ」等の音含まれていたりする状況が同時に発生した場合に、セクハラ等が行われたと特定する構成であってもよい。 Additionally or alternatively, based on two or more parameters, the control unit 303 determines, as harassment behavior, for example, a situation in which the distance between crew members becomes 0 or rapidly approaches 0, and the content of the conversation of the crew members. , or the content of the passenger's utterance includes a sound such as "Yametekudasai", it may be configured to specify that sexual harassment, etc. has occurred. .
上述したように、各種のハラスメント行為あるいはハラスメント類似行為の発生が特定された場合に、制御部303は、映像データの質をより高品質に変更し記録することで、制御部303やユーザによるハラスメント行為の判定や検討をより正確に行いやすくなる。 As described above, when occurrence of various harassment acts or harassment-like acts is identified, the control unit 303 changes the quality of the video data to a higher quality and records it, thereby preventing harassment by the control unit 303 or the user. It becomes easier to judge and consider actions more accurately.
なお、撮影機器101(101F、101R)の制御部303は、各種のハラスメント行為を特定した場合、映像データに、特定したハラスメント行為の関連する情報を付加する、あるいは、特定したハラスメント行為の関連する情報を割り当てる、構成であるとよりよい。
撮影機器101(101F、101R)や、施設端末105、ユーザ端末106、外部管理サーバ107、処理装置108の各モジュールは、特にはそれぞれのデータ管理モジュール516、716、2216は、映像データに付加あるいは割り当てられた情報を、映像データに関するインデックス情報として利用することができる。
Note that, when various harassment acts are specified, the control unit 303 of the imaging device 101 (101F, 101R) adds information related to the specified harassment acts to the video data, or adds information related to the specified harassment acts to the video data. It is better to be a composition that assigns information.
Each module of the photographing equipment 101 (101F, 101R), the
なお、本明細書内の説明において、撮影機器101(101F、101R)の制御部303によって「ハラスメント行為」と判定された行為は、必ずしも法律上、あるいは社会通念上のハラスメント行為と一致することを意図してはない。
例えば、乗員間での「接触」や「接近」を「ハラスメント行為」や「ハラスメント類似行為」として設定してもよい。その場合、例えば、危険を避けるための車両10の急旋回による、乗員間での「接触」や「接近」がハラスメントに当たるか否かは、ユーザは、実際の映像データを確認することによって、判断することができる。
In the description of this specification, it should be noted that an act determined to be a "harassment act" by the control unit 303 of the photographing device 101 (101F, 101R) necessarily corresponds to a legal or socially accepted harassment act. Not intended.
For example, "contact" or "approach" between passengers may be set as "harassment behavior" or "harassment-like behavior". In that case, for example, whether or not "contact" or "approaching" between passengers due to sudden turns of the
この第2の制御例においてより高い映像データの質で撮影記録を行うモードをハラスメント録画モードと称する。
前述の第1の制御例との組み合わせの別の例として、制御部303は、乗員が車両10に乗り込んだ際には、長時間録画モードから乗員録画モードへの変更は行わずに長時間録画モードのまま撮影記録を続け、ハラスメント行為があったことを特定した場合、直接ハラスメント録画モードへ移行してもよい。
In this second control example, a mode in which shooting and recording are performed with higher video data quality is called a harassment recording mode.
As another example of combination with the above-described first control example, the control unit 303 performs long-time recording without changing from the long-time recording mode to the occupant recording mode when an occupant gets into the
このような構成では、ハラスメント行為やハラスメント類似行為が発生した場合にだけ映像データを記録する構成と比べて、車両10の利用時間に渡って映像データが記録されているので、ハラスメント行為やハラスメント類似行為が車両10の利用時間中に「なかった」ことを確認や証明しやすくなる。
映像データの処理上明確な基準で判定される以下の所定のイベント、例えば乗員同士の接近や接触、大声での威嚇等の出来事、の発生が検出や特定されなかったという結果と、その根拠となる映像データの双方を、ユーザが提示することができることは、問題となるイベントが車両10の利用時間中に認められないことの根拠として有益である。また、それは同時に、ユーザ以外の第3者が、独自に検証を行う上でも有益である。
In such a configuration, compared to a configuration in which video data is recorded only when an act of harassment or an act similar to harassment occurs, video data is recorded over the time period in which the
The result that the occurrence of the following predetermined events, which are determined by clear standards in the processing of video data, such as the proximity and contact of passengers, and loud threats, was not detected or identified, and the grounds thereof. The fact that the user can present both video data is useful as a basis for not allowing the event in question during the time the
このような構成は、上記の利点に加えて更に、イベント発生前後を含めた録画時間帯を低画質のみで録画する構成と比べて、車両10の利用時間中の行為に対して、ハラスメント行為の疑いが生じた場合、ユーザは、疑いが生じた行為が、ハラスメント行為であるか否かについての判断を、より高画質で記録された映像データを用いることで、より高い信頼性や妥当性で行うことができる、という利点を有している。
In addition to the above advantages, such a configuration has the advantage that harassment acts during the usage time of the
それにより、問題となるイベントの発生が車両10の利用時間中に特定されなかった場合でも、映像データから検証できると同時に、問題となるイベントの発生が車両10の利用時間中に制御部303により機械的に特定された場合には、そのようなイベントが実際に発生したか否かを、更に高い質の映像データを用いて、ユーザ等が人の判断で、検証できる。
As a result, even if the occurrence of the problematic event is not specified during the usage time of the
なお、この実施形態、及び、本明細書中での、「ハラスメント行為」としては、特にパワーハラスメント(パワハラ)、モラルハラスメント(モラハラ)、セクシャルハラスメント(セクハラ)、マタニティハラスメント(マタハラ)、ジェンダーハラスメントを想定している。 In this embodiment and in this specification, "harassment" includes power harassment, moral harassment, sexual harassment, maternity harassment, and gender harassment. I assume.
パワハラ、あるいは、セクハラであれば、制御部303は、例えば乗員間の距離、乗員間の距離の接近速度、乗員の声量等を単独で又は組み合わせて解析することで、暴力や威嚇、あるいは、嫌がらせや侮辱、の発生を判定することができる。
モラハラ、セクハラ、マタハラ、ジェンダーハラスメントであれば、制御部303は、例えば、車内での会話やその他の音声、例えば舌打ちや口笛、等を、単独で又は組み合わせて解析することで、嫌がらせや侮辱の発生を判定することができる。
In the case of power harassment or sexual harassment, the control unit 303 analyzes, for example, the distance between the crew members, the approach speed of the distance between the crew members, the voice volume of the crew members, etc., alone or in combination, thereby causing violence, intimidation, or harassment. and insults can be determined.
In the case of moral harassment, sexual harassment, maternity harassment, and gender harassment, the control unit 303 analyzes, for example, conversations in the car and other sounds such as clicks of the tongue and whistles, alone or in combination, to detect harassment and insults. Occurrence can be determined.
例えば「女のくせに」、「男のくせに」、「妊婦のくせに」という女性や男性や妊婦を侮蔑するような意味内容の有無を解析してハラスメントの発生を判定する他、より簡潔に且つより低演算負荷で、会話中の音を解析して「オンナノクセニ」、「オトコノクセニ」、「ニンプノクセニ」といった音や音の組み合わせの有無から、ハラスメントの発生を判定してもよい。 For example, by analyzing the presence or absence of semantic content that despises women, men, and pregnant women, such as "because of women," "because of men," and "because of pregnant women," the occurrence of harassment can be determined. It is also possible to determine the occurrence of harassment from the presence or absence of sounds or combinations of sounds such as "onna no kuseni", "otokonokuseni", and "nymp no kuseni" by analyzing sounds during conversation and with a lower computational load.
制御部303は、更に、車内に複数のマイクが存在する構成では、ユーザによる優先的に会話を録音する対象となる人物の選択入力を受け付けることができる機能を有しているとよい。そのような構成では、制御部303は、対象となる人物の車内の会話をより良好に録音できるように、マイクごとに感度やゲインを調整する構成であるとよい。
それにより、ユーザは、例えば騒がしい車内で、対象となる人物が小声でハラスメント行為に該当する発言をした場合であっても、より確実に対象となる人物の会話を録音することができる。
In a configuration where a plurality of microphones are present in the vehicle, the control unit 303 may further have a function of accepting a selection input by the user of a person whose conversation is to be preferentially recorded. In such a configuration, the control unit 303 may be configured to adjust the sensitivity and gain of each microphone so as to better record the conversation of the target person in the car.
As a result, the user can more reliably record the conversation of the target person even when the target person utters a remark corresponding to harassment in a noisy car, for example.
なお、制御部303は、乗員ごとに、各種のハラスメント録画モードへ移行する基準を変更できるとよりよい。
例えば乗員が男性のみであることを判定すると、制御部303は、マタハラの判定の実行を停止すると、演算負荷や記憶容量の消費を低減できるので有利である。
It is preferable that the control unit 303 can change the criteria for transitioning to various harassment recording modes for each crew member.
For example, if the control unit 303 determines that the occupants are male only, stopping the execution of the determination of maternity harassment can advantageously reduce computational load and storage capacity consumption.
第3の制御例
入力例:乗員の人数を特定できる映像。
出力例:乗員の人数に基づく情報。
Third control example Input example: Video that can identify the number of passengers.
Example output: Information based on number of passengers.
第3-1の制御例
制御部303は車両10に乗り込んだ乗員の人数が何人であるかを特定した場合(S810、S930)、制御部303は、車両10に乗り込んだ人数やそれまでに乗り込んだ合計の人数に関する情報を、撮影機器101(101F、101R)のスピーカや表示部から出力する、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させる(S820)。
このような構成では、例えば幼稚園・保育園等の送迎バスのように、乗り込む園児の人数が決まっている場合等に、予定の人数が乗り込んだか等を、運転手や引率者が容易に確認することができる。
3-1 Control Example When the control unit 303 identifies the number of passengers who have boarded the vehicle 10 (S810, S930), the control unit 303 determines the number of passengers who have boarded the
With such a configuration, for example, when the number of children getting on is fixed, such as a shuttle bus for a kindergarten or a nursery school, the driver or the leader can easily check whether the planned number of children have boarded. can be done.
第3-2の制御例
同様に、制御部303は、車内で確認できる乗員の人数が何人であるかを特定した場合(S810、S930)、制御部303は、車両10内で確認できる乗員の人数に関する情報を、撮影機器101(101F、101R)のスピーカや表示部、出力する、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させる(S820)。
このような構成では、例えば幼稚園・保育園等の送迎バスのように、乗員が小さく乗員の把握が困難である場合等に、映像データ上確認できない場所へ乗員が移動していること等を、運転手や引率者に対して迅速に通知することができる。
Control Example 3-2 Similarly, when the control unit 303 specifies the number of passengers that can be confirmed inside the vehicle (S810, S930), the control unit 303 determines the number of passengers that can be confirmed inside the
With such a configuration, for example, when the crew is small and it is difficult to grasp the crew, such as a shuttle bus for a kindergarten or nursery school, it is possible to detect that the crew is moving to a place that cannot be confirmed on the video data. It is possible to quickly notify the hand and leader.
更に、上記の制御例におけるそれまでに車両10に乗り込んだ合計の人数との間に差異が生じている場合、制御部303は、その差異に関する情報を例えば警報として通知することができる。そのような差異が生じる1つの原因は、園児が、車内の撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)のいずれの撮影範囲からも死角となる場所、例えば座席と座席の間の床、座席の下の隙間、荷物として車両10に積載されたバックの中、にいるような状態が挙げられる。
Furthermore, if there is a difference from the total number of people who have boarded the
制御部303は、上記の差異に基づき、園児等が、車内の撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)のいずれの撮影範囲からも死角となる場所に、移動してしまったことを、運転手や引率者に迅速に警告することができる。
それにより、運転手は、対象となる園児を通常の座席上に戻すために、車両10を停車させたり、引率者は、対象となる園児を確認したりすることができる。
Based on the above differences, the control unit 303 places the child in a blind spot from the shooting range of the shooting equipment 101 (101F, 101R) in the car and the camera 102 (102F, 102R) for shooting inside the car. It is possible to quickly warn the driver or leader that the vehicle has moved.
As a result, the driver can stop the
第3-3の制御例
同様に、制御部303は、車両10から降りた乗員の人数が何人であるかを特定した場合(S810、S930)、制御部303は、車両10から降りた乗員の人数に関する情報を、撮影機器101(101F、101R)のスピーカや表示部から出力する、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力する(S820)。
Control Example 3-3 Similarly, when the control unit 303 specifies the number of passengers who got off the vehicle 10 (S810, S930), the control unit 303 determines the number of passengers who got off the
このような構成では、例えば幼稚園・保育園等の送迎バスのように、以下の所定の場所、例えば幼稚園・保育園等の施設の駐車場等、で降車する園児等の人数が決まっている場合、例えば全ての園児や引率者が降車することが決まっている場合、等に、制御部303は、車内に依然として乗員が乗車していることや置き去りが発生していること等についての通知を行うことができる。それにより、ユーザは、乗員の車内への置き去り等が発生してしまうことをより確実に防止することができる。 In such a configuration, for example, like a shuttle bus for a kindergarten, nursery school, etc., if the number of children who get off at the following predetermined places, such as the parking lot of a facility such as a kindergarten, nursery school, etc. In cases such as when it is decided that all the children and their guardians will get off the car, the control unit 303 can notify that there are still passengers in the car and that there are people left behind. can. As a result, the user can more reliably prevent the occupant from being left behind in the vehicle.
更に、制御部303は、例えば降車した乗員の人数が以下の所定の値、例えば乗車した人数の値等、に達する前に車両10のエンジンや電源がオフになった場合、LAN等の施設内のネットワーク103を介して、ユーザ端末106へ置き去り確認の通知を、メール等で送信する構成であるとよい。その場合、制御部303は、例えばメールにURLアドレス等を添付し、ユーザがURLアドレス等にアクセスすることで対象となる車内の映像をユーザ端末106上で再生したり、ユーザ端末106を介して、ユーザの声や姿を撮影機器101(101F、101R)のスピーカや表示部、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させたり、できるようにするとよい。
Furthermore, the control unit 303, for example, when the engine or power of the
上記の構成に追加して、又は代替的に、制御部303は、施設内の撮影装置、例えば施設に入る際に健康状態を確認するサーマルカメラ、体表面温度測定カメラ等、で確認された施設への入場者数に関する情報を取得し、その情報を置き去りの発生の判定にしようしてもよい。
例えば、制御部303が確認した降車人数が予定の降車人数、例えば全て乗員数、に満たない場合であっても、施設への入場者数が、予定の降車人数に対応していれば、置き去り確認の通知を行わない、あるいは、置き去り確認の通知の後に改めて、予定の人数が施設へ入場したことについての通知を行うとよい。
In addition to or alternatively to the above configuration, the control unit 303 controls the facility confirmed by an imaging device in the facility, for example, a thermal camera for checking the health condition when entering the facility, a body surface temperature measurement camera, etc. Information about the number of visitors to the park may be obtained and used to determine the occurrence of desertion.
For example, even if the number of people getting off the train confirmed by the control unit 303 is less than the planned number of people getting off, for example, the total number of passengers, if the number of people entering the facility corresponds to the planned number of people getting off, they will be left behind. It is preferable not to notify the confirmation, or to notify again that the planned number of people have entered the facility after the notification of the abandoned confirmation.
上記3つの制御例を組み合わせることで、送迎に関連して生じる事故、特には園児の置き去り等、をより効果的に予防することができることに加えて、運転手や引率者の負担を軽減することができる。 By combining the above three control examples, it is possible to more effectively prevent accidents related to pick-up and drop-off, especially children left behind, and to reduce the burden on drivers and guardians. can be done.
上記3つの制御例を実行する構成の1つの実施形態としては、例えば、送迎バス、観光バス、長距離バス等での利用するための構成であって、
撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)の1つとして、又は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)とは別の装置、例えばハンディ端末やポータブル端末として、車両10への乗降車のときに、本人確認や、体温確認と撮影等と、乗降人数の計測を行う第1のカウントシステムと、車両10内の乗員の人数を計測する第2のカウントシステムと、を備え、第1のカウントシステムで計測した乗降人数と第2のカウントシステムで計測した乗員人数に基づく情報の通知、例えば高速道路のパーキングエリアでの休憩後の出発時等での車内の人数不足等についての通知、を映像や音声で行う構成が挙げられる。
One embodiment of the configuration for executing the above three control examples is, for example, a configuration for use in shuttle buses, sightseeing buses, long-distance buses, etc.
As one of the photographing equipment 101 (101F, 101R) and the vehicle interior photographing camera 102 (102F, 102R), or separately from the photographing equipment 101 (101F, 101R) and the vehicle interior photographing camera 102 (102F, 102R) For example, as a handy terminal or a portable terminal, when getting on and off the
このような構成では、第1のカウントシステム、及び、第2のカウントシステムがそれぞれに設けられた連携モジュールを介して、計測した人数の情報の受け渡しをすることができるとよい。特に、第1のカウントシステムがハンディ端末やポータブル端末といった装置である場合には、それらに後から第2のカウントシステムとの連携モジュールをインストールすることができる構成であるとよい、あるいは、それらに接続するスマートフォン等のユーザ端末106の撮影機器連携モジュール611に、第1のカウントシステムと第2のカウントシステムを連携させる機能を追加できる構成であるとよい。
In such a configuration, it is preferable that information on the number of people counted can be exchanged via the cooperation modules respectively provided in the first counting system and the second counting system. In particular, when the first counting system is a device such as a handy terminal or a portable terminal, it is preferable to install a module for cooperation with the second counting system afterward. It is preferable that a function for linking the first counting system and the second counting system can be added to the imaging
なお、第3-1の制御例から第3-3の制御例で使用可能な撮影機器101(101F、101R)に接続した外部スピーカやモニタとしては、例えば撮影機器101(101F、101R)に接続した外部スピーカやモニタとしては、仮想の引率者、仮想のドライブアシスタント、仮想のドライブコンパニオン、仮想の同乗者等として認識されるバーチャルキャラクタを表示するバーチャルキャラクタ表示装置であってもよい。
そのような構成では、バーチャルキャラクタから園児へ、「座席に座ってね」等のメッセージを出力するとよい。また、ユーザが、そのようなメッセージに代えて、「座り方を教えてほしいな」等の園児が自ら座席に座ってみせたくなるような、メッセージを出力することを選択できる構成であるとよりよい。
As external speakers and monitors connected to the imaging equipment 101 (101F, 101R) that can be used in the control examples 3-1 to 3-3, for example, the The external speaker or monitor may be a virtual character display device that displays a virtual character recognized as a virtual leader, a virtual drive assistant, a virtual drive companion, a virtual passenger, or the like.
In such a configuration, it is preferable to output a message from the virtual character to the kindergartener, such as "Please take a seat." In addition, it is more preferable that the user can select to output a message such as "I want you to teach me how to sit" instead of such a message so that the child wants to sit in the seat himself. good.
第4の制御例
入力例:車両10に人が乗り込んだことや、車両10から人が降りたことを特定できる映像。
出力例:映像データの記録を終了するまでの時間の長さの変更。
Fourth control example Input example: An image that can specify that a person got into the
Output example: Change the length of time until recording of video data ends.
第4-1の制御例
制御部303は、車両10に人が乗り込んだことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)による撮影を終了するまでの時間長や、撮影機器101(101F、101R)による映像データの記録を終了するまでの時間長や、撮影機器101(101F、101R)の電源311をオフにするまであるいは撮影や撮影の記録を停止するまでの時間長を、その時点で設定されている時間長よりも延長する(S820)。
4-1 Control Example When the control unit 303 identifies that a person has boarded the vehicle 10 (S810, S930), the control unit 303 controls the photographing equipment 101 (101F, 101R) and the vehicle
なお、上記の時間長は、例えばバッテリー容量や記憶媒体の容量を節約するために、撮影機器101(101F、101R)を待機状態やスリープ状態やシャットダウン状態等へ移行させるまでの時間の長さである。制御部303は、それらの時間長を予めプリセットされた長さから、ユーザによる設定入力に基づいて変更できる構成であるとよい。 Note that the above-mentioned length of time is the length of time until the photographing device 101 (101F, 101R) is shifted to a standby state, a sleep state, a shutdown state, or the like, for example, in order to save battery capacity or storage medium capacity. be. The control unit 303 may be configured to be able to change these time lengths from preset lengths based on the setting input by the user.
このようにすれば、制御部303は、乗員が車両10に乗り込んでから延長された時間までの間に、特定のイベント、例えば乗員がシートベルトを装着したかどうか、等の監視を、より確実に実行することができる。
また別の実施形態では、制御部303は、車両10が営業車等であり、乗員が営業者である場合に、乗員が車両10に乗り込んでから延長された時間までの間に、移動を開始したかどうか等の監視を行ってもよい。
In this way, the control unit 303 can more reliably monitor a specific event, such as whether or not the occupant has fastened a seatbelt, during the extended period of time after the occupant enters the
In another embodiment, when the
第4-2の制御例
制御部303は、車両10から人が降りたことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)による撮影を終了するまでの時間長や、撮影機器101(101F、101R)による映像データの記録を終了するまでの時間長や、撮影機器101(101F、101R)の電源311をオフにするまであるいは撮影や撮影の記録を停止するまでの時間長を、その時点で設定されている時間長よりも延長する(S820)。
4-2 Control Example When the control unit 303 identifies that a person has gotten out of the vehicle 10 (S810, S930), the control unit 303 controls the photographing equipment 101 (101F, 101R) or the vehicle interior photographing camera 102 (102F, 102R), the length of time until the recording of video data by the imaging device 101 (101F, 101R) is completed, and the
制御部303は、上記の時間長さを、第4-1の制御例の場合と同様に設定する構成であるとよい。
このようにすれば、制御部303は、乗員が車両10から降りてから延長された時間までの間に、特定のイベント、例えば乗員が車両10から安全に離れたか、乗員が降りてから車両10がロックされるまでの間に不審者の接近があったか、等の監視を、より確実に実行することができる。
The control unit 303 may be configured to set the above time length in the same manner as in the control example 4-1.
In this way, the control unit 303 can detect a specific event, for example, whether the occupant has safely left the
特に、制御部303は、車両10から人が降りた場合に延長する時間の長さを、車両10に人が乗り込んだ場合に延長する長さよりも長く設定できるとよりよい。それにより、制御部303は、車両10から人が降りた場合には、特には車両10から人がいなくなった場合等には、車両10内に人がいることにより、人の目による監視が可能である車両10に人が乗り込んだ場合よりも長い時間、上記の監視を実行することができる。
In particular, it is preferable that the control unit 303 can set the length of time to be extended when a person gets out of the
第4-1の制御例、第4-2の制御例のいずれにおいても、制御部303は、それぞれの撮影機器101(101F、101R)やカメラ102(102F、102R)に対して、時間長を個別に設定することができる構成であるとよい。
例えば、乗員が建築や土木関係の仕事に車両10を使用する状況で、乗員が車両10から降りた後、例えば車両10後部のハッチバックドアを開け、仕事道具や機材等の積み下ろし作業に日常的に比較的長い時間を費やすような場合、ハッチバックドアの周囲を撮影する撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)の撮影時間をより長時間に設定し、仕事道具や機材等の積み下ろし作業の開始から終了までをより確実に記録できるようにするとよい。
In both the 4-1 control example and the 4-2 control example, the control unit 303 sets the time length to each of the imaging devices 101 (101F, 101R) and the cameras 102 (102F, 102R). It is preferable that the configuration can be set individually.
For example, in a situation where the crew uses the
第4-3の制御例
制御部303は、車両10に人が乗り込んだことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)の入出力部315や、撮影機器101(101F、101R)に接続された装置の出力装置から、車室内を録画中であることを通知する画像や音声を出力する(S820)、例えば、スピーカから「車室内を録画中です」という音声メッセージを出力したり、モニタに「車室内を録画中です」という画像や動画を出力したりするとよい。
4-3 Control Example When the control unit 303 identifies that a person has boarded the vehicle 10 (S810, S930), the control unit 303 controls the input/
それによりユーザは、乗員に対して、無断で録画を行う事態が発生することを、より確実に避けることができる。
更に、ユーザは、乗員に対して、一方では、車内の映像が録画されているという安心感を与え、他方では、車内の映像が録画されていることを印象付けることで、犯罪行為やハラスメント行為等の抑止効果を高めることができる。
車内の映像が録画されていることを印象付けることは、例えばいたずら目的や私怨等での、犯罪行為やハラスメント行為等に関する虚偽の訴え等の発生を低減しやすくなる。
As a result, the user can more reliably avoid situations where recording is performed without the passenger's permission.
Furthermore, the user gives the passenger a sense of security that the video inside the car is being recorded, and on the other hand, impresses that the video inside the car is being recorded. etc. can be enhanced.
Giving the impression that the video inside the car is being recorded makes it easier to reduce the occurrence of false complaints about criminal acts, harassment acts, etc., for the purpose of mischief, personal grudges, and the like.
第5の制御例
入力例:乗員個人を特定できる映像や予約情報421、521等。
出力例:個人に割り当てられた機能の起動。
Fifth control example Input example: video,
Example output: Activation of an individual's assigned function.
第5-1の制御例
制御部303は車両10に乗り込んだ乗員が特定の人物であることを特定した場合(S810、S930、S1010)、特定された人物に割り当てられた機能の実行を開始する(S820)。
5-1 Control Example When the control unit 303 identifies that the occupant who got into the
第5-1-1の制御例
制御部303は、車両10が、サービスを提供するために利用される車両10、例えば自動車教習所で利用される車両10、である状況において、運転している人物が教官1910であることを特定した場合(S810、S930、S1010)、撮影機器101F、101Rの指導サポート機能をオンにする(S820)。
指導サポート機能とは、例えば、教習終了までの時間や、車両10が路上教習の走行範囲内を走行しているか、等についての情報を、撮影機器101(101F、101R)のスピーカや表示部から、出力する、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させる機能である。それにより、教官1910はより運転指導等に集中することができる。
5-1-1 Control Example The control unit 303 controls the
The guidance support function is, for example, the time until the end of the training, information about whether the
第5-1-2の制御例
制御部303は、車両10が、サービスを提供するために利用される車両10、例えば自動車教習所で利用される車両10、である状況において、運転している人物が教習生1920であることを特定した場合(S810、S930、S1010)、撮影機器101F、101Rの教習運転サポート機能をオンにする(S820)。
5-1-2 Control Example The control unit 303 controls the control unit 303 in a situation where the
教習運転サポート機能とは、例えば、教習の開始時に教習生1920に対して緊張を和らげるようなメッセージ、例えば「本日の教習を担当する車両001号です、どうぞよろしくお願いいたします」や「今日は天気が良いので気持ちよく運転できそうですね」や「ユピテル、ツイテルッ(付いてる、点いてる)!」や「ユピテル、見守ってるっ!」といった撮影機器101のCM又は撮影機器101の製造会社又は販売会社(事業会社と読み替えてもよい。)のWebで使用されているキャッチコピー等のメッセージや、教習所ごとに設定した運転難易度の高い道路や交通状況に近づいたことを予め通知するメッセージ、例えば「この先、教習コース中最難関ルートです」、等を、撮影機器101(101F、101R)のスピーカや表示部から、出力する、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させる機能である。
それにより、教習生1920はよりリラックスして、より余裕を持って、あるいはより安心して、運転に臨みやすくなる。特に、撮影機器101のCM又は撮影機器101の製造会社又は販売会社のWebで使用されているキャッチコピー等のメッセージを通知すると、さりげなく、教習中に同製造会社又は販売会社の製品を教習生や教官にアピールすることができる。
The training driving support function is, for example, a message that relieves tension to the
As a result,
第5-1-3の制御例
制御部303は、乗員が要観察人物であることを特定した場合(S810、S930、S1010)、撮影機器101F、101Rの人物トレース機能をオンにする(S820)。
5-1-3 Control Example When the control unit 303 identifies that the occupant is a person requiring observation (S810, S930, S1010), it turns on the person tracing function of the photographing
人物トレース機能は、撮影機器101(101F、101R)の常時録画モードでの設定よりも、例えば上記の長時間録画モードでの設定よりも、より高い品質で、要観察人物である個人が車両10を利用している間、撮影を継続する。
それにより、ユーザは、サービスの利用に対して不安を感じている顧客に対するサービスが適切であるかをより正確に検証したり、度々苦情が寄せられる従業員の挙動をより細かく検証したり、することができる。
The person tracing function has a higher quality than the setting in the continuous recording mode of the photographing equipment 101 (101F, 101R), for example, the setting in the above-described long-time recording mode, and the individual who is the person to be observed can be traced to the
As a result, the user can more accurately verify whether the service is appropriate for customers who feel uneasy about using the service, or more precisely verify the behavior of employees who frequently receive complaints. be able to.
第5-1-4の制御例
制御部303は、予約情報421に登録された人物と撮影機器101(101F、101R)で撮影された人物が別人であることを特定した場合(S810、S930、S1010)、車内及び車外の人物や装置の少なくとも一方に人物不一致に関する情報を出力する(S820)。
5-1-4 Control Example When the control unit 303 identifies that the person registered in the
制御部303は、人物不一致に関する情報を、例えば、撮影機器101(101F、101R)の入出力部315、例えばスピーカやモニタから、あるいは撮影機器101(101F、101R)に接続した装置のスピーカやモニタから、音声や画像、動画等で通知したり、外部の装置へ送信したりするとよい。
それにより車内の人物、例えば自動車教習所の教官1910、や、車外のユーザ、例えば自動車教習所の責任者等は、予約情報421に登録された、本来その車両10を利用する予定である人物が、別の人物に代わっている状況に、より迅速に対応することができる。
The control unit 303 receives information on person mismatch from, for example, the input/
As a result, the person inside the vehicle, for example, the
例えば、自動車教習所での利用においては、教習生1920が別の人物に代わっていた場合、教官1910は車内での「予約人物を異なります」といった通知により、教習を続行するかについての可否をより迅速に問い合わせることができる。
For example, in the case of use at a driving school, if the
また別の例では、ユーザは、次回の運転可能時間に達している人物と、これから車両10を運転しようとしている人物が別人である場合、より迅速に対応することができる。
「次回の運転可能時間に達している人物」とは、例えば前回の運転の後、法律や規則によって定められた所定の休憩時間が経過した人物である。
制御部303は、例えば、複数の車両10を利用する観光バス等の運転手等の運転予定情報であって、法律や規則によって定められた所定の休憩時間が反映された運転予定情報に基づき、次回の運転可能時間に達している人物を特定し、且つ、それらの人物の中に、これから車両10を運転しようとしている人物が含まれているかを判定する構成であるとよい。
In another example, the user can respond more quickly when the person who has reached the next available driving time and the person who is about to drive the
A “person who has reached the time allowed for the next drive” is, for example, a person who has passed a predetermined rest period defined by laws and regulations after the previous driving.
The control unit 303 is, for example, driving schedule information of a driver such as a sightseeing bus that uses a plurality of
第5-1-5の制御例
制御部303は、予約情報421又は撮影機器101(101F、101R)の映像データから車両10を運転する人物が、出力制限対象として設定されている人物であることを特定した場合(S810、S930、S1010)、撮影機器101(101F、101R)の出力制限通知モードや車両10の出力制限モードをオンにする(S820)。
5-1-5 control example The control unit 303 determines from the
「出力制限通知モード」とは、例えば、車両10の速度や車内スピーカの音量等が制限値に近づいた場合に通知を行う動作モードである。
そのような構成では、例えば、複数のフォークリフトを複数の運転手で共用する場合に、ユーザが設定する安全な速度範囲を超えて運転する傾向がある運転手に対しては、より細やかに注意を促すことができる一方で、その他の運転手に対しては、そのような注意によって注意が散漫となることを避けることができる。
The "output limit notification mode" is an operation mode in which a notification is issued when, for example, the speed of the
In such a configuration, for example, when multiple forklift trucks are shared by multiple drivers, more attention should be given to drivers who tend to drive beyond the safe speed range set by the user. While being prompt, other drivers can be avoided from being distracted by such reminders.
「出力制限モード」とは、例えば、車両10の速度や車内スピーカの最大音量等を制限する制御モードである。
そのような構成では、例えば、複数のフォークリフトを複数の運転手で共用する場合に、ユーザが設定する安全な速度範囲を超えて運転する傾向がある運転手に対して、速度制限を設けることで、その運転手の運転に関しては平均的により安全な運転速度の管理を行うことができる一方で、その他の運転手は、必要に応じて、一時的に安全な速度範囲を超えて運転することが可能となる。
The "output limit mode" is, for example, a control mode that limits the speed of the
In such a configuration, for example, when a plurality of forklifts are shared by a plurality of drivers, a speed limit can be set for drivers who tend to drive beyond the safe speed range set by the user. , while being able to manage a safer driving speed on average for that driver's driving, other drivers are allowed to temporarily exceed the safe speed range when necessary. It becomes possible.
第5-1-6の制御例
制御部303は、予約情報421又は撮影機器101(101F、101R)の映像データから車両10を運転する人物が、運転挙動監視対象として設定されている人物であることを特定した場合(S810、S930、S1010)、撮影機器101(101F、101R)や車両10の運転挙動監視モードをオンする(S820)。
Control Example 5-1-6 The control unit 303 determines that the person driving the
「運転挙動監視モード」とは、例えば、脇見運転や運転中のユーザ端末106の操作等を監視するモードである。
そのような構成では、複数の車両10を複数の運転手で共用する場合に、制御部303は、ユーザが設定する人物、例えば、頻繁に脇見運転をする傾向にある人物に対しては、より細やかに行動を監視し、適宜、各種の通知音声や通知画面を出力する、例えば「脇見運転に注意しましょう」、「この先要注意交差点です」等を出力する。
The “driving behavior monitoring mode” is, for example, a mode for monitoring inattentive driving or operation of the
In such a configuration, when a plurality of drivers share a plurality of
それにより、ユーザは、より注意が必要な運転手に対しては、高い頻度で注意を促す一方で、過去に事故歴等のない運転手に対しては不要な注意を出力することによって注意力が削がれることを避けやすくなる。 As a result, the user can increase the attention of the driver who needs more attention by outputting unnecessary attention to the driver who has no history of accidents, etc., while calling the attention of the driver with high frequency. It becomes easier to avoid scraping.
なお、制御部303は、通知音声や通知画面を、例えばバーチャルアシスタント等のキャラクタによる通知や会話として、撮影機器101(101F、101R)や撮影機器101(101F、101R)と協働する機器のディスプレイやスピーカから、出力してもよい。 Note that the control unit 303 converts the notification sound and the notification screen, for example, as a notification or conversation by a character such as a virtual assistant, into the display of the imaging device 101 (101F, 101R) or the device that cooperates with the imaging device 101 (101F, 101R). or output from a speaker.
第5-1-7の制御例
制御部303は、予約情報421、521等から乗員が、時間割等により定められた所定の時間帯にサービスの提供を受ける予定の人物であることを特定した場合(S810、S1010)、撮影機器101(101F、101R)の撮影時間帯を設定する(S820)。
5-1-7 control example When the control unit 303 identifies, from the
例えばユーザが自動車教習所等の経営者等である場合、撮影機器101(101F、101R)の制御部303は、取得した予約情報521等から特定した乗客ごとに、その乗客のサービス利用の時間帯、例えば教習を受ける時間帯に、撮影機器101(101F、101R)の撮影を実行する。
For example, if the user is a manager of a driving school or the like, the control unit 303 of the photographing equipment 101 (101F, 101R) determines, for each passenger specified from the acquired
なお、制御部303は、サービス利用の時間帯としては、例えば教習の開始から終了までの時間帯に加えて、教習の開始の前の時間帯や教習の終了の後の時間帯のうち少なくとも一方を、例えば5~10分程度、含めて設定することができる機能を有しているとよい。 Note that the control unit 303 selects at least one of the time period before the start of the training and the time period after the end of the training, in addition to the time period from the start to the end of the training, for example, as the time period for using the service. , for example, about 5 to 10 minutes.
そのようにすれば、ユーザは、教習前後での車両10付近での映像データも取得することができるので、そのような映像データを、より適切なサービスの提供や、車両10付近で問題が生じた場合の検証に用いることができる。
In this way, the user can also acquire video data around the
第5-1-8の制御例
制御部303は、予約情報421、521等から乗員が、トレーニングに関するサービスの提供を受ける予定の人物であることを特定した場合(S810、S1010)、撮影機器101(101F、101R)の乗員ごとのトレーニング内容に関する情報を出力する(S820)。
5-1-8 Control Example When the control unit 303 identifies, from the
例えばユーザがトレーニングジムやパーソナルジムの経営者等である場合、撮影機器101(101F、101R)の制御部303は、取得した予約情報521等から特定したエアロバイクやランニングマシーンを使用する乗員であるトレーニーごとに、その乗員のトレーニング内容に関する情報を、音声及び画像や動画、の少なくとも一方で出力する。
For example, if the user is a manager of a training gym or a personal gym, the control unit 303 of the photographing device 101 (101F, 101R) is a passenger using an exercise bike or running machine specified from the acquired
なお、制御部303は、トレーニング内容に関する情報として、予め定められたトレーニング情報や、トレーニング中の乗員のパフォーマンス、例えば運動負荷やラップタイムやフォーム等、や、生体情報、例えば心拍数や呼吸数や発汗量等、に基づくトレーニング情報を出力する機能を有するとよりよい。 Note that the control unit 303 uses predetermined training information, performance of the crew during training, such as exercise load, lap time, form, etc., and biological information such as heart rate, respiration rate, and perspiration, as information related to training content. It is better to have a function to output training information based on such as quantity.
そのようにすれば、ユーザは、トレーニーが予約情報421や利用者情報422として入力した所望のトレーニング内容や運動強度に基づくトレーニング情報を、撮影機器101(101F、101R)から出力させることができるので、トレーナーやトレーニーは、トレーニング中にその都度自分でメニュー設定等を行わなくても、各トレーニーにパーソナライズされたトレーニング情報を出力することができる。
それにより、トレーニーは、トレーナーと近距離でコミュニケーションが取れない状況であっても、自身にパーソナライズされたトレーニングを受けることができる。
By doing so, the user can cause the training information based on the desired training content and exercise intensity input by the trainee as the
As a result, trainees can receive personalized training for themselves even in situations where they cannot communicate with the trainer at close range.
第5-1-9の制御例
制御部303は、乗員が変わったことを特定した場合(S810、S1010)、企業や組織に関する情報を出力する(S820)。
なお、企業は組織に関する情報とは、例えば、ユーザの会社に関する情報や撮影機器101(101F、101R)の製造会社又は販売会社に関する情報である。
5-1-9 Control Example When the control unit 303 identifies that the passenger has changed (S810, S1010), it outputs information about the company or organization (S820).
The information about the company or organization is, for example, information about the user's company or information about the manufacturer or sales company of the imaging equipment 101 (101F, 101R).
例えば、撮影機器101(101F、101R)は、運転席に乗っている人が変わったことを検知した場合、アクセサリ電源が操作されていなくても、上述した撮影機器101の製造会社又は販売会社の名称、又はハウスマークを含む起動画面、例えば出願人のハウスマークとしてYロゴとも呼ばれるものを表示したYロゴの起動画面等、を表示する機能を備えるとよい。このようにすると、アクセサリ電源の操作の有無にかかわらず、運転席に乗っている人が変わったときには、新たに運転席に座った人に向けてその製造会社又は販売会社についてのアピールをすることができる。
For example, when the photographing equipment 101 (101F, 101R) detects that the person sitting in the driver's seat has changed, even if the accessory power source is not operated, the above-described photographing
或いは、撮影機器101(101F、101R)は、アクセサリ電源がオフ(ACCOFF)された場合、撮影機器101の製造会社又は販売会社の名称、又はハウスマークを含む終了画面、例えば上記Yロゴの終了画面等、を表示しつつ、アクセサリ電源をオフする機能を備えるとよい。このようにすると、アクセサリ電源がオフされて車両の使用が終了されるときに、その製造会社又は販売会社についてのアピールをすることができる。
Alternatively, when the accessory power is turned off (ACCOFF), the photographing equipment 101 (101F, 101R) displays the name of the manufacturer or sales company of the photographing
或いは、撮影機器101(101F、101R)は、アクセサリ電源のオン時に、「〇〇録画を開始します」又は「〇〇電源ONします」(「〇〇」は事業者の名称を示す。)という具合に、事業者の名称とともに、アクセサリ電源がONされたこと又は録画を開始すること等の撮影機器101(101F、101R)の動作を示すメッセージを、音声又は表示により出力する機能を有するとよい。このようにすると、アクセサリ電源がONされたこと又は録画を開始する事実を通知するとともに、さりげなく製造会社又は販売会社についてアピールすることができる。 Alternatively, when the accessory power supply is turned on, the photographing equipment 101 (101F, 101R) will say, "Start XX recording" or "Turn on XX power" ("XX" indicates the name of the operator.) In this way, it has a function of outputting, by voice or display, a message indicating the operation of the photographing equipment 101 (101F, 101R) such as that the accessory power supply is turned on or that recording is started, together with the name of the operator. good. By doing so, it is possible to notify the fact that the accessory power supply is turned on or the fact that recording is started, and casually appeal to the manufacturer or the sales company.
或いは、撮影機器101(101F、101R)は、「気を付けて運転してください。by〇〇」、「安全運転に心がけてください。by〇〇」(「〇〇」は事業者の名称を示す。)という具合に、事業者の名称とともに、安全運転を促すメッセージを、音声又は表示により出力する機能を有するとよい。このようにすると、安全運転を意識づける通知をするとともに、さりげなく製造会社又は販売会社についてアピールすることができる。 Alternatively, the imaging device 101 (101F, 101R) may say, "Please drive carefully. By 〇〇", "Please drive safely. By 〇〇" It is preferable to have a function of outputting the name of the business operator and a message prompting safe driving by voice or display. By doing so, it is possible to inform the driver of safe driving and casually appeal to the manufacturer or the sales company.
或いは、撮影機器101(101F、101R)は、アクセサリ電源がオフされた場合には、「お疲れ様でした。〇〇」「乗車ありがとうございました。〇〇」「またのご利用お願いします。〇〇」(「〇〇」は事業者の名称を示す。)という具合に、事業者の名称とともに、運転を終了した人を労うメッセージを、音声又は表示により出力する機能を有するとよい。このようにすると、運転を終了した人を労うとともに、さりげなく製造会社又は販売会社についてアピールすることができる。 Alternatively, when the power supply for the accessory is turned off, the imaging device 101 (101F, 101R) may display "Thank you for your hard work. 〇〇", "Thank you for the ride. 〇〇", and "Please use again. 〇〇". (“〇〇” indicates the name of the business operator.) Along with the name of the business operator, it is desirable to have a function to output, by voice or display, a message to thank the person who has finished driving. In this way, it is possible to show respect to the person who has finished driving and casually appeal to the manufacturer or the sales company.
或いは、撮影機器101(101F、101R)は、自動車教習所用モードと、汎用モードとを相互に切り替え可能な構成のもとで、自動車教習所用モードのときにはこれらの撮影機器101の製造会社又は販売会社の名称、又はハウスマークを表示する処理を実行する一方、それ以外のモード、例えば汎用モードのときには、この処理を行わないようにするとよい。このようにすると、教習中の人をターゲットとして、その製造会社又は販売会社についてのアピールをすることができる。 Alternatively, the photographing equipment 101 (101F, 101R) is configured to be switchable between the driving school mode and the general-purpose mode. name or a house mark, while other modes, such as the general-purpose mode, should not perform this process. By doing so, it is possible to target people who are in training and appeal to the manufacturer or the sales company.
第5-2の制御例
制御部303は車両10に乗り込んだ乗員に幼児が含まれることを特定した場合(S810、S930、S1010)、制御部303は、置き去り防止機能や幼児見守り機能を実行する(S820)。なお、乗員に幼児が含まれることの特定は、映像データの映像の画像に基づいて行う他、映像データの映像の音声に基づいて行うこともできる。
それにより、ユーザが幼児の面倒を見ながらの乗降車のため通常の乗降車に比べて余裕のない状態であっても、制御部303は、ユーザによる入力操作を必要とせずに、置き去り防止機能や幼児見守り機能を実行することができる。
5-2 Control Example When the control unit 303 identifies that an infant is included among the occupants who have boarded the vehicle 10 (S810, S930, S1010), the control unit 303 executes an abandoned prevention function and an infant watching function. (S820). It should be noted that the inclusion of infants in the occupants can be specified based on the video image of the video data, and can also be performed based on the audio of the video of the video data.
As a result, the control unit 303 can perform the abandonment prevention function without requiring an input operation by the user, even in a state in which the user gets on and off while taking care of the infant, and thus has less time to spare compared to normal getting on and off. and an infant watching function can be executed.
置き去り防止機能とは、設定した時間長よりも長い時間に渡って幼児が車両10内に一人でいる場合に、制御部303が、車両10のクラクションを鳴らす命令を出力したり、エアコンを起動させ車内温度を調整や直射日光を避けるサンシェードの展開を行って、車両10内の環境を設定した環境に近づけるための命令を出力したり、指定の連絡先へ電話やメール等で置き去りの発生の通知をしたりする機能である。
Abandonment prevention function means that when an infant is left alone in the
幼児見守り機能とは、車内の幼児に、特には顔や目に、日光が当たっていること、車内の幼児に、特には顔や口に、物体が当たっていること、幼児の体勢が不安定であること、例えばチャイルドシートから身体がはみ出ていること、等を判定し、制御部303がそれらの状態が発生していることを判定した場合に、それらに関連する情報を出力する機能である。それによりユーザは、運転中に認識することが困難な幼児にとって不快な状態等に、対応しやすくなる。 The function to watch over infants means that the infants in the car are exposed to sunlight, especially their face and eyes, objects are hitting infants in the car, especially their face and mouth, and the infant's posture is unstable. For example, the child's body protrudes from the child seat. This makes it easier for the user to deal with situations that are uncomfortable for young children, which are difficult for the user to recognize while driving.
なお、本実施形態は、幼児、一般に満一歳から満六歳ぐらいまでの子ども、の他、例えば、乳児、高齢者、要介護者、何らかの障害やハンディキャップを有する個人、更にはペット等にも適用することができる。 In addition to infants, generally children from one to six years old, for example, infants, elderly people, people requiring nursing care, individuals with some kind of disability or handicap, pets, etc. can also be applied.
第5-3の制御例
制御部303は車両10に乗り込んだ乗員が正規のユーザであることを特定した場合(S810、S930、S1010)、制御部303は、撮影機器101(101F、101R)を正規のユーザに割り当てられた通常の動作モードで動作させる(S820)。
5-3 Control Example When the control unit 303 identifies that the occupant who got into the
なお、正規のユーザに割り当てられた通常の動作モードは、撮影機器101(101F、101R)に予め登録された動作モードの他、各種の機能等のオンオフがユーザごとにパーソナライズされた動作モード等であってもよい。 It should be noted that normal operation modes assigned to authorized users include operation modes that are pre-registered in the photographing equipment 101 (101F, 101R), and operation modes in which on/off of various functions are personalized for each user. There may be.
第5-4の制御例
反対に、制御部303は車両10に乗り込んだ乗員が正規のユーザではないことを特定した場合(S810、S930、S1010)、制御部303は、撮影機器101(101F、101R)をサイレントモードで動作させる(S820)。
5-4 Control Example Conversely, when the control unit 303 identifies that the passenger who got into the
サイレントモードとは、外見上、撮影機器101(101F、101R)が起動中であることを確認しにくい動作モードである。例えば、録画中のランプを点灯させずに録画を実行する。それにより、制御部303は、車両10が車上荒らしや窃盗の被害にあっている状況で、犯人に覚られずに撮影を実行することができる。
それにより、撮影機器101(101F、101R)による撮影の実行に気づいた犯人が、撮影機器101(101F、101R)を破壊したり、撮影機器101(101F、101R)から記憶媒体を抜き取ったりする事態を回避しやすくなる。
なお、この制御例では、制御部303は、正規のユーザ以外の人物をまとめて「非正規ユーザ」という個人として特定する構成であってもよい。
The silent mode is an operation mode in which it is difficult to visually confirm that the imaging device 101 (101F, 101R) is in operation. For example, recording is performed without turning on the recording lamp. As a result, the control unit 303 can perform photographing without being noticed by the culprit when the
As a result, the culprit who notices that the photographing equipment 101 (101F, 101R) has taken a picture destroys the photographing equipment 101 (101F, 101R) or removes the storage medium from the photographing equipment 101 (101F, 101R). easier to avoid.
Note that, in this control example, the control unit 303 may be configured to collectively identify persons other than authorized users as individuals called “unauthorized users”.
第5-5の制御例
制御部303は、車両10に乗り込んだ特定の人物を特定した場合(S810、S930、S1010)、制御部303は、特定した人物の状況や状態や好み等に基づく情報を出力する(S820)。
制御部303は、特定された人の状態又は動作に基づいて、撮影機器101(101F、101R)から出力される通知音声や通知画面の少なくとも1つを変更する。制御部303は特に、車両10の内外の環境や状況が同等のあるいは類似であっても、人物ごとに、撮影機器101(101F、101R)から出力するあるいは撮影機器101(101F、101R)に接続した装置から出力させる通知音声や通知画面を、変更する構成であるとよい。
5-5 Control Example When the control unit 303 identifies a specific person who got into the vehicle 10 (S810, S930, S1010), the control unit 303 generates information based on the identified person's situation, state, preference, etc. is output (S820).
The control unit 303 changes at least one of the notification sound and the notification screen output from the photographing equipment 101 (101F, 101R) based on the specified state or action of the person. In particular, the control unit 303 outputs from or connects to the imaging equipment 101 (101F, 101R) for each person even if the environments and situations inside and outside the
更に、制御部303は、変更可能な通知音声や通知画面をユーザに提示し、それらに対するユーザの選択を受け付ける構成であってもよいが、ユーザが独自に作成した通知音声や通知画面を追加することができる構成であるとよりよい。
それによりユーザは、撮影機器101(101F、101R)等にプリセットされた通知音声や通知画面から所望のものを選択してカスタマイズすることや、ユーザの嗜好をより反映させた独自の通知音声や通知画面を設定することができる。
Furthermore, the control unit 303 may present changeable notification sounds and notification screens to the user, and may be configured to receive user selections for them. It is better if the configuration is such that
As a result, the user can select and customize desired notification sounds and notification screens preset in the photographing equipment 101 (101F, 101R), etc., or create unique notification sounds and notifications that better reflect the user's preferences. You can set the screen.
第5-5-1の制御例
制御部303は、車両10の利用に関する予約や予定が判明している個人を特定した場合に(S810、S930、S1010)、判明している予約や予定に関する情報を出力する(S820)。
Control Example 5-5-1 When the control unit 303 identifies an individual whose reservation or schedule regarding the use of the
1つの実施形態では、車両10が自動車教習所での教習に使用され、制御部303が、今回の車両10を利用する間の教習内容が判明している個人を特定した場合、制御部303は、例えば、今回の教習内容の概要や注意点等について、運転開始前に通知を行うとよく、それにより、教習生1920はより円滑に教習に臨みやすくなる。
In one embodiment, when the
制御部303は更に、教習生1920の教習の段階に応じて設定されている注意点や、前回の教習時の内容を反映させたアドバイス等を出力するとよりよい。
制御部303は、例えば「今日はn回目の教習ですね」、「乗車後はすぐにシートベルトをする習慣を付けましょう」、「今日は坂道発進の教習です」、「今日は路上講習です」、「〇〇さんがんばってください」(〇〇は教習生1920の名前)等の通知やアドバイスや応援等を出力するとよい。
更に、制御部303は、ユーザからの各通知やアドバイスの入力を受け付ける機能を有しているとよい。
It is preferable that the control unit 303 further outputs caution points set according to the training stage of the
For example, the control unit 303 provides the following information: "Today is the nth lesson, isn't it?"; , "Please do your best, Mr. 〇〇" (〇〇 is the name of the trainee 1920), etc., advice, support, etc.
Furthermore, the control unit 303 preferably has a function of receiving input of notifications and advice from the user.
また別の実施形態では、車両10が業務に使用され、制御部303が、今回の車両10を利用する間の業務内容、例えば営業先とのアポイントメントの日時や場所等の内容、が判明している個人を特定した場合、制御部303は、例えば、今回の教習内容の概要や注意点等について、運転開始前に通知を行うとよく、それにより、教習生1920はより円滑に教習に臨みやすくすくなる。
In another embodiment, the
更に別の実施形態では、車両10が業務に使用され、制御部303が、業務上の成績が判明している従業員を特定した場合、その従業員の成績や実績に応じた、感謝やアドバイス等を出力するとよく、それにより、ユーザである業務の責任者は、個々の従業員を個別に支援しやすくなる。
それにより、ユーザは、車両10の利用者の個々人に対して、より細やかなフォロー体制を提供することができるので、車両10の利用者のサービスや従業員の業務に対する満足度を向上させやすくなる。
In still another embodiment, when the
As a result, the user can provide a more detailed follow-up system for each individual user of the
第5-5-2の制御例
制御部303は、撮影機器101(101F、101R)の起動時に予約情報421や従業員情報423や利用者情報422等に基づき、乗員を特定した場合に(S810、S930、S1010)、特定した乗員に応じて、撮影機器101(101F、101R)の起動画面や起動音声を変更する(S820)。
変更する起動画面や起動音声は撮影機器101(101F、101R)にプリセットされているものをユーザが選択する構成であるとよいが、撮影機器101(101F、101R)のユーザによって書き換え可能に構成された記憶領域への入力を受け付ける構成であるとよりよい。
5-5-2 Control Example When the control unit 303 identifies a passenger based on the
The startup screen and startup sound to be changed may be preset in the imaging devices 101 (101F, 101R) and may be selected by the user. It is preferable to have a configuration that accepts input to the storage area.
制御部303は、ユーザによって書き換え可能に構成された記憶領域に加えて、ユーザによって書き換え不能に構成された記憶領域を有しており、撮影機器101(101F、101R)の製造会社や販売会社がプリセットした起動画面や起動音声は、そのユーザによって書き換え不能に構成された記憶領域に記憶している構成であるとよい。
なお、書き換え不能に構成された記憶領域とは、撮影機器101(101F、101R)の製造会社や販売会社が、ユーザによる書き換えを想定や保証や推奨していない、あるいは禁止している、記憶領域を意味する。
The control unit 303 has a storage area configured to be unrewritable by the user in addition to a storage area configured to be rewritable by the user. It is preferable that the preset startup screen and startup sound are stored in a storage area configured to be unrewritable by the user.
A non-rewritable storage area is a storage area in which the manufacturer or sales company of the photographing equipment 101 (101F, 101R) does not assume, guarantee, recommend, or prohibit rewriting by the user. means
制御部303は、変更用の起動画面や起動音声を、撮影機器101(101F、101R)の入出力部315からの入力、例えばマイクからの入力により、取得する構成であるとよいが、図15、図16の操作画面1500、1600との関連で後述するように、制御部303は、例えば施設端末105から、ネットワーク103を介して、取得する構成であるとよりよい。
なお、操作画面1500、1600は、映像データの管理画面の一例である。
The control unit 303 may be configured to acquire the start-up screen for change and the start-up sound from the input from the input/
Note that the operation screens 1500 and 1600 are examples of video data management screens.
制御部303は、入出力部315として形成された画面に音声フレーズの一覧等を表示し、別の入出力部315として形成された録音ボタンを設けてそのボタンが押されたら、一覧から選択された音声フレーズに対応する音声の録音を行う機能を有するとよい。制御部303は、録音した音声を確認のための再生をする機能を有するとよい。
なお、音声フレーズについては、ビューア(例えば、PCビューア)で、SDカード306に記録して、撮影機器101(101F、101R)に取り込めるようにしてもよい。例えば施設端末105を用いて操作可能なビューアについては、図15から図19等を用いて後述する。
制御部303は音声再生中に録音ボタンが押されたら、音声再生を停止して録音状態になり、その再生中だった音声を録音したもの差し替える機能を備えるとよい。
The control unit 303 displays a list of voice phrases and the like on the screen formed as the input/
Note that the voice phrase may be recorded on the
The control unit 303 preferably has a function of stopping the voice playback and entering a recording state when the record button is pressed during voice playback, and replacing the voice being played back with the recorded one.
起動画面や起動音声は、その他の画面や音声と比べて、乗客の記憶や印象に残り安いものであるので、ユーザは、起動画面や起動音声を、より乗員にとって魅力的であると考えられるものに変更することで、サービスや業務に対する乗員の印象をより向上させることができる。起動画面としては、例えば、撮影機器101のユーザが形成する会社やその系列の会社の名称、又はハウスマークや、撮影機器101の製造会社又は販売会社の名称、又はハウスマーク(例えば、出願人のハウスマークとしてYロゴとも呼ばれるもの。)を表示する画面とすると、宣伝広告効果を高める上で望ましい。起動音声としては、撮影機器101の製造会社又は販売会社の名称を称呼する音声とすると、同様に宣伝広告効果を高める上で望ましい。また例えば、上述したような撮影機器101のCM又は撮影機器101の製造会社又は販売会社のWebで使用されているキャッチコピー等の音声メッセージとすることも、宣伝広告効果を高める上で望ましい。例えば、教習所の卒業生は、車両購入する可能性があるから、このような宣伝広告効果により、上記製造会社又は販売会社の製品、車載機器(例えば、ドライブレコーダ)を購入してもらえる可能性が高まる効果が期待できる。
Since the startup screen and startup sound are less likely to remain in passengers' memories and impressions than other screens and sounds, the user considers the startup screen and startup sound to be more attractive to passengers. By changing to , it is possible to further improve the passenger's impression of the service and work. The startup screen may include, for example, the name or house mark of a company formed by the user of the
ユーザがサービスの提供や業務に車両10を利用している場合、制御部303は更に、撮影機器101(101F、101R)の起動時のロゴを、撮影機器101(101F、101R)の製造会社や販売会社のものから、ユーザの会社や組織のロゴへ変更する機能を有しているとよい。
なお、制御部303は変更用の起動画面や起動音声に加えて、その他の通知画面や通知音声等の情報も、同様に変更することができる機能を有しているとよりよい。
When the user uses the
It is preferable that the control unit 303 has a function capable of similarly changing information such as other notification screens and notification sounds in addition to the change start screen and start sound.
制御部303は、更に、起動画面や起動音声を、曜日や月日に関して、曜日ごと、月ごと、日ごとに変更することができる機能を有しているとよりよい。なお、曜日や月日とは、日時情報の一例である。
そのような構成では、ユーザは、業務で使用する車両10に、理念に沿ったメッセージ、例えば、「目を見て挨拶しましょう」、「お客様の気持ちになって行動しましょう」等を細かく設定することができる。
It is preferable that the control unit 303 further has a function of changing the start-up screen and the start-up sound for each day of the week, month, and day. Note that the day of the week and month and day are examples of date and time information.
In such a configuration, the user sets a detailed message for the
第5-5-3の制御例
制御部303は、撮影機器101(101F、101R)の起動時に、起動画面や起動音声を出力するよりも以前に、撮影データから乗員の属性、例えば年齢や性別や外見的特徴、を特定した場合(S810、S930、S1010)、特定した属性に応じた起動画面や起動音声を変更する(S820)。
変更する起動画面や起動音声については、上記の第5-5-2の制御例と同様に設定することが可能であり、説明は省略する。
5-5-3 Control Example When the photographing equipment 101 (101F, 101R) is activated, the control unit 303, prior to outputting the activation screen and the activation sound, determines the attributes of the occupant, such as age and sex, from the photographing data. and appearance features are identified (S810, S930, S1010), the startup screen and startup sound are changed according to the identified attributes (S820).
The startup screen and startup sound to be changed can be set in the same manner as in the control example of 5-5-2 above, so the description is omitted.
第5-5-2の制御例、第5-5-3の制御例のいずれの制御例においても、ユーザは、乗員の特徴に応じて、起動画面や起動音声を細かく変更することが可能であり、サービスの顧客や従業員に対して、個々人により狙いを定めたメッセージを、非常に印象に残りやすいタイミングで出力することができる。
制御部303は、撮影機器101(101F、101R)の製造会社や販売会社によってプリセットされた特徴を各乗員に対して割り当てることで、乗員の特徴を特定してもよい。
In both the control example 5-5-2 and the control example 5-5-3, the user can finely change the startup screen and the startup sound according to the characteristics of the occupant. Yes, it is possible to output a more targeted message to service customers and employees at a timing that is very likely to leave an impression.
The control unit 303 may specify the characteristics of the passengers by allocating the characteristics preset by the manufacturer or sales company of the photographing equipment 101 (101F, 101R) to each passenger.
制御部303は、それに追加的に又は代替的に、ユーザによって入力された特徴に基づいて、乗員の特徴を追加してもよい。更に、制御部303は、撮影機器101(101F、101R)の製造会社や販売会社が提供する、各種の特徴や複数の特徴からなる特徴セットを、更新や購入により追加できる構成であるとよりよい。 Additionally or alternatively, the controller 303 may add passenger characteristics based on characteristics entered by the user. Furthermore, it is preferable that the control unit 303 be configured to be able to add various features or a feature set consisting of a plurality of features provided by the manufacturer or sales company of the imaging device 101 (101F, 101R) by updating or purchasing. .
撮影機器101(101F、101R)の製造会社や販売会社は、複数のユーザから収集した映像データを、機械学習等により分析して獲得した特徴を提供すると、ユーザは、データ量や演算負荷の関係でユーザ自身では獲得が困難である、特徴を効率よく利用することができる。 When the manufacturer or sales company of the imaging equipment 101 (101F, 101R) provides characteristics obtained by analyzing video data collected from a plurality of users by machine learning or the like, the user can understand the relationship between data volume and computational load. It is possible to efficiently use features that are difficult for users to obtain by themselves.
第5-5-4の制御例
制御部303は、前回までの車両10の利用時の外見的特徴と、今回の車両10の利用時の外見的特徴が異なることを特定した場合(S810、S930、S1010)、外見的特徴の差異に関する情報を出力する(S820)。
5-5-4 control example When the control unit 303 determines that the external features of the
外見的特徴は、ユーザの外見から特定できる特徴とするとよく、例えばメガネの装着の有無とするとよい。制御部303は、例えば、前回までの車両10の利用時にメガネをかけていた特定の個人が、今回の車両10の利用時にメガネをかけていない場合に、例えば「メガネは不要ですか?」、「今日はコンタクトを付けているのですか?」等のメッセージを出力する。
それにより、車両10の利用者は、自身が見守られているような安心感や、仮に実際にメガネを掛け忘れていた場合には、メガネをかけることを想起させることができる。
制御部303は、前回までの車両10の利用時の特徴に関する情報を、例えば施設端末105から利用者情報522として取得するとよい(S1010)。
外見的特徴としては、その他にも、ユーザの髪の長さや髪型、化粧の有無や化粧の方法、表情、服装等のユーザの外見から特定できる特徴としてもよい。メッセージとしては、外見的特徴の変化に関する情報や、外見的特徴を指摘する情報(例えば、外見的特徴を褒める情報)を含むとよい。
The appearance feature may be a feature that can be identified from the appearance of the user, such as whether or not glasses are worn. For example, when a specific individual who wore glasses when using the
As a result, the user of the
The control unit 303 may acquire information about the characteristics of the
The appearance features may also be features that can be identified from the appearance of the user, such as the length of the user's hair, the hairstyle, the presence or absence of makeup, the method of makeup, facial expression, and clothing. The message may include information about changes in appearance characteristics and information pointing out appearance characteristics (for example, information praising appearance characteristics).
第5-5-5の制御例
制御部303は、好みが判明している個人を特定した場合(S810、S930、S1010)、乗員の好みに適合するコンテンツ映像や広告映像を出力する(S820)。
なお、制御部303は、年齢、性別、体型、職種、ファッション、目的地、車内での会話内容等に基づく各種の統計的グループに分類される人物であって、分類されたグループごとに趣味や嗜好が判明しているグループに属している人物を、「好みが判明している人物」として特定すると、より柔軟に通知情報の内容を選択、決定することができるのでよい。
Control Example 5-5-5 When the control unit 303 identifies an individual whose taste is known (S810, S930, S1010), it outputs a content video or advertisement video that matches the passenger's taste (S820). .
It should be noted that the control unit 303 controls persons classified into various statistical groups based on age, sex, body type, occupation, fashion, destination, content of conversation in the vehicle, etc., and hobbies and If a person who belongs to a group whose preference is known is specified as a ``person whose preference is known'', the content of notification information can be selected and determined more flexibly.
更に、制御部303は、映像データから乗員が退屈さに関連する反応、例えば目を細めた又は閉じた状態、あくびの頻度、こくりこくりとした頭の動き等、を示していることを特定した場合に、例えば統計的に判明している乗員の好みに適合する情報を出力するようにすると、乗員のコンテンツ映像や広告映像に対する興味や関心をより引き出しやすいのでよい。 Further, the controller 303 determines from the video data that the occupant is exhibiting boredom-related reactions, such as squinting or closed eyes, frequency of yawning, jerky head movements, etc. In such a case, for example, outputting information that matches the statistically known tastes of the passengers can easily draw out the passengers' interest in the content video and the advertisement video.
第5-5-6の制御例
制御部303は、性格が判明している個人を特定した場合(S810、S930、S1010)、通知の表現を乗員の性格に適合するものへ変更する(S820)。
制御部303は、個人の性格についての情報を、例えば施設端末105から利用者情報522として取得するとよい(S1010)。
5-5-6 Control Example When the control unit 303 identifies an individual whose personality is known (S810, S930, S1010), the expression of the notification is changed to match the passenger's personality (S820). .
The control unit 303 preferably acquires information about the personality of the individual from the
第5-5-6-1の制御例
制御部303は、落ち着いた音楽をかける傾向にある特定の個人が車両10に乗り込んだことを特定した場合には(S810、S930、S1010)、制御部303が出力する各種の通知やメッセージを、落ち着いた印象の通知セットやメッセージセットの中から選択して出力する(S820)。
Control example of 5-5-6-1 When the control unit 303 identifies that a specific individual who tends to play calm music has boarded the vehicle 10 (S810, S930, S1010), the control unit Various notifications and messages output by 303 are selected from a notification set or message set with a calm impression and output (S820).
落ち着いた印象の通知セットやメッセージセットとは、例えば、撮影機器101(101F、101R)にプリセットされた音声ファイルのうち、落ち着いた印象を与える評価の高い声優等によって録音された、あるいは、ユーザにより落ち着いた性格であると認識されているキャラクタの声で録音された音声ファイルのセットである。 The calm impression notification set or message set is, for example, audio files preset in the imaging device 101 (101F, 101R) recorded by a highly rated voice actor or the like giving a calm impression, or by the user. A set of audio files recorded in the voice of a character recognized as having a calm personality.
第5-5-6-2の制御例
制御部303は、アップテンポの音楽をかける傾向にある特定の個人が車両10に乗り込んだことを特定した場合には(S810、S930、S1010)、制御部303が出力する各種の通知やメッセージを、活発で活動的な印象の通知セットやメッセージセットの中から選択して出力する(S820)。
活発で活動的な印象の通知セットやメッセージセットとは、例えば、撮影機器101(101F、101R)にプリセットされた音声ファイルのうち、活発で活動的な印象を与える評価の高い声優等によって録音された、あるいは、ユーザにより活発で活動的な性格であると認識されているキャラクタの声で録音された音声ファイルのセットである。
5-5-6-2 control example When the control unit 303 identifies that a specific individual who tends to play up-tempo music has boarded the vehicle 10 (S810, S930, S1010), control Various notifications and messages to be output by the unit 303 are selected from a notification set and a message set with a lively and active impression and output (S820).
The lively and active impression notification set and message set are, for example, audio files preset in the imaging device 101 (101F, 101R) recorded by highly rated voice actors who give a lively and active impression. Alternatively, a set of audio files recorded in the voice of a character perceived by the user to have a lively and active personality.
同一の車両10に搭載された同一の撮影機器101(101F、101R)の制御部303は、第5-5-6-1の制御例や第5-5-6-2の制御例で説明した制御を、その車両10を使用する人物ごとにその都度実行するとよい。
The control unit 303 of the same imaging device 101 (101F, 101R) mounted on the
ユーザは、第5-5-6-1の制御例や第5-5-6-2の制御例で説明した通知セットやメッセージセットを、撮影機器101(101F、101R)の製造会社や販売会社から追加で購入することができるとよい。
更に制御部303は、ユーザや乗員に対して、ユーザや乗員の好みに合いそうな通知セットやメッセージセットを提案する機能を有しているとよりより。
The user can use the notification set and message set described in the control examples of 5-5-6-1 and 5-5-6-2 to the manufacturing companies and sales companies of the imaging equipment 101 (101F, 101R). Additional purchases may be made from
Further, the control unit 303 preferably has a function of proposing a notification set or a message set that is likely to suit the preferences of the user or the passenger to the user or the passenger.
第5-5-7の制御例
制御部303は、乗員が映像データの複製を予約した人物であることを特定した場合には(S810、S930、S1010)、制御部303は、映像データの複製を予約した人物以外の人物にプライバシー保護処理を施した映像データを作成する(S820)。
この制御例については、図19、図20を用いて後述するが、そのようにすれば、ユーザは、同乗者のプライバシーに配慮した映像データを、映像データの複製を予約した人物に提供することができる。
5-5-7 Control Example When the control unit 303 identifies that the passenger is the person who reserved the copy of the video data (S810, S930, S1010), the control unit 303 copies the video data. Video data is created by subjecting a person other than the person who reserved the video data to privacy protection processing (S820).
An example of this control will be described later with reference to FIGS. 19 and 20. By doing so, the user can provide video data in consideration of the privacy of fellow passengers to the person who reserved the duplication of the video data. can be done.
第6の制御例
入力例:車両10に人が乗り込んだことを特定できる映像又は情報。
出力例:撮影機器101(101F、101R)の撮影や記録を開始する制御。
Sixth control example Input example: video or information that can specify that a person has boarded the
Output example: Control for starting shooting and recording of the shooting devices 101 (101F, 101R).
制御部303は、撮影機器101(101F、101R)による映像や、車両10に搭載された人感センサからの信号や、ユーザ端末106からの信号等、に基づき、車両10に人が乗り込んだことを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)による撮影や記録を開始する制御を行う(S820)。
制御部303は、車両10のメイン電源、エンジン、モータ等のオンオフ状態によらず、上記の制御を実行する構成であるとよりよい。
The control unit 303 detects that a person has boarded the
Control unit 303 preferably has a configuration that executes the above-described control regardless of whether the main power supply, engine, motor, etc. of
それにより、ユーザは、例えばエンジンを切った状態で駐車中の車両10をユーザが意図しない目的で使用されている様子やエンジンを切った状態で生じた不測の自体の様子等の、映像データを、より確実に取得することができる。
As a result, the user can, for example, view video data of the
第7の制御例
入力例:車両10の操作要素を操作する人を特定できる映像。
出力例:操作を行った人に応じたイベントの設定。
Seventh control example Input example: An image that can identify a person who operates an operation element of the
Example output: Event settings according to the person who performed the operation.
制御部303は、撮影機器101(101F、101R)による映像に基づいて、車両10の操作要素を操作した人物を特定した場合(S810、S930)、制御部303は、別の人物による同一の操作要素の操作を異なるイベントとして設定する制御を行う(S820)。
それにより、ユーザは、操作要素を操作した人物をより明確に区別して実行されたイベントの適切さを判断することができる。
When the control unit 303 identifies the person who has operated the operation element of the
Thereby, the user can judge the appropriateness of the executed event by more clearly distinguishing the person who operated the operation element.
第7-1の制御例
制御部303は、ブレーキペダルが複数備えられた車両10、例えば自動車教習用の車両10、において、ブレーキ操作(動作)を行った人が、教官1910であるか、又は、教習生1920であるかを、撮影機器101(101F、101R)による映像内での教官1910及び教習生1920の少なくとも一方の足の動きに基づいて特定した場合には(S810、S930、S1010)、ブレーキ操作を行った人物が教官1910であるか、教習生1920であるかに応じて、ブレーキ操作を別のイベントとして設定する(S820)。
7-1 Control Example The control unit 303 determines whether the person who performed the brake operation (operation) in the
それにより、制御部303は、車両10の走行環境が同様であっても、例えば、他車両との車間距離や相対速度、それらの変化等が同様であっても、教官1910がブレーキ操作を行った場合と、教習生1920がブレーキ操作を行った場合とで、映像データに対して異なるイベント情報を割り当てる構成であるとよい。
As a result, the control unit 303 allows the
例えば、制御部303は、他車両との車間距離や相対速度が適切な状態であり、ブレーキを操作する必要がない走行状態で、教習生1920が急ブレーキを行った場合は、不慣れな教習生1920によるブレーキ操作として、問題イベントとしての記録は行わず、同様の状態で、教官1910が急ブレーキを行った場合は、不適切な指導が行われた可能性があるとして、問題イベントとしての記録を行うとよい。
For example, when the
上記の処理は、上述の処理装置108を用いた映像データの転送時、又はその後に、処理装置108は処理装置108に接続された映像データの転送先、例えば施設端末105において実行されてもよい。
The processing described above may be executed at the transfer destination of the video data connected to the
第8の制御例
入力例:乗員がその日初めて車両10に乗車した人であることを特定できる映像。
出力例:通知音声や通知画面の変更。
Eighth control example Input example: An image that can identify that the occupant is the person who got into the
Output example: Change notification sound or notification screen.
制御部303は、車両10に乗り込んだ人にとってその日初めての乗車であることを特定した場合(S810、S930、S1010)、制御部303は、日ごとの初乗車時通知用の音声を出力させる(S820)。 When the control unit 303 identifies that it is the first ride of the day for the person who got into the vehicle 10 (S810, S930, S1010), the control unit 303 outputs a daily first-ride notification sound ( S820).
日ごとの初乗車時通知用の音声は、撮影機器101(101F、101R)のユーザによって書き換え不能に構成された記憶領域に保存された音声情報と、ユーザによって書き換え可能に構成された記憶領域に保存された音声情報との間で選択できる構成であるとよい。 The voice for notifying the first boarding time for each day is stored in the voice information stored in the storage area configured so as not to be rewritable by the user of the photographing device 101 (101F, 101R) and in the storage area configured so as to be rewritable by the user. It is preferable to have a configuration in which selection can be made between stored audio information.
制御部303は、他車両のその日の利用状況を共有する構成であるとよりよい。例えば、制御部303は、複数の車両10を所有する自動車教習所やタクシー事業所内で、各車両10の撮影機器101(101F、101R)が無線LAN等で情報接続している状態で、既にその日に車両10を利用した人物についての情報を共有する構成であるとよい。
それにより、ユーザは、1人の乗員に対して、1日に1度通知する予定の通知、例えば始業前の安全唱和等を、複数回通知する状況が生じることを避けやすくなる。
It is preferable that the control unit 303 is configured to share the usage status of other vehicles on that day. For example, in a driving school or a taxi office that owns a plurality of
This makes it easier for the user to avoid a situation in which a notification that is scheduled to be sent once a day, such as a safety chant before starting work, is sent multiple times to one crew member.
第9の制御例
入力例:乗員の服装を特定できる映像。
出力例:服装に応じた撮影機器101(101F、101R)の動作モードの変更。
Ninth control example Input example: A video that can identify the clothes of the crew.
Output example: Change of the operation mode of the imaging device 101 (101F, 101R) according to clothes.
制御部303が、運転手が仕事着であることを特定した場合(S810、S930)、制御部303は、撮影機器101(101F、101R)の撮影を、業務モードで動作させる(S820)。
例えば、ユーザが個人タクシーの運転手であれば、制御部303は、業務での使用と自家使用とで、撮影機器101(101F、101R)の動作モードを分けることができる。
When the control unit 303 identifies that the driver is wearing work clothes (S810, S930), the control unit 303 causes the photographing equipment 101 (101F, 101R) to operate in business mode (S820).
For example, if the user is a private taxi driver, the control unit 303 can divide the operation mode of the imaging device 101 (101F, 101R) between business use and private use.
制御部303は、業務モードでの撮影機器101(101F、101R)の動作時間を記録してもよい。制御部303は、例えば撮影機器101(101F、101R)の販売会社が運営する外部管理サーバ107へ、月間の業務モードでの合計の動作時間についての情報を送信する。販売会社は、受け取った月間の業務モードでの合計の動作時間やユーザ情報725や設定情報720等に基づいて、車両10のユーザに対して、業務モードの使用料金を請求するとよい。
そのようにすると、ユーザは、業務モードの使用権利を買い切ることに比べて、安価に業務モードの使用を試したり、開始したりすることができる。
The control unit 303 may record the operating time of the imaging equipment 101 (101F, 101R) in the business mode. The control unit 303 transmits information about the total operating time in the business mode for a month to, for example, the
By doing so, the user can try and start using the business mode at a lower cost than purchasing the right to use the business mode.
第10の制御例
入力例:映像データの画角に占める乗員の割合を特定できる映像。
出力例:撮影機器101(101F、101R)ごとの撮影や記録の実行や停止。
Tenth control example Input example: A video that can specify the ratio of the occupants to the angle of view of the video data.
Output example: Execution and stop of shooting and recording for each of the shooting devices 101 (101F, 101R).
制御部303は、それぞれの撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)により撮影される画角内に占める乗員の割合が設定値よりも大きいことを特定した場合(S810、S930)、撮影される画角内に占める乗員の割合が設定値より大きい映像を撮影している撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)の映像データの記録や録画を停止する(S820)。 When the control unit 303 specifies that the ratio of the occupants within the angle of view photographed by each of the photographing devices 101 (101F, 101R) and the vehicle interior photographing cameras 102 (102F, 102R) is larger than the set value. (S810, S930), the images of the photographing devices 101 (101F, 101R) and the vehicle interior photographing cameras 102 (102F, 102R) that are photographing images in which the ratio of the occupants occupying the angle of view to be photographed is greater than the set value. Data recording or video recording is stopped (S820).
なお、画角内に占める乗員の割合が0%である状態は、例えば、車内に人がいないような状態であり、画角内に占める乗員の割合が100%である状態は、例えば、人物が撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)に近づきすぎて、映像内に人物しか写っていないような状態である。 A state in which the ratio of occupants in the angle of view is 0% is, for example, a state in which there are no people in the vehicle, and a state in which the ratio of occupants in the angle of view is 100%, for example, is too close to the photographing equipment 101 (101F, 101R) and the vehicle interior photographing camera 102 (102F, 102R), and only the person appears in the image.
なお、別の実施形態では、撮影や録画の停止に代えて、撮影や録画を低画質モードへ変更することもできる。
それによりユーザは、特に撮影機器101(101F、101R)の記憶媒体の記憶容量を有効に活用することができる。
更に、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)のレンズに人や物が接触しており、映像データが真っ暗であるような場合にも、制御部303は同様の制御を行うとよい。
Note that in another embodiment, instead of stopping the shooting or recording, the shooting or recording can be changed to the low image quality mode.
Thereby, the user can effectively utilize the storage capacity of the storage medium of the imaging device 101 (101F, 101R).
Furthermore, even when a person or object is in contact with the lenses of the photographing equipment 101 (101F, 101R) or the vehicle interior photographing camera 102 (102F, 102R) and the image data is completely dark, the control unit 303 Similar control should be performed.
第11の制御例
入力例:乗員の生体反応を特定できる映像や生体情報。
出力例:乗員の感情や体調に応じた制御モードや機能の起動。
Eleventh control example Input example: video and biometric information that can specify the biometric reaction of the occupant.
Output example: Activation of control modes and functions according to the emotions and physical conditions of passengers.
制御部303は、乗員の撮影された映像データ内での表情や動き等や、ユーザ端末106、例えばウェアラブル端末、により検知された生体情報、例えば心拍、生体電位、体温等に関する情報等、から乗員がリラックス状態にあること、あるいは、緊張状態にあること、を特定した場合(S810、S930)、特定した運転手の状態に応じて、各種の通知音声や通知画面、等を出力する(S820)。
例えば、制御部303は、運転手がリラックス状態にあることを特定した場合(S930)、アップテンポの音楽を再生することで、運転手の気分をより向上させ、適度な覚醒状態へ導き、例えば眠気に繋がるようなリラックスしすぎた状態にならないようにすることができる。
The control unit 303 detects the occupant from facial expressions, movements, etc. in the captured image data of the occupant, and biological information detected by the
For example, when the control unit 303 identifies that the driver is in a relaxed state (S930), by playing up-tempo music, the driver's mood is further improved, leading to an appropriate awakening state, for example You can avoid being overly relaxed, which can lead to drowsiness.
また別の実施形態では、制御部303は、運転手が緊張状態にあることを特定した場合(S930)、リラクゼーション音楽を再生したり、バーチャルアシスタント等のキャラクタによる会話を開始したりすることで、運転手の気分を落ち着け、緊張状態を緩和させる構成とすることができる。
それによりユーザは、例えば車両10内の人物ごとに、その人物の緊張状態やリラックス状態等に応じて、より好印象を与えることが期待できるあるいはその人物をよりリラックスさせることが期待できる通知を出力することができる。
In another embodiment, when the control unit 303 identifies that the driver is in a tense state (S930), by playing relaxation music or starting a conversation with a character such as a virtual assistant, It can be configured to calm the driver and reduce the tension.
As a result, the user outputs a notification that can be expected to give a better impression or to make the person more relaxed according to the person's state of tension or relaxation, for example, for each person in the
第12の制御例
入力例:乗員による車両10の操作部の操作を特定できる映像。
出力例:操作部の音声入力モードの起動。
Twelfth control example Input example: An image that can identify the operation of the operation unit of the
Output example: Activation of the voice input mode of the operation panel.
制御部303は、乗員が車両10の操作部、例えば中央コンソール等、を操作したこと、を特定した場合(S810、S930)、コンソール等に割り当てられた各種の機能に対する音声入力の受付を開始する(S820)。
制御部303は、上記の音声入力の開始に伴い、音声入力の受付を開始したことを通知する情報を出力するとよい。
When the control unit 303 identifies that the occupant has operated the operation unit of the
The control unit 303 may output information notifying that acceptance of the voice input has started when the voice input is started.
それにより、乗員、特に運転手は、例えば映像データに撮影された運転中に正面を向いたまま車載機器を操作しようとする動作に基づいて、適切なタイミングで、音声入力による支援を得ることができる。
なお、コンソール等は、音声入力に対応させることができる構成であればよく、車両10にもともと設けられている操作部や、ユーザによって後付された操作部であってもよい。
制御部303は、更に、運転手に応じて、例えば運転手ごとの各機能の頻度に応じて、音声入力を可能にする機能を変更する構成であるとよい。
As a result, the occupants, especially the driver, can receive assistance by voice input at appropriate timing based on the motion of trying to operate the in-vehicle device while facing the front while driving, which is captured in the video data, for example. can.
It should be noted that the console or the like may be configured to respond to voice input, and may be an operation unit originally provided in the
Further, the control unit 303 may be configured to change the function enabling voice input according to the driver, for example, according to the frequency of each function for each driver.
第13の制御例
入力例:所定のイベントが発生したことを特定できる映像。
出力例:イベントに応じた記録や通知の出力。
Thirteenth control example Input example: A video that can specify that a predetermined event has occurred.
Output example: Output of records and notifications according to events.
制御部303は、所定のイベントが発生したことを特定した場合(S810、S930、S1010)、映像データへの発生したイベントに関連する情報の付与や、イベントに関連する情報に関連する通知の出力等を実行する(S820)。
所定のイベントとは、例えば、各種のハラスメント行為やハラスメント類似行為、同乗者間の接近や接触、車内での私物の置き忘れ、歓談、設定されたキーワードを含む発言、急な大声の発声、急な盛り上がり等であり、人ごとに判定の基準を調整できるとよい。
When the control unit 303 identifies that a predetermined event has occurred (S810, S930, S1010), the control unit 303 adds information related to the event that has occurred to the video data, or outputs a notification related to the information related to the event. etc. are executed (S820).
Predetermined events include, for example, various harassment acts and harassment-like acts, approaching or contacting fellow passengers, leaving personal belongings behind in the car, chatting, remarks containing set keywords, sudden loud vocalizations, sudden It is good to be able to adjust the criteria for judgment for each person.
制御部303はそれらのイベントが発生した場合に、それらをイベントとして記録して映像データを録画する。制御部303は更に、映像データへの発生したイベント情報の付与や、映像データと発生したイベント情報の関連付けを行うとよい。 When these events occur, the control unit 303 records them as events and records video data. The control unit 303 may further add event information that has occurred to the video data, and associate the video data with the event information that has occurred.
制御部303は更に、該当する車両10の次回の使用時に、例えば撮影機器101(101F、101R)の起動後に、車内の人物に対して、上記のイベントが発生したことや映像データに発生したイベントが記録されていることに関する通知、例えば「このSDカードには逸脱したデータが入っています」といった音声メッセージや記録されているイベントに応じて画面やインジケータの色を変えた画像メッセージ等、を出力する、あるいは、ネットワーク103を介して、システムの管理者等の端末に、そのようなイベントが発生したことやイベントが記録されていることに関する通知を送信する。
Further, the control unit 303 notifies the person in the vehicle that the above event has occurred or that the event has occurred in the video data when the
制御部303は更に、ユーザによる選択入力に応じて、例えば人物ごとに、特定するイベントや記録するイベントの設定を変更してもよい。それにより柔軟に個々のイベントの映像データを記録し、且つ、その有無を認識することができる。 Further, the control unit 303 may change settings of an event to be specified and an event to be recorded, for example, for each person according to selection input by the user. As a result, it is possible to flexibly record the video data of each event and recognize the presence or absence thereof.
例えばユーザが自動車教習所の運営者や経営者であれば、ハラスメント行為やハラスメント類似行為等の問題行為に関して、度々そのような行為について苦情が寄せられる教官1910に対しては、それらの行為のついてのイベント記録の判定基準を厳しく設定し、より多くの映像データを記録するようにする一方で、そのような行為についての苦情が寄せられたことのない教官1910に対しては、それらの行為のついてのイベント記録の判定基準を緩く設定することであるいはイベント発生を特定した後でも映像記録を低画質のままにすることで、記録容量を有効に利用することができる。
For example, if the user is an operator or a manager of a driving school, the
映像データからハラスメント行為の特定する処理やハラスメント行為が発生したことを記録する処理等は、処理装置108が映像データの転送時に実行してもよいし、映像データを受け取った施設端末105等が実行してもよい。それにより、撮影機器101(101F、101R)の制御部303の演算負荷を低減することができる。
The process of identifying an act of harassment from the video data and the process of recording the occurrence of an act of harassment may be executed by the
第14の制御例
入力例:乗員の会話を特定できる映像。
出力例:映像データの音質の変更。
14th control example Input example: video that can identify the conversation of the crew.
Output example: Changing the sound quality of video data.
制御部303は、車内で会話が発生したことを特定した場合(S810、S930)、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)に付属のマイクや、撮影機器101(101F、101R)に接続した装置に付属のマイクの、音声録音設定の変更や映像データの音声情報の処理等の制御を実行する(S820)。
制御部303は、音声録音設定の変更として、録音音質の向上、録音感度の向上、指向性の切り替え、ゲインの調整等を行う。
When the control unit 303 identifies that a conversation has occurred inside the vehicle (S810, S930), the control unit 303 uses the microphones attached to the photographing devices 101 (101F, 101R) and the vehicle interior photographing cameras 102 (102F, 102R) and the photographing devices. 101 (101F, 101R), the voice recording setting of the microphone attached to the device connected to 101 (101F, 101R) is changed, and control such as processing of voice information of video data is executed (S820).
The control unit 303 changes the voice recording settings by improving the recording sound quality, improving the recording sensitivity, switching the directivity, adjusting the gain, and the like.
制御部303は、映像データの音声情報の処理として、ノイズキャンセリング技術等を用いて、映像データの音声情報からノイズや環境音を除去したり低減したりする。
追加的に又は代替的に、制御部303は、映像データの音声情報の処理として、会話音声の明瞭化を行ってもよい。
制御部303は、車内に搭載された各マイクに対してそれぞれ異なって上記の音声録音設定の変更や映像データの音声情報の処理等を実行する構成であるとよりよい。
The control unit 303 removes or reduces noise and environmental sounds from the audio information of the video data using noise canceling technology or the like as processing of the audio information of the video data.
Additionally or alternatively, the control unit 303 may perform speech clarification as processing the audio information of the video data.
It is preferable that the control unit 303 is configured to change the voice recording settings described above and process the voice information of the video data differently for each microphone installed in the vehicle.
第15の制御例
入力例:乗員の会話を特定できる映像。
出力例:会話に応じた再生優先度の設定。
Fifteenth control example Input example: video that can identify the conversation of the crew.
Output example: Playback priority setting according to conversation.
制御部303は、車内での会話、特には楽しそうに盛り上がっている会話、が発生したことを特定した場合(S810、S930)、複数の撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)の個々の映像データに対して、再生優先度を設定する(S820)。
制御部303は、例えば会話をしている人の姿が最も良好に録画されている映像データの映像再生優先度を高く設定し、また、会話をしている人の声が最も良好に録音されている映像データの音声再生優先度を高く設定する。
When the control unit 303 identifies that a conversation in the vehicle, particularly a conversation that seems to be lively, has occurred (S810, S930), the plurality of image capturing devices 101 (101F, 101R) and the vehicle interior image capturing camera 102 (102F, 102R) is set to a reproduction priority (S820).
For example, the control unit 303 sets a high video playback priority for video data in which the figure of a person having a conversation is best recorded, and also sets the video reproduction priority to the video data in which the voice of a person having a conversation is best recorded. Set a higher priority for audio playback of the video data that is being played.
同一の車両10の同一の時間帯に撮影された複数の映像データに対し、ユーザが再生優先度に基づく再生を選択した場合、撮影機器101(101F、101R)の制御部303は、複数の映像データから、動画像に関しては時間ごとに会話をしている人の姿が最も良好に録画された動画像を切り替えて、音声に関しては時間ごとに会話をしている人の声が最も良好に録音された音声を切り替えて、再生する。
それにより、ユーザは、マルチアングルカメラで撮影した複数の映像を、魅力的なシーンごとにピックアップして編集したような映像を再生することができる。
When the user selects playback based on the playback priority for a plurality of video data shot in the same time slot of the
As a result, the user can reproduce a video that looks like it has been edited by picking up a plurality of videos captured by a multi-angle camera for each attractive scene.
上記の制御は、撮影機器101(101F、101R)の制御部303によって設定された再生優先度に基づいて、施設端末105の表示制御モジュール515、ユーザ端末106の表示制御モジュール615、処理装置108の表示制御モジュール2215、でも同様に実行することができる。
なお、再生優先度は、施設端末105のデータ処理モジュール517、外部管理サーバ107のデータ処理モジュール717、処理装置108のデータ処理モジュール2217等が、事後的に設定する機能を有しているとよい。
The above control is based on the playback priority set by the control unit 303 of the imaging equipment 101 (101F, 101R), the
It is preferable that the
上記の処理は、上述の処理装置108を用いた映像データの転送時、又はその後に、処理装置108は処理装置108に接続された映像データの転送先、例えば施設端末105において実行されてもよい。
The processing described above may be executed at the transfer destination of the video data connected to the
第16の制御例
入力例:乗員や車両10の開閉部を操作したことが特定できる映像。
出力例:開閉部付近を撮影する撮影機器101(101F、101R)の設定の変更。
16th control example Input example: A video that can identify an occupant or an operation of an opening/closing part of the
Output example: Changing the setting of the imaging device 101 (101F, 101R) for imaging the vicinity of the opening/closing part.
制御部303は、車両10の開閉部が操作されたことを特定した場合(S810、S930、S1010)、撮影機器101(101F、101R)の録画延長機能をオンにする(S820)。
When the control unit 303 determines that the opening/closing unit of the
制御部303は、例えば、乗員が車両の駆動部、例えばエンジンやモータ、をオフにしてから、所定の時間で録画を停止する自動録画停止モードで作動させている状況で、車両10の開閉部、例えば、ドア、ハッチバック、トランク、ボンネット等が操作されたことを特定した場合(S810、S930、S1010)、開閉部を操作した人ごとに、録画延長機能を有効にするとよい(S820)。
所定の時間は、数分から数時間の間で、ユーザにより選択することができる時間であるとよい。
録画延長機能とは、録画を停止するまでの時間を延長する機能である。
For example, the control unit 303 operates in an automatic recording stop mode in which recording is stopped in a predetermined time after the driver turns off the driving unit of the vehicle, such as the engine and the motor. For example, when it is identified that a door, hatchback, trunk, hood, etc., has been operated (S810, S930, S1010), it is preferable to enable the recording extension function for each person who operated the opening/closing part (S820).
The predetermined period of time may be a user-selectable period of time between several minutes and several hours.
The recording extension function is a function that extends the time until recording stops.
制御部303は、どの開閉部が操作された場合に録画延長機能を実行するか、どの開閉部が操作されたら、どれだけの時間、録画を延長するか、開閉部が開いた状態であれば、録画を継続するか、等に関するユーザの選択入力を受け付ける構成であるとよい。
例えば、ユーザがハッチバックを開放したまま荷物や機材や資材あるいは廃棄物等を車両10から目的地まで複数回往復して運ぶ場合、制御部303は、ハッチバックが開放している間、映像データの撮影を継続するとよい。
The control unit 303 determines which opening/closing unit is operated to execute the recording extension function, which opening/closing unit is operated, how long recording is to be extended, and whether the opening/closing unit is open. , whether to continue recording, and the like.
For example, when the user carries luggage, equipment, materials, waste, etc. from the
特に、車両10に複数の撮影機器101(101F、101R)が搭載されている場合、ハッチバック周辺を撮影する撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)の映像データの質を向上させるとよりよい。
向上させた映像データのフレームレートは例えば30fps等であると、問題が発生した場合の確認が行いやすいのでよい。
In particular, when a plurality of photographing devices 101 (101F, 101R) are mounted on the
If the frame rate of the improved video data is, for example, 30 fps, it is preferable because it is easy to confirm when a problem occurs.
更には、撮影の継続中に、ユーザ以外の人物が撮影される状況では、「現在録画中です」等の音声メッセージを出力したり、ハッチバック周囲の音声を録音するマイクの感度を向上させたりするとよりよい。 Furthermore, if a person other than the user is being photographed while shooting continues, a voice message such as "Currently recording" will be output, and the sensitivity of the microphone that records the sound around the hatchback will be improved. Better.
更に、制御部303は、どの乗客が開閉部を操作したかに基づき、撮影機器101(101F、101R)の設定変更の内容を変更する構成であるとよりよい。
例えば、車両10が自動車教習所で使用される場合であれば、教習の終了時間付近で教習生1920がドアを開閉した場合は、教官1910が依然として車内にいるので、録画延長や映像データの質の向上する制御は実行せず、教官1910がドアを開閉した場合は、教習終了後の車内及び車外の状態をより確実に記録するために、録画延長や映像データの質の向上する制御を実行するとよい。
Furthermore, it is preferable that the control unit 303 is configured to change the content of the setting change of the photographing device 101 (101F, 101R) based on which passenger has operated the opening/closing unit.
For example, in the case where the
また、例えば車両10がタクシー業務で使用される場合であれば、降車時に乗客がドアを開閉した場合は、通常の業務の一般的な出来事(イベント)なので、録画延長や映像データの質の変更する制御は実行せず、運転手がドアを開閉した場合は、問題が生じたあるいは生じる可能性があるので、録画延長や映像データの質の向上する制御を実行するとよい。
In addition, for example, if the
第17の制御例
入力例:乗員や車外の様子を特定できる映像。
出力例:乗員や車外の様子の映像に基づくNFTデータの作成や流通。
Seventeenth control example Input example: A video that can identify the occupants and the situation outside the vehicle.
Output example: Creation and distribution of NFT data based on images of passengers and the situation outside the vehicle.
第17-1の制御例
制御部303は、乗員が特定の反応を示している状態、例えば乗員が楽しそうに乗車している状態や車外の景色に反応している状態、であることを特定した場合(S810、S930、S1010)、そのような様子を撮影した映像データの非代替性トークンデータ(以下「NFTデータ」と称する(NFT:Non-Fungible Token))を作成する、又は、そのような様子を撮影した映像データをNFTデータの作成に使用するデータ、例えばNFTデータの前段階のデータを作成する(S820)。
17-1 Control Example The control unit 303 identifies a state in which the occupant exhibits a specific reaction, such as a state in which the occupant is happily riding in the vehicle or a state in which the occupant reacts to the scenery outside the vehicle. If so (S810, S930, S1010), create non-fungible token data (hereinafter referred to as "NFT data" (NFT: Non-Fungible Token)) of video data that captures such a situation, or Data used for creating NFT data, for example, data in the previous stage of NFT data, is created from video data obtained by photographing a situation (S820).
なお、以降の説明では、NFTデータそのもの、又は、NFTデータを作成する際に使用するデータを、「NFT関連データ」とも称する。NFT関連データは、デジタルデータの所有証明書や鑑定書の機能を果たすものであり、例えば撮影した映像データについて、誰がいつ撮影したデータかを証明するものである。 In the following description, NFT data itself or data used when creating NFT data is also referred to as "NFT-related data". The NFT-related data functions as a digital data possession certificate or an appraisal certificate, and certifies, for example, who took the video data and when it was taken.
例えば、自動車教習所で使用する車両10に搭載された撮影機器101(101F、101R)の制御部303は、特に同時刻の車外の映像と車室内の映像とを関連付けることができる構成であると、制御部303は、車外の様子と教習生1920の反応が分かりやすい、臨場感のある映像データに基づき、NFT関連データを作成することができるのでよい。
For example, the control unit 303 of the photographing equipment 101 (101F, 101R) mounted on the
制御部303は、NFT関連データの作成を、例えば、車内の乗員のユーザ端末106からの入力に応じて実行してもよいし、施設端末105から取得した予約情報521を参照して実行してもよい。
The control unit 303 may create the NFT-related data, for example, in response to an input from the
制御部303は、例えばNFTのブロックチェーンへ映像のハッシュ値を書き込む機能等を備えるとよい。
そのようにすれば、ユーザは、教習生1920に対して、教習時の様子を、単なる映像データを提供するだけでなく、より高付加価値のNFT関連データあるいはより高い価値になることが期待できるNFT関連データを、特には購入可能な商品として、教習生1920に提供することができる。
The control unit 303 may have, for example, a function of writing the hash value of the video to the NFT blockchain.
By doing so, the user can expect not only to provide the
制御部303は、NFT関連データを、教習生1920が所有するユーザ端末106へ送信する機能を有しているとよい。
教習生1920が所有するユーザ端末106は、第2の外部装置の一例である。
Control unit 303 preferably has a function of transmitting NFT-related data to
例えば、教習生1920が、将来F1ドライバーとなった場合、F1ドライバーになる前の自動車運転初心者時代のNFT関連データやそれに基づく映像の価値は非常に高くなる可能性があるので、ユーザは、教習生1920に対して、教習の機会を提供するだけでなく、従来にない教習生1920にとって魅力的な商品を提供することができる。
For example, if the
第17-2の制御例
制御部303は、乗員が特定の反応を示している状態、例えば乗員が楽しそうに乗車している状態や車外の景色に反応している状態、であることを特定した場合(S810、S930、S1010)、そのような様子を撮影した映像データのNFT関連データを作成し、流通のためのプラットフォームへ出力する(S820)。
なお、プラットフォームは、第2の外部装置の一例である。また、楽しそうに乗車している状態は、感情反応の一例である。
17-2 Control Example The control unit 303 identifies a state in which the occupant exhibits a specific reaction, such as a state in which the occupant is happily riding in the vehicle or a state in which the occupant reacts to the scenery outside the vehicle. If so (S810, S930, S1010), the NFT-related data of the video data that captures such a situation is created and output to the platform for distribution (S820).
Note that the platform is an example of a second external device. Also, the state of riding happily is an example of an emotional reaction.
それにより、例えば、芸能人や各種のSNSの配信者、例えインフルエンサー等は、上記のようにして作成されたNFT関連データを、所有者を特定した状態でより容易に流通させることができるのでよい。 As a result, for example, entertainers, distributors of various SNS, influencers, etc. can more easily distribute the NFT-related data created as described above with the owner specified. .
制御部303は、乗員、例えば運転者、の顔を認識し、顔に動きがあるとき、例えば顔の向きや表情に動きがあるとき、又は、乗員の会話や発声があるときを含む映像・音声の区間を切り出して、その切り出した映像の区間の映像データをNFT関連データ化してブロックチェーンに書き込むとともに、その区間の映像データの実体をサーバ、例えば外部管理サーバ107、へアップロードして、自動的に販売(例えばオークション)するサイトを生成する機能を有しているとよい。
The control unit 303 recognizes the face of an occupant, for example, a driver, and displays an image/image including when there is movement in the face, for example, when there is movement in the orientation or facial expression of the face, or when there is conversation or utterance by the occupant. Cut out the audio section, convert the video data of the cut-out video section into NFT-related data and write it to the blockchain, and upload the entity of the video data of the section to the server, for example, the
制御部303は、外の景色の映像などを含める機能を有していると更によく、特に主に車外を撮影する撮影機器101(101F、101R)と、主に車内を撮影する車室内撮影用カメラ102(102F、102R)の映像データを含める機能を有しているとよりよい。 The control unit 303 is even better if it has a function of including an image of the scenery outside. It is better to have a function to include video data of the cameras 102 (102F, 102R).
それにより、芸能人や各種のSNSの配信者は、編集作業を行うことなく、映像データの撮影後比較的すぐに、ファン等に、自身の直近の状況の映像を商品や作品として提供したり、販売したりすることができる。 As a result, celebrities and various SNS distributors can provide fans, etc. with images of their latest situations as products or works relatively soon after shooting the video data, without editing work. can be sold.
なお、上記のNFT関連データの作成や出力に関連する処理は、処理装置108は処理装置108に接続された映像データの転送先、例えば施設端末105において実行されてもよい。
そのような構成では、例えば施設端末105のデータ処理モジュール517が、より魅力的な場面をピックアップするなどして編集された映像データに対して、NFT関連データの作成や出力する機能を有していると、より洗練されたNFT関連データを作成、出力することができるので、よりよい。
Note that processing related to the creation and output of the NFT-related data described above may be executed in the transfer destination of the video data connected to the
In such a configuration, for example, the
第17-3の制御例
制御部303は、乗員が特定の反応を示している状態、例えば乗員が楽しそうに乗車している状態や車外の景色に反応している状態、であることを特定した場合(S810、S930、S1010)、そのような様子を撮影した映像データのNFT関連データを、スマートコントラクトのためのデータ、例えば処理ルーチン等、を含めて、作成し、流通のためのプラットフォームへ出力する(S820)。
17-3 Control Example The control unit 303 identifies a state in which the occupant exhibits a specific reaction, such as a state in which the occupant is happily riding in the vehicle or a state in which the occupant reacts to the scenery outside the vehicle. If so (S810, S930, S1010), the NFT-related data of the video data that captures such a situation, including data for smart contracts, such as processing routines, etc., is created and transferred to a platform for distribution. Output (S820).
この構成における「スマートコントラクト」とは、NFT関連データの流通や販売に関連して、ブロックチェーンのトランザクション(Transaction(取引))等に関連して、自動的に実行される。それにより、特に当該NFT関連データの売却金額の一部を、例えば仮想通貨等で、撮影を行った車両10の提供者やドラレコの設置者に分配して送金する処理を実行することが可能となる。
The “smart contract” in this configuration is automatically executed in relation to blockchain transactions, etc., in relation to the distribution and sale of NFT-related data. As a result, it is possible to execute a process of distributing and remitting part of the selling price of the NFT-related data, for example, to the provider of the
第17の制御例における処理は、上述の処理装置108を用いた映像データの転送時、又はその後に、処理装置108は処理装置108に接続された映像データの転送先、例えば施設端末105において実行されてもよい。
The processing in the seventeenth control example is executed at the transfer destination of the video data connected to the
第18の制御例
入力例:乗員を特定できる映像や予約情報421、521等。
出力例:乗員に応じたバーチャルキャラクタの制御。
Eighteenth Control Example Input example: images that can identify passengers,
Example output: Controlling a virtual character according to the occupants.
制御部303は、乗員、特には運転手、が特定のユーザであることを特定した場合(S930、S1020)、その乗員に割当てられた設定やパラメータで、撮影機器101(101F、101R)又は撮影機器101(101F、101R)と協働する装置が表示するバーチャルキャラクタを制御する(S820)。 When the control unit 303 identifies that the occupant, particularly the driver, is a specific user (S930, S1020), the control unit 303 uses the settings and parameters assigned to the occupant to select the imaging device 101 (101F, 101R) or the imaging device. A virtual character displayed by a device cooperating with the device 101 (101F, 101R) is controlled (S820).
このような構成では、車両10に、撮影機器101(101F、101R)と協働する状態で、特には撮影機器101(101F、101R)の制御部303からの制御を受け付ける状態で、バーチャルキャラクタ表示装置が設置されている。
In such a configuration, the
制御部303は、特に、現在乗車している人物によって、異なるバーチャルキャラクタを表示する構成、又は、同一のバーチャルキャラクタを異なる設定やパラメータで表示する構成であるとよい。 The control unit 303 may be configured to display different virtual characters, or to display the same virtual character with different settings or parameters, depending on the person who is currently riding.
バーチャルキャラクタとは、例えばイラスト、アニメーション、CG、3DCG等で表示され、ユーザによって、仮想のドライブアシスタント、仮想のドライブコンパニオン、仮想の同乗者、仮想のトレーナーや仮想のパーソナルトレーナー、仮想の秘書等として認識されるキャラクタである。 A virtual character is displayed by, for example, illustration, animation, CG, 3DCG, etc., and is used by the user as a virtual drive assistant, a virtual drive companion, a virtual passenger, a virtual trainer, a virtual personal trainer, a virtual secretary, etc. is a recognized character.
このような構成では、複数の人物が、同一のバーチャルキャラクタ表示装置を搭載した同一の車両10を、使用する状況であっても、制御部303は、バーチャルキャラクタ表示装置に、各人物ごとに、異なるバーチャルキャラクタや、人格、例えば性格、の異なる同一のバーチャルキャラクタを、区別して表示させることができる。
With such a configuration, even in a situation where a plurality of persons use the
制御部303は、更に、今回の車両10の使用により、特に運転により、更新されたバーチャルキャラクタの最新の設定やパラメータを、別の車両10の制御部303や車両10外の別の端末、特には別のバーチャルキャラクタ表示装置へ出力することができる構成であるとよりよい。
そのような構成では、ユーザが、異なる車両10を使用する場合であっても、同乗するバーチャルキャラクタを同一人物(同一人格)として認識することができるようになることに加え、更には、自宅等に据え置いたバーチャルキャラクタ表示装置でも、同一人物(同一人格)のバーチャルキャラクタを、経験を共有した状態で表示させることができる。
The control unit 303 further updates the latest settings and parameters of the virtual character updated by the current use of the
With such a configuration, even if the user uses a
このような構成では、車両10に共通のバーチャルキャラクタに、複数人の異なる運転経験が共通して反映されることを効果的に回避することができる。例えば、ある目的地に初めて到着したユーザに対して、バーチャルキャラクタが「ここに来たのは久しぶりですね」といった、ユーサの認識と異なる反応を出力することをより効果的に回避することができる。
それにより、個々のユーザと個々のバーチャルキャラクタの間の関係の唯一性をより一層向上させることができる。
With such a configuration, it is possible to effectively prevent the virtual character common to the
Thereby, the uniqueness of the relationship between individual users and individual virtual characters can be further improved.
更に、ユーザや乗員の現在地とは異なる地点、例えば自宅等、に設置されたバーチャルキャラクタ表示装置がバーチャルキャラクタの制御部を有しており、撮影機器101(101F、101R)の制御部303は、そのようなバーチャルキャラクタ表示装置から、ネットワーク103やユーザ端末106、例えばスマートフォンやスマートウォッチ等、を介して取得した情報を用いて、バーチャルキャラクタとのコミュニケーション等を実行する構成であってもよい。
Furthermore, a virtual character display device installed at a location different from the current location of the user or crew member, such as a home, has a virtual character control unit, and the control unit 303 of the photographing equipment 101 (101F, 101R) Such a virtual character display device may communicate with a virtual character using information acquired via the
制御部303は更に、乗員ごとに、異なるバーチャルキャラクタ表示装置から情報を取得する構成であるとよりよい。
そのような構成では、制御部303は、それぞれの乗員が普段から自宅でコミュニケーションを取っているバーチャルキャラクタを介して、現在の走行状況等に応じたサポートを提供することができる。
It is preferable that the control unit 303 is configured to acquire information from different virtual character display devices for each crew member.
With such a configuration, the control unit 303 can provide support according to the current driving situation and the like via virtual characters with which each crew member communicates on a regular basis at home.
図11は、撮影機器101(101F、101R)の別の制御フロー1100の例である。
撮影機器101(101F、101R)の別の制御フロー1100では、撮影機器101(101F、101R)の制御部303は、図8の撮影機器101(101F、101R)の制御フロー800を用いて説明した各種の特定と同様に、人の状態又は動作に関する第1の特定を行い(S1110)、車両10の状態、車両10の車内又は車外の状況、車両10の動作、車両10の予約内容、車両10を用いるサービスや業務の内容のうちの少なくとも1つに関する第2の特定を行い(S1120)、第1の特定及び第2の特定に基づいて、撮影機器101(101F、101R)を制御する(S1130)。
FIG. 11 is an example of another
In another
別の制御フロー1100は、撮影機器101(101F、101R)の制御フロー800に加えて、更に、車両10の状態、車両10の車内又は車外の状況、車両10の動作、車両10の予約内容、サービスの内容、のうち、少なくとも1つを特定する第2の特定ステップS1120を含んでいる。
Another
なお、図11の別の制御フロー1100では、制御部303は、第1の特定ステップS1110は、第2の特定ステップS1120に先行して行うが、別の実施形態では、制御部303は、第2の特定ステップS1120を第1の特定ステップS1110に先行して行ってもよい。
更に、制御部303が、第1の特定(S1110)及び第2の特定(S1120)を同時に行う、特には、両者を継続的に実行し続けると、制御部303は、その都度の車内の人物や車両10の状態等に合わせて、撮影機器101(101F、101R)を制御することができるのよりよい。
In another
Furthermore, when the control unit 303 simultaneously performs the first identification (S1110) and the second identification (S1120), particularly when both are continuously performed, the control unit 303 can determine the person in the vehicle each time. It is preferable that the photographing equipment 101 (101F, 101R) can be controlled according to the state of the
制御部303は、第2の特定ステップS1120では、例えば、図12の車両10の状態の特定フロー1200で特定した情報や、図13の予約システムとの連携フロー1300により予約システムから取得した情報、等を用いて、車両10の状態、車両10の車内又は車外の状況、車両10の動作、車両10の予約内容、サービスの内容、のうち、少なくとも1を特定する。なお、図12の車両10の状態の特定フロー1200や、図13の予約システムとの連携フロー1300は、図11の撮影機器101(101F、101R)の別の制御フロー1100に含まれるフローの一例である。
In the second identification step S1120, the control unit 303 obtains, for example, information identified in the
なお、図11の別の制御フロー1100は、第1の特定と2の特定に基づく制御のフローを簡略化して示したものであり、制御部303は、複数の第1の特定を行うステップ(S1110)と、複数の第2の特定を行うステップ(S1120)を、それぞれ順序を入れ替えて実行したり並列的に実行したりすることができるとよい。
更に、制御部303は、第1の特定を行うステップ(S1110)、第2の特定を行うステップ(S1120)に加え、更に別の特定を行うステップやその他の情報を取得するステップを追加して実行する構成であるとよりよい。
Another
Furthermore, in addition to the step of performing the first identification (S1110) and the step of performing the second identification (S1120), the control unit 303 adds a step of performing another identification and a step of obtaining other information. It is better if it is a configuration that runs.
図11の撮影機器101(101F、101R)の別の制御フロー1100について具体的に説明する前に、図12の車両10の状態の特定フロー1200、及び、図13の予約システムとの連携フロー1300について説明する。
Before specifically describing another
図12は、車両10の状態の特定フロー1200の例である。
撮影機器101(101F、101R)の制御部303は、撮影機器101(101F、101R)が撮影した映像データ、撮影機器101(101F、101R)に搭載された各種センサ、例えば加速度センサ305やGNSSセンサ307やGPSセンサ等、撮影機器101(101F、101R)と接続された装置に搭載された各種センサ、特には、車両10自体に搭載された各種センサ、制御部303に内蔵された記憶装置、及び、制御部303の外部の記憶装置、等のうち少なくとも1つから、車両10の状態情報を取得又は検出する(S1210)。
FIG. 12 is an example of a
The control unit 303 of the imaging device 101 (101F, 101R) receives image data captured by the imaging device 101 (101F, 101R), various sensors mounted on the imaging device 101 (101F, 101R), such as an
制御部303は、取得又は検出した車両10の状態情報から、車両10の状態を特定する(S1220)。制御部303は、特定された内容に関する情報を例えばデータ又は信号等の形で出力する(S1230)。
The control unit 303 identifies the state of the
本明細書では、車両10の状態の特定フロー1200の例についてのみ図示しているが、制御部303は、図12の車両10の状態の特定フロー1200の例と同様のフローを、車両10の車内又は車外の状況、車両10の動作、車両10の予約内容、サービスの内容の特定するために、同様に実行することができる。
Although only an example of the
それにより、制御部303は、例えば、位置、速度、時間帯、距離等に関する状態、整備状態、積載物の積載状況、使用前後の車両10外側の状態や、使用前後や使用中の車室内の状況、車両10の駐車位置の周囲の状況や、操縦、制動、加速、停車、等に関する動作や、車両10が複数の使用者により交代で又は交互に使用される場合では、車両10の使用予約の内容、例えば前回の使用から次回の使用までの待機時間、使用者ごとの使用頻度や、車両10がサービスの提供や業務に使用される場合では、そのサービスや業務の内容、例えば使用目的、使用範囲、提供するサービスや業務の内容との適正、等に関連する特定を実行することができる。
更に、制御部303は、車両10が複数の使用者により交代で又は交互に使用される場合では、これらの特定を、使用者ごとに分類して実行することができるとよい。
As a result, the control unit 303 can, for example, determine the state related to the position, speed, time period, distance, etc., the maintenance state, the loading state of the load, the state of the outside of the
Furthermore, when the
図13は、予約情報システムとの連携フロー1300の例である。
撮影機器101(101F、101R)の制御部303は、例えば上述の人の状態又は動作の別の特定フロー1000(図10)や車両10の状態の特定フロー1200(図12)において用いることができる予約情報421を取得するため、予約情報システムとの連携フロー1300を実行する。なお、予約システムとは、例えば図4を用いて説明した予約管理サーバ104に実装されたシステムである。以下の説明において、「予約システム」なる用語は、「予約管理サーバ104」と読み替えてもよい。
FIG. 13 is an example of a
The control unit 303 of the photographing equipment 101 (101F, 101R) can be used, for example, in the above-described separate flow 1000 (FIG. 10) for specifying the state or action of a person or the flow 1200 (FIG. 12) for specifying the state of the
制御部303は、予約情報システムとの接続ステップを実行し(S1310)、予約情報システムとの接続が確立されない場合(S1320のNo)、再び予約情報システムとの接続ステップを開始する。
制御部303は、予約情報システムとの接続を確立すると(S1320のYes)、予約情報システムから必要な予約情報421を取得する(S1330)。必要な予約情報421を取得しない場合(S1340のNo)、制御部303は、再び予約情報421の取得ステップを実行する。制御部303は、必要な予約情報421を取得すると(S1340のYes)、予約情報システムとの接続を解除する(S1350)。
The control unit 303 executes the step of connecting with the reservation information system (S1310), and if the connection with the reservation information system is not established (No in S1320), starts the step of connecting with the reservation information system again.
When the control unit 303 establishes the connection with the reservation information system (Yes in S1320), it acquires the
1つの実施形態では、予約情報システムは、車両10を用いて提供される所定のサービスや業務に関する情報を管理しているシステムであり、撮影機器101(101F、101R)の制御部303は、施設端末側の撮影機器連携モジュール511と連携し、上記の連携フロー1300に従い、予約情報システムと接続し、予約情報421を取得する。
In one embodiment, the reservation information system is a system that manages information about predetermined services and operations provided using the
所定のサービスや業務に関する情報とは、例えば、自動車教習所、幼稚園・保育園、デイケア、タクシー、レンタカー、カーシェア、配車、観光、リムジンクルーズ等に関連する情報や、運配送、搬送、作業現場への移動、営業、出退勤、等に関連する情報である。
具体的には、所定のサービスや業務に関する情報は、個々の人物と関連付けて、運転手、同乗者、走行ルート、目的地、滞在地、滞在時間、運転手のシフトや休憩時間、同乗者の乗車履歴等を有しているとよい。
Information related to prescribed services and operations includes, for example, information related to driving schools, kindergartens/nursery schools, day care, taxis, rental cars, car sharing, dispatch, sightseeing, limousine cruises, etc., transportation, transport, and work site information. It is information related to movement, business, attendance and leaving, and the like.
Specifically, information related to prescribed services and operations will be associated with individual persons, including drivers, fellow passengers, driving routes, destinations, places of stay, length of stay, shift and break times of drivers, and information of fellow passengers. It is preferable to have a ride history and the like.
別の実施形態では、予約情報システムは施設端末105とは別に設けられた構成であってもよい。更に、撮影機器101(101F、101R)が予約管理サーバ104から直接、予約情報421を取得する構成としてもよい。
In another embodiment, the reservation information system may be configured separately from the
上記の説明では、撮影機器101(101F、101R)と予約システムの間の連携について説明したが、図13の予約情報システムとの連携フロー1300の例は、施設端末105、例えば教習所端末、と、予約システムの間の連携においても、同様にして実行することができる。 In the above explanation, cooperation between the photographing equipment 101 (101F, 101R) and the reservation system has been explained. The cooperation between reservation systems can be executed in the same way.
図11の撮影機器101(101F、101R)の別の制御フロー1100では、制御部303は、人の状態又は動作に関する第1の特定(S1110)、及び、車両の状態、車両の車内又は車外の状況、車両の動作、車両の予約内容、サービスの内容等のうちの少なくとも1つに関する第2の特定を行う(S1120)。これらの特定内容に基づいて、以下に列挙する状況や状態の特定を行い、これらに対応する制御を実行する(S1130)。
車両10が所定のサービス提供エリアや業務エリアの外に出たか、
車両10が所定の地点に滞在したか、
車両10が所定の利用時間外に利用されたか、
車内に忘れ物があるか、
車両10に次回の利用予定があるか、(予約時間の締切時間が過ぎ、時間割の次の教習のない車のデータをコピーするシステム。)
車両10が極端な挙動で走行したか、
車両10の開閉部が操作されたか、
車両10の状態のチェックが行われているか、
車両10がどのような気象下にあるか、
車両10に異常があるか、
車両10の駆動ユニット(例えばエンジンやモータ等)がオフであるか、
車両10の積載物の重量に変更があるか。
In another
Whether the
whether the
Whether the
Did you forget something in the car?
Whether the
whether the
Whether the opening/closing part of the
whether the
what kind of weather the
Whether there is an abnormality in the
whether the drive unit (for example, engine, motor, etc.) of the
Is there a change in the weight of the load on the
所定のサービス提供エリアや業務エリアとは、例えばサービスの提供中や業務中に予定している走行範囲や走行ルート等である。
所定の地点とは、例えばサービスや業務に関連する目的地やサービスや業務とは無関係である施設や場所、サービスや業務との関連で滞在を避けるべき施設や場所等である。
所定の利用時間とは、例えばサービスの提供時間や業務時間、サービスや業務において許可された車両の利用時間等である。
The predetermined service provision area or business area is, for example, a travel range, a travel route, or the like scheduled during service provision or business.
The predetermined point is, for example, a destination related to the service or work, a facility or place unrelated to the service or work, or a facility or place to avoid staying in relation to the service or work.
The predetermined use time is, for example, service provision time, work time, vehicle use time permitted for service or work, and the like.
なお、制御部303は、以下に説明する個々の制御を別の特定と組み合わせて実行したり、個々の制御を組み合わせて実行したりする構成であってもよい。
また、以下の説明では、表現の簡潔化を目的として単に「撮影機器101(101F、101R)」と記載して説明する構成であっても、技術的に可能であれば「撮影機器101(101F、101R)及びや車室内撮影用カメラ102(102F、102R)」と読み替えて理解してもよい。
Note that the control unit 303 may be configured to execute each control described below in combination with another specification, or to execute each control in combination.
Further, in the following description, for the purpose of simplification of expression, even if the configuration is simply described as “image capturing equipment 101 (101F, 101R)” if technically possible, “image capturing equipment 101 (101F , 101R) and the vehicle interior photographing cameras 102 (102F, 102R).
以下の制御例では、上述のように、制御部303が、図11の別の制御フロー1100における、第1の特定を行うステップ(S1110)と、第2の特定を行うステップ(S1120)の順序を入れ替えて実行する構成や第1の特定を行うステップ(S1110)や第2の特定を行うステップ(S1120)を複数回行う構成、についても説明するが、それぞれのステップについては、図11の別の制御フロー1100の第1の特定を行うステップ(S1110)と第2の特定を行うステップ(S1120)の共通の符号を使用する。
In the following control example, as described above, the control unit 303 performs the first identification step (S1110) and the second identification step (S1120) in the
なお、制御部303は、以下に説明する個々の制御例における制御を別の特定内容と組み合わせて実行したり、個々の制御例を組み合わせて実行したり、任意の制御例のみを実行あるいは停止したり、する機能を有しているとよりよい。
例えば、制御部303は、以下に説明する制御例に関して、1つの制御例について説明した特定ステップ(S1110、S1120、S1220)で実施する特定に、別の少なくとも1つの制御例の制御ステップ(S1130)で実施する制御を組み合わせてもよい。
Note that the control unit 303 executes the control in each control example described below in combination with another specific content, executes the individual control examples in combination, or executes or stops only an arbitrary control example. It is better to have a function to
For example, with respect to the control examples described below, the control unit 303 performs at least one control step (S1130) of another control example in addition to the identification steps (S1110, S1120, S1220) described for one control example. may be combined.
また、以下では、各制御例を、撮影機器101(101F、101R)の制御部303が、車両10の利用中に実行する構成について説明するが、それらの制御例のうち、車両10の利用中以外に実行可能な制御例、例えば映像データに処理を施す制御等、は、施設端末105、ユーザ端末106、外部管理サーバ107、処理装置108の各モジュールによっても、同様に実行可能である、あるいは、各モジュールが協働して実行可能である。
例えば、映像データの画像や音声の加工に関連する制御等は、撮影機器101(101F、101R)の制御部303が車両10の利用中に実行することもできるし、施設端末105のデータ処理モジュール517、ユーザ端末106のデータ処理モジュール617、外部管理サーバ107のデータ処理モジュール717、処理装置108のデータ処理モジュール2217が、単独で又は協働して、対応する映像データを受け取った後に実行することもできる。
In the following description, each control example is executed by the control unit 303 of the imaging device 101 (101F, 101R) while the
For example, control related to image and sound processing of video data can be executed by the control unit 303 of the imaging equipment 101 (101F, 101R) while the
以下具体的な制御例を説明する。
第19の制御例
入力例:乗員を特定できる情報、車両10の設定された走行エリアに関する情報、車両10の走行位置に関する情報。
出力例:車両10が所定のエリアの外へ出たことに関する情報に基づく制御。
A specific control example will be described below.
Nineteenth Control Example Input example: information that can identify the occupant, information about the set travel area of the
Output example: Control based on information about the
制御部303は、車両10が所定の走行エリアの外を、車両10が、走行していることあるいは走行したことを特定するとよい(S1120、S1220)。
所定の走行エリアとは、例えばサービスの提供中や業務中に予定している走行範囲や走行ルート等であるとよく、例えば乗員ごと、車両10ごと、車両10を用いて提供されるサービスごと、あるいは、車両10を用いて行われる業務ごと、に設定された走行エリア等であとよりよい。
Control unit 303 may identify that
The predetermined travel area may be, for example, a travel range or a travel route scheduled during service provision or business, for example, for each passenger, for each
第19-1の制御例
上記の特定を行った場合(S1120、S1220)、制御部303は、車両10が所定のエリア外を走行していることを、乗員に通知するメッセージを撮影機器101(101F、101R)のスピーカや表示部から出力する(S1130)、又は、撮影機器101(101F、101R)に接続した外部スピーカやモニタから出力させる(S1130)。
19-1 Control Example When the above identification is performed (S1120, S1220), the control unit 303 sends a message to the occupants that the
それによりユーザは、乗員ごと、例えば教習所の教官1910ごと、教習所の教習生1920ごと、営業や送迎等を行う従業員の担当エリアごと、に、柔軟に走行エリアを設定することで、車両10が複数の使用者によって使用される場合であっても、使用者ごとに適切な走行エリアでの走行をさせやすくなる。
例えば、制御部303は、所定のエリアとして教習所の教習コースを登録しておく機能を備えており、車両10の現在位置が教習コースを逸脱した場合、スピーカや表示部から、逸脱した旨の出力をするとよい。制御部303は、逸脱したタイミングでこの出力をしてもよいが、次回の撮影機器101(101F、101R)起動時にも逸脱した旨を出力する、又は、逸脱している日時範囲等を出力してもよい。
なお、乗員に通知するメッセージを出力するとした構成は、赤いマークを表示する等の別の方法により出力する構成としてもよい。
As a result, the user can flexibly set the driving area for each crew member, for example, for each driving
For example, the control unit 303 has a function of registering a training course at a driving school as a predetermined area. should be done. The control unit 303 may output this at the timing of the deviation, but it also outputs the fact that the imaging device 101 (101F, 101R) is activated next time, or outputs the deviated date and time range. may
It should be noted that the configuration in which a message to be notified to the passenger is output may be configured to output by another method such as displaying a red mark.
第19-2の制御例
上記の特定を行った場合(S1120、S1220)、制御部303は、車両10が所定のエリア外を走行したことを示す情報を、映像データに関連付けて、記録する(S1130)。
それによりユーザは、乗員ごとに、例えば教習所の教官1910ごと、教習所の教習生1920ごと、営業や送迎等を行う従業員ごとに、エリア外での走行を行ったときの映像データを管理しやすくなる。
例えば、制御部303は、所定のエリアとして教習所の教習コースを登録しておく機能を備えており、車両10の現在位置が教習コースを逸脱した場合、逸脱している範囲を別のフォルダ等に分けて記録しておくとよい。
19-2 Control Example When the above identification is performed (S1120, S1220), the control unit 303 records information indicating that the
As a result, the user can easily manage video data for each crew member, for example, for each driving
For example, the control unit 303 has a function of registering a training course of a driving school as a predetermined area. It is best to record them separately.
第19-3の制御例
上記の特定を行った場合(S1120、S1220)、制御部303は、車両10が所定のエリア外を走行したことを記録した映像データを、撮影機器101(101F、101R)に収容された記憶媒体、例えばSDカード306に加え、車両10の収容スペース110に収容された別の記憶媒体に記憶する(S1130)。
それによりユーザは、乗員ごとに、例えば教習所の教官1910ごと、教習所の教習生1920ごと、営業や送迎等を行う従業員ごとに、エリア外での走行を行ったときの映像データをより確実に確保しやすくなる。
19-3 Control Example When the above identification is performed (S1120, S1220), the control unit 303 captures video data recording that the
As a result, the user can more reliably capture video data for each crew member, for example, for each driving
第19-4の制御例
上記の特定を行った場合(S1120、S1220)、制御部303は、車両10が所定のエリア外が走行したことをイベントとして記録した映像データを、無線通信、特には無線LANを介して、所定の外部端末、例えば、施設端末105、ユーザ端末106、外部管理サーバ107、処理装置108等へ、送信する(S1130)。
制御部303は、特に車両10の使用が終了した後や車両10が以下の所定の地点、例えば車両10を所有する企業や組織や、それらが提携する企業や組織が、提供する無線LANの通信可能エリアの範囲内の地点、に戻された後で、映像データの送信を行う構成であるとよりよい。無線LANの通信可能エリアとしては、教習所の施設内に形成された通信可能エリアとするとよい。
19-4 Control Example When the above identification is performed (S1120, S1220), the control unit 303 transmits video data recorded as an event that the
Especially after the use of the
なお、制御部303は、車両10が上記の通信可能エリアの範囲外の地点にある場合、車内のユーザ端末106の通信接続機能を介して、ネットワーク103に接続し、映像データの一部や車両10が上記の通信可能エリア外を走行したイベントが発生したという情報を、上記の車両10を所有する企業や組織や、それらが提携する企業や組織に対して送信する機能を有しているとよりよい。
それにより、ユーザは、必要最小限のデータ通信量で、より迅速に上記のイベントが発生したことを、車両10外へ知らせることができる。
When the
As a result, the user can more quickly inform the outside of the
制御部303は、外部端末へ送信する映像データを、乗員ごとに、送信するか送信しないかを、設定する構成であるとよりよい。更に、制御部303は、外部端末へ送信する映像データを、車両10が所定のエリア外を走行したことに追加して又は代えて、映像データに含まれるイベントごとに、送信するか送信しないかを、設定する構成であるとよりよい。
It is preferable that the control unit 303 is configured to set whether or not to transmit the video data to be transmitted to the external terminal for each crew member. Furthermore, the control unit 303 determines whether or not to transmit the video data to be transmitted to the external terminal for each event included in the video data in addition to or instead of the fact that the
制御部303は、映像データに割り当てられた優先度に応じて、映像データを外部端末へ映像データを送信する構成であるとよりよい。
それによりユーザは、乗員ごと、例えば教習所の教官1910ごと、教習所の教習生1920ごと、営業や送迎等を行う従業員ごとに、エリア外での走行を行ったときの映像データをより確実に確保しやすくなる。
It is preferable that the control unit 303 is configured to transmit the video data to the external terminal according to the priority assigned to the video data.
As a result, the user can more reliably secure video data for each crew member, for example, for each driving
なお、上記の第19-1から第19-4の制御例では、車両10が所定のエリア外を走行したこと、に関して説明したが、制御部303は、同様の制御を、車両10が所定の地点に滞在したこと、車両10が別の所定のエリア内に入ったこと、等に対しても同様に実行することができるとよい。
In the above control examples 19-1 to 19-4, the
上記の所定のエリア、別の所定のエリア、については上述したが、それらは、図18を用いて説明する第1の範囲1820及び第2の範囲1825等に対応するものであってもよい。
上記の所定の地点は、図18を用いて説明する第1の地点1870、第2の地点1880、及び、第3の地点1890等に対応するものである。
Although the predetermined area and the other predetermined area have been described above, they may correspond to the first range 1820, the second range 1825, etc. described using FIG.
The above predetermined points correspond to the
制御部303は、例えば、予約管理サーバ104から直接取得した予約情報421や、施設端末105から取得した予約情報521に基づき、車両10に対して時間割の次の教習の予約がなく、且つ、次の教習の予約受付の締切時間が過ぎたことを特定した後に、外部端末へのデータの転送を行う構成であるとよりよい。
For example, based on the
第20の制御例
入力例:車両10の予約状況を特定できる情報、及び、車両10外部の確認作業が実行中であることを確認できる映像。
出力例:車両10外部を確認する作業の撮影の開始。
Twentieth Control Example Input example: information that can identify the reservation status of the
Output example: Start of photographing work for checking the exterior of the
制御部303は、現在の時刻が車両10の使用予約時間であること(S1120)、及び、車両10の周囲で人物が車両10外部の確認作業を実行中であることを特定した場合(S1110)、車両10外部の映像データの撮影を開始する(S1130)。
制御部303は特に、より高品質での車両10外部の映像データの撮影を開始する。
When the control unit 303 determines that the current time is the reserved use time of the vehicle 10 (S1120) and that a person around the
In particular, the control unit 303 starts capturing image data of the exterior of the
それにより、ユーザは、乗員が車両10に乗り込む以前であっても、より確実に、また特にはより高画質で、映像データを確保することができるのでよい。
これは、ユーザが、例えば自動車教習所やタクシー事業所等での車両10を運用する場合においては、適切な教習が行われているかの確認や、タクシー事業所から出発する前の点検が適切に行われたか等をより行いやすくなるのでよい。
As a result, the user can secure video data more reliably, particularly with higher image quality, even before the passenger gets into the
When the user operates the
第21の制御例
入力例:車両10の運転の環境を特定できる情報や映像、及び、乗員を特定できる情報や映像。
出力例:映像データの撮影の開始や高品質化。
Twenty-first control example Input example: information and images that can identify the driving environment of the
Output example: Start shooting video data and improve quality.
第21-1の制御例
制御部303は、車両10が特定の運転環境下にあることを特定した場合(S1120、S1220)、車両10の映像データの撮影の開始や高品質化を実行する(S1130)。
車両10の特定の運転環境とは、例えば夜間等の時間帯の環境、雨天の環境、悪路走行環境、狭い路地での走行環境、危険とされる繁華街での走行環境等である。
21-1 Control Example When the control unit 303 identifies that the
The specific driving environment of the
第21-2の制御例
制御部303は、車両10が特定の運転環境、特定された運転環境に割り当てられた難易度を特定した場合であって(S1120、S1220)、車両10を運転する人物、及び、その人物に割当てられた運転技術を特定した場合(S1110)、難易度と運転技術の関係に応じて、車両10の映像データの撮影の開始や高品質化を実行する(S1130)。
21-2 Control Example When the
そのような構成では、制御部303は、運転手の運転技術の上手さに応じて、高品質で録画する状況を細かく変更することができる。例えば、制御部303は、その運転手にとって、問題のない環境での運転であれば、映像データの品質を抑えて記憶媒体の容量を節約する。そして、制御部303は、その運転手が苦手とする環境での運転であれば、映像データの品質を向上させ、問題が発生した場合にはユーザによってより詳細な検証が可能となる高品質な映像データを作成することができる。 With such a configuration, the control unit 303 can finely change the conditions for high-quality video recording according to the driving skill of the driver. For example, the control unit 303 reduces the quality of the video data and saves the capacity of the storage medium if the driver is driving in a problem-free environment. If the driver is not good at driving in an environment, the control unit 303 improves the quality of the video data. Video data can be created.
また別の例では、制御部303は、例えば、自動車教習所での教習やタクシー業務で車両10が使用される場合において、教習生1920や乗客が女性であり、夜間では、日中よりも、ハラスメント行為等の問題が発生しやすい状況では、映像データの品質を向上させ、問題が発生した場合にはユーザによってより詳細な検証が可能となる高品質な映像データを作成することができる。
In another example, for example, when the
更に別の例では、制御部303は、例えば、ユーザがタクシー業務で車両10を使用する場合において、乗客が泥酔者であり、乗客の乗車地点が危険な繁華街であることを特定した場合、映像データの品質を向上させ、問題が発生した場合にはユーザによってより詳細な検証が可能となる高品質な映像データを作成することができる。
In yet another example, for example, when the user uses the
制御部303は、ドライバーの運転技術の上手さや繁華街の危険度等を、施設端末105や外部管理サーバ107等から取得し、また更新することができるとよい。
施設端末105のデータ処理モジュール517や外部管理サーバ107のデータ処理モジュール717は、複数の車両10や複数の乗員、特には複数の運転手に関連する映像データの分析や解析に基づいて、上記の運転技術の上手さや繁華街の危険度等を算出し、撮影機器101(101F、101R)の制御部303へ送信する構成であるとよい。
The control unit 303 is preferably capable of acquiring information such as the driving skill of the driver and the degree of danger in the downtown area from the
The
第22の制御例
入力例:乗員が乗客であることを特定できる映像や情報、及び、車両10内に忘れ物があることを特定できる映像。
出力例:忘れ物があることを知らせる情報の出力。
Twenty-Second Control Example Input example: video or information that can identify that a crew member is a passenger, and video that can identify an item left behind in the
Output example: Output of information notifying that there is something left behind.
制御部303は、予約情報や映像データから、乗員が乗客、例えばタクシー等の乗客、であることを特定した場合であって(S1110)、その乗客の乗車時と降車時の車内映像から、車内に忘れ物があることを特定した場合(S1120)、制御部303は、車内忘れ物があることを通知する情報を出力する(S1130)。 When the control unit 303 identifies that the occupant is a passenger, for example, a passenger of a taxi or the like from the reservation information or the video data (S1110), the control unit 303 determines the in-vehicle image from the in-vehicle video when the passenger gets on and off the car. (S1120), the control unit 303 outputs information notifying that there is an item left behind in the vehicle (S1130).
制御部303は、例えば、撮影機器101(101F、101R)のスピーカやモニタから、あるいは、撮影機器101(101F、101R)に接続したスピーカやモニタから、忘れ物があることを通知するメッセージや画像や動画を出力するとよい。 For example, the control unit 303 outputs a message, image, or message notifying that there is an item left behind from the speaker or monitor of the imaging device 101 (101F, 101R) or from the speaker or monitor connected to the imaging device 101 (101F, 101R). Output the video.
制御部303は、更に、上記のモニタに、乗客の乗車前の車内の映像と乗客の降車後の車内の映像とを交互に表示する機能や、乗客の乗車前の車内の映像と乗客の降車後の車内の映像の高画質画像を撮影する機能や、忘れ物が映された範囲をトリミングして表示する機能等、を有しているとよりよい。 The control unit 303 further has a function of alternately displaying an image of the inside of the vehicle before the passenger gets on and an image of the inside of the vehicle after the passenger gets off, and a function of displaying the image of the inside of the vehicle before the passenger gets on and the image of the inside of the vehicle after the passenger gets off. It is better to have a function of capturing a high-quality image of the inside of the car later, a function of trimming and displaying the range where the left-behind is shown, and the like.
それにより、ユーザは、撮影機器101(101F、101R)のディスプレイに表示する映像を見比べて、どこに何が忘れられているかをより容易に認識することができる。
そのような構成では、例えばタクシー等の乗客が忘れ物をした場合、運転手は、モニタ上で、忘れ物の有無や詳細をより迅速に判断できるので、乗客がタクシーを離れてしまう前に、その乗客を呼び止めやすくなる。
なお、別の制御例では、制御部303は、乗客が車両10を降りる前や途中に、車内忘れ物があることを通知する情報の出力を行ってもよい。
As a result, the user can more easily recognize where and what has been forgotten by comparing the images displayed on the displays of the imaging devices 101 (101F, 101R).
With such a configuration, for example, when a passenger in a taxi leaves an item, the driver can more quickly determine the presence or absence of the item and the details on the monitor. It becomes easier to stop calling.
Note that, in another control example, the control unit 303 may output information notifying that there is an item left behind in the vehicle before or while the passenger gets off the
第23の制御例
入力例:車両10の異常を特定できる映像や情報、及び、運転手を特定できる映像。
出力例:異常の特定前後で運転手の変更に基づく制御。
Twenty-third control example Input example: video and information that can identify an abnormality in the
Example output: Control based on driver changes before and after identifying anomalies.
制御部303は、車載センサの検出信号や映像データから車両10に異常が発生したことを特定した場合であって(S1120)、異常の特定前後で運転手が代わったことを特定した場合(S1110)、代わった運転手に応じて、動作モードを変更する(S1130)。
「車両10の異常」としては、例えば車両10から発生する異音、特には車両10のタイヤ付近にペットボトル等の異物が取り付けられたことにより発生する異音、等である。
When the control unit 303 identifies that an abnormality has occurred in the
The "abnormality of the
そのような構成では、制御部303は、異常の特定の前後で運転手が登録された運転手から、登録されていない運転手へ代わった場合に、撮影機器101(101F、101R)の動作モードを防犯モードへ変更したり、車両10の駆動モードを防犯モードへ移行させたりすることができる。
With such a configuration, the control unit 303 changes the operation mode of the imaging device 101 (101F, 101R) when the driver changes from a registered driver to an unregistered driver before and after the abnormality is identified. can be changed to the crime prevention mode, or the driving mode of the
撮影機器101(101F、101R)の防犯モードとは、車両10の位置情報を外部へ通信したり、第5-4の制御例で説明したサイレントモードを実行したりする動作モードである。
車両10の防犯モードとは、車両10の走行機能を停止させたり、制限したり、ロック解除不能とする駆動モードである。
The crime prevention mode of the imaging device 101 (101F, 101R) is an operation mode for communicating the position information of the
The crime prevention mode of the
それにより、車両10が、例えば車両10に異物が取り付けられたことにより、異音が発生する状態にあり、運転手が、異音の原因を確認するため、車両10の電源をオンにしたまま、エンジンやモータを起動したまま、車外に出た後に、車両10を奪う目的の犯人が車両10を運転しようとしたとしても、車両10の走行を停止させたり、制限したり、車内に犯人を閉じ込めたままにできるので、ユーザは、より安全に車両10を運用することができる。
As a result, the
第24の制御例
入力例:車両10の駆動ユニットの状態を特定できる情報、乗員の予約情報、車内の乗員の有無が確認できる映像。
出力例:車外撮影モードの起動。
Twenty-Fourth Control Example Input example: Information that can identify the state of the drive unit of the
Output example: Activation of outside shooting mode.
制御部303は、現在の時間に乗員による車両10の使用予約が入っている時間であることを特定した場合であって(S1110)、車両10の駆動ユニット、例えばエンジンやモータ、がオフであることを特定し(S1120)、且つ、車内に乗員が乗っていないことを特定した場合(S1110)、車外撮影モードを起動する(S1130)。
The control unit 303 determines that the current time is the time when the passenger has reserved the use of the vehicle 10 (S1110), and the drive unit of the
車外撮影モードでは、制御部303は、車内を主に撮影する映像データの品質に比べて、車外を主に撮影する映像データの品質を高めて撮影を行う。
制御部303は更に、車外撮影モードにおいては、予約情報421から特定する車両10の使用時間の開始時間よりも以前から撮影や記録を開始し、車両10の使用終了時間よりも以後に撮影や記録を終了する機能を有しているとよい。
そのような構成では、ユーザは、予約された車両10が適切に使用されたか、例えば、必要以上に長い時間に渡って使用の予約が入れられていないか、等を判断しやすい。
In the vehicle exterior photography mode, the control unit 303 performs photography by increasing the quality of image data mainly for photographing the exterior of the vehicle compared to the quality of image data mainly for photographing the interior of the vehicle.
Further, in the outside photographing mode, the control unit 303 starts photographing or recording before the start time of the use time of the
With such a configuration, the user can easily determine whether the reserved
第25の制御例
入力例:車両10の搬入搬出予定を特定できる情報、車両10の搬入搬出の内容を特定できる映像、車両10付近の人物を特定できる映像。
出力例:搬入搬出に関する情報の出力。
Twenty-fifth control example Input example: information that can identify the schedule of loading/unloading of the
Output example: Output of information related to loading and unloading.
制御部303は、車両10を用いた荷物や商品の搬入搬出予定を特定した場合であって(S1120)、映像データから現在の搬入搬出の状況を特定し(S1120)、且つ、車両10付近の人物を特定した場合(S1110)、搬入搬出に関する情報を出力する(S1130)。 The control unit 303 specifies a schedule for loading and unloading packages and products using the vehicle 10 (S1120), specifies the current status of loading and unloading from the video data (S1120), and When a person is identified (S1110), information on loading/unloading is output (S1130).
制御部303は、予約管理サーバ104の予約情報421や施設端末105の予約情報521等に含まれる搬入搬出予定の情報から、例えば搬入地点での搬入量や搬出地点での搬出量等、を特定する。制御部303は更に、例えば搬出地点では、映像データから各荷台に取り付けられたラベル等を読み取り、予定の搬出荷物が搬出されているか、予定の量だけ搬出されたか等を特定する。
それにより、ユーザは、搬出者による誤搬出等が発生することをより低減させやすくなる。
The control unit 303 specifies, for example, the carry-in amount at the carry-in point and the carry-out amount at the carry-out point from the carry-in/carry-out schedule information included in the
This makes it easier for the user to reduce the occurrence of erroneous delivery by the delivery person.
制御部303は、例えば搬出地点での車両10の停車中、映像データから特定した搬出者に対しては、「搬出残数は残り5台です」、「搬出物が異なります」等の情報を出力する。制御部303は、映像データから停車中の車両に搬出者以外が接近したことを特定した場合、「現在搬出作業中です」、「現在搬出作業を撮影しています」等の情報を出力する。
それにより、ユーザは、搬出者以外の人を無断で撮影することを低減しやすくなる。更に、搬入搬出中のいたずらや窃盗等を抑止しやすくなる。
For example, while the
This makes it easier for the user to reduce unauthorized shooting of people other than the unloading person. Furthermore, it becomes easier to deter mischief, theft, etc. during loading and unloading.
制御部303は、上記の制御を、搬入搬出動作モードとして実行してもよく、ユーザは、必要に応じて搬入搬出動作モードをアクティベートすることができる構成や、更新や購入により追加で使用できる構成であるとよい。 The control unit 303 may execute the above-described control as the loading/unloading operation mode, and the user can activate the loading/unloading operation mode as necessary, or can additionally use it by updating or purchasing. should be
図8から図14を用いて説明した個々の制御、特定、処理等の機能を実行するためのプログラムは、撮影機器101(101F、101R)に実装されており、必要に応じて、ユーザがアクティベート又はディアクティベートできる構成であるとよい。そのような構成では、ユーザは自身にとって必要な機能を、実際に体験した上で、車両10の使用方法や使用環境、ユーザ自身の好み等を反映させて、カスタマイズすることができる。
Programs for executing individual functions such as control, specification, processing, etc. described with reference to FIGS. Alternatively, it is preferable that the configuration is such that it can be deactivated. With such a configuration, the user can actually experience the functions necessary for him/herself, and then customize them by reflecting the usage method and usage environment of the
ユーザは、上述した制御例に関連して説明した、撮影機器101(101F、101R)の動作モードを、オペレーションシステム(OS)やファームウェアやアプリケーションの更新や追加により、ソフトウェア的に後付けできるとよい。
特に、撮影機器101(101F、101R)が、一般ユーザ向け又は一般車両向けとして製造、販売されている汎用の撮影機器101(101F、101R)であり、各種の動作モードのソフトウェア的な後付けが、製造会社、販売会社等又はエンドユーザによって、汎用の撮影機器101(101F、101R)のファームウェア等のアップデートにより実現するとよりよい。
The user may retrofit the operation modes of the photographing equipment 101 (101F, 101R) described in connection with the above control example in terms of software by updating or adding an operating system (OS), firmware, or applications.
In particular, the photographic equipment 101 (101F, 101R) is a general-purpose photographic equipment 101 (101F, 101R) manufactured and sold for general users or general vehicles, and various operation modes can be retrofitted in software. It is better if the manufacturing company, the sales company, etc., or the end user updates the firmware of the general-purpose imaging device 101 (101F, 101R).
このようにすると、汎用の撮影機器101(101F、101R)のハードウェア構成を共通にしたまま、各種の駆動モード、特には、複数の人が交代で使用する車両10に搭載される場合に適した駆動モード等、をその必要に応じて適宜、撮影機器101(101F、101R)に追加することが可能となる。
それにより、製造会社は、様々な用途の撮影機器101(101F、101R)を製造する場合の、撮影機器101(101F、101R)の製造コストや工数を削減できるので、エンドユーザに対してよりコストパフォーマンスに優れた製品を提供することができる。
In this way, while the hardware configuration of the general-purpose photographing device 101 (101F, 101R) remains the same, it is suitable for various drive modes, particularly when mounted on the
As a result, the manufacturing company can reduce the manufacturing cost and man-hours of the imaging equipment 101 (101F, 101R) when manufacturing the imaging equipment 101 (101F, 101R) for various purposes, so that the cost to the end user can be reduced. We can provide high performance products.
各種の動作モードをソフトウェア的に後付けすることができる上記の構成に対して追加的に又は代替的に、撮影機器101(101F、101R)は、各種の動作モードを予め搭載、あるいは、プリインストールしていてもよい。特に、ユーザの所望のタイミングで、個々の動作モードの使用権を購入し、使用可能な状態にできる構成であるとよりより。 In addition to or alternatively to the above-described configuration in which various operation modes can be retrofitted by software, the photographing equipment 101 (101F, 101R) is preloaded with or preinstalled with various operation modes. may be In particular, it is more preferable that the user can purchase the right to use each operation mode at the timing desired by the user and make it available.
なお、撮影機器101(101F、101R)は、自動車教習所やカーシェア等のサービス専用に製造されたものでもよいが、撮影機器101(101F、101R)の制御部303が、自動車教習所用モードや、汎用モード、例えば一般ユーザ向けモード、のユーザによる切り替え入力を受け付けることができる構成であると、ユーザ側で使い分けができるのでよりよい。
汎用モードは、自動車教習所用モードに特有の機能の一部又は全部を実行停止する構成であってもよく、教習所モードとは別の機能を実行してもよい。
Note that the photographing equipment 101 (101F, 101R) may be manufactured exclusively for services such as driving school and car sharing. A configuration that can receive a switching input by the user to a general-purpose mode, for example, a mode for general users, is better because the user can use it properly.
The general-purpose mode may be configured to stop executing some or all of the functions specific to the driving school mode, or may execute functions different from the driving school mode.
例えば、撮影機器101(101F、101R)は、自動車教習所用モードと、汎用モードとを相互に切り替え可能な構成のもとで、自動車教習所用モードのときに実行する処理を、それ以外のモード、例えば汎用モードのときには、行わないようにするとよい。 For example, the photographing devices 101 (101F, 101R) are configured to be switchable between the driving school mode and the general-purpose mode. For example, when in general-purpose mode, it is better not to do this.
撮影機器101(101F、101R)の制御部303は、撮影機器101(101F、101R)の各種の動作モードや機能に関して、撮影機器101(101F、101R)の入出力部315からのユーザ入力に基づいて、オンオフ等の設定を行うとよい。
撮影機器101(101F、101R)の制御部303は、入出力部315であるディスプレイに各種の動作モードや機能のチェックリストを表示し、それらに対するユーザの入力、例えばチェックボックスへのチェックの有無等に関する情報を受け取って、オンオフの設定を受け付けると行うとよい。
The control unit 303 of the imaging device 101 (101F, 101R) controls various operation modes and functions of the imaging device 101 (101F, 101R) based on user input from the input/
The control unit 303 of the imaging device 101 (101F, 101R) displays a checklist of various operation modes and functions on the display, which is the input/
上述した構成では、ユーザは、複数の人物が交代で又は交互に使用する車両10で体験した撮影機器101(101F、101R)の動作モードを、ユーザ自身が所有する車両10に搭載された撮影機器101(101F、101R)や、ユーザの家族、例えば両親、が所有する車両10に搭載された撮影機器101(101F、101R)で、使用することが可能となる。
撮影機器101(101F、101R)の制御部303は、例えば自動車教習所の教習生1920が教習所を卒業し、運転免許を獲得した後で、家族が所有する車両10に搭載された撮影機器101(101F、101R)に対して、教習所での教習中に使い慣れた動作モードを、アップデートや購入手続きを行うことで、追加できる構成であるとよい。
In the above-described configuration, the user can change the operation mode of the photographing equipment 101 (101F, 101R) experienced in the
The control unit 303 of the photographing devices 101 (101F, 101R) controls the photographing devices 101 (101F, 101R) installed in the
更に、撮影機器101(101F、101R)の制御部303は、教習中にその教習生1920に合わせてパーソナライズされた設定を、教習所から提供されるパスコードやパスワードを用いて、教習所の運営する施設端末105や撮影機器101(101F、101R)の製造会社や販売会社が運営する外部管理サーバ107から取得し、撮影機器101(101F、101R)のパーソナライズされた設定を引き継ぐことができる構成であるとなおよい。
Furthermore, the control unit 303 of the photographing equipment 101 (101F, 101R) uses the passcode and password provided by the driving school to set personalized settings for the
それにより、直近まで教習生1920であった運転の初心者であるユーザは、教習所での教習環境に近い状態で、撮影機器101(101F、101R)や車両10を使用することが可能となるので、例えばよりパーソナライズされた安全サポート機能等を使用することが可能となるので、初心者であるユーザに対して、より慣れたまた従ってより安全性の高い運転環境を提供することができる。
As a result, a user who is a driving beginner who was a
更に別の実施形態では、撮影機器101(101F、101R)の制御部303は、撮影機器101(101F、101R)の個々の動作モードや機能として、予め撮影機器101(101F、101R)に記憶されているものを個別に使用可能にすることと、更新等により後から使用可能にすること、を組み合わせて実行できる構成であるとよりよい。
そのような構成では、ユーザは、汎用の撮影機器101(101F、101R)に予め記憶されており、自身にとって必要であると判断した動作モードや機能を、購入手続き等により、使用可能とすることで、撮影機器101(101F、101R)の導入コストを抑えることができる。更に、教習所、タクシー、送迎、カーシェア、等で経験した、撮影機器101(101F、101R)の個々の動作モードや機能を、個別に更新や購入して、後から使用可能にすることもできる。
In still another embodiment, the control unit 303 of the imaging equipment 101 (101F, 101R) is stored in advance in the imaging equipment 101 (101F, 101R) as individual operation modes and functions of the imaging equipment 101 (101F, 101R). It is preferable to have a configuration in which it is possible to perform a combination of making available the existing ones individually and making them available later by updating or the like.
In such a configuration, the user can use the operation modes and functions that are pre-stored in the general-purpose imaging device 101 (101F, 101R) and determined to be necessary for the user through a purchase procedure or the like. Therefore, the introduction cost of the photographing equipment 101 (101F, 101R) can be suppressed. Furthermore, individual operation modes and functions of the imaging equipment 101 (101F, 101R) experienced in driving schools, taxis, transportation, car sharing, etc. can be individually updated or purchased and made available later. .
上記の実施形態とは別に、撮影機器101(101F、101R)は、各種のサービスや業務専用のものであってもよい。それらに専用の撮影機器101(101F、101R)の制御部303は、サービス中や業務中にのみ実行する機能を、動作モードに応じて停止する機能を有しているとよい。 Apart from the above embodiments, the imaging equipment 101 (101F, 101R) may be dedicated to various services and businesses. The control unit 303 of the imaging equipment 101 (101F, 101R) dedicated to them preferably has a function to stop a function that is executed only during service or business according to the operation mode.
例えばユーザがタクシーの運転手であれば、制御部303は、業務での使用と自家使用とで、専用の撮影機器101(101F、101R)の動作モードを、タクシー業務モードと、自家使用モードあるいは汎用モード、で使い分けることができるとよい。
そして、自家使用モードあるいは汎用モードでは、制御部303は、タクシー業務モード特有の機能の一部又は全部の実行を停止するとよいし、タクシー業務モード特有の機能とは別の機能を実行してもよい。
For example, if the user is a taxi driver, the control unit 303 selects the operation mode of the dedicated photographing device 101 (101F, 101R) depending on whether it is for business use or private use. It is good to be able to use it properly in the general-purpose mode.
In the private use mode or the general-purpose mode, the control unit 303 may stop executing some or all of the functions specific to the taxi service mode, or may execute a function different from the functions specific to the taxi service mode. good.
上記の実施形態では、ユーザが車両10をタクシー業務に使用する例について説明したが、サービスや業務の種類は、例えば自動車教習所、幼稚園・保育園、デイケア、タクシー、レンタカー、カーシェア、配車、観光、リムジンクルーズ、宅配・配送・郵便・搬送、営業、等であってもよい。特に、車両10が複数の人物によって交代であるいは交互に使用される車両10であると、よりよい。
In the above embodiment, an example in which the user uses the
図14は、処理装置108と接続された状態の施設端末105の例である。
図14の実施形態では、図5を用いて説明した施設端末105に、ネットワーク103の一例である接続ライン1420を介して、処理装置108が接続されている。
処理装置108には、撮影機器101(101F、101R)の記憶媒体、例えばSDカード306を複数挿入することができる。複数の記憶媒体は、例えば異なる車両10に装備された撮影機器101(101F、101R)のそれぞれにおいて、同時期に利用されていた記憶媒体である。
FIG. 14 shows an example of
In the embodiment of FIG. 14, the
A plurality of storage media, such as
図14の実施形態では、処理装置108は、スロット1401からスロット1410の合計10のスロット1401~1410を有している。従って、ユーザは、処理装置108を用いて、最大で10台の車両10に搭載された撮影機器101(101F、101R)の記憶媒体から、処理装置108の補助記憶装置702への映像データの転送作業、又は、処理装置108とは別の装置の補助記憶装置への映像データの転送作業、例えば施設端末105の補助記憶装置502への映像データの転送作業、のうち少なくとも一方をまとめて実行することができる。
In the embodiment of FIG. 14, processing
なお、以下、処理装置108の主記憶装置2201に格納された各モジュールが実行するものとして説明する処理装置108の各機能のうち、少なくとも一部は、例えば処理装置108と接続する施設端末105の各モジュールによっても、実行することができる。
そのような構成では、処理装置108が接続するシステムは、全体として、以下に説明する機能を実行することができる。
At least some of the functions of the
In such a configuration, the system to which
処理装置108のデータ読み込みモジュール2210は、スロット1401からスロット1410に、撮影機器101(101F、101R)の記憶媒体、例えばSDカード306等、が挿入されると、あるいは、挿入後夜間の時間帯に、例えばスロット1401からスロット1410に挿入された10枚のSDカード306から、一枚ずつ順次、映像データの転送を開始するとよい。
それによりユーザは、記憶媒体ごとに、転送作業の実行動作を行わなくてよいので、転送に時間がかかる大容量の映像データを転送する場合にはその都度転送開始の操作を行う手間が省けるので特によい。
The
As a result, the user does not have to execute the transfer operation for each storage medium, so that when transferring a large amount of video data that takes a long time to transfer, the user can save the trouble of starting the transfer each time. Especially good.
更に、処理装置108のデータ読み込みモジュール2210は、予約情報2221に基づき、例えば教習所の教習時間帯の映像データのみを転送する機能や、映像情報2224に基づき、例えば教習所の教習時間帯であって車両10内に教官1910と教習生1920(図20参照)が乗車している時間帯の映像データのみを転送する機能や、長時間に渡る映像データから上記の時間帯のみを取り出し転送する機能や、それらの機能を選択的に実行する機能、等を有していると更によい。
Further, the
そのような実施形態では、車内に人がいない時間帯、例えば教習と教習の間の休憩の時間帯や食事の時間帯等、のユーザが所望しない時間帯の映像データの転送や複製を行わないようにできるので、処理装置108の補助記憶装置2202の容量を節約し、更に、映像データの転送や複製に要する時間を短縮できるので、よい。
In such an embodiment, transfer or duplication of video data during times when no one is in the car, such as breaks between lessons or meals, which is not desired by the user, is not performed. Therefore, the capacity of the
後述するユーザからの対象入力を受け付けた場合は、処理装置108のデータ管理モジュール716は、例えば人物、車両10、時間帯等の情報に応じて、映像データの転送の開始を実行したり、転送する映像データを判別したりするとよい。
When a target input from the user, which will be described later, is received, the
上記の転送に関して、処理装置108のデータ管理モジュール2216や施設端末105のデータ管理モジュール516等は、転送の順番や、転送の対象となる映像データや、転送対象とする記憶媒体を、ユーザによって決定可能な基準や、プリセットされた基準に従って、実行する構成であるとよい。
Regarding the above transfer, the
それによりユーザは、例えば、同一の人物が、複数の車両10に乗車した場合であっても、個々の記憶媒体ごとに、個々の映像データを確認することなく、その人物が撮影された映像データをまとめて入手することができるのでよい。
As a result, for example, even when the same person rides in a plurality of
処理装置108のデータ管理モジュール2216や施設端末105のデータ管理モジュール516等は、乗員ごと、例えば教習生1920ごと、にまとめて映像データを管理する構成、例えば保存や統合する構成、であるとよりよい。
それによりユーザは、特定の乗員に関する映像をまとめて確認や処理する場合、例えば1人の教習生1920の全教習課程の映像データをまとめて提供する場合等、に、改めて映像データの情報を整理する必要がないので、格段に時間節約的である。
The
As a result, the user can reorganize the information of the video data when collectively confirming or processing the video regarding a specific crew member, for example, when providing collectively the video data of the entire training course of one
処理装置108のデータ読み込みモジュール2210は、スロット1401からスロット1410に記憶媒体が挿入されたことを検知すると、挿入された記憶媒体に関する情報を、施設端末105のデータ管理モジュール516へ出力する。
When the
取得した記憶媒体に関する情報に基づいて、施設端末105のデータ管理モジュール516は、表示制御モジュール515と協働して、例えば、図15、図16を用いて説明するビューアの操作画面1500、1600等を用いて、記憶媒体のリストの表示や、転送する映像データが撮影された時間帯の受け付けや、どの記憶媒体からどの順番で映像データの転送を開始するかの受け付け等を行う。
Based on the acquired information about the storage medium, the
処理装置108のデータ管理モジュール2216は、施設端末105の処理装置連携モジュール518から、記憶媒体内の映像データの転送が終了したことに関する情報を受け取ると、転送が終了した記憶媒体ごとに、あるいは、転送が終了した少なくとも2つの記憶媒体を同時に、スロット1401~1410から安全に取り出す構成であるとよい。
When the
別の実施形態では、上述の処理装置108の機能の一部又は全ては、施設端末105に組み込まれていてもよい。そのようにすると、ユーザの利用状態に対応させて映像データの記憶容量等を個別に決定することができる構成を提供することができるので、ユーザは処理装置108の導入コストを安価に抑えつつ、必要に応じて情報管理システムをカスタマイズすることができる。
特に、ユーザが撮影機器101(101F、101R)の記憶媒体からの映像データの転送先のデータ容量を選択、増加することができる構成であると、よりよい。
In another embodiment, some or all of the functionality of
In particular, it is better if the user can select and increase the data capacity of the transfer destination of the video data from the storage medium of the imaging device 101 (101F, 101R).
更に別の実施形態では、上述の処理装置108の機能の一部又は全てを施設端末105に組み込み、且つ、車両10内の撮影機器101(101F、101R)の記憶媒体から施設端末105への映像データの転送を、無線LAN等のネットワーク103を介して、記憶媒体を車両10内の撮影機器101(101F、101R)に挿入したまま、実行してもよい。
In still another embodiment, part or all of the functions of the above-described
そのような構成では、上述の処理装置108の各モジュールは、必要に応じて、施設端末105の主記憶装置501に格納されている。
以下の説明では、施設端末105の主記憶装置501に格納された上述の処理装置108の各モジュールについても、上述の説明と同じ符号を用いて説明する。
In such a configuration, each module of the
In the following description, each module of the
施設端末105のデータ読み込みモジュール2210は、所定の時間帯に、無線LAN等のネットワーク103を介して、撮影機器101(101F、101R)の制御部303が転送する映像データ等を読み込む構成であるとよい。
所定の時間帯とは、例えば夜間の時間帯やサービスの提供時間外の時間帯やサービスの提供施設の営業時間外の時間帯、サービス業務の提供が終了した時点から再度提供を開始する時点までの間の時間帯等である。
The
Predetermined time period means, for example, night time period, time period outside service provision hours, time period outside business hours of service provision facilities, and from the point in time when the provision of the service operation ends to the point in time when the provision starts again. The time zone between and the like.
更に、施設端末105のデータ読み込みモジュール2210は、予約管理サーバ104から取得した予約情報421や、施設端末105の補助記憶装置502に記憶された予約情報521に基づき、車両10に対して時間割の次の教習の予約がなく、且つ、次の教習の予約受付の締切時間が過ぎたことを特定した後に、撮影機器101(101F、101R)の制御部303に対して、映像データ等の転送を開始させる命令を出力する機能を有しているとよりよい。
Furthermore, the
処理装置108のデータ読み込みモジュール2210は、車両10に搭載された撮影機器101(101F、101R)の記憶媒体から映像データ等を読み出し、処理装置108の連携モジュール2211やデータ管理モジュール2216は、処理装置108の記憶装置や施設端末105の補助記憶装置502へ転送する機能を有している。
The
それに加え、施設端末105のデータ管理モジュール516及びデータ処理モジュール517や処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、以下の、
映像データを解析し、所定のイベントの発生を判定する機能、
映像データを解析し、所定のパラメータの値やその時間変化を記録する機能、
映像データの解析の結果判定されたイベントや記録されたパラメータの値やその時間変化に関する情報に基づいて、映像データを管理する機能、及び
撮影機器101(101F、101R)によって判定されたイベントや記録されたパラメータの値やその時間変化に関する情報に基づいて、映像データを管理する機能、
のうち少なくとも1つの機能を有しているとよりよい。
In addition, the
A function that analyzes video data and determines the occurrence of a predetermined event,
A function that analyzes video data and records the values of predetermined parameters and their changes over time,
A function of managing video data based on information about events determined as a result of analysis of video data, recorded parameter values, and their temporal changes; A function that manages video data based on the values of parameters and information about their changes over time,
It is better to have at least one function among
所定のイベントとは、各種のハラスメント、例えば、パワハラ、モラハラ、セクハラ、マタハラ、ジェンダーハラスメント等、や、問題運転、例えば、急ブレーキ、急ハンドル、蛇行等、である。 Predetermined events include various types of harassment such as power harassment, moral harassment, sexual harassment, maternity harassment, gender harassment, and problem driving such as sudden braking, sudden steering, and meandering.
所定のパラメータとは、例えば、乗員間の距離、車内音量1760a、車外音量1760b、車両の走行経路1830~1860や、走行範囲1820、車両の停車地点1870~1890、前方の他車両までの距離とブレーキングのタイミングや強さの関係、車両周囲の他車両とハンドリングのタイミングや強さ関係、乗員ごとの挙動の極端さ、等である。
Predetermined parameters include, for example, the distance between passengers, the vehicle interior volume 1760a, the vehicle exterior volume 1760b, the
施設端末105のデータ管理モジュール516及びデータ処理モジュール517や処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、上記の解析の処理を、所定の時間帯、や、映像データの転送時に並行して、実行するとよい。
The
所定の時間帯とは、上述の通り、例えば夜間の時間帯やサービスの提供時間外の時間帯やサービスの提供施設の営業時間外の時間帯、サービス業務の提供が終了した時点から再度提供を開始する時点までの間の時間帯等である。 Predetermined time period means, as described above, for example, night time period, time period outside service provision time period, time period outside business hours of service provision facility, service operation is provided again from the time of completion. It is the time period until the start time, and the like.
施設端末105のデータ管理モジュール516及びデータ処理モジュール517や処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、実行する解析処理をユーザの選択入力に基づいて、実行する機能を有していると、必要に応じて演算負荷を調整することができるのでよりよい。更に、特定の対象、例えば特定の教官1910、に関連付けられた映像データに対して、特定の解析処理を実行するように、ユーザが設定できる構成であるとよりよい。
The
なお、図14では、施設端末105と処理装置108とが接続ライン1420を介して接続している構成について説明したが、処理装置108は、ネットワーク103を介して、施設端末105及び外部管理サーバ107へ、同時にあるいは選択的に、接続すること構成であってもよい。
14, the
そのような構成では、ユーザは、より容易に外部管理サーバ107へ、映像データのバックアップを取ることが可能となる。
あるいはユーザは、全て又は大半の映像データを外部管理サーバ107の補助記憶装置702に保存し、それらの映像データの中から施設端末105の補助記憶装置502に保存する映像データを選択して、保存できる構成であると、施設端末105の補助記憶装置502の記憶容量を節約できるのでよい。
With such a configuration, the user can more easily back up video data to the
Alternatively, the user saves all or most of the video data in the
図15は、施設端末用ビューアの操作画面1500の例である。
図16は、施設端末用ビューアの別の操作画面1600の例である。
FIG. 15 is an example of an operation screen 1500 of the facility terminal viewer.
FIG. 16 is an example of another operation screen 1600 of the facility terminal viewer.
以下、図15の操作画面1500、及び、図16の別の操作画面1600について、説明する。
操作画面1500及び別の操作画面1600は、それぞれ、例えば、映像データの転送、管理、加工、複製、書き出し等や、撮影機器101(101F、101R)の設定等、を実行するため画面である。施設端末105の表示制御モジュール515は、例えば操作端末用ビューアを表示する機能やプログラムであり、データ管理モジュール516と連携し、施設端末105の出力装置505であるモニターディスプレイ等に操作画面1500、1600を表示する。
The operation screen 1500 in FIG. 15 and another operation screen 1600 in FIG. 16 will be described below.
The operation screen 1500 and another operation screen 1600 are screens for executing, for example, transferring, managing, processing, duplicating, writing, etc. of video data, setting of the imaging devices 101 (101F, 101R), etc., respectively. The
施設端末105の表示制御モジュール515はデータ管理モジュール516と連携し、操作画面1500及び別の操作画面1600に、各種の情報を対応付けて表示する。
The
例えば、ユーザが自動車教習所の経営者等である場合、施設端末105のデータ管理モジュール516は、受講課程IDと教習ルート、教習内容の情報等を対応づけて予め記憶している構成とするとよい。また、撮影機器101(101F、101R)の入出力部315の操作に応じて、教習ルート、教習内容の情報を設定し、設定されたこれらの情報を、ネットワーク103を介して、又は、記憶媒体から、読み取り、補助記憶装置502に記憶し、表示可能とする機能を有しているとよい。
For example, if the user is a manager of a driving school, etc., the
図15の操作画面1500では、1ヶ月のカレンダー表示が選択されており、図16の別の操作画面1600では、1週間の時間割表示が選択されている。
なお、図16では、例として、自動車教習所等の車両10を用いて提供されるサービスの時間割、特にはコマ、を示している。しかしながら、時間割表示とはそれに限らず、時間単位あるいは分単位で区切られた表示や、サービスや役務を提供する人のシフトの時間帯に基づいた表示であってもよい。
In the operation screen 1500 of FIG. 15, one-month calendar display is selected, and in another operation screen 1600 of FIG. 16, one-week timetable display is selected.
In addition, FIG. 16 shows, as an example, a timetable of services provided using a
表示制御モジュール515は、ユーザから、表示切替部1520により、時間割表示とカレンダー表示のいずれかの選択を受け付けることにより、操作画面1500と別の操作画面1600との間で表示を切り替えることができる。
以下では、自動車教習所における使用を想定した例について説明する。
The
An example assuming use in a driving school will be described below.
図15の操作画面1500内の対象選択部1530では、教習所の管理者であるユーザから、保存する映像データの保存対象に対する選択の入力を受け付けることができる。
図15の操作画面1500では、対象ID入力部1540にSD01-SD10と入力されている。なお、SD01-SD10とは例えば、図14に処理装置108のスロット1401~1410に挿入された記憶媒体である。そして、保存方法としては、それらの記憶媒体、例えばSDカード306、に含まれる全ての映像データを保存する全保存が選択されている。
A
In the operation screen 1500 of FIG. 15, SD01-SD10 are input to the target
それに代えて、「教官(DI)」及び「教習生(Tr)」が選択され、特定の教官1910のID又は特定の教習生1920のIDが入力されることで、表示制御モジュール515及びデータ管理モジュール516は、複数の記憶媒体に記録された映像データの中から横断的に、対象になる入力された特定の教官1910又は特定の教習生1920が同乗している状態を撮影した映像データをピックアップして保存することができる機能を有しているとよい。
なお、上記の説明における「表示制御モジュール515及びデータ管理モジュール516は」という記載は、技術的に齟齬が生じない範囲において「表示制御モジュール515は」、「データ管理モジュール516は」、「表示制御モジュール515はデータ管理モジュール516と連携して」、「データ管理モジュール516は表示制御モジュール515と連携して」、「表示制御モジュール515及び/又はデータ管理モジュール516を有するプログラム等は」と読み替えてもよく、この点は、以下の説明においても同様である。
Alternatively, "Instructor (DI)" and "Trainee (Tr)" may be selected and the ID of a
It should be noted that the descriptions of "the
そのような構成では、保存方法として選択保存が選択されると、施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、ピックアップされた映像データのリストを表示して、ユーザからの選択入力を受け付けて所望の映像データの保存を優先して実行すること等もできる。
In such a configuration, when selective storage is selected as the storage method, the
更に、表示制御モジュール515及びデータ管理モジュール516は、映像データと、その映像データに記録されている教官1910のID及び教習生1920のIDとを紐付ける機能、及び、教官1910の予約システムのデータを取り込む機能を有しているとよい。
Furthermore, the
図15の操作画面1500では、1ヶ月のカレンダー表示部には、白く表示された日1501と、異なる色でハイライトされた日1502~1505とが表示されている。
第1の色でハイライトされた日1502、第2の色でハイライトされた日1503、第3の色でハイライトされた日1504、及び、第4の色でハイライトされた日1505、を用いることで、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、映像データに、各色に割り当てられた所定の映像内容が含まれていることを非常に良好な視認性で、表示することができる機能を有しているとよい。
所定の映像内容とは、例えば、撮影されたイベントの種類や総数、重要度の高いイベントが記録されているかどうか、等、である。
In the operation screen 1500 of FIG. 15, a
a day highlighted in a
Predetermined video contents include, for example, the type and total number of captured events, whether events of high importance are recorded, and the like.
それによりユーザは、例えばより多くにイベントが撮影されていたり、より重要度の高いイベントが撮影されている場合には、それに応じて、ハイライトする色の明度をより低くしたり、彩度をより高くしたりした表示を行う設定を適用することができるので、問題となるイベントに対する視認性がより高まる。
例えば、複数のイベントが記録されている映像データや、重要度の高いイベントが記録されている映像データについては、赤系統の色、特により明度の低い赤系統の色で表示することで、ユーザに対する視認性と警告性を高めることができる。
Thereby, the user can, for example, if more events are being filmed or more important events are being filmed, the highlighting colors will be less bright or saturated accordingly. A setting can be applied that provides a higher or higher display, thus providing greater visibility to the event in question.
For example, video data in which multiple events are recorded or video data in which an event of high importance is recorded can be displayed in a reddish color, especially a reddish color with a lower brightness, so that the user can visibility and warning against
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザの入力に応じて、色の種類を変更したり、異なる色でハイライトした表示に代えて、イベントの内容情報等を文字で表示したりして、表示を変更する構成であると、ユーザごとに見やすい表示状態を提供することができるので、よりよい。
The
それらの構成では、映像データの転送の前後に関わらず、ユーザが実際に映像データを再生し確認せずとも、日にちごとに映像データの特徴的な概要を識別しやすいので有利である。
特に、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、映像データの転送の前に、各映像データに関連付けられたイベント情報を読み取る構成であると、ユーザに対して、各映像データに撮影されているイベントに関連した情報を、迅速に提供できるのでよい。
These configurations are advantageous because they facilitate the identification of characteristic outlines of the video data for each day, regardless of whether the video data is transferred or not, without the user having to actually reproduce and check the video data.
In particular, the
各映像データに関連付けられたイベント情報とは、撮影機器101(101F、101R)が映像データの撮影中に特定したイベントに関する情報であり、それぞれの映像データに付与された情報であるとよいが、映像データとは分けて読み取ることができる情報であるとよりよい。 The event information associated with each piece of video data is information about an event specified during the shooting of the video data by the shooting device 101 (101F, 101R), and may be information attached to each piece of video data. It is preferable that the information can be read separately from the video data.
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、例えば、映像データの転送や保存が終了すると、各日にちに映像データのサムネイル1510を表示する構成であるとよい。それにより、ユーザは、サムネイル1510が表示された日にちの映像データが転送されたことをより確認しやすくなるのでよい。
The
別の実施形態では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、各日にちの映像データに関連して、サムネイル情報を先に取得する構成としてもよい。
In another embodiment, the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図15の操作画面1500のプレビュー部分に、ユーザによって選択されたサムネイル1510の映像を表示する。
なお、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、プレビュー部分を、操作画面1500とは別のウィンドウで表示させる機能を有していてもよい。そのようにすると、ユーザはより大きな画面で映像を確認できるのでよりよい。
The
Note that the
図15の例では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、プレビュー部分の横にイベント情報、より具体的には発生したイベントとその発生時間、のリストを表示している。
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、これらのリスト項目に表示するイベントのうちの少なくとも1つに対するユーザからの選択入力を受け付けると、プレビュー部分に、選択されたイベントの発生時間の映像を再生する。
In the example of FIG. 15, the
When the
図16の施設端末用ビューアの別の操作画面1600の例では、図15の施設端末用ビューアの操作画面1500の例に追加して、施設端末105の表示制御モジュール515は、イベント選択部1610を表示している。
図16の例では、ユーザは、教官IDがDI0012の教官1910が乗車している映像データのうち、イベントとして「急ブレーキ」、「忘れ物」、「ルート外走行」、「ハラスメント」が記録されている映像データ、を選択している。
In the example of another operation screen 1600 of the facility terminal viewer in FIG. 16, in addition to the example of the operation screen 1500 of the facility terminal viewer in FIG. it's shown.
In the example of FIG. 16, the user selects video data in which an
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザによるイベント追加や削除を受け付ける構成であるとよりよい。それによりユーザは複数存在するイベントのうち、重要度の高いイベントをより選択しやすい表示にカスタマイズすることができる。
It is preferable that the
図16の例では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、選択されたイベントが記録されている映像データが撮影された時間割のコマに、それぞれのイベント名を表示している。
ユーザは、そこから、所望の日にちの所望のコマのイベントを選択することができ、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザによる選択入力に応じて、映像データの転送を実行する。
図16の例は、映像データの転送を開始していない状態を示しており、プレビュー部分には、映像データは表示されていない。
In the example of FIG. 16, the
From there, the user can select an event in a desired frame on a desired date, and the
The example of FIG. 16 shows a state in which transfer of video data has not started, and no video data is displayed in the preview portion.
なお、図15、図16のいずれの実施形態においても、施設端末105のデータ管理モジュール516は、個々の映像データの転送前に、個々の映像データのプレビュー表示用データを取得する構成、例えば撮影機器101(101F、101R)での撮影開始時の画像やイベント発生時の画像、等のデータであって、個々の映像データに比べて容量の小さいデータを取得する構成であるとよい。
そのような構成では、ユーザに対して更に別の表示のカスタマイズの可能性を提供することができるのでよい。
In both the embodiments of FIGS. 15 and 16, the
Such a configuration may provide additional display customization possibilities to the user.
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図15、図16の操作画面1500、1600に、撮影機器101(101F、101R)の各種の動作モードや機能のチェックリストを表示し、それらに対するユーザの入力、例えばチェックボックスへのチェックの有無等に関する情報を受け取り、施設端末105の撮影機器連携モジュール511が、ユーザの入力に関する情報、例えばチェックボックスへのチェックの有無等に関する情報、を少なくとも1つの撮影機器101(101F、101R)へ、送信するとよい。
The
特に、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザの入力に関する情報を、複数の車両10に搭載された異なる撮影機器101(101F、101R)の制御部303に対して、共通して送信できる機能を有しているとよい。
それによりユーザは、複数の車両10に対して、一度の設定操作で設定を実行することができる。特に、自動車教習所やタクシー会社などでは、複数の車両10に対して、自動車教習所やタクシー会社が独自に最適化した設定を複数の車両10に対して、一度の設定操作で実行することができるので、設定に要する時間的なコストを格段に低減させることができる。
In particular, the
Thereby, the user can perform setting for a plurality of
更に、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、例えば撮影機器101(101F、101R)の製造会社や販売会社が、各サービス、各業態、各使用状態等に適合させたベストモードとして撮影機器101(101F、101R)にプリセットされた設定や各種の設定のセットを、車両10に対して設定できる機能を有しているとよく、特には複数の車両10に対して一度の設定操作で設定できる機能を有しているとよりよい。
それによりユーザは、撮影機器101(101F、101R)の入出力部315のみならず、使い慣れた施設端末105等の入力部504を用いて、より容易に撮影機器101(101F、101R)の設定を行うことができる。
Furthermore, the
As a result, the user can more easily set the imaging equipment 101 (101F, 101R) by using not only the input/
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、撮影機器101(101F、101R)の制御部303へ、上述の第5-5の制御例等に関連する設定を、送信する機能を有しているとよりよい。
The
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、例えば、第5-5-1の制御例等の「今日はn回目の教習ですね」、「乗車後はすぐにシートベルトをする習慣をつけましょう」、「今日は坂道発進の教習です」、「今日は路上講習です」等や、あるいは、「今月の接客目標は○○です」、「今月のあなたの売上目標は〇〇です」等の音声情報を、撮影機器101(101F、101R)の制御部303へ送信する機能を有しているとよく、複数の車両10に搭載された複数の撮影機器101(101F、101R)に対して一度の設定操作で設定する機能を有しているとよりよい。
The
別の実施形態では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、少なくとも1つの撮影機器101(101F、101R)の制御部303の設定、特には複数の撮影機器101(101F、101R)の制御部303の設定を、処理装置108に挿入された状態の撮影機器101(101F、101R)の記憶媒体の情報を更新することによって、変更することができる。
In another embodiment, the
それにより、撮影機器101(101F、101R)が通信接続状態にない状況であっても、例えば、撮影機器101(101F、101R)そのものが通信接続機能を有していない状況や、撮影機器101(101F、101R)は通信接続機能を有しているもののその通信接続機能が使用できない状況であっても、ユーザは、更新された記憶媒体を、撮影機器101(101F、101R)へ戻すことによって、車両10内で個々の撮影機器101(101F、101R)に対して直接設定入力を行う場合と比べて、よりも効率的に撮影機器101(101F、101R)の設定を変更することができる。
As a result, even if the imaging device 101 (101F, 101R) is not in a communication connection state, for example, the imaging device 101 (101F, 101R) itself does not have a communication connection function, or the imaging device 101 (101F, 101R) 101F, 101R) has a communication connection function, but even if the communication connection function cannot be used, the user can return the updated storage medium to the imaging device 101 (101F, 101R), Compared to the case of directly inputting settings for individual imaging devices 101 (101F, 101R) in the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図15の操作画面1500や図16の別の操作画面1600に追加して、又は代替して、予約管理サーバ104から読み出したCSVファイルの情報のうち、時間帯を列とし、車両IDを行とした、第1の表を提示する機能、時間帯を列とし、教官IDを行とした、第2の表を提示する機能、及び、第1の表と第2の表の表示を切り替える機能を備えているとよい。
The
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、表の各セルに、CSVファイルの各フィールドの情報のうち少なくとも2つを表示する機能を備えるとよく、特にはCSVファイルの各フィールドのすべての情報を表示する機能を備えるとよい。
The
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図15の操作画面1500や図16の別の操作画面1600に追加して、又は代替して、複数の記憶媒体から読み取った複数の映像データを、個人ごとにまとめて、別の記憶媒体や外部の記憶装置に記憶又は転送することができるとよい。
それにより、ユーザは、複数回に渡って、異なる車両を用いて提供されたサービスであっても、サービス利用者に対して、サービス提供期間の全て、又は、サービス利用者が求める複数の映像データを、DVD等に記録して、提供することができる。
The
As a result, even if the service is provided multiple times using different vehicles, the user can provide the service user with the entire service provision period or a plurality of video data requested by the service user. can be recorded on a DVD or the like and provided.
例えばユーザが自動車教習所の運営者や経営者であれば、複数の映像データを教習生ごとにまとめることにより、例えばある教習生1920が卒業後に事故を起こしたとき、その教習生1920に対してどのような教習がなされたかを容易にトレースすることもできる。同様にして、例えばある教官1910による教習内容に問題が認められたとき、その教官1910による過去の複数の教習内容を容易にトレースすることもできる。
例えばユーザがタクシー会社の運営者や経営者であれば、複数の映像データを運転手ごとにまとめることにより、例えばある運転手による接客内容に問題が認められたとき、その運転手による過去の複数の接客内容を容易にトレースすることもできる。
For example, if the user is an operator or a manager of a driving school, by collecting a plurality of video data for each trainee, for example, when a
For example, if the user is an operator or a manager of a taxi company, by collecting a plurality of video data for each driver, for example, when a problem is recognized in the content of customer service by a certain driver, it is possible to It is also possible to easily trace the details of customer service.
図17は、施設端末用ビューアのプレビュー画面1700の例である。
施設端末105の表示制御モジュール515はデータ管理モジュール516と連携し、プレビュー画面1700を、例えば、図15、図16のプレビュー部分1550に表示したり、あるいは、図15の操作画面1500や、図16の別の操作画面1600とは別のウィンドウで表示したりすることができる。
FIG. 17 is an example of a preview screen 1700 of the facility terminal viewer.
The
施設端末105の表示制御モジュール515は、データ管理モジュール516により読みだした映像データの映像を、プレビュー画面1700の映像表示部1710に表示する。
なお、映像表示部1710で再生する映像は、撮影機器101(101F、101R)の入出力部315であるモニタ等で再生する映像と、同一又は類似のものであってもよい。
The
The video reproduced on the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、プレビュー画面1700の地図表示部1720に、映像データの地図情報、特には走行ルート情報を表示する。
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザによる地図表示部1720に対する入力を受け付けて、例えば選択された走行ルートの映像データの映像を映像表示部1710に表示する構成であるとよい。
The
The
特に、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、異なる車両10に搭載された撮影機器101(101F、101R)で撮影された映像データや異なる記憶媒体に記録された映像データに関する、少なくとも2つの地図情報をまとめて表示する構成であるとよい。
これらの構成については、図18を用いてより詳細に説明する。
In particular, the
These configurations will be described in more detail using FIG.
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図17のプレビュー画面1700の地図表示部1720に、映像データの転送処理後、施設端末105の補助記憶装置502や処理装置108の記憶装置に記憶された映像データの撮影された地図情報、特には走行ルート情報を表示する。
The
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図17のプレビュー画面1700のリスト表示部1730に、映像データのリストを表示する。
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、例えば、ユーザによって選択された日にちに撮影された映像データのファイル名やユーザによって選択された人物やイベント等が撮影されている映像データのファイル名等を、リストにして表示する。
ユーザは、リストに表示されたファイル名を選択することが可能であり、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザにより選択されたファイル名を有する映像データを映像表示部1710に再生する構成であるとよい。
The
The
The user can select a file name displayed in the list, and the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図17のプレビュー画面1700のイベント表示部1740a、1740bに、映像データ内に記録されているイベントに関連する情報を撮影した時間に対応付けて表示する。
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、イベント表示部1740aには、乗員間の距離に関する情報をグラフで表示しており、イベント表示部1740bには、車両10内の音声の音量及び車両10外の音声の音量に関する情報をグラフで表示している。
The
The
ユーザは、グラフの任意の時点を選択することが可能であり、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザにより選択されたグラフの時点に対応する映像を映像表示部1710に再生する構成であるとよい。
The user can select any point in the graph, and the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図17(a)のイベント表示部1740aにおいては、横軸に時間、縦軸に中間位置Mを表す点線からの2つの距離である第1距離1750aと第2距離1750bを概略的に表示している。
以下の説明では、中間位置Mを表す点線は、例えば運転席と助手席の中間位置に対応するものとして説明するが、中間位置Mを表す点線に対応する位置は、ユーザによって設定可能であってもよい。更に、撮影機器101(101F、101R)の制御部303が、車両10内の乗員ごとに異なる位置に設定してもよい。
The
In the following description, the dotted line representing the intermediate position M corresponds to, for example, the intermediate position between the driver's seat and the front passenger seat. However, the position corresponding to the dotted line representing the intermediate position M can be set by the user. good too. Furthermore, the control unit 303 of the photographing device 101 (101F, 101R) may be set to a different position for each passenger in the
第1距離1750aは、運転席の座っている乗員と、運転席と助手席の中間位置Mまでの間の距離Dを示している。より具体的には、例えば右ハンドルの車両10であれば、ハンドルを持って運転している乗員の左肩や左肘の位置から、運転席と助手席の中間位置Mまでの間の距離Dを示している。
図17(a)に示されている第1距離1750aのグラフからは、運転動作や車両10の振動等に応じて生じる身体の揺れ等に基づいてある程度の範囲で変化するが、特に大きく中間位置Mに近づいてはいないことが分かる。
A
From the graph of the
第2距離1750bは、助手席の乗員と、運転席と助手席の中間位置Mまでの間の距離Dを示している。より具体的には、例えば右ハンドルの車両10であれば、助手席に座っている乗員の右肩や右肘や右手の位置から、運転席と助手席の中間位置Mまでの間の距離Dを示している。
第2距離1750bのグラフは、第1の時点T1と第2の時点T2の2つの時点で、助手席の乗員が、中間位置Mを超えて、運転席側へ近づいていることを示している。
A
The graph of the
なお、図17の例では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、イベント表示部1740a、1740bには、各乗員の中間位置Mからの距離をグラフにして示しているが、単純に乗員間の距離を表示してもよい。
In the example of FIG. 17, the
ユーザは、第1の時点T1と第2の時点T2のような、イベント表示部1740aに、特徴的な情報が表示されている時点を選択することができる。例えば、ユーザは、第2距離1750bのグラフの第1の時点T1や第2の時点T2付近にマウスのカーソルを合わせてクリックすると、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、ユーザにより選択されたグラフの第1の時点T1や第2の時点T2での映像を映像表示部1710に再生する構成であるとよい。
The user can select time points such as the first time point T1 and the second time point T2 at which characteristic information is displayed in the
それによりユーザは、第1の時点T1と第2の時点T2での、助手席の乗員の運転席側への接近が、どのような状況で発生したのかを容易に確認することができる。
このような構成は、グラフに現れる僅かな特徴を、施設端末105のデータ処理モジュール517や撮影機器101(101F、101R)の制御部303等がそのような僅かな特徴をイベントとして検知する設定ではないが、ユーザがそのような僅かな特徴が発生した状況の映像データを確認したい場合等に、特に有用である。
Accordingly, the user can easily confirm under what circumstances the occupant in the front passenger seat approached the driver's seat side at the first time point T1 and the second time point T2.
In such a configuration, the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、図17(b)のイベント表示部1740bにおいては、横軸に時間、縦軸に車内音量1760a及び車外音量1760bを概略的に表示している。
図17(b)のイベント表示部1740bに示されているそれぞれの棒は、撮影機器101(101F、101R)のマイクや車両10の内外に搭載されたその他のマイク等によって検出されたそれぞれの時間での音量、例えば所定の時間の間に検出された積算音量等、を示している。
所定の時間は、例えば数秒間から数分の間で、ユーザが選択あるいは設定することができるとよい。
The
Each bar shown in the event display portion 1740b of FIG. 17(b) represents each time detected by the microphones of the photographing equipment 101 (101F, 101R) and other microphones mounted inside and outside the
The predetermined time may be selectable or set by the user, for example between a few seconds and a few minutes.
17(b)のイベント表示部1740bでは、車内音量1760aが、第3の時点T3で、上昇している。これは、例えば車内の乗員の会話に対応するものである。
17(b)のイベント表示部1740bでは、車外音量1760bが、第4の時点T4で、低下している。これは、例えば車両10が停車し風切り音やタイヤの回転音の低下に対応するものである。
In the event display portion 1740b of 17(b), the in-vehicle sound volume 1760a is increased at the third point in time T3. This corresponds, for example, to conversations of passengers in a car.
In the event display portion 1740b of 17(b), the outside sound volume 1760b is lowered at the fourth time point T4. This corresponds to, for example, a decrease in wind noise and tire rotation noise when the
17(b)のイベント表示部1740bでは、車内音量1760a及び車外音量1760bの双方が、第5の時点T5及び第6の時点T6で、上昇している。これは、例えば、他車両から自車両10への追突や自車両10付近での他車両同士の追突等による音と、それに起因した車内の様子、例えば悲鳴や「危ない!」という発話等による音、等に対応するものである。
In the event display portion 1740b of 17(b), both the vehicle interior volume 1760a and the vehicle exterior volume 1760b are increased at the fifth time point T5 and the sixth time point T6. This includes, for example, the sound of a rear-end collision of another vehicle with the
別の実施形態では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、プレビュー画面1700のイベント表示部1740に2つ以上のイベント情報を表示することも可能である。
そのような構成では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、イベント表示部1740(1740a、1740b、1750a、1750b)に表示する情報の組み合わせに関するユーザの入力を受け付ける構成であるとよりよい。
In another embodiment, the
In such a configuration, the
そのような構成では、単独のイベント情報のみでは判定が困難な状況を、より高精度に判定することができる。
ユーザは、例えば乗員間の急激な接近や接触と車内音量1760aのみの急激な上昇が同時に発生していることをグラフから確認した場合に、パワハラが発生した可能性や大声で暴力が振るわれた可能性があると判断し、対応する時点の映像を直感的な操作で再生することができる。
With such a configuration, it is possible to more accurately determine situations that are difficult to determine with only single event information.
For example, when the user confirms from the graph that a sudden approach or contact between passengers and a sudden increase in only the vehicle interior volume 1760a occur at the same time, there is a possibility that power harassment has occurred or a loud violence has occurred. It is possible to judge that there is a possibility, and play back the video at the corresponding point in time by intuitive operation.
なお、上記の第2の制御例の関連等で説明した通り、撮影機器101(101F、101R)の制御部303も同様の判定を実行する構成であるとよりよい。
また、上記のユーザによるパワハラや事故のイベントの確認は、表示制御モジュール515が、その可能性のある部分を例えばイベント表示部1740aや1740bにハイライトして表示したり、プレビュー画面1700に、可能性のある部分を表示したりすることで、よりユーザの確認作業を容易にすることができる。
As described above in connection with the second control example, etc., it is preferable that the control unit 303 of the photographing device 101 (101F, 101R) is also configured to execute the same determination.
In addition, the
施設端末105のデータ管理モジュール516及びデータ処理モジュール517や、処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、イベント表示部1740(1740a、1740b、1750a、1750b)に表示する情報、特には乗員ごとや乗員全体での特徴的な情報や平均的な情報やそれに関連する情報を、収集し、分析する、特には統計的に分析する、構成であるとよい。更に、それらの特徴的な情報を車両10ごとに比較して分析する構成であるとよりよい。
The
特徴的な情報とは、例えば、同乗者との距離、車内での会話の音量、会話の頻度、ブレーキのタイミングやブレーキングの強さ、加速のタイミングや加速の強さ等の運転挙動、車外環境に対する反応速度、例えば信号の変化や歩行者に対する反応速度、リラックス状態の発生頻度、ストレス状態の発生頻度、車両10の使用前後での車内状態の変化やその発生頻度、例えば忘れ物をする頻度、運転挙動の正確さや適切さ、例えばカーブやS字クランク等でのハンドリングやブレーキングの正確さや適切さ、等である。
Characteristic information includes, for example, the distance from fellow passengers, the volume of conversations in the car, the frequency of conversations, driving behavior such as the timing and strength of braking, the timing and strength of acceleration, Response speed to the environment, e.g., reaction speed to signal changes and pedestrians, frequency of occurrence of relaxed state, frequency of occurrence of stress state, change in vehicle state before and after use of
更に、施設端末105のデータ管理モジュール516及びデータ処理モジュール517や処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、各種の情報の収集、分析、比較等に基づいて、例えば自動車教習所においては、特定の教官1910が特定の人物に対して、通常よりも極端な行動、例えばその教官1910の平均よりもより近くに近づく行動やより大きな声を出す行動等、を取る傾向があることや、個々の教習生1920によらず特定の車両10の使用時にS字クランクの失敗が多いこと、等についての情報を、ユーザに提供する構成であるとよい。
それによりユーザは、対応する教官1910への指導や車両10の調整、例えばアライメント調整等、をより早いタイミングで行うことができる。
Furthermore, the
As a result, the user can instruct the corresponding
極端な行動については、図21を用いて詳述する。
なお、極端な行動とは、極端な対応の一例である。
特に、自動車教習所やタクシーの事業所では、同時期に同様の条件、例えば同様の気象条件、で撮影された映像データが集まりやすいので、施設端末105のデータ管理モジュール516及びデータ処理モジュール517や、処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217は、上記の分析をより高い精度で行うことができる。
Extreme behavior is described in detail using FIG.
Note that the extreme behavior is an example of an extreme response.
In particular, in a driving school or a taxi business, video data shot under similar conditions, such as similar weather conditions, are likely to be collected at the same time. The
なお、上記の各種の情報の収集、分析、比較等は、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などが個別に実行することもできるが、それぞれが協働して実行すると、演算負荷を分散できるので有利である。
The collection, analysis, comparison, etc. of the various types of information described above are performed by the control unit 303 of the photographing equipment 101 (101F, 101R), the
例えば、撮影機器101(101F、101R)の制御部303が、大まかな分析を行った映像データに対して、その大まかな分析に基づいてより詳細な分析の対象となった映像データに対して、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などが、より詳細な分析を行うとよい。
For example, the control unit 303 of the imaging device 101 (101F, 101R) performs a rough analysis on the video data, and on the basis of the rough analysis, on the video data subjected to a more detailed analysis, The
更に、施設端末105の外部管理サーバ連携モジュール513は、そのようにして行われた分析データや分析に用いた映像データ等を、撮影機器101(101F、101R)の製造会社や販売会社、あるいは、調査会社等が運営する外部管理サーバ107へ送信する構成であるとよい。
外部管理サーバ107のデータ管理モジュール716やデータ処理モジュール717は、施設端末105から受信した情報の更なる分析や、施設端末105から受信した情報と施設端末105とは異なる端末から受信した情報を組み合わせた分析を実行するとよい。
Furthermore, the external management server cooperation module 513 of the
The
図18は、施設端末用ビューアの地図情報画面1800の例である。
地図情報画面1800は、例えば図17の地図表示部1720に表示する画面である。施設端末105の表示制御モジュール515は、地図情報画面1800に地図1810を、ユーザからの入力に応じて縮尺変更可能及び移動可能に、表示する。
更に、施設端末105の表示制御モジュール515は、ユーザによる地図1810内の特定の範囲の選択入力を受け付ける。選択入力は、例えば、地図1810内の特定の範囲をマウス等の入力装置を用いて直接選択することや、住所情報等から選択すること等によって行われる。
FIG. 18 is an example of a map information screen 1800 of the facility terminal viewer.
A map information screen 1800 is a screen displayed on the
Furthermore, the
図18の地図情報画面1800では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、地図1810内に、第1の範囲1820及び第2の範囲1825を表示している。
表示制御モジュール515が地図1810内に表示できる範囲の数は、任意に設定することができるとよく、ユーザの入力に応じて、表示する範囲を変更することができるとよりよい。
In the map information screen 1800 of FIG. 18, the
The number of ranges that the
施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、ユーザ入力に基づいて、例えば、第1の範囲1820を通常のあるいは推奨する走行範囲、第2の範囲1825を禁止のあるいは非推奨の走行範囲、等に設定することができる。
The
例えば、車両10が自動車教習所用の車両10であれば、第1の範囲1820を通常の路上講習範囲としたり、車両10が運送や配送業務用の車両10であれば、第1の範囲1820をその車両10の運送や配送の担当範囲としたり、するとよい。
For example, if the
更に、図18の地図情報画面1800では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、地図1810内に、第1の走行経路1830、第2の走行経路1840、第3の走行経路1850、第4の走行経路1860を表示している。
第1の走行経路1830、第2の走行経路1840、第3の走行経路1850、第4の走行経路1860は、映像データが撮影された車両10の走行経路に対応している。
なお、走行経路とは、走行ルートの一例である。
Furthermore, on the map information screen 1800 of FIG. 1850 , displaying a
A
Note that the travel route is an example of a travel route.
施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、映像データに付与された位置情報や個々の映像データに関連付けられた位置情報等に基づいて、各映像データが撮影された車両10の走行経路を表示する構成であるとよい。
位置情報とは、例えばGPS情報や携帯電話やスマートフォン等の基地局情報、等である。
The
The location information is, for example, GPS information, base station information of mobile phones, smart phones, and the like.
例えばユーザが、地図情報画面1800上で、走行経路の任意の地点にカーソルを合わせると、表示制御モジュール515は、データ管理モジュール516と連携し、その地点を通過した車両10に搭載された撮影機器101(101F、101R)が撮影した映像データのリストや、映像データの数等の情報を表示するとよい。
For example, when the user moves the cursor to an arbitrary point on the travel route on the map information screen 1800, the
更に、別の実施形態では、ユーザが、地図情報画面1800上で、走行経路の任意の地点にマウス等でカーソルを合わせクリックすると、表示制御モジュール515及びデータ管理モジュール516は、その地点で撮影された映像データをプレビュー画面1700に表示するとよい。
Furthermore, in another embodiment, when the user places a cursor on an arbitrary point on the travel route on the map information screen 1800 and clicks it, the
図18の地図情報画面1800では、第1の走行経路1830から第4の走行経路1860はいずれも、第1の地点1870から出発し、第1の地点1870へ戻っている。
第1の走行経路1830及び第4の走行経路1860は、第1の範囲1820内に収まっているが、第2の走行経路1840は、一部が第1の範囲1820外へ出てから第1の範囲1820内へ戻っており、第3の走行経路1850は第1の範囲1820外へ出て第2の範囲1825内へ入ってから第1の範囲1820内へ戻っている。
In the map information screen 1800 of FIG. 18 , all of the
The
更に、図18の地図情報画面1800では、施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、地図1810内に、第1の地点1870、第2の地点1880、第3の地点1890を表示している。
Furthermore, on the map information screen 1800 of FIG. 18, the
施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、ユーザ入力に基づいて、例えば、第1の地点1870を拠点等、例えば自動車教習所、タクシー業務等の事業所や営業所、運送業務等の配送センターや宅配センター等、として設定し、第2の地点1880を滞在禁止地点や滞在禁止施設や滞在禁止店舗等、例えば、遊興施設、公営競技施設、風俗店、特にはラブホテル等のホテルや宿泊施設等、として設定し、第3の地点1890を競合他社、競合企業、提携企業等として設定することができるとよい。
The
そのような構成では、ユーザが地図情報画面1800上の第2の地点1880や第3の地点1890にカーソルを合わせると、表示制御モジュール515は、データ管理モジュール516と連携し、車両10がそれらの地点での滞在時間等の情報を表示するとよい。
更に、ユーザが地図情報画面1800上の第2の地点1880や第3の地点1890をマウス等でクリックすると、それらの地点で撮影された映像データをプレビュー画面1700に表示するとよい。
In such a configuration, when the user places the cursor on the
Furthermore, when the user clicks a
上記の実施形態では、施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、例えば第2の地点1880がホテルであれば、車両10が短時間第2の地点1880に滞在しただけあるいは通り過ぎただけであっても、セクハラ等の疑いがあると判定して、警告等の通知を出力するように設定できるとよく、例えば第2の地点1880が遊興施設であれば、車両10の第2の地点での滞在時間が数分であったり、通り過ぎたりしただけであれば、問題イベントではないと判定し、警告等の通知の出力を停止するように設定できるとよい。
In the above embodiment, the
更に上記の実施形態では、施設端末105の表示制御モジュール515は、データ管理モジュール516と連携し、例えば第3の地点1890が競合他社であれば、車両10が短時間第2の地点1880に滞在しただけあるいは通り過ぎただけであっても、情報漏えい等の疑いがあると判定して、警告等の通知を出力するように設定できるとよく、例えば第2の地点1880が提携企業であれば、車両10の第3の地点1890での滞在時間が数分であったり、通り過ぎたりしただけであれば、問題イベントではないと判定し、警告等の通知の出力を停止するように設定できるとよい。
Furthermore, in the above embodiment, the
表示制御モジュール515及びデータ管理モジュール516は、上記の判定に関して、映像データに関連付けられた人物に応じて、判定基準を変更したり、判定の実行の有無を変更したりできる構成であるとよりよい。
It is preferable that the
図19は、プライバシー保護処理を施された映像情報524を表示中の施設端末105のプレビュー画面1700の例である。
図19のプレビュー画面1700では、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、リスト表示部1730に1つの映像データのファイル名YYYYMMD1を表示している。表示制御モジュール515は、映像表示部1710に、データ管理モジュール516が取得したファイル名がYYYYMMD1の映像データを、プライバシー保護を施した状態で表示している。
FIG. 19 is an example of a preview screen 1700 of the
In the preview screen 1700 of FIG. 19, the
なお、図19のプレビュー画面1700の映像表示部1710では、説明のため、運転席と助手席を正面から撮影した状態を概略的に示しているが、例えば映像表示部1710に再生する映像データは、撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)で撮影された映像データから、任意のものを選択することができるとよい。
For the sake of explanation, the
図19(a)の映像表示部1710には、映像データが自動車教習所の教習中の映像を撮影した映像データであって、教習生1920が運転をしており、助手席には教官1910が同乗している映像データが再生されている。
教官1910の顔には、表示制御モジュール515が映像データを加工することにより、動物を模したマスク1930が重ねられている。
In the
A
図19(b)の映像表示部1710には、映像データが自動車教習所の教習中の映像を撮影した映像データであって、図19(a)と同様に、教習生1920が運転をしており、助手席には教官1910が同乗している映像データが再生されているが、図19(a)とは異なり、教習生1920の顔に、表示制御モジュール515により動物を模したマスク1930が重ねられている。
In the
図19のプレビュー画面1700では、表示制御モジュール515が、データ管理モジュール516と連携し、イベント表示部1740に、ユーザにより選択可能なイベントの候補に加えて、映像データに対して実行可能な映像処理等の候補が表示される構成であるとよい。例えば、データ管理モジュール516が取得したイベントや映像処理等の候補を、表示制御モジュール515がイベント表示部1740に、図16の操作画面1600のイベント選択部1610の表示内容に関連付けて表示するとよい。
In the preview screen 1700 of FIG. 19, the
なお、図19のプレビュー画面1700のイベント表示部1740で更に、「接近、接触」が選択されると、表示制御モジュール515はデータ管理モジュール516と連携し、イベント表示部1740に、例えば、図17のイベント表示部1740aに表示されているような、乗員間の距離に関する情報を表示する構成であるとよい。
When "approach, contact" is further selected in the
施設端末105の表示制御モジュール515及びデータ管理モジュール516は、プライバシー保護処理の対象となる映像データに、少なくとも2人の人物が撮影されている場合、そのうちの少なくとも1人に対して、その人物の特定を困難にするような処理、例えば顔や身体に対するマスク加工処理や声に対するボイスチェンジ処理等、を実行するとよい。
The
例えば、自動車教習所での教習中の映像や、旅行中のタクシーの車内の映像などを、教習生1920や乗客が取得したいと望んだ場合、映像データを直接提供することには教官1910や運転手のプライバシー保護の点で問題がある。
そこで、施設端末105のデータ処理モジュール517は、教官1910や運転手の顔や身体や声等に上記のプライバシー保護処理を施し、施設端末105のユーザ端末連携モジュール512は、教官1910や運転手のプライバシーが保護された映像データを教習生1920や乗客の所有するユーザ端末106へ送信する構成であるとよい。それにより、自動車教習所やタクシー会社は、教習生1920や乗客に対して、教官1910や運転手に対してプライバシー保護処理を施した映像データを提供することができる。
For example, if the
Therefore, the
図19のプレビュー画面1700には、施設端末105の表示制御モジュール515及びデータ管理モジュール516が、ユーザからの入力に基づいて、プライバシー保護処理を実行する実施形態が図示されている。
別の実施形態では、例えば、自動車教習所の予約時の教習生1920による入力やタクシーの予約時やタクシー乗車時の乗客による入力等に基づいて、施設端末105のデータ処理モジュール517や外部管理サーバ107のデータ処理モジュール717や処理装置108のデータ管理モジュール2216及びデータ処理モジュール2217などが、映像データに対してプライバシー保護処理を実行することもできる。
A preview screen 1700 in FIG. 19 illustrates an embodiment in which the
In another embodiment, for example, the
更に別の実施形態では、例えば、自動車教習所の予約時の教習生1920による入力やタクシーの予約時やタクシー乗車時の乗客による入力等に基づいて、撮影機器101(101F、101R)の制御部303がプライバシー保護処理を施された映像データを作成し、撮影機器101(101F、101R)の通信処理部314や車内のネットワーク103等を介して、ユーザ端末106へ送信する構成であってよい。
そのような構成については、図20を用いて更に説明する。
In yet another embodiment, for example, the controller 303 of the photographing device 101 (101F, 101R) is controlled based on an input by the
Such a configuration will be further described with reference to FIG.
図20は、プライバシー保護処理を施された映像情報524を表示中のユーザ端末106の表示画面2000の例である。
図19を用いて説明したように、図20のプライバシー保護処理を施した映像データでは、車内にいる少なくとも2人の人物うち、助手席の教官1910に動物、例えばトラ等、のマスク1930を重ねた映像処理が施されている。
また、映像内の音声のうち、教官1910の声には、ボイスチェンジ処理が施されているとよい。
FIG. 20 is an example of a display screen 2000 of the
As described with reference to FIG. 19, in the video data subjected to privacy protection processing in FIG. 20, of the at least two persons in the vehicle, the
Also, among the voices in the video, the voice of the
プライバシー保護処理を施した映像データは、上述の通り、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などによって、作成されたものである。
As described above, the video data subjected to privacy protection processing is processed by the control unit 303 of the photographing equipment 101 (101F, 101R), the
教習生1920のユーザ端末106は、その補助記憶装置602に、このプライバシー保護処理を施した映像データを映像情報624として保存することができるとよい。
それにより教習生1920は、教習時間外に自身の運転の様子を見直したり、ネットワーク103を介してSNS等にアップロードし自身の運転の様子を他者と共有したり、することができる。
The
As a result, the
図20の実施形態では更に、例えばユーザ端末106の施設端末連携モジュール614は、施設端末105から撮影機器101(101F、101R)や車室内撮影用カメラ102(102F、102R)により撮影された別の映像データを取得し、ユーザ端末106の表示制御モジュール615は、それらの映像データを、例えばピクチャインピクチャの様態で、表示する構成であるとよい。
In the embodiment of FIG. 20, furthermore, for example, the facility
そのようにすれば、例えば、教習生1920は、自身の運転時の様子と、運転時の車内外の状態を確認しつつ、当時の状況を良好に思い出しながら、教習内容を復習することができる。
自動車教習所の経営者は、従業員である教官1910のプライバシーを保護しつつ、教習生1920に対してより効果的な復習の機会を提供することが可能となり、教習の質を向上させることができる。
In this way, for example, the
The operator of the driving school can protect the privacy of the
図19、図20を用いて説明した、プライバシー保護処理は、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などによって、あるいは、それらの組み合わせた情報処理システム等によって、映像データに対して施すことができる処理の一例である。
The privacy protection processing described with reference to FIGS. , the
プライバシー保護処理は、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などによって、あるいは、それらの組み合わせた情報処理システムによっても実行できる。
Privacy protection processing is performed by the control unit 303 of the photographing equipment 101 (101F, 101R), the
特に、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、外部管理サーバ107のデータ処理モジュール717や、処理装置108のデータ処理モジュール2217などによって、あるいは、それらの組み合わせた情報処理システム等は、各種の処理の結果、特には解析処理の結果、を送受信したり、共有したり、する構成であるとよい。
In particular, by the control unit 303 of the photographing equipment 101 (101F, 101R), the
ユーザは、例えば自動車教習所の経営者等は、更に、図8から図12を用いて説明した個々の制御、特定に関連するデータ、例えばイベントデータ、に基づいて、映像データを編集処理し、例えば、教習生1920が落ち着いた対応ができなかった状況をピックアップし、1つの映像データとしてまとめる処理を実行するように、撮影機器101(101F、101R)を設定することもできる。そのような構成では、ユーザは、教習生1920に対して個別に設定したイベントごとに編集処理した映像データを提供することによって、より効果的に復習の機会を提供することができる。
The user, for example, the manager of a driving school, further edits the video data based on the individual control and specific data, such as event data, described with reference to FIGS. It is also possible to set the photographing equipment 101 (101F, 101R) so as to pick up a situation in which the
図21は、乗員間距離は同等であるが異なる状況を表示中の施設端末105のプレビュー画面1700の例である。
図21(a)では、教官1910が、運転席と助手席の中間位置Mから、距離Dの長さ分、教習生1920に向かって腕を伸ばして、車両10外の方向を指差している状況を例示している。
図21(b)では、教官1910が、運転席と助手席の中間位置Mから、距離Dの長さ分、教習生1920に向かって腕を伸ばして、教習生1920の腕に触れている状況を例示している。
図21(a)と図21(b)に例示されている時点では距離Dの長さは等しい。
FIG. 21 is an example of a preview screen 1700 of the
In FIG. 21(a), the
In FIG. 21(b), the
At the times illustrated in FIGS. 21(a) and 21(b), the lengths of the distances D are equal.
図21は、例えば図16の別の操作画面1600のイベント選択において、「接近・接触」が選択された場合のプレビュー画面1700である。
施設端末105のデータ管理モジュール516は、図21(a)と図21(b)のプレビュー画面1700では、リスト表示部1730に、例えば処理装置108を介して転送、保存した複数の映像データの中から、2つのファイル、「YYYYMMD1」と「YYYYMMD2」、をリストアップしている。
FIG. 21 shows a preview screen 1700 when, for example, "approach/contact" is selected in event selection on another operation screen 1600 in FIG.
21A and 21B, the
図21(a)では、「YYYYMMD1」の映像データが再生されていること、図21(b)では、「YYYYMMD2」の映像データが再生されていること、がそれぞれ映像表示部1710に表示されている。
施設端末105の表示制御モジュール515は、ファイル名に加えて、又は、代えて、データ管理モジュール516が取得した乗員に関する情報、例えば教官1910や教習生1920の名前やID、等を表示する構成であるとよりよい。
それによりユーザは、再生されている映像から教官1910と教習生1920の組み合わせをより容易に理解することができる。
In FIG. 21(a), the image data "YYYYMMD1" is being reproduced, and in FIG. 21(b), the image data "YYYYMMD2" is being reproduced. there is
The
Thereby, the user can more easily understand the combination of the
例えば、施設端末105の表示制御モジュール515及びデータ管理モジュール516は、教官ID、生徒ID、教習車ID、教習時刻のフィールドを持つデータ(例えば上述のCSVファイル等)を取り込むと、対象となる教習時刻と教習車IDの映像を再生する際に、教官IDまたは生徒IDに基づく情報を映像とともに表示する機能を備えるとよい。
For example, when the
なお、これらの情報は、撮影機器101(101F、101R)の制御部303が、撮影機器101(101F、101R)での撮影中に再生される映像に同様に表示させることができるとよい。
第1距離1750a及び第2距離1750b及び中間位置Mは、図17を用いて説明したものと同様である。
Note that it is preferable that the control unit 303 of the imaging device 101 (101F, 101R) can similarly display such information on the video reproduced during imaging by the imaging device 101 (101F, 101R).
The
図21(a)では、イベント表示部1740cにおいて、第7の時点T7から第8の時点T8の間での、第2距離1750bで表される教官1910の中間位置Mを超えた運転席側へ接近が、第1距離1750aで表される教習生1920の動きに干渉していない状態、より具体的には、教習生1920の動きに、第7の時点T7以前と、第7の時点T7から第8の時点T8の間と、第8の時点T8以降に、特徴的な変化がないこと、が示されている。
In FIG. 21(a), in the event display section 1740c, from the seventh time point T7 to the eighth time point T8, the
そのような特徴的な変化がないことから、教習所の責任者等のユーザは、第7の時点T7から第8の時点T8の間での教官1910の行動が、適切であったことを、映像データの再生内容から主観的に判断するだけではなく、客観的な数値的データに基づいて判断することができる。
Since there is no such characteristic change, the user such as the person in charge of the driving school can confirm that the behavior of the
なお、この数値的データに基づく判断は、撮影時に既に、撮影機器101(101F、101R)の制御部303が実行したり、映像データの移行に伴って、施設端末105のデータ処理モジュール517や処理装置108のデータ処理モジュール2217が実行したり、施設端末105から映像データを受け取った外部管理サーバ107のデータ処理モジュール717が実行する構成であってもよい。
It should be noted that the determination based on this numerical data is already executed by the control unit 303 of the photographing equipment 101 (101F, 101R) at the time of photographing, or is performed by the
なお、撮影機器101(101F、101R)の制御部303は、例えば、第1距離1750a及び第2距離1750bのクラフが重なったことを特定した場合、例えば第7の時点T7から第8の時点T8の間、撮影機器101(101F、101R)を高音質録音モードに移行させるとよい。
それにより、ユーザは、第7の時点T7から第8の時点T8の間の車内の状況、特には会話の内容、をより正確に確認することができる。
Note that, for example, when the control unit 303 of the photographing device 101 (101F, 101R) specifies that the cloughs of the
As a result, the user can more accurately confirm the situation inside the vehicle, particularly the content of the conversation, between the seventh time point T7 and the eighth time point T8.
施設端末105のデータ管理モジュール516は、例えば、撮影機器101(101F、101R)ごと、撮影機器101(101F、101R)が搭載された車両10ごと、乗員ごとの上記の高音質録音モードに移行させるための設定変更を行うことができるとよい。
The
更に、施設端末105の撮影機器連携モジュール511は、そのような設定変更を、複数の撮影機器101(101F、101R)の制御部303へ、例えば一括で、反映させる構成であるとよりよい。
Furthermore, it is preferable that the photographing
図21(b)では、イベント表示部1740dにおいて、第9の時点T9の前後で、第2距離1750bで表される教官1910の中間位置Mを超えた運転席側へ接近が、第1距離1750aで表される教習生1920の動きに干渉している状態、より具体的には、教習生1920の動きに、第9の時点T9以降に特徴的な変化が生じていること、が示されている。
In FIG. 21(b), in the event display portion 1740d, before and after the ninth point in time T9, the approach to the driver's seat side beyond the intermediate position M of the
そのような特徴的な変化が生じていることから、教習所の責任者等のユーザは、第9の時点T9の前後での教官1910の行動が、適切であったことを、図21(a)の場合と同様に、映像データの再生内容から主観的に判断するだけではなく、客観的な数値的データに基づいて判断することができる。
Since such a characteristic change has occurred, the user such as the person in charge of the driving school can confirm that the behavior of the
なお、この数値的データに基づく判断も、図21(a)の場合と同様に、撮影時に既に、撮影機器101(101F、101R)の制御部303が実行したり、映像データの移行に伴って、施設端末105のデータ処理モジュール517や処理装置108のデータ処理モジュール2217が実行したり、施設端末105から映像データを受け取った外部管理サーバ107のデータ処理モジュール717が実行する構成であってもよい。
As in the case of FIG. 21A, the determination based on the numerical data is already executed by the control unit 303 of the imaging equipment 101 (101F, 101R) at the time of imaging, or is performed along with the transition of video data. , the
なお、撮影機器101(101F、101R)の制御部303は、例えば、第1距離1750a及び第2距離1750bのクラフが重なったことを特定した場合、例えば第9の時点T9の前後の時間帯に、撮影機器101(101F、101R)を高音質録音モードに移行させるとよい。
それにより、ユーザは、第9の時点T9の前後の時間帯の車内の状況、特には会話の内容、をより正確に確認することができる。
Note that, for example, when the control unit 303 of the photographing device 101 (101F, 101R) identifies that the cloughs of the
As a result, the user can more accurately confirm the situation inside the vehicle, particularly the content of the conversation, during the time period before and after the ninth point in time T9.
ユーザは、図21(b)に示されている状態について、教官1910が教習生1920に触れている、あるいは、教習生1920を叩いている可能性がある、と判断すると、そのような状態を、図21(a)に示されている状態に比べてより重要度が高いイベントとして設定することができる。
When the user determines that there is a possibility that the
施設端末105のデータ管理モジュール516は、ユーザによる重要度に関する上記の設定に応じて、教官1910ごとにイベントの発生頻度を特定したり、特定の属性を有する教習生1920、例えば10代女性等の女性の教習生1920、に対してイベントの発生頻度が極端に高くなっていないか等を特定したり、するとよい。
The
更に、図21(a)、図21(b)を用いて説明した個々の判断や特定は、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、処理装置108のデータ処理モジュール2217や、外部管理サーバ107のデータ処理モジュール717等が、個々に実行することもできるが、それらが協働して実行してもよい。
21(a) and 21(b), the control unit 303 of the imaging equipment 101 (101F, 101R), the
図21(a)、図21(b)を用いて説明した上記の構成によれば、ユーザや、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、処理装置108のデータ処理モジュール2217や、外部管理サーバ107のデータ処理モジュール717等は、一方の人物が他方の人物に対して同程度、例えば中間位置Mから距離D分だけ、接近した状況を、より明確に区別することができる。
21(a) and 21(b), the user, the control unit 303 of the imaging device 101 (101F, 101R), the
更に、撮影機器101(101F、101R)の制御部303や、施設端末105のデータ処理モジュール517や、処理装置108のデータ処理モジュール2217や、外部管理サーバ107のデータ処理モジュール717等は、距離Dの値を、個々の判断や特定の基準としてユーザが設定できる構成であるとよいが、乗員ごとに、例えば教官1910や教習生1920ごとに、異なる値を適用する構成であるとよりよい。
Furthermore, the control unit 303 of the photographing equipment 101 (101F, 101R), the
なお、上記の実施形態では、車内に2人の人物がいる状態について説明したが、車両10に3人以上の人物が乗車している場合でも、処理装置108や施設端末105等の各モジュールは、同様の制御や機能や処理を実行することができる。 In the above embodiment, a state in which there are two people in the vehicle has been described. , can perform similar controls, functions and processes.
なお、本発明の範囲は、明細書に明示的に説明された構成や限定されるものではなく、本明細書に開示される本発明の様々な側面の組み合わせをも、その範囲に含むものである。本発明のうち、特許を受けようとする構成を、添付の特許請求の範囲に特定したが、現在の処は特許請求の範囲に特定されていない構成であっても、本明細書に開示される構成を、将来的に特許請求の範囲とする意思を有する。 It should be noted that the scope of the present invention is not limited to the configurations or limitations expressly set forth herein, and encompasses within its scope any combination of the various aspects of the invention disclosed herein. While the claimed features of the invention are identified in the appended claims, any configuration not presently specified in the claims is disclosed herein. We intend to claim such configurations in the future.
本願発明は上述した実施の形態に記載の構成に限定されない。上述した各実施の形態や変形例の構成要素は任意に選択して組み合わせて構成するとよい。また各実施の形態や変形例の任意の構成要素と、発明を解決するための手段に記載の任意の構成要素又は発明を解決するための手段に記載の任意の構成要素を具体化した構成要素とは任意に組み合わせて構成するとよい。これらについても本願の補正又は分割出願等において権利取得する意思を有する。「~の場合」「~のとき」という記載があったとしてもその場合やそのときに限られる構成として記載はしているものではない。これらの場合やときでない構成についても開示しているものであり、権利取得する意思を有する。また順番を伴った記載になっている箇所もこの順番に限らない。一部の箇所を削除した構成や、順番を入れ替えた構成についても開示しているものであり、権利取得する意思を有する。 The present invention is not limited to the configurations described in the above-described embodiments. The constituent elements of the above-described embodiments and modifications may be arbitrarily selected and combined. In addition, arbitrary constituent elements of each embodiment and modifications, arbitrary constituent elements described in Means for Solving the Invention, or constituent elements embodying arbitrary constituent elements described in Means for Solving the Invention and may be configured in any combination. We intend to acquire the rights for these as well in the amendment of the present application or in a divisional application. Even if there is a description of "in the case of" or "when", it is not described as a configuration limited to that case or that time. We disclose and intend to reserve these occasions and occasions. Moreover, the parts described with order are not limited to this order. It also discloses a configuration in which some parts are deleted and a configuration in which the order is changed, and there is an intention to acquire the right.
また、意匠登録出願への変更により、全体意匠又は部分意匠について権利取得する意思を有する。図面は本装置の全体を実線で描画しているが、全体意匠のみならず当該装置の一部の部分に対して請求する部分意匠も包含した図面である。例えば当該装置の一部の部材を部分意匠とすることはもちろんのこと、部材と関係なく当該装置の一部の部分を部分意匠として包含した図面である。当該装置の一部の部分としては、装置の一部の部材としても良いし、その部材の部分としても良い。全体意匠はもちろんのこと、図面の実線部分のうち任意の部分を破線部分とした部分意匠を、権利化する意思を有する。また、装置の筐体の内部のモジュール・部材・部品等についても、図面に表示されているものは、いずれも独立して取引の対象となるものであって、同様に、意匠登録出願への変更を行って権利化を行う意思を有するものである。 In addition, the applicant intends to acquire rights to the entire design or partial design by converting the design registration application. Although the entire device is drawn in solid lines in the drawing, the drawing includes not only the overall design but also the partial design claimed for a part of the device. For example, it is a drawing that includes a part of the device as a partial design regardless of the member, as well as a partial design of a part of the member of the device. The part of the device may be a part of the device or a part of the member. We intend to obtain rights not only for the overall design, but also for the partial design in which any part of the solid line part of the drawing is a broken line part. In addition, the modules, members, parts, etc. inside the housing of the device that are shown in the drawings are all subject to trade independently. It has the intention of making changes and obtaining rights.
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、SSD(Solid State Drive)等の記録装置、又は、ICカード、SDカード、DVD等の記録媒体に置くことができる。 Further, each of the above configurations, functions, processing units, processing means, and the like may be realized by hardware, for example, by designing them in an integrated circuit. Moreover, each of the above configurations, functions, etc. may be realized by software by a processor interpreting and executing a program for realizing each function. Information such as programs, tables, and files that implement each function can be stored in recording devices such as memories, hard disks, SSDs (Solid State Drives), or recording media such as IC cards, SD cards, and DVDs.
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
なお、上述の実施形態は少なくとも特許請求の範囲に記載の構成を開示している。
Further, the control lines and information lines indicate those considered necessary for explanation, and not all control lines and information lines are necessarily indicated on the product. In practice, it may be considered that almost all configurations are interconnected.
It should be noted that the above-described embodiments disclose at least the configurations described in the claims.
(1)車両を使用する人の状態又は動作に基づいて、前記車両の内部又は外部の少なくとも一方の映像データを作成する撮影機器を制御する機能を有する情報処理システムが提供される。 (1) An information processing system is provided that has a function of controlling a photographing device that creates video data of at least one of the interior and exterior of the vehicle based on the state or action of the person using the vehicle.
このようにすると、車両を使用する人の状態や動作に基づいて、撮影機器を制御することができ、ユーザは、車両を使用する人の状態や動作に基づいて撮影機器を制御する機能を利用することができる。この機能を用いればユーザは、撮影機器の制御に人の状態や動作をより柔軟に反映させやすくなる。 In this way, the photographing device can be controlled based on the state and motion of the person using the vehicle, and the user can use the function of controlling the photographing device based on the state and motion of the person using the vehicle. can do. Using this function makes it easier for the user to more flexibly reflect a person's state and motion in control of the photographing equipment.
(2)前記撮影機器は、複数の人により交代で使用される前記車両に搭載される場合に使用される所定の動作モードを実行するためのソフトウェアが、後付けで搭載され、又はあらかじめ搭載され、前記機能は、前記所定の動作モードを実行する場合に、前記車両を使用する前記人の状態又は動作に基づいて制御するとよい。 (2) the photographing device is retrofitted or pre-installed with software for executing a predetermined operation mode used when it is installed in the vehicle that is used by a plurality of people in turn; The function may be controlled based on the state or action of the person using the vehicle when executing the predetermined operating mode.
このようにすると、撮影機器が複数の人により交代で使用される車両に搭載される場合には、後付けで搭載され、又はあらかじめ搭載されたソフトウェアに基づいて、そのような車両に使用されることを前提した所定の動作モードで撮影機器を動作させることができ、ユーザは、当該動作モードを前提として動作する車両を使用するそれぞれの人のそれぞれの状態又はそれぞれの動作に基づく機能を利用することができる。この機能を用いればユーザは、複数の人により交代で使用される車両に特有の動作モードも、人の状態又は動作に基づいて制御することが可能となるので、そのような車両においても、人ごとに柔軟に撮影機器を制御することができる。 In this way, when the imaging device is installed in a vehicle that is used by multiple people in shifts, it can be retrofitted or used in such a vehicle based on pre-loaded software. and the user can use functions based on the states or actions of each person who uses the vehicle operating on the premise of the operation mode. can be done. With this function, the user can control operating modes specific to a vehicle that is used alternately by multiple people based on the state or action of the person, so that even in such a vehicle, the person can It is possible to flexibly control the shooting equipment for each.
(3)前記機能は、前記車両を使用する前記人の状態に基づいて、異なる情報を出力するとよい。 (3) The function may output different information based on the state of the person using the vehicle.
このようにすると、車両を使用する人の状態に基づいて、異なる情報を出力することができ、ユーザは、車両を使用する人のそれぞれの状態に対応した様々な情報をより柔軟に出力する機能を利用することができる。この機能を用いれば、ユーザは、例えば車両を使用する人ごとにより関心度が高い情報等を出力させることができる。 In this way, different information can be output based on the state of the person using the vehicle, and the user can more flexibly output various information corresponding to each state of the person using the vehicle. can be used. By using this function, the user can output, for example, information with a higher degree of interest for each person who uses the vehicle.
(4)前記機能は、前記情報の前記出力を、前記撮影機器が起動された場合、又は前記車両への前記人の乗車動作を検知した場合、の少なくともいずれかに行うとよい。 (4) The function preferably outputs the information at least one of when the photographing device is activated and when the motion of the person getting into the vehicle is detected.
このようにすると、車両を使用する人の状態に基づく異なる情報を、撮影機器の起動時や車両への人の乗車時に出力することができ、ユーザは、撮影機器の起動時や車両への人の乗車時に情報を出力する機能を利用できる。この機能を用いればユーザは、撮影機器の起動時や車両への人の乗車時といった、人の印象に残りやすいタイミングで、車両を使用する人のそれぞれの状態に対応した異なる様々な情報、例えば車両を使用する人にとってより関心度が高い情報等、をより柔軟に出力することができる。 In this way, different information based on the state of the person using the vehicle can be output when the photographing device is activated and when the person gets into the vehicle. You can use the function to output information when you get on. By using this function, the user can obtain a variety of different information corresponding to the state of each person using the vehicle, such as when the camera is activated or when a person gets into the vehicle. It is possible to more flexibly output information such as information that is of greater interest to the person using the vehicle.
(5)前記機能は、ユーザによって書き換え可能に構成された記憶領域に記憶された情報に基づいて、前記撮影機器を介して前記情報を出力するとよい。 (5) The function preferably outputs the information via the photographing device based on information stored in a storage area rewritable by the user.
このようにすると、車両を使用する人のそれぞれの状態に対応した様々な情報を、ユーザによって書き換え可能に構成された記憶領域に記憶された情報に基づいて、出力することができ、ユーザは、車両の使用状況や使用環境、車両を使用する人の状態や属性、等により適合した情報をユーザ自身で設定する機能を利用することができる。この機能を用いればユーザは、撮影機器が出力する情報を、ユーザの用途や乗員の需要や関心等に応じてよりカスタマイズすることができる。 In this way, various information corresponding to each state of the person using the vehicle can be output based on the information stored in the storage area rewritable by the user. It is possible to use a function for the user to set information suitable for the usage situation and environment of the vehicle, the condition and attributes of the person using the vehicle, and the like. By using this function, the user can further customize the information output by the imaging device according to the user's application, the passenger's needs and interests, and the like.
(6)前記機能は、ユーザによって書き換え不能に構成された第1の記憶領域、又はユーザによって書き換え可能に構成された第2の記憶領域のうちから選択したいずれかの記憶領域に記憶された情報に基づいて、前記情報を出力するとよい。 (6) The function stores information stored in either a first storage area configured to be unrewritable by the user or a second storage area configured to be rewritable by the user. It is preferable to output the information based on.
このようにすると、車両を使用する人のそれぞれの状態に対応した様々な情報を、ユーザによって書き換え可能に構成された第1の記憶領域に記憶された情報に基づいて、出力することと、又は、ユーザによって書き換え不能に構成された第2の記憶領域に記憶された情報に基づいて、出力することと、ができ、ユーザは、車両の使用状況や使用環境、車両を使用する人の状態や属性、等により適合した情報をユーザ自身で設定する機能を利用することができる。この機能を用いればユーザは、出力する情報をユーザの用途や乗員の需要や関心に応じてよりカスタマイズすることができることに加え、予め撮影機器に記憶された情報を上書き等によって削除してしまうことを回避しやすくなる。 In this way, various information corresponding to each state of the person using the vehicle is output based on the information stored in the first storage area rewritable by the user, or , based on the information stored in the second storage area configured to be non-rewritable by the user, and the user can determine the usage status and usage environment of the vehicle, the state of the person who uses the vehicle, and the like. It is possible to use a function that allows the user to set information more suitable for attributes, etc. by himself/herself. By using this function, the user can customize the information to be output according to the user's purpose and the needs and interests of the passengers. easier to avoid.
(7)前記機能は、記憶されている複数の音声情報から選択された前記音声情報に基づいて、前記出力を行うとよい。 (7) Preferably, the function performs the output based on the audio information selected from a plurality of stored audio information.
このようにすると、車両を使用する人のそれぞれの状態に対応した様々な情報を、記憶されている複数の音声情報から選択された音声情報に基づいて、出力することができ、ユーザは、車両を使用する人のそれぞれの状態に基づいて、その都度より適切な音声情報を出力する機能を利用することができる。この機能を用いればユーザは、例えば、同一の通知内容であっても、車両を使用する人の、緊張状態やリラックス状態、運転技術の習熟状態、サービス等の利用状態等に、より適合した音声情報を出力することができる。 In this way, various information corresponding to each state of the person using the vehicle can be output based on the audio information selected from the plurality of stored audio information, and the user can use the vehicle It is possible to use the function of outputting more appropriate voice information each time based on the state of each person who uses the. By using this function, for example, even if the content of the notification is the same, the user can make a voice that is more suitable for the person who uses the vehicle, such as the state of tension, the state of relaxation, the state of proficiency in driving techniques, the state of use of services, etc. Information can be output.
(8)前記機能は、前記車両を使用する前記人の現在の状態と前記車両を過去に使用した際の同一の前記人の状態との間の差異に基づく出力を行うとよい。 (8) The function may produce an output based on a difference between the current state of the person using the vehicle and the state of the same person when using the vehicle in the past.
このようにすると、車両を使用する人の車両に乗車中の現在の状態と、その人が過去に車両を使用した際の状態に差異がある場合に、その差異に基づく情報を出力することができ、ユーザは、その差異に基づく情報に応じて、より適切な出力をする機能を利用することができる。この機能を用いれば撮影機器は、例えば、過去にメガネをかけていた運転手が、現在メガネをかけていない場合に「メガネをかけなくて大丈夫ですか?」等の確認を行う映像や音声を出力することや、過去複数回に渡り決まった持ち物を持って乗車した乗客が今回その持ち物を持っていない状態である場合に「忘れ物はありませんか?」等の確認を行う映像や音声を出力することで、車両を使用する人をより的確にフォローすることができる。 In this way, if there is a difference between the current state of the person using the vehicle while riding in the vehicle and the state of the person using the vehicle in the past, it is possible to output information based on the difference. The user can use the function for more appropriate output according to the information based on the difference. If this function is used, for example, if a driver who used to wear glasses in the past does not wear glasses now, the camera will send video and audio to confirm that the driver is okay without wearing glasses. Also, if a passenger who has taken a certain item on board multiple times in the past does not have that item this time, it will output video and audio to confirm such things as "Are there any items left behind?" By doing so, it is possible to follow the person using the vehicle more accurately.
(9)前記機能は、第1の人と第2の人の間の距離及び前記第1の人及び前記第2の人の少なくとも一方が発する音声に基づいて前記映像データの記録を行うとよい。 (9) Preferably, the function records the video data based on the distance between the first person and the second person and the sound uttered by at least one of the first person and the second person. .
このようにすると、車両を使用する少なくとも2人の人物に関して、第1の人と第2の人の間の距離及び第1の人と第2の人の少なくとも一方が発する音声に基づいて映像データの記録を行うことができ、ユーザは、乗員間の距離及び乗員の発する音声の双方に関連付けて映像データを記録する機能を利用することができる。この機能を用いればユーザは、乗員間の距離及び乗員の発する音声の組み合わせに着目することにより、車内の状況をより詳細に分析することが可能となる、例えば、楽しく盛り上がった会話とそれに伴う接触や、怒鳴り声を伴う暴力等のパワハラ行為や、セクハラ的な接触とそれを拒否する言葉等をより高い精度で分析することができる。 In this way, with respect to at least two persons using the vehicle, video data is generated based on the distance between the first person and the second person and the voices uttered by at least one of the first person and the second person. can be recorded, and the user can use the function of recording the video data in association with both the distance between the passengers and the voices uttered by the passengers. By using this function, the user can analyze the situation inside the vehicle in more detail by focusing on the distance between the passengers and the combination of sounds uttered by the passengers. , power harassment such as violence accompanied by yelling, sexual harassment contact and words that reject it, etc. can be analyzed with higher accuracy.
(10)前記機能は、前記車両を使用する前記人による前記車両の少なくとも1つの開閉部の開閉動作に基づいて、前記映像データの記録を終了するまでの時間長を、前記開閉動作より以前の前記時間長よりも、延長するとよい。 (10) The function determines the length of time until recording of the video data ends based on the opening/closing operation of at least one opening/closing portion of the vehicle by the person using the vehicle. It is preferable to extend the time length more than the above-described time length.
このようにすると、車両を使用する人の車両が開閉部、例えばドアやハッチバック等、を開閉する動作に基づいて、映像データの記録を終了するまでの時間長を、開閉動作以前の時間長よりも延長することができ、ユーザは、開閉動作後の映像データをより長く記録する機能を利用することができる。この機能を用いればユーザは、例えば、乗員が車外にでるタイミングで映像データの記録を終了する構成と比較して、ドアを開けて車両から降りた後の様子や、ハッチバックを開けて作業をしている間の様子を記録する時間をより長く確保することができる。 In this way, the length of time until the recording of the video data is completed, based on the operation of opening and closing the opening/closing portion, such as a door or hatchback, of the vehicle by the person who uses the vehicle, can be made shorter than the length of time before the opening/closing operation. can also be extended, and the user can use the function of recording the video data after the opening/closing operation for a longer period of time. By using this function, the user can, for example, open the door and get out of the vehicle, or open the hatchback to perform the work, compared to the configuration in which the recording of the video data ends at the timing when the occupant leaves the vehicle. You can secure a longer time to record the situation while you are in it.
(11)前記機能は、所定の前記人の状態又は動作に対し、前記車両を使用する前記人ごとに、異なる前記制御を実行するとよい。 (11) The function may perform the control differently for each person using the vehicle for a given state or action of the person.
このようにすると、車両を使用する人の所定の状態又は動作、特には同一の状態又は動作等、に対して、車両を使用する人ごとに、異なる制御を実行することができ、ユーザは、車両を使用する人ごとに、その人物の状態や動作に基づいて、その人物によりカスタマイズした制御を行う機能を利用することができる。この機能を用いればユーザは、車両を使用する個々人により適した撮影機器の制御環境を提供することができる。 In this way, different control can be executed for each person using the vehicle for a predetermined state or action of the person using the vehicle, particularly the same state or action, etc., and the user can Each person using the vehicle can take advantage of the ability to have customized controls based on that person's state and actions. With this feature, the user can provide a control environment for the photographic equipment that is more suitable for the individual using the vehicle.
(12)前記機能は、前記車両を使用する前記人ごとに、前記車両を使用して提供されるサービスの内容に関する異なる情報を出力するとよい。 (12) The function may output different information regarding the content of services provided using the vehicle for each person using the vehicle.
このようにすると、車両を使用する人ごとに、車両を使用して提供されるサービスの内容に関する異なる情報を出力することができ、ユーザは、サービスを利用する人ごとに、サービスの内容に関連するより細やかな情報を提供することができる。この機能を用いればユーザは、例えば、起動音声、作動音音声、通知音声、報知音声、運転補助音声等を、例えば予約したサービスの利用者ごとに、変更することができ、例えば初めてサービスを利用する人物には、起動時により親しみのある言葉を伴う音声を出力することで緊張をほぐす機会やきっかけ等を提供することができる。 In this way, it is possible to output different information relating to the content of the service provided using the vehicle for each person using the vehicle, and the user can obtain information related to the content of the service for each person using the service. can provide more detailed information. By using this function, the user can change, for example, the startup sound, operation sound, notification sound, notification sound, driving assistance sound, etc. for each user of the reserved service. It is possible to provide an opportunity or an opportunity to relieve tension by outputting a voice accompanied by more familiar words at the time of activation.
(13)前記機能は、前記車両を使用する前記人ごとに、前記車両を使用して提供されるサービスの利用回数に基づいて、前記サービスの内容に関する異なる情報を出力するとよい。 (13) The function may output different information regarding the content of the service for each person using the vehicle based on the number of times the service provided using the vehicle is used.
このようにすると、車両を使用する人ごとに、車両を使用して提供されるサービスの利用回数に基づいて異なる情報を出力することができ、ユーザは、サービスを利用する人ごとに、サービスの利用回数に関連するより細やかな情報を提供することができる。この機能を用いればユーザは、例えば、サービスの利用回数に応じて、サービス内容が変わる場合には、サービス開始時等に、そのときに応じた情報を提供することができる。 In this way, different information can be output for each person using the vehicle based on the number of times the service provided using the vehicle has been used, and the user can use the service for each person using the service. More detailed information related to the number of uses can be provided. By using this function, for example, when the service content changes according to the number of times the service is used, the user can provide information corresponding to that time, such as when the service starts.
(14)前記機能は、前記車両を使用する第1の人による前記車両のブレーキ動作と、前記車両を使用する第2の人による前記車両のブレーキ動作とを、前記映像データから識別するとよい。 (14) The function may discriminate, from the video data, a braking operation of the vehicle by a first person using the vehicle and a braking operation of the vehicle by a second person using the vehicle.
このようにすると、車両を使用する第1の人による車両のブレーキ動作と、車両を使用する第2の人による車両のブレーキ動作とを、映像データから識別することができ、ユーザは、車両が両者のブレーキ動作を検出する専用の装置を備えていない構成であっても、第1の人による車両のブレーキ動作と、車両を使用する第2の人による車両のブレーキ動作を映像データから識別する機能を利用することができる。この機能を用いればユーザは、例えば、自動車教習所用の車両のようなブレーキペダルを複数有する車両に対して、ブレーキ動作検出用のラインを新たに追加することなく、映像データから、ブレーキ動作の主体を識別することができる。 In this way, the braking operation of the vehicle by the first person using the vehicle and the braking operation of the vehicle by the second person using the vehicle can be identified from the video data, and the user can determine whether the vehicle is To discriminate a braking operation of a vehicle by a first person and a braking operation of a vehicle by a second person who uses the vehicle from video data even in a configuration that does not have a dedicated device for detecting both braking operations. function can be used. By using this function, the user can detect the subject of the braking operation from the video data without newly adding a line for detecting the braking operation for a vehicle having a plurality of brake pedals, such as a vehicle for a driving school. can be identified.
(15)前記機能は、前記車両を使用する第1の人による前記車両のブレーキ動作と、前記車両を使用する第2の人による前記車両のブレーキ動作とを、異なるブレーキ動作として区別するとよい。 (15) The function may distinguish between a braking operation of the vehicle by a first person using the vehicle and a braking operation of the vehicle by a second person using the vehicle as different braking operations.
このようにすると、車両を使用する第1の人による車両のブレーキ動作と、車両を使用する第2の人による車両のブレーキ動作とを、異なるブレーキ動作として区別することができ、ユーザは、同様の運転環境や走行条件であっても、ブレーキ動作を行った人に応じて異なるブレーキ動作として区別する機能を利用することができる。この機能を用いればユーザは、例えば、運転技術の高い運転手であれば急ブレーキをかける必要のない運転環境で、自動車教習所の教習生が急ブレーキをかけた場合、それは不慣れなための問題のない急ブレーキとして判定させ、同様の運転環境で教官が急ブレーキをかけた場合、問題の可能性のある急ブレーキとして判定させることができる。 In this way, the braking operation of the vehicle by the first person using the vehicle and the braking operation of the vehicle by the second person using the vehicle can be distinguished as different braking operations, and the user can similarly It is possible to use the function of distinguishing different braking actions depending on the person who performed the braking action even under the driving environment and driving conditions. By using this function, the user can, for example, know that in a driving environment in which a driver with high driving skills does not need to brake suddenly, if a student at a driving school brakes suddenly, that is a problem due to unfamiliarity. If the instructor brakes suddenly in a similar driving environment, it can be judged as a sudden brake with the possibility of a problem.
(16)前記機能は、前記車両を使用する第1の人と前記車両を使用する第2の人との間の極端な対応を識別するとよい。 (16) The function may identify extreme correspondence between a first person using the vehicle and a second person using the vehicle.
このようにすると、車両を使用する第1の人と車両を使用する第2の人との間の極端な対応を識別することができ、ユーザは、第1の人と第2の人の間に生じた極端な対応を識別する機能を利用することができる。この機能を用いればユーザは、そのような極端な対応に対してより迅速に適切な対応をとりやすくなり、例えば、自動車教習所の車両に関連して、教習生からの「教官に急ブレーキを踏まれた」、「教官にとても近づかれた」といった苦情に対して、その教官がその他の生徒と同乗した際の同様の運転状況や教習環境でも、同じような対応をしていたか、或いは、通常に比べて極端な対応であったか、について、機械的に識別された客観的なデータを迅速かつ容易に参照することができる。 In this way, the extreme correspondence between the first person using the vehicle and the second person using the vehicle can be identified, and the user is advised between the first person and the second person. The ability to identify extreme correspondences that occur in With this function, the user is more likely to respond more quickly and appropriately to such extreme responses. In response to complaints such as "I was caught by an instructor" or "I was very close to the instructor", was the instructor responding in the same way even in similar driving situations and learning environments when the instructor was riding with other students? It is possible to quickly and easily refer to objective data mechanically identified as to whether the response was extreme compared to the previous one.
(17)前記機能は、前記車両内に前記人が存在する場合には、前記車両内に前記人が存在しない場合よりも、映像の品質を上げた撮影を行うとよい。 (17) It is preferable that the function, when the person is present in the vehicle, is to shoot with a higher image quality than when the person is not present in the vehicle.
このようにすると、車両内に人が存在する場合には、車両内に人が存在しない場合よりも、映像の品質を上げた撮影を行うことができ、ユーザは、車両内に人が存在する場合に、より高い品質の映像を撮影する機能を利用することができる。この機能を用いればユーザは、車内に人がいない状態ではより低品質で映像を撮影し、撮影装置の撮影時間を長くしつつ、車内に人が存在する或いは車内に人が確認された時点からは、より情報量の多い高品質の映像を撮影することで、車内の様子や車内の人物の状況の検証がよりしやすい高画質・高音質の映像データを取得すること等ができる。また、旅行中、道の駅などで車内に人がいない状況では、映像データの品質を落とし、その後また車内に人が戻った状況ではより高画質・高音質の映像データで記録することで、撮影機器の限られた記憶容量を有効に使用することができる。 In this way, when there is a person in the vehicle, it is possible to shoot an image with higher quality than when there is no person in the vehicle. In some cases, you can take advantage of the ability to shoot higher quality video. By using this function, the user can shoot lower quality images when there is no one in the car, lengthen the shooting time of the camera, and start shooting when there are people in the car or when people are confirmed in the car. By shooting high-quality images with a greater amount of information, it is possible to acquire high-quality and high-quality video data that makes it easier to verify the conditions inside the vehicle and the situations of people inside the vehicle. Also, during travel, when there is no one in the car at a roadside station, etc., the quality of the video data is lowered, and when people return to the car after that, the video data is recorded with higher image quality and sound quality. The limited storage capacity of the photographing equipment can be effectively used.
(18)前記機能は、前記車両を使用する前記人の映り込み具合に基づいて、前記映像データの質を変更して撮影を行うとよい。 (18) Preferably, the function changes the quality of the image data based on how the person using the vehicle is captured.
このようにすると、車両を使用する人の映り込み具合に基づいて、映像データの質を変更して撮影を行うことができ、ユーザは、車両を使用する人の映り込み具合に基づいて映像データの質を高めたり低めたりして撮影する機能を利用することができる。この機能を用いればユーザは、映像内に適度に人が映っている映像データを高画質で記録して、後にそれぞれの人の表情や姿勢、車内の音声等の解析や検証を行い易くすることができる。例えば、車内に撮影機器が複数存在する構成などで、最も人物を良好に撮影することができる撮影機器の品質は高めつつ、それに比べて、例えば個々の人物を区別できないほどに、部分的にしか人物を映していない又は人物の一部を大きく映しすぎている撮影機器の映像データの画質をより低画質にすることで、撮影機器の記録領域を有効に活用することができる。 In this way, it is possible to change the quality of the image data and perform shooting based on the reflection condition of the person using the vehicle, and the user can select the image data based on the reflection condition of the person using the vehicle. You can use the function to shoot by increasing or decreasing the quality of the image. By using this function, the user can record video data in which people appear in the video in high image quality, making it easier to analyze and verify the facial expressions and postures of each person, the voice inside the car, etc. later. can be done. For example, in a configuration where there are multiple photographic devices in the car, the quality of the photographic device that can best photograph a person is improved, but compared to that, for example, it is only partially so that individual people cannot be distinguished. By lowering the image quality of the image data of the photographing device that does not show the person or shows a part of the person too large, the recording area of the photographing device can be effectively used.
(19)前記機能は、前記車両を使用する前記人の発する音声に基づき、前記撮影機器による録音の感度又は質を変更するとよい。 (19) The function may change the sensitivity or quality of recording by the photographing device based on the voice uttered by the person using the vehicle.
このようにすると、車両を使用する人の発する音声に基づき、撮影機器による録音の感度又は質を変更することができ、ユーザは、車両を使用する人の発する音声に基づいて、撮影機器による録音の感度又は質を高めたり低めたりして撮影する機能を利用することができる。この機能を用いればユーザは、より会話にフォーカスした音声を録音することによって、車内での重要な会話や楽しかった会話等をより音質で記録し、より容易に会話の内容を確認したり、思い出として楽しんだりすることができる。また、人ごとに、録音の感度や質の変更具合を設定すると、大きくはっきりした口調の人や小声で話す人等が利用する場合でも、それぞれに人に応じて適切な音質を含んだ映像データを取得することができる。 In this way, it is possible to change the sensitivity or quality of sound recording by the photographing device based on the voice uttered by the person using the vehicle, and the user can change the sound recording by the photographing device based on the voice uttered by the person using the vehicle. You can use the function to shoot by increasing or decreasing the sensitivity or quality of the camera. By using this function, the user can record important conversations or fun conversations in the car with better sound quality by recording voices that focus more on conversations, making it easier to check the contents of the conversations or record memories. You can enjoy it as In addition, by setting the sensitivity and quality of the recording for each person, even if the person uses it for a person who has a loud and clear tone or a person who speaks in a low voice, the video data contains the appropriate sound quality for each person. can be obtained.
(20)前記機能は、前記車両に乗り込んだ前記人の数と、前記車両から降りた前記人の数との差異に基づく出力を行うとよい。 (20) The function may output based on the difference between the number of people who got into the vehicle and the number of people who got off the vehicle.
このようにすると、車両に乗り込んだ人の数と、車両から降りた人の数との差異に基づく出力を行うことができ、ユーザは、車両に乗り込んだ人数と車両から降りた人数の差に基づいて出力を行う機能を利用できる。この機能を用いればユーザは、特に、車両から降りた人数が、車両に乗り込んだ人数に達していないにも関わらず、運転手等が車両から離れるようなことがないように注意を促すことができる。例えば幼稚園や幼稚園等のお迎え後、園児を園内へ誘導する間に、座席と座席の間のスペース等に園児が入り込んだことによって、運転手や引率の先生がそれに気が付かなかったとしても、全ての園児が車内から降りるまで警告を行うことができる。ユーザは、警告を、音声で行うようにしてもよいが、それに追加して、車内に乗車人数や降車人数を表示する表示部を設け、その表示部の色を変更したり、点灯、点滅等させたりすると、より効果的に注意を促すことができるので更によい。 In this way, it is possible to output based on the difference between the number of people who got into the vehicle and the number of people who got out of the vehicle. You can use the function to output based on If this function is used, the user can especially warn the driver not to leave the vehicle even though the number of people getting out of the vehicle is less than the number of people getting into the vehicle. can. For example, after picking up a child from a kindergarten or kindergarten, while guiding the child to the nursery school, if the child enters the space between the seats, even if the driver or leading teacher does not notice it, all The warning can be given until the child gets out of the car. The user may give the warning by voice, but in addition to that, a display unit is provided inside the vehicle to display the number of passengers and the number of people getting off the vehicle, and the color of the display unit can be changed, lit, blinked, etc. It is even better if you let it be so that you can more effectively call attention to it.
(21)前記機能は、前記車両に乗り込んだ前記人の数と、前記映像データから認識される前記人の数との差異に基づく出力を行うとよい。 (21) The function may output based on the difference between the number of people who got into the vehicle and the number of people recognized from the video data.
このようにすると、車両に乗り込んだ人の数と、映像データから認識される人の数との差異に基づく出力を行うことができ、ユーザは、車両に乗り込んだ人数と車両内で映像データに認識される人数の差に基づく出力を行う機能を利用できる。この機能を用いればユーザは、映像データで認識できる人数が、車両に乗った乗員の数よりも少なければ、乗員の一部が、映像データの撮影範囲外に位置していると判断し、そのような状況に対応しやすくなる、例えば、走行中に乗員が着座していない不慮の状況を認識でき、事故等を防止しやすくなる。ユーザが、幼稚園や幼稚園等の送迎時に車両を使用する場合等では、座席と座席の間のスペース等に園児が入り込む等の原因で、園児が映像から消えたことを確認し、そのような状況を即座に運転手や引率の先生に報知しやすくなる。 In this way, output can be performed based on the difference between the number of people who got into the vehicle and the number of people recognized from the video data. You can use the function to output based on the difference in the number of people recognized. With this function, if the number of people who can be recognized by the video data is smaller than the number of passengers in the vehicle, the user can determine that some of the passengers are located outside the shooting range of the video data. For example, it is possible to recognize an unforeseen situation in which the passenger is not seated while driving, thereby making it easier to prevent an accident or the like. When the User uses a vehicle to pick up and drop off at a kindergarten, kindergarten, etc., the child enters the space between the seats, etc., and confirms that the child has disappeared from the video. It becomes easier to immediately notify the driver or the teacher who leads the teacher.
(22)前記車両を使用する前記人が少なくとも2人であり、前記機能は、前記映像データ内の一方の前記人に対して加工を施した前記映像データを、他方の前記人に提供するとよい。 (22) The persons using the vehicle are at least two persons, and the function preferably provides the image data processed for one person in the image data to the other person. .
このようにすると、車内に少なくとも2人の乗員がいる状況で、映像データ内の一方の人に対して加工を施した映像データを、他方の人に提供することができ、ユーザは、そのような映像データ内の一方の人に対して加工を施した映像データを、他方の人に提供する機能を利用できる。この機能を用いればユーザは、そのような映像データを求める人物に対して、同乗者に加工を施した映像データを提供することができ、加工により映像データ内の同乗者の特定を困難なものにすれば、同乗者のプライバシーを保護した映像データを提供することができる。なお、「一方の人」と「他方の人」は、それぞれ複数の人であってもよい。 In this way, in a situation where there are at least two passengers in the vehicle, it is possible to provide the video data obtained by processing one person in the video data to the other person. It is possible to use the function of providing the video data processed for one person in the video data to the other person. By using this function, the user can provide video data in which the passenger has been processed to a person who desires such video data. , it is possible to provide video data that protects the privacy of fellow passengers. Note that “one person” and “the other person” may each be a plurality of people.
(23)前記機能は、所定の予約システムから前記車両を使用する前記人に関する情報を取得するとよい。 (23) The function may obtain information about the person using the vehicle from a predetermined reservation system.
このようにすると、所定の予約システムから車両を使用する人に関する情報を取得することができ、ユーザは、所定の予約システムに記憶された車両を使用する人に関する情報を取得する機能を利用できる。この機能を用いればユーザは、予約システムから取得した情報を、車両を使用する人の状態に反映させることや、予約システムに記憶されている情報と連携した撮影を行うことや、撮影データの記録を予約システムに記憶された情報と連携して行うことができる。予約システムに記憶されている情報は、例えばサービスを受ける人の特徴(性別、年齢、身体的特徴、サービスを提供された回数、前回利用時の映像的特徴等)、予約の時間帯、予約されたサービスの担当者、予約されたサービスの内容、予約時に追加したオプション、予定の移動範囲、予定の移動経路、月、日にち、曜日、予約時リクエスト等の情報である。また、撮影装置の設定変更を、サービスを利用する人、サービスの提供に関連する人、サービスを提供する組織のそれぞれにより柔軟に対応させて、より柔軟に設定して、撮影装置を制御することができる。なお、予約システムは、例えば教習所の予約システム、介護施設の予約システム、送迎バスの予約システム、リムジンクルーズの予約システム、その他航空機、船舶、列車(寝台車を含む)等の予約システム、配車やカーシェアリング等のアプリシステム、業務における車両の使用予定を管理する予定システム等、である。 In this way, it is possible to obtain the information about the person using the vehicle from the predetermined reservation system, and the user can use the function of obtaining the information about the person using the vehicle stored in the predetermined reservation system. By using this function, the user can reflect the information acquired from the reservation system on the condition of the person using the vehicle, perform shooting in cooperation with the information stored in the reservation system, and record the shooting data. can be done in conjunction with the information stored in the reservation system. The information stored in the reservation system includes, for example, the characteristics of the person receiving the service (gender, age, physical characteristics, number of times the service was provided, visual characteristics of previous use, etc.), reservation time zone, reservation The information includes the person in charge of the service booked, details of the reserved service, options added at the time of reservation, planned movement range, planned movement route, month, date, day of the week, requests at the time of reservation, and the like. In addition, setting changes of the photographing device can be flexibly adapted to each of a person using the service, a person related to the provision of the service, and an organization providing the service, and the photographing device can be set more flexibly to control the photographing device. can be done. Reservation systems include, for example, reservation systems for driving schools, reservation systems for nursing care facilities, reservation systems for shuttle buses, reservation systems for limousine cruises, reservation systems for other aircraft, ships, trains (including sleeping cars), dispatch and car services. Application systems such as gearing, schedule systems for managing vehicle usage schedules in business, etc.
(24)前記撮影機器は、所定のサービスに使用される前記車両に搭載され、前記機能は、前記サービスに関するデータに基づいて、前記制御を行うとよい。 (24) The photographing device may be installed in the vehicle used for a predetermined service, and the function may perform the control based on data relating to the service.
このようにすると、所定のサービスに使用される車両に搭載された撮影機器に対して、サービスに関するデータに基づいて、制御を行うことができ、ユーザは、サービスに関するデータに基づいて、撮影機器を制御する機能を利用できる。この機能を用いればユーザは、より適切なサービスを提供できるように、提供されているサービスが適切であるかを特定ができるように、提供するサービスの質を向上できるように等、様々な用途でサービスに関するデータを撮影機器の制御に活用することができる。 In this way, it is possible to control, based on the service-related data, the photographing equipment mounted on the vehicle used for the predetermined service, and the user can operate the photographing equipment based on the service-related data. You can use the function to control. By using this function, the user can provide more appropriate services, identify whether the provided service is appropriate, improve the quality of the provided service, etc. The service-related data can be used to control the imaging equipment.
(25)前記機能は、前記サービスの利用期間中の前記映像データを記録し、前記機能は、前記サービスの利用期間中に発生した所定の事象が前記映像データに記録されていることを示す情報を、出力するとよい。 (25) The function records the video data during the usage period of the service, and the function is information indicating that a predetermined event occurring during the usage period of the service is recorded in the video data. should be output.
このようにすると、サービスの利用期間中の映像データを記録し、サービスの利用期間中に発生した所定の事象が映像データに記録されていることを示す情報を出力することができ、ユーザは、そのような所定の事象が映像データに記録されていることを示す情報を出力する機能を利用することができる。この機能を用いればユーザは、ユーザが映像データを確認するより前に、所定の事象が映像データに記録されていることを示す情報を出力情報から、所定の事象が発生したことを認識することができる。それによりユーザは、所定の事象が対応を要する事象であれば、より迅速に対応を取ることができる。 By doing so, it is possible to record the video data during the period of using the service, and output information indicating that a predetermined event that occurred during the period of using the service is recorded in the video data. A function of outputting information indicating that such a predetermined event is recorded in the video data can be used. By using this function, the user can recognize that a predetermined event has occurred from the output information indicating that the predetermined event is recorded in the video data before the user confirms the video data. can be done. Accordingly, the user can take action more quickly if the predetermined event requires action.
(26)前記機能は、前記サービスの利用期間中に前記映像データを記録し、前記機能は、前記映像データに、所定の事象が前記サービスの利用期間中に発生したことを示す情報を、関連付けるとよい。 (26) The function records the video data during the usage period of the service, and the function associates the video data with information indicating that a predetermined event occurred during the usage period of the service. Good.
このようにすると、サービスの利用期間中の映像データを記録し、映像データに、サービスの利用期間中に発生した所定の事象に関する情報を関連付けることができ、ユーザは、映像データにそのような所定の事象に関する情報を関連付ける機能を利用することができる。この機能を用いればユーザは、所定の事象との関連付けを参照して、より効率的に、多数の映像データを管理し活用しやすくなる。 In this way, it is possible to record the video data during the usage period of the service, associate the video data with information about a predetermined event that occurred during the usage period of the service, and allow the user to record such a predetermined event in the video data. It is possible to use the function of associating information about the events of By using this function, the user can more efficiently manage and utilize a large amount of video data by referring to associations with predetermined events.
(27)前記機能は、前記サービスに関するデータに基づく前記車両の走行ルートと、前記車両の位置との関係に基づいて、前記撮影機器の前記映像データの記録を制御する、又は前記撮影機器からの出力を制御するとよい。 (27) The function controls the recording of the video data by the photographing device, or controls the recording of the video data from the photographing device, based on the relationship between the travel route of the vehicle based on the service-related data and the position of the vehicle. Output should be controlled.
このようにすると、サービスに関するデータに基づく車両の走行ルートと、車両の位置との関係に基づいて、撮影機器の映像データの記録を制御する、又は、撮影機器からの出力を制御することができ、ユーザは、そのような走行ルートと車両の位置との関係に基づいて、映像データの記録を制御したり、撮影機器からの出力を制御したりする機能を利用できる。この機能を用いればユーザは、車両の実際の位置が予定の走行ルートから逸脱している間、映像データの質を変更したり、撮影機器から予定の走行ルートから逸脱していることについて警告を出力したり、することができる。例えば自動車教習所で所定の走行ルートや走行範囲を逸脱した運転が行われた場合や、従業員が営業時に自身の営業範囲を逸脱して車両を使用した場合等に、そのような状況をより高品質で記録したり、そのような状況の発生を乗員に認知させたりすることができる。 In this way, it is possible to control the recording of video data in the photographic equipment or control the output from the photographic equipment based on the relationship between the travel route of the vehicle based on the service-related data and the position of the vehicle. , the user can use the function of controlling the recording of video data or controlling the output from the photographing device based on the relationship between the travel route and the position of the vehicle. With this function, the user can change the quality of the video data while the actual position of the vehicle deviates from the planned driving route, or the camera device warns about the deviation from the planned driving route. can be output or For example, if driving deviates from the prescribed driving route or driving range at a driving school, or if an employee deviates from the operating range during business hours, such a situation can be dealt with more seriously. It can be recorded in quality and made the occupant aware of the occurrence of such a situation.
(28)前記機能は、前記サービスの提供に関する予約システムから取得した予約情報に基づいて、前記制御を行うとよい。 (28) Preferably, the function performs the control based on reservation information obtained from a reservation system regarding provision of the service.
このようにすると、サービスの提供に関する予約システムから取得した予約情報に基づいて、撮影機器を制御することができ、ユーザは、予約システムから取得した予約情報に応じた制御を行う機能を利用できる。この機能を用いればユーザは、予約システムから取得した予約情報によって人の状態を特定して撮影機器を制御したり、予約システムから取得した予約情報に含まれる情報と車内で特定した人の状態とを組み合わせた撮影機器を制御したり、させることができる。予約情報に含まれる情報から、個人や個人の属性や個人の属するグループ等を特定することにより、ユーザは、より細やかにカスタマイズしたサービスを提供することができる。 In this way, the photographing equipment can be controlled based on the reservation information obtained from the reservation system regarding service provision, and the user can use the function of performing control according to the reservation information obtained from the reservation system. By using this function, the user can specify the state of a person based on the reservation information obtained from the reservation system and control the photographic equipment, or compare the information included in the reservation information obtained from the reservation system with the state of the person specified in the vehicle. can control or cause the photographic equipment in combination with By specifying an individual, an attribute of the individual, a group to which the individual belongs, etc., from the information included in the reservation information, the user can provide more finely customized services.
(29)前記機能は、前記サービスの利用時間又は前記サービスの予約時間に関する前記予約情報に基づいて、少なくとも前記利用時間の間又は前記予約時間の間に、撮影した前記映像データを記録するとよい。 (29) The function preferably records the captured image data during at least the usage time or the reservation time based on the reservation information regarding the service use time or the service reservation time.
このようにすると、サービスの利用時間又はサービスの予約時間に関する予約情報に基づいて、少なくとも利用時間の間又は予約時間の間に、撮影した映像データを記録することができ、ユーザは、自身でその都度映像データを記録する時間帯を設定することなしに、予約情報に基づいて、少なくとも利用時間の間又は予約時間の間に、撮影した映像データを記録する機能を利用することができる。この機能を用いればユーザは、サービスの利用時間又はサービスの予約時間の開始から終了までの間の映像データをより確実に記録させることができる。更に、上記の時間以外では、映像データの記録を停止することで、撮影機器の記録媒体の記憶容量を節約することができる。 In this way, it is possible to record video data captured at least during the usage time or the reservation time based on the reservation information regarding the service usage time or the service reservation time, and the user himself/herself can record the image data. It is possible to use the function of recording the captured image data at least during the usage time or during the reservation time based on the reservation information without setting the time zone for recording the image data each time. By using this function, the user can more reliably record the video data from the start to the end of the service utilization time or service reservation time. Furthermore, by stopping the recording of video data outside the above time, it is possible to save the storage capacity of the recording medium of the photographing equipment.
(30)前記機能は、前記サービスの利用時間又は前記サービスの予約時間に関する前記予約情報に基づいて、前記サービスの前記利用時間又は前記予約時間に加え、前記利用時間又は前記予約時間の前、及び後、の少なくとも一方を含む期間に、撮影した前記映像データを記録するとよい。 (30) the function, based on the reservation information regarding the usage time of the service or the reservation time of the service, in addition to the usage time or the reservation time of the service, before the usage time or the reservation time; It is preferable to record the captured video data during a period including at least one of the following.
このようにすると、サービスの利用時間又はサービスの予約時間に関する予約情報に基づいて、少なくとも利用時間の間又は予約時間の間に加え、利用時間又は予約時間の前、及び後、の少なくとも一方を含む期間に、撮影した映像データを記録することができ、ユーザは、自身でその都度映像データを記録する時間帯を設定することなしに、予約情報に基づいて、利用時間の間又は予約時間の間に加え、利用時間又は予約時間の前、及び後、の少なくとも一方を含む期間に、撮影した映像データを記録する機能を利用することができる。この機能を用いればユーザは、サービスの利用時間又はサービスの予約時間の開始から終了までの時間帯に加えて、利用時間又は予約時間の前、及び後、の少なくとも一方の時間帯を含む映像データをより確実に記録させることができる。それにより、ユーザは、サービスとサービスの間の休憩時間であっても、例えば予約時間よりも若干早くサービスの利用者が車両付近へ到着した状況等の映像データも記録しやすくすることができる。更に、上記の時間以外では、映像データの記録を停止することで、撮影機器の記録媒体の記憶容量を節約することができる。 In this way, at least during the usage time or between the reservation time, and at least one of before and after the usage time or the reservation time based on the reservation information regarding the service usage time or the service reservation time The captured image data can be recorded during the period, and the user can record the image data during the usage time or during the reservation time based on the reservation information without setting the time period for recording the image data by himself/herself. In addition to this, it is possible to use the function of recording captured image data during a period including at least one of before and after the usage time or the reservation time. By using this function, the user can obtain video data including at least one of the time period before and after the usage time or the reservation time in addition to the time period from the start to the end of the service usage time or the service reservation time. can be recorded more reliably. As a result, even during breaks between services, the user can easily record video data such as a situation in which the user of the service has arrived near the vehicle slightly earlier than the reserved time. Furthermore, by stopping the recording of video data outside the above time, it is possible to save the storage capacity of the recording medium of the photographing equipment.
(31)前記機能は、前記サービスの予約の時間帯に関する前記予約情報に基づき、前記映像データのうち、前記予約の時間帯の前記映像データを、又は、前記予約の時間帯よりも所定の時間長分だけ前後に延長した時間帯の前記映像データを、第1の外部装置へ送信するとよい。 (31) Based on the reservation information related to the reservation time period of the service, the function is configured to remove the video data in the reservation time period from the video data, or It is preferable to transmit the video data of the time period extended back and forth by a long amount to the first external device.
このようにすると、サービスの予約の時間帯に関する予約情報に基づき、映像データのうち、予約の時間帯の映像データを、又は、予約の時間帯よりも所定の時間長分だけ前後に延長した時間帯の映像データを、第1の外部装置へ送信することができ、ユーザは、映像データのうち、予約の時間帯の映像データを、又は、予約の時間帯よりも所定の時間長分だけ前後に延長した時間帯の映像データを、第1の外部装置へ送信する機能を利用できる。この機能を用いればユーザは、予約されたサービスの提供の間、例えば教習所での教習の時間帯とその前後数分間の様子を選択的に外部へ送信し、サービスとサービスの間の休憩時間等、ユーザの関心の低い時間帯のデータの送信を行わない、又は後回しにすることで、データのコピー等のために、時間を効率的に使ってデータを外部へ送信することができる。なお、この外部への映像データの送信は、無線で行われるとよりよい。 In this way, based on the reservation information about the reservation time period of the service, the video data of the reservation time period out of the video data, or the time extended forward or backward from the reservation time period by a predetermined length of time. The video data of the band can be transmitted to the first external device, and the user can select the video data of the reserved time band, or the video data before or after the reserved time band by a predetermined length of time. It is possible to use the function of transmitting the video data of the extended time period to the first external device. By using this function, the user can selectively transmit to the outside during the provision of the reserved service, for example, the time period of the lesson at the driving school and the state of several minutes before and after that, and the break time between services, etc. By avoiding or delaying the transmission of data during a time period in which the user is less interested, the time can be efficiently used to transmit the data to the outside for purposes such as copying the data. In addition, it is preferable that the transmission of the video data to the outside is performed wirelessly.
(32)前記機能は、前記撮影機器を用いて記録した前記映像データを、その前記映像データを記録した日時情報と前記予約情報とを関連付けた表示を行うとよい。 (32) Preferably, the function displays the video data recorded using the imaging device in association with date and time information when the video data was recorded and the reservation information.
このようにすると、撮影機器を用いて記録した映像データを、その映像データを記録した日時情報と予約情報とを関連付けた表示を行うことができ、ユーザは、映像データを記録した日時情報と予約情報とを関連付けて映像データを表示する機能を利用できる。この機能を用いればユーザは、映像データを後から見返す状況であって、手元に日情報や予約情報がない状況であっても、再生画面上で、一目で必要な情報を認識しやすくなる、また、運転中に撮影機器の画面上に再生される映像データからも同様の情報を読み取れるようにすることで、サービスの提供に関与する人は、サービス利用者の名前やそのとき提供するべきサービスの内容等を、僅かな視線の動きで確認することができるので、提供するサービスの質を向上させやすくなる。 In this way, it is possible to display the video data recorded using the photographing equipment in association with the recording date and time information of the video data and the reservation information. A function for displaying video data in association with information can be used. By using this function, the user can easily recognize the necessary information on the playback screen at a glance, even if the user is looking back at the video data later and there is no date information or reservation information at hand. In addition, by making it possible to read similar information from the video data played back on the screen of the photographic equipment while driving, people involved in the provision of the service can easily identify the name of the service user and the service to be provided at that time. , etc., can be confirmed with a slight movement of the line of sight, so that the quality of the service provided can be easily improved.
(33)前記機能は、日時情報又は前記予約情報に対する選択入力を受け付け、前記機能は、選択された前記日時情報又は前記予約情報に対応する前記映像データを出力するとよい。 (33) It is preferable that the function receives a selection input for the date and time information or the reservation information, and outputs the video data corresponding to the selected date and time information or the reservation information.
このようにすると、日時情報又は予約情報に対する選択入力を受け付けて、選択された日時情報又は予約情報に対応する映像データを出力することができ、ユーザは、選択された日時情報又は予約情報に対応する映像データを出力する機能を利用できる。この機能を用いればユーザは、撮影機器の映像データから、所望の日時情報や予約情報に対応する映像データを、より容易に入手しやすくなる、例えば、複数の人物が撮影された映像データから、特定の個人による予約に関連する映像データをまとめて入手することなどを、より効率的に行うことができる。 In this way, it is possible to receive a selection input for date/time information or reservation information, and output video data corresponding to the selected date/time information or reservation information. You can use the function to output the video data to be used. By using this function, the user can more easily obtain video data corresponding to desired date and time information and reservation information from the video data of the shooting equipment. It is possible to more efficiently obtain collectively video data related to a reservation by a specific individual.
(34)前記予約情報は、前記車両に前記予約システムの予約のある時間帯に関する情報を含み、前記機能は、前記撮影機器に記録した前記映像データを前記予約のない時間帯に、第1の外部装置へ送信するとよい。 (34) The reservation information includes information relating to a time zone in which the vehicle is reserved by the reservation system, and the function is to transfer the video data recorded in the photographing device to a first It should be sent to an external device.
このようにすると、車両に予約システムの予約のある時間帯に関する情報を含む、予約情報を用いて、撮影機器に記録された映像データを予約のない時間帯に、第1の外部装置へ送信することができ、ユーザは、撮影機器に記録された映像データを、予約のない時間帯に、第1の外部装置へ送信する機能を利用できる。この機能を用いればユーザは、車両にサービスでの使用予定がなく、撮影機器からの映像データの送信に係る演算負荷が少ない期間を有効に活用して、映像データを外部の装置へ送信することで、ユーザは時間や撮影機器の演算能力を効率的に使ってデータをコピーすることができる。例えば、通常映像データが夜間に外部の記憶装置へ複製される設定であっても、予約されたサービスの提供後に次の予約がない車両内の撮影機器のデータを、いち早く外部の装置へ送信することができる。 In this manner, the video data recorded in the photographing device is transmitted to the first external device during the time period when the vehicle has no reservation using the reservation information including the information regarding the time period in which the vehicle is reserved in the reservation system. The user can use the function of transmitting the video data recorded in the photographing device to the first external device during an unreserved time slot. By using this function, the user can effectively utilize the period when the vehicle is not scheduled to be used for services and the computational load associated with the transmission of video data from the photographing equipment is low, and can transmit the video data to an external device. allows the user to copy data efficiently using the time and computing power of the imaging equipment. For example, even if the video data is normally copied to an external storage device at night, after the reserved service is provided, the data of the camera equipment in the vehicle that has no next reservation is sent to the external device as soon as possible. be able to.
(35)前記機能は、前記人による前記車両の使用が終了された後、又は、前記車両を使用して提供されるサービスの利用が終了した後、通信電波に基づいて、前記撮影機器の前記映像データを、第1の外部装置へ送信するように制御するとよい。 (35) After the person has finished using the vehicle, or after the person has finished using the service provided by using the vehicle, the function may be performed by the photographing device based on communication radio waves. The video data may be controlled to be transmitted to the first external device.
このようにすると、人による車両の使用が終了された後、又は、車両を使用して提供されるサービスの利用が終了した後、通信電波に基づいて、撮影機器の映像データを、第1の外部装置へ送信するように制御することができ、ユーザは、人による車両の使用が終了された後、又は、車両を使用して提供されるサービスの利用が終了した後、通信電波に基づいて、撮影機器の映像データを、第1の外部装置へ送信する機能を利用できる。この機能を用いればユーザは、車両の使用が終了された後、又は、サービスの利用が終了した後、に外部の装置へ映像データを送信することができるので、車両の使用やサービスの利用の終了時間が前後する場合や、車両の使用の終了時間の直後やサービスの利用の終了時間の直後に映像データを確保したい場合等に、より確実に映像データの送信を実行させることができる。 In this way, after the person has finished using the vehicle or has finished using the service provided by using the vehicle, the image data of the photographing device can be transferred to the first image data based on the communication radio wave. It can be controlled to transmit to an external device, and the user can, based on the communication radio waves, after the use of the vehicle by a person has ended, or after the use of the service provided using the vehicle has ended. , the function of transmitting the image data of the photographing device to the first external device can be used. By using this function, the user can transmit video data to an external device after using the vehicle or after using the service. To ensure the transmission of video data when the end time is delayed, or when the video data is to be secured immediately after the end time of using a vehicle or immediately after the end time of using a service.
(36)前記機能は、前記撮影機器による撮影が実行中であることに基づく出力を行うとよい。 (36) It is preferable that the function outputs based on the fact that the photographing device is in the process of photographing.
このようにすると、撮影装置による撮影が実行中であることに基づく出力を行うことができ、ユーザは、撮影が実行中であることに基づく出力を行う機能を利用できる。この機能を用いればユーザは、車両に乗車する人の知らないうちに、その人の映像が記録されている等の事態を避けやすくなり、プライバシーに配慮することができる。なお、上記の機能は、人の状態に応じて、例えば、車両内での運転席や座席の変更に伴い、車両内の人物に変更がない状態や、一度撮影が実行中である通知を受けた人が一定期間内に再度乗り込んだ状態では、同様の通知の出力を停止し、繰り返しの通知を避けるように、撮影機器を制御するとよりよい。 In this way, it is possible to perform an output based on the fact that the photographing device is in progress, and the user can use the function of performing an output based on the fact that the photographing is in progress. By using this function, the user can easily avoid a situation where the person's image is being recorded without the person's knowledge, thereby giving consideration to privacy. In addition, the above function can be used depending on the state of the person, for example, when the driver's seat or seat is changed in the vehicle, the person in the vehicle is not changed, or when a notification is received that shooting is in progress. It is better to control the photographing equipment so as to stop outputting similar notifications and avoid repeated notifications when the person who has already boarded the vehicle again within a certain period of time.
(37)前記機能は、録画可能時間の長さを優先した撮影を、映像の品質を優先した撮影へ変更するとよい。 (37) It is preferable that the function changes the shooting that gives priority to the length of recordable time to the shooting that gives priority to video quality.
このようにすると、録画可能時間の長さを優先した撮影を、映像の品質を優先した撮影へ変更することができ、ユーザは、車両を使用する人の状態又は動作に基づいて、録画可能時間の長さを優先した撮影を、映像の品質を優先した撮影へ変更する機能を利用できる。この機能を用いればユーザは、録画可能時間の長さを優先してできるだけ長時間、映像データを記録することと、車両を使用する人の状態又は動作に応じて、人の状態や動作ごとに、より高品質の映像の撮影を行うこと、を両立させることができる。なお、上記の機能は、品質を優先した撮影へ変更を、人ごとや人の組み合わせごとに、異なる状態や動作に対して、実行することができるとよりよい。 In this way, shooting that gives priority to the length of the recordable time can be changed to shooting that gives priority to the quality of the video, and the user can change the length of the recordable time based on the state or action of the person using the vehicle. You can use the function to change the shooting that prioritizes the length of the video to the shooting that prioritizes the quality of the video. By using this function, the user can record video data for as long as possible while giving priority to the length of recordable time, and according to the state or action of the person using the vehicle, , and shooting of higher-quality video can be made compatible. It is preferable that the above function can be changed to image taking with priority on quality for each person or for each combination of persons and for different states and actions.
(38)前記機能は、少なくとも2つの前記撮影機器の前記映像データの映像及び音声に対して、異なる再生優先度を設定するとよい。 (38) The function preferably sets different playback priorities for video and audio of the video data of at least two of the imaging devices.
このようにすると、少なくとも2つの撮影機器の映像データの映像及び音声に対して、異なる再生優先度を設定することができ、ユーザは、そのような映像データの映像及び音声に対して、異なる再生優先度を設定する機能を利用できる。この機能を用いればユーザは、複数の撮影装置で撮影された同一の車内の同一の出来事や様子に対して、1つ1つの映像データを見比べなくても、映像データの映像及び音声ごとに、再生優先度が最も高いものを再生させることで、最も良好な映像や音声が記録された映像データを優先的に再生することができる。なお、この再生優先度や再生優先度の決定方法は、プリセットされているとよいが、ユーザが、撮影機器本体やビューア等を介して、自身で設定することができるとよりよい。 In this way, different reproduction priorities can be set for video and audio of video data of at least two photographing devices, and the user can set different reproduction priorities for video and audio of such video data. Ability to set priorities. By using this function, the user can capture the same events and situations in the same vehicle captured by a plurality of image capturing devices without comparing the video data one by one. By reproducing the data with the highest reproduction priority, it is possible to preferentially reproduce the video data in which the best video and audio are recorded. It is preferable that the playback priority and the method for determining the playback priority are preset, but it is better if the user can set them by himself/herself via the main body of the photographing device, the viewer, or the like.
(39)前記撮影機器として第1撮影機器、第2撮影機器があり、前記機能は、前記第1撮影機器と前記第2撮影機器とで撮影又は前記映像データの記録に関する制御を異ならせるとよい。 (39) The photographing device may include a first photographing device and a second photographing device, and the function may differ in control of photographing or recording of the video data between the first photographing device and the second photographing device. .
このようにすると、車内に搭載された第1撮影機器及び第2撮影機器に対して、第1撮影機器と第2撮影機器とで撮影又は映像データの記録に関する制御を異ならせることができ、ユーザは、第1撮影機器と第2撮影機器とで撮影又は映像データの記録に関する制御を異ならせる機能を利用できる。この機能を用いればユーザは、車両内に複数の撮影機器が存在する構成において、その都度、人の状態や動作に応じて、例えばそれぞれの撮影機器を適した設定やシステム全体での記憶領域の消費量を節約した設定で、映像データを記録することができる。例えば、異なる事象ごとに、発生した事象を最適に撮影できる撮影機器では、最も高画質な映像データを記録しつつ、その他の撮影装置では、必要最小限の、より低い品質で映像データを記録することができる。なお、上記の機能は、3つ以上の撮影機器の制御を異ならせることができるとよりよい。 By doing so, it is possible to vary the control for photographing or video data recording between the first photographing device and the second photographing device, which are mounted in the vehicle. can use the function of differentiating the control of shooting or recording of video data between the first shooting device and the second shooting device. By using this function, in a configuration in which a plurality of photographing devices exist in a vehicle, the user can, for example, set appropriate settings for each photographing device according to the state and movement of the person each time, and change the storage area of the entire system. Video data can be recorded with settings that save power consumption. For example, for each different event, a camera that can optimally capture the event that occurred records the highest quality video data, while other camera devices record video data with the minimum necessary quality, lower quality. be able to. It is preferable that the above function can control three or more photographing devices differently.
(40)前記機能は、異なる前記車両に搭載される複数の前記撮影機器に対して共通の制御を行うとよい。 (40) Preferably, the function performs common control for a plurality of photographing devices mounted on different vehicles.
このようにすると、異なる車両に搭載される複数の撮影機器に対して共通の制御を行うことができ、ユーザは、異なる車両に搭載される複数の撮影機器に対して共通の制御を行う機能を利用できる。この機能を用いればユーザは、現在乗車中である車両に搭載された撮影機器に適用した制御を、他の車両にも同様に適用させることができる。例えば、車両の走行ルートの決定権限を有する人による車両の走行ルートの決定するための走行状態において、事故等で通行止めとなっている区間や走行の難度が高い区間等を特定すると、現在乗車中である車両に搭載された撮影機器に対して当該区間の通行を非推奨とする通知を出力する制御を適用し、他車両と通信接続が可能な状況下で、他車両に搭載された撮影機器に対しも同様に当該区間の通行を非推奨とする通知を出力する制御を適用することができる。 In this way, it is possible to perform common control for a plurality of photographing devices mounted on different vehicles, and the user can obtain a function of performing common control for a plurality of photographing devices mounted on different vehicles. Available. By using this function, the user can apply the control applied to the photographing device mounted on the vehicle in which the user is currently riding to other vehicles as well. For example, in the driving state for determining the driving route of the vehicle by a person who has the authority to determine the driving route of the vehicle, if a section that is closed to traffic due to an accident or a section that is difficult to drive is specified, Applies control to output a notification that it is not recommended to travel in the relevant section to the camera mounted on the vehicle, and under conditions where communication connection with other vehicles is possible, the camera mounted on the other vehicle Similarly, it is possible to apply control for outputting a notification that travel in the section is not recommended.
(41)前記機能は、前記車両の状態又は動作に応じた前記制御を行うとよい。 (41) Preferably, the function performs the control according to the state or operation of the vehicle.
このようにすると、車両の状態又は動作に応じた制御を行うことができ、ユーザは、人の状態や動作と、車両の状態又は動作とに応じた制御を行う機能を利用できる。この機能を用いればユーザは、人の状態や動作と車両の状態又は動作との様々な組み合わせに割り当てた撮影機器の制御を実行することができる。例えば、運転する人の運転の習熟度と車両の悪路での走行状態を考慮し、運転する人の運転の習熟度が低ければ、運転をサポートするような運転補助情報の出力を行い、運転する人の運転の習熟度が高ければ、運転をより楽しむことができるような演出情報の出力を行うことができる。 In this way, control can be performed according to the state or motion of the vehicle, and the user can use the function of performing control according to the state or motion of the person and the state or motion of the vehicle. This feature allows the user to implement controls for the imaging equipment that are assigned to various combinations of human states or actions and vehicle states or actions. For example, considering the driving proficiency level of the driver and the driving condition of the vehicle on rough roads, if the driving proficiency level of the driver is low, driving assistance information that supports driving is output and If the driving proficiency of the driver is high, it is possible to output performance information that makes driving more enjoyable.
(42)前記機能は、前記車両の使用開始時点での前記車両の状態と、前記車両の使用終了時点での前記車両の状態との間の差異、に基づく出力を行うとよい。 (42) The function may output based on a difference between the state of the vehicle at the start of use of the vehicle and the state of the vehicle at the end of use of the vehicle.
このようにすると、車両の使用開始時点での車両の状態と、車両の使用終了時点での車両の状態との間の差異、に基づく出力を行うことができ、ユーザは、車両の使用開始時点と車両の使用終了時点の間での車両の状態の差異に基づく出力を行う機能を利用できる。この機能を用いればユーザは、車両の使用前後での車両の状態の変化、特には車内の状態の変化を、より認識しやすくなる。例えば、タクシーでの利用において、乗客ごとに、乗客の乗車前には存在しなかった携帯電話、イヤホン、財布、傘等の物品が、乗客の降車後や降車時にそのような物品の存在が確認できる状態に変わっていると、運転手に対してそのような状態に関する通知、例えば「お客様のお忘れ物があります」等の音声、を出力することができる。 In this way, the output can be made based on the difference between the vehicle state at the start of use of the vehicle and the state of the vehicle at the end of use of the vehicle. A feature is available that provides an output based on the difference in vehicle state between the time of day and the end of vehicle use. Using this function makes it easier for the user to recognize changes in the state of the vehicle, especially changes in the state inside the vehicle, before and after the vehicle is used. For example, when using a taxi, the existence of items such as mobile phones, earphones, wallets, umbrellas, etc. that were not present before the passenger boarded the passenger can be confirmed after the passenger gets off or when the passenger gets off. When the status is changed, it is possible to output a notification regarding such a status to the driver, for example, a voice such as "There is an item left behind by the customer".
(43)前記機能は、非代替トークンデータに関するデータ、を作成し、前記車両を使用する前記人の第2の外部装置へ送信するとよい。 (43) The function may create and transmit data relating to non-substitutable token data to a second external device of the person using the vehicle.
このようにすると、非代替トークンデータに関するデータを作成し、車両を使用する人の第2の外部装置へ送信することができ、ユーザは、非代替トークンデータに関するデータを作成し、車両を使用する人の第2の外部装置へ送信する機能を利用できる。この機能を用いればユーザは、車両を利用する人の求めに応じて、車両利用中に撮影機器が撮影した映像データを、非代替トークン(英: non-fungible token)やそれに関連するデータとして提供することができる。 In this way, data relating to the non-fungible token data can be created and transmitted to the second external device of the person using the vehicle, and the user can create data relating to the non-fungible token data and use the vehicle. A person's ability to send to a second external device is available. With this function, the user can provide video data captured by the camera while using the vehicle as a non-fungible token or related data at the request of the person using the vehicle. can do.
(44)前記機能は、前記非代替トークンデータに関するデータを、前記第2の外部装置とは別の外部装置を介して、前記第2の外部装置へ送信するとよい。 (44) The function preferably transmits data regarding the non-alternative token data to the second external device via an external device different from the second external device.
このようにすると、非代替トークンデータに関するデータを、第2の外部端末とは別の外部装置を介して、第2の外部装置へ送信することができ、ユーザは、非代替トークンデータに関するデータを、第2の外部端末とは別の外部装置を介して、第2の外部装置へ送信する機能を利用できる。この機能を用いればユーザは、車両を利用する人の求めに応じて、撮影機器又は別の外部装置で、又は、撮影機器と別の外部装置が協働して、車両利用中に撮影機器が撮影した映像データを、非代替トークンやそれに関連するデータとして提供することができる。 In this way, the data regarding the non-substitutable token data can be transmitted to the second external device via an external device different from the second external terminal, and the user can transmit the data regarding the non-substitutable token data. , a function of transmitting to the second external device via an external device different from the second external terminal. By using this function, the user can use the photographing device or another external device in response to the request of the person who uses the vehicle, or the photographing device and another external device cooperate to operate the photographing device while using the vehicle. Captured video data can be provided as non-substitutable tokens and related data.
(45)前記機能は、前記非代替トークンデータに関するデータに、少なくとも2つの前記撮影機器で撮影された前記映像データを含ませるとよい。 (45) The function may include the video data shot by at least two of the shooting devices in the data relating to the non-substitutable token data.
このようにすると、非代替トークンデータに関するデータに、少なくとも2つの撮影機器で撮影された映像データを含ませることができ、ユーザは、非代替トークンデータに関するデータに、少なくとも2つの撮影機器で撮影された映像データを含ませる機能を利用できる。この機能を用いればユーザは、マルチアングルの映像データを非代替トークンやそれに関連するデータとして提供することができる。例えば、主に車内の様子や人物等を撮影した映像データと主に車外の様子や景色等を撮影した映像データの双方の映像を含むデータを作成し、非代替トークンで外の景色の映像とそれに関連する車内の様子など紐づけることができる。 In this way, the data related to the non-substitutable token data can include the video data captured by at least two shooting devices, and the user can specify that the data related to the non-substitutable token data has been captured by at least two shooting devices. You can use the function to include the video data. Using this function, users can provide multi-angle video data as non-alternative tokens and related data. For example, create data that includes both video data that mainly captures the situation and people inside the vehicle and video data that mainly captures the situation and scenery outside the vehicle, and use non-substitutable tokens to create images of the scenery outside. It is possible to link the state of the car related to it.
(46)前記機能は、前記映像データから、前記車両を使用する前記人が設定された感情反応を示している時間帯の前記映像データを抜き出し、前記非代替トークンデータに関するデータに、抜き出された前記映像データを含ませるとよい。 (46) The function extracts, from the video data, the video data of a time zone in which the person using the vehicle exhibits a set emotional reaction, and converts the extracted video data into data relating to the non-substitutable token data. It is preferable that the video data is included.
このようにすると、映像データから、車両を使用する人が設定された感情反応を示している時間帯の映像データを抜き出し、非代替トークンデータに関するデータに、抜き出された映像データを含ませることができ、ユーザは、設定された感情反応を示している時間帯の映像データを非代替トークンデータに関するデータに含ませる機能を利用できる。この機能を用いればユーザは、設定された感情反応に基づいて編集した映像データから、非代替トークンデータに関するデータを効率的に作成することができる。例えば、リムジンクルーズや旅行中のレンタカー利用などの利用時に、利用者の顔の表情、例えば口角の上がり具合等、から笑顔がある状況を認識したときや、笑い声があるときなどを、車内が盛り上がっていると判定し、盛り上がっている楽しそうな状態の映像を効率的に集めることができ、そのような楽しそうな状態の映像は、利用者のファンやフォロワーにとって好ましい映像が多く含まれており、非代替トークンの価値を高めることができる。 In this way, the video data of the time zone in which the person using the vehicle exhibits the set emotional reaction is extracted from the video data, and the extracted video data is included in the data relating to the non-substitutable token data. , and the user can use the function of including the video data of the set emotional reaction in the data relating to the non-alternative token data. By using this function, the user can efficiently create data relating to non-alternative token data from video data edited based on set emotional reactions. For example, when using a limousine cruise or renting a car while traveling, the inside of the car becomes excited when it recognizes a situation where the user's facial expression, such as the degree of the corners of the mouth rising, shows a smile or laughter. It is possible to efficiently collect videos in a state of excitement and fun, and such videos in a happy state include many videos that are preferable to users' fans and followers. , can increase the value of non-fungible tokens.
(47)前記機能は、前記車両を使用する前記人による選択入力を受け付け、選択された前記感情反応を設定するとよい。 (47) The function may receive a selection input by the person using the vehicle and set the selected emotional reaction.
このようにすると、車両を使用する人による選択入力を受け付け、選択された感情反応を設定することができ、ユーザは、抜き出し対象となる感情反応についての、選択入力を受け付け、選択された感情反応を設定する機能を利用できる。この機能を用いればユーザは、非代替トークンデータに関するデータの提供を求める人に対して、その人が求める感情反応が撮影された映像データを集めることで、より求めに応じた非代替トークンデータに関するデータを提供しやすくなる。例えば、楽しい感情反応や驚いた感情反応のリストを表示し、よりサービス利用者の目的に則した内容の映像データを含む非代替トークンを作成することができる。なお、楽しい感情反応は、例えば口角の上がり具合や笑い声の特徴などから判定することが可能であり、驚いた感情反応は、例えば目の見開き具合や声の上ずりなどから判定することが可能である。 In this way, it is possible to receive a selection input by the person who uses the vehicle and set the selected emotional reaction, and the user receives a selection input for the emotional reaction to be extracted and selects the emotional reaction. You can use the function to set the By using this function, the user can collect video data of emotional reactions desired by a person who requests provision of data related to non-substitutable token data, thereby providing more non-substitutable token data related to the request. Easier to provide data. For example, non-substitutable tokens can be created that display a list of pleasant or surprising emotional reactions and include video data with content more suited to the purpose of the service user. Pleasant emotional reactions can be determined, for example, from the degree of raising the corners of the mouth and features of laughter. be.
(48)前記機能は、前記非代替トークンデータに関するデータに、前記車両を使用して提供されるサービスの利用者と、前記サービスの提供者、前記撮影機器の設置者、及び、前記撮影機器の販売者のうちの少なくとも一方と、の少なくとも2者間の契約情報に関するデータを含ませるとよい。 (48) The function stores the user of the service provided using the vehicle, the provider of the service, the installer of the photographing device, and the user of the photographing device in the data related to the non-substitutable token data. Data relating to contract information between at least two of the sellers may be included.
このようにすると、非代替トークンデータに関するデータに、サービス利用者と、サービス提供者、撮影機器の設置者、及び、撮影機器の販売者のうちの少なくとも一方と、の少なくとも2者間の契約情報に関するデータを含ませることができ、ユーザは、非代替トークンデータに関するデータに、上記の少なくとも2者間の契約情報に関するデータを含ませる機能を利用できる。この機能を用いればユーザは、サービス利用者やサービス提供者に対して、非代替トークンデータの売却金額(仮想通貨等)の受け取り割合等をその都度決定するなどの煩雑なプロセスを経ることなく、売却金額を分配して送金する処理を容易に実行することができる環境を提供することができる。 In this way, the data on the non-substitutable token data includes contract information between at least two parties of the service user and at least one of the service provider, the photographic equipment installer, and the photographic equipment seller. and the user can use the function of including the data about the contract information between at least two parties in the data about the non-substitutable token data. By using this function, the user will not have to go through a complicated process such as determining the receiving ratio of the sales amount (virtual currency, etc.) of the non-alternative token data to the service user or service provider each time. It is possible to provide an environment in which the process of distributing and remitting the sale amount can be easily executed.
(49)前記撮影機器の前記映像データが、前記撮影機器の本体の外部に配置された記録媒体収容部に収容された記録媒体に記憶されており、前記記録媒体収容部が、施錠されている状態であるか、又は、隠されている状態であるか、の少なくとも一方である、とよい。 (49) The image data of the photographing device is stored in a recording medium housed in a recording medium housing portion arranged outside the main body of the photographing device, and the recording medium housing portion is locked. It may be at least one of the state and the hidden state.
このようにすると、撮影機器の映像データが、撮影機器の本体の外部に配置された記録媒体収容部に収容された記録媒体に記憶されており、記録媒体収容部が、施錠されている状態であるか、又は、隠されている状態であるか、の少なくとも一方であるようにでき、ユーザは、施錠されている状態であるか、又は、隠されている状態であるか、の少なくとも一方である記録媒体収容部に収容された記録媒体に、撮影機器の映像データを記録することができる。そのような構成を採用すればユーザは、人の状態や動作に基づいて、人ごとに、また、人の状態ごとや動作ごとに、記録媒体収容部に収容された記録媒体に、映像データを記録することが可能となる。更に、記録媒体収容部は見つかりにくい、又は、施錠されているので、権限のない人が記録媒体収容部に収容された記録媒体にアクセスすることを非常に困難にすることができる。例えば、車両を利用する人が、車内で、法律や規則あるいはモラルに反する行動を行った場合、その人物が、そのような行動が撮影された映像データを破棄したり削除したり隠ぺいしたりすることを阻止しやすくなる。 With this configuration, the video data of the photographing equipment is stored in the recording medium housed in the recording medium housing portion arranged outside the main body of the photographing equipment, and the recording medium housing portion is locked. and/or hidden, and the user is locked and/or hidden Video data of a photographing device can be recorded in a recording medium housed in a certain recording medium housing section. By adopting such a configuration, the user can store video data in the recording medium accommodated in the recording medium accommodation unit for each person, for each person's condition and action, based on the person's condition and action. Recording becomes possible. Furthermore, since the recording medium container is hard to find or is locked, it can be very difficult for unauthorized persons to access the recording medium contained in the recording medium container. For example, if a person using a vehicle behaves in violation of laws, regulations, or morals inside the vehicle, that person may discard, delete, or hide the video data in which such behavior is captured. easier to stop.
(50)上記の(1)から(49)の各機能を情報処理システムに実現させるためのプログラムが提供されるとよい。 (50) It is preferable to provide a program for causing the information processing system to implement the above functions (1) to (49).
このようにすると、既存の情報処理システムに対して、プログラムの提供を行うことによって、撮影機器に対して上記の各種の機能の提供を行うことができる。 In this way, by providing a program to an existing information processing system, it is possible to provide the photographing equipment with the various functions described above.
上述した(1)から(50)に示した発明は、任意に組み合わせることができる。例えば、(1)に示した発明の全て又は一部の構成に、(2)以降の少なくとも1つの発明の少なくとも一部の構成を加える構成としてもよい。特に、(1)に示した発明に、(2)以降の少なくとも1つの発明の少なくとも一部の構成を加えた発明とするとよい。また、(1)から(50)に示した発明から任意の構成を抽出し、抽出された構成を組み合わせてもよい。本願の出願人は、これらの構成を含む発明について権利を取得する意思を有する。また「~の場合」「~のとき」という記載があったとしても、その場合やそのときに限られる構成として記載はしているものではない。これらはよりよい構成の例を示しているものであって、これらの場合やときでない構成についても権利取得する意思を有する。また順番を伴った記載になっている箇所もこの順番に限らない。一部の箇所を削除したり、順番を入れ替えたりした構成についても開示しているものであり、権利取得する意思を有する。 The inventions shown in (1) to (50) above can be combined arbitrarily. For example, a configuration may be adopted in which at least part of the configuration of at least one of the following inventions (2) is added to all or part of the configuration of the invention shown in (1). In particular, the invention shown in (1) may be added with at least a part of the configuration of at least one invention after (2). Also, arbitrary configurations may be extracted from the inventions shown in (1) to (50) and the extracted configurations may be combined. The applicant of this application intends to obtain rights to inventions including these configurations. In addition, even if there is a description of "in the case of" or "when", it is not described as a configuration limited to that case or that time. These are examples of better configurations, and we intend to acquire configurations that are not in these cases or occasions. Moreover, the parts described with order are not limited to this order. It also discloses a configuration in which some parts are deleted or the order is changed, and there is an intention to acquire the right.
101(101F、101R)…撮影機器
102(102F、102R)…車室内撮影用カメラ
103…ネットワーク、104…予約管理サーバ、105…施設端末、
106…ユーザ端末、107…外部管理サーバ、108…処理装置
101 (101F, 101R) photographing equipment 102 (102F, 102R) vehicle
106... User terminal, 107... External management server, 108... Processing device
Claims (2)
施設への入場者数に関する情報を取得し、その情報を置き去りの発生の判定に利用する機能を備え、
確認した降車人数が予定の降車人数に満たない場合であっても、施設への入場者数が予定の降車人数に対応していれば置き去り確認の通知を行わない機能、あるいは、置き去り確認の通知の後に改めて、予定の人数が施設に入場したことについての通知を行う機能を備えたことを特徴とするシステム。 A system having a function of specifying how many people can be confirmed inside the vehicle and outputting information about the number of people who can be confirmed inside the vehicle,
Equipped with a function to acquire information on the number of visitors to the facility and use that information to determine the occurrence of abandonment,
Even if the confirmed number of people getting off is less than the planned number of people getting off, if the number of people entering the facility corresponds to the planned number of people getting off, a function that does not notify of confirmation of being left behind, or a notification of confirmation of being left behind. A system characterized by having a function of notifying that a planned number of people have entered the facility afterward.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022166653A JP7289165B1 (en) | 2022-02-28 | 2022-10-18 | Information processing system and program, etc. |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022030123A JP2023125810A (en) | 2022-02-28 | 2022-02-28 | Information processing system, program and the like |
JP2022166653A JP7289165B1 (en) | 2022-02-28 | 2022-10-18 | Information processing system and program, etc. |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022030123A Division JP2023125810A (en) | 2022-02-28 | 2022-02-28 | Information processing system, program and the like |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7289165B1 true JP7289165B1 (en) | 2023-06-09 |
JP2023126102A JP2023126102A (en) | 2023-09-07 |
Family
ID=87887977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022166653A Active JP7289165B1 (en) | 2022-02-28 | 2022-10-18 | Information processing system and program, etc. |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7289165B1 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3067551U (en) | 1999-09-20 | 2000-04-07 | 株式会社ラジカルスタッフ | Sound toothbrush |
JP2002109655A (en) | 2000-09-28 | 2002-04-12 | Kyocera Corp | Alarm device for room temperature of car |
JP2002369718A (en) | 2001-06-15 | 2002-12-24 | Tsutomu Murata | Fortunetelling game device with music |
JP2019106703A (en) | 2017-12-08 | 2019-06-27 | キヤノンマーケティングジャパン株式会社 | Information processing apparatus, control method of the same, and program |
-
2022
- 2022-10-18 JP JP2022166653A patent/JP7289165B1/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3067551U (en) | 1999-09-20 | 2000-04-07 | 株式会社ラジカルスタッフ | Sound toothbrush |
JP2002109655A (en) | 2000-09-28 | 2002-04-12 | Kyocera Corp | Alarm device for room temperature of car |
JP2002369718A (en) | 2001-06-15 | 2002-12-24 | Tsutomu Murata | Fortunetelling game device with music |
JP2019106703A (en) | 2017-12-08 | 2019-06-27 | キヤノンマーケティングジャパン株式会社 | Information processing apparatus, control method of the same, and program |
Also Published As
Publication number | Publication date |
---|---|
JP2023126102A (en) | 2023-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200349666A1 (en) | Enhanced vehicle sharing system | |
Kim et al. | Autonomous taxi service design and user experience | |
US10306431B1 (en) | Connected services configurator for connecting a mobile device to applications to perform tasks | |
US9918038B2 (en) | System and method for multimedia capture | |
WO2020063783A1 (en) | Safety protection system for passengers and drivers of online ride-hailing and taxi services | |
US9809169B1 (en) | Safety control system for vehicles | |
CN104379414B (en) | User interface and the virtual personalities presentation based on user profiles | |
TWI627084B (en) | A computing platform for development and deployment of sensor-driven vehicle telemetry applications and services | |
CN107357194A (en) | Heat monitoring in autonomous land vehicle | |
JP6525300B1 (en) | Car and program for car | |
CN104321220A (en) | Access and portability of user profiles stored as templates | |
CN104428826A (en) | Central network for automated control of vehicular traffic | |
CN115880892A (en) | Travel management method, related device and system | |
CN104380349A (en) | Vehicle intruder alert detection and indication | |
Perterer et al. | Come drive with me: an ethnographic study of driver-passenger pairs to inform future in-car assistance | |
CN112172836B (en) | Information pushing method and device, vehicle and readable medium | |
CN104520676A (en) | Virtual personality vehicle communications with third parties | |
US20180267968A1 (en) | Onboard information provision device, information provision system, and information provision program | |
Kidd et al. | The effectiveness of a rearview camera and parking sensor system alone and combined for preventing a collision with an unexpected stationary or moving object | |
JPWO2018061353A1 (en) | Information providing apparatus and mobile unit | |
JP7289165B1 (en) | Information processing system and program, etc. | |
JP7403196B2 (en) | Information processing systems and programs, etc. | |
Kashevnik et al. | Context-based driver support system development: Methodology and case study | |
Bito et al. | Automatic Generation of Road Trip Summary Video for Reminiscence and Entertainment using Dashcam Video | |
JP2023125811A (en) | Information processing system, program, and the like |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221018 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20221018 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230206 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230425 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230523 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7289165 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |