JP2017049489A - Information processing device, information processing method and information processing program - Google Patents

Information processing device, information processing method and information processing program Download PDF

Info

Publication number
JP2017049489A
JP2017049489A JP2015174218A JP2015174218A JP2017049489A JP 2017049489 A JP2017049489 A JP 2017049489A JP 2015174218 A JP2015174218 A JP 2015174218A JP 2015174218 A JP2015174218 A JP 2015174218A JP 2017049489 A JP2017049489 A JP 2017049489A
Authority
JP
Japan
Prior art keywords
information
presentation
advertisement
vehicle
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015174218A
Other languages
Japanese (ja)
Other versions
JP6667059B2 (en
Inventor
北岸 郁雄
Ikuo Kitagishi
郁雄 北岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yahoo Japan Corp
Original Assignee
Yahoo Japan Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yahoo Japan Corp filed Critical Yahoo Japan Corp
Priority to JP2015174218A priority Critical patent/JP6667059B2/en
Priority to US15/194,071 priority patent/US10000217B2/en
Publication of JP2017049489A publication Critical patent/JP2017049489A/en
Priority to US15/655,181 priority patent/US10358144B2/en
Application granted granted Critical
Publication of JP6667059B2 publication Critical patent/JP6667059B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To solve the problem that control for effectively presenting advertisement to information equipment other than a display device intended to use contents and a device included in a vehicle is potentially requested.SOLUTION: An information processing device or the like is provided which includes an information presenting part capable of presenting information to a crew of a vehicle, a crew mode discrimination part for discriminating a mode of the crew relative to the information presenting part, and an advertisement presentation control part which controls the information presenting part in such a manner that an advertisement is presented according to at least one of conditions about vehicle or a crew mode discriminated by the crew mode discrimination part.SELECTED DRAWING: Figure 2

Description

本発明は、乗員の態様や車両の運行状況などに応じて乗員に広告を提示する技術に関する。   The present invention relates to a technique for presenting an advertisement to an occupant in accordance with the occupant's aspect, vehicle operating conditions, and the like.

近年、自動運転技術の開発が進んでいる。例えば、自動運転には介在度に応じて複数のレベルがあり、広告を乗員に提示する際に自動運転のレベルを上げる提案があった(特許文献1)。   In recent years, automatic driving technology has been developed. For example, automatic driving has a plurality of levels depending on the degree of intervention, and there has been a proposal to increase the level of automatic driving when an advertisement is presented to an occupant (Patent Document 1).

特願2010−002759号公報Japanese Patent Application No. 2010-002759

しかし、将来、十分な信頼性で自動運転が実現し、前方を中心とした車外や車両の計器盤もしくは表示画面から目を離すこと(eyes off)が普通になると、自動運転車両に備わる表示画面にコンテンツが表示されたり、自動運転車両に装備される以外の情報機器(例えば乗員が持ち込んだスマートフォンやタブレットPCなど)にコンテンツが表示されたり、そのようなコンテンツに乗員が注意を没入している状況も考えられる。   However, in the future, when autonomous driving will be realized with sufficient reliability, and when it becomes normal to look away from the outside of the vehicle, mainly from the front, or from the instrument panel or display screen of the vehicle, the display screen provided in the autonomous driving vehicle Content is displayed on the screen, information is displayed on information devices other than those equipped on autonomous driving vehicles (for example, smartphones and tablet PCs carried by passengers), and the passengers are immersing attention in such content. The situation is also conceivable.

この場合、自動運転の状況、車外環境の条件、乗員がどの表示部を見たり操作しているか、乗員が利用しているコンテンツの内容など、状況は多様である。このため、その状況に応じ、広告を出力すべきか否か、どの広告を出力すべきか、どのようなタイミングや態様で出力すべきかといった制御が必要になるが、そのような技術はこれまで知られていなかった。   In this case, there are various situations such as the state of automatic driving, conditions of the environment outside the vehicle, which display unit the occupant sees and operates, and the content of the content used by the occupant. For this reason, depending on the situation, it is necessary to control whether or not an advertisement should be output, which advertisement should be output, and in what timing and manner, but such techniques have been known so far. It wasn't.

そこで、上記課題を解決するために本発明において、情報処理装置などを提供する。すなわち、車両の乗員に情報を提示することができる情報提示部と、前記乗員の前記情報提示部に対する態様を判別する乗員態様判別部と、前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう情報提示部を制御する広告提示制御部と、を有する情報処理装置を提供する。   In order to solve the above problems, an information processing apparatus and the like are provided in the present invention. That is, an information presentation unit that can present information to a vehicle occupant, an occupant mode determination unit that determines a mode of the occupant with respect to the information presentation unit, and an occupant mode and vehicle determined by the occupant mode determination unit There is provided an information processing apparatus having an advertisement presentation control unit that controls an information presentation unit so as to present an advertisement in accordance with at least one of the conditions relating to.

また、上記構成を備え、車両の運行に関して情報提示部を介して乗員に通知すべき情報である要通知情報を取得する要通知情報取得部を有し、広告提示制御部は、広告の提示を要通知情報の提示に劣後させるよう情報提示部を制御する劣後広告提示制御手段を有する情報処理装置を提供する。また、上記構成を備え、要通知情報取得部が取得した要通知情報の種別である要通知情報種別を取得する要通知情報種別取得部をさらに有し、広告提示制御部は、前記取得した要通知情報種別に応じて広告を提示するよう情報提示部を制御する要通知情報依存広告提示制御手段を有する情報処理装置を提供する。   In addition, the above-described configuration includes a notification required information acquisition unit that acquires notification required information that is information to be notified to the occupant via the information presentation unit regarding the operation of the vehicle, and the advertisement presentation control unit displays the advertisement. Provided is an information processing apparatus having a subordinate advertisement presentation control means for controlling an information presenting unit so as to be subordinated to presentation of notification required information. In addition, it further includes a notification required information type acquisition unit that acquires the notification required information type that is the type of notification required information acquired by the notification required information acquisition unit, and the advertisement presentation control unit Provided is an information processing apparatus having a notification information-dependent advertisement presentation control unit that controls an information presentation unit to present an advertisement according to a notification information type.

また、上記いずれかの構成を備え、乗員態様判別部は、情報提示部により乗員が提示されている情報である提示情報の種別である提示情報種別を取得する提示情報種別取得手段を有し、広告提示制御部は、取得した提示情報種別に応じて広告をその情報提示部が提示するよう制御する提示情報依存広告提示制御手段を有する情報処理装置を提供する。   In addition, any one of the above configurations, the occupant mode determination unit has a presentation information type acquisition unit that acquires a presentation information type that is a type of presentation information that is information that the occupant is presented by the information presentation unit, The advertisement presentation control unit provides an information processing apparatus having a presentation information-dependent advertisement presentation control unit that controls the information presentation unit to present an advertisement according to the acquired presentation information type.

また、上記いずれかの構成を備え、乗員を含むユーザの属性情報、車両の状態を示す車両状態情報、車両の付属機器の状態を示す車両付属機器状態情報、車両の移動履歴を示す移動履歴情報、車両の移動予定を示す移動予定情報のいずれか一以上の情報である属性等情報を取得する属性等情報取得部を有し、広告提示制御部は、取得した属性等情報に応じて広告を提示するよう情報提示部を制御する属性等情報依存広告提示制御手段を有する情報処理装置を提供する。   In addition, any one of the above-described configurations, attribute information of users including passengers, vehicle state information indicating the state of the vehicle, vehicle accessory state information indicating the state of the accessory device of the vehicle, movement history information indicating the movement history of the vehicle An attribute information acquisition unit that acquires information such as attribute information that is one or more pieces of movement schedule information indicating the movement schedule of the vehicle, and the advertisement presentation control unit displays an advertisement according to the acquired attribute information. An information processing apparatus having attribute-dependent information-dependent advertisement presentation control means for controlling an information presentation unit to present is provided.

また、上記いずれかの構成を備え、車両に関する条件である車両条件を取得する車両条件取得部を有し、広告提示制御部は、取得した車両条件に応じて広告を提示するよう情報提示部を制御する車両条件依存広告提示制御手段を有する情報処理装置を提供する。   In addition, the vehicle has a vehicle condition acquisition unit that has one of the above-described configurations and acquires a vehicle condition that is a condition related to the vehicle, and the advertisement presentation control unit has an information presentation unit that presents an advertisement according to the acquired vehicle condition. An information processing apparatus having vehicle condition-dependent advertisement presentation control means for controlling is provided.

また、車両の乗員に情報を提示することができる情報提示部を有する情報処理装置における情報処理方法であって、前記乗員の前記情報提示部に対する態様を判別する乗員態様判別ステップと、前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう前記情報提示部を制御する広告提示制御ステップと、を有する情報処理方法を提供する。   An information processing method in an information processing apparatus having an information presentation unit capable of presenting information to a vehicle occupant, wherein the occupant mode determination step determines the mode of the occupant with respect to the information presentation unit, and the occupant mode. There is provided an information processing method comprising: an advertisement presentation control step of controlling the information presentation unit so as to present an advertisement in accordance with at least one of a passenger aspect determined by a determination unit and a condition relating to a vehicle.

また、車両の乗員に情報を提示することができる情報提示部を有する情報処理装置を動作させるプログラムであって、前記乗員の前記情報提示部に対する態様を判別する乗員態様判別ステップと、前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう前記情報提示部を制御する広告提示制御ステップと、を計算機に実行させるプログラムを提供する。   A program for operating an information processing apparatus having an information presentation unit capable of presenting information to a vehicle occupant, wherein the occupant mode determination step determines a mode of the occupant with respect to the information presentation unit, and the occupant mode. There is provided a program for causing a computer to execute an advertisement presentation control step of controlling the information presentation unit so as to present an advertisement in accordance with at least one of a passenger aspect determined by a determination unit and a condition relating to a vehicle.

本発明によれば、乗員が置かれる様々な状況や態様の乗員に応じた態様で広告を提示することができる。   ADVANTAGE OF THE INVENTION According to this invention, an advertisement can be shown in the aspect according to the passenger | crew of the various situations and aspects in which a passenger | crew is placed.

本実施形態の情報処理装置が採用されている自動運転が可能な車両の車内態様の一例を示す概念図The conceptual diagram which shows an example of the vehicle interior aspect of the vehicle in which the information processing apparatus of this embodiment is employ | adopted and in which automatic driving | operation is possible 実施形態1の情報処理装置の機能ブロックの一例を示すブロック図FIG. 3 is a block diagram illustrating an example of functional blocks of the information processing apparatus according to the first embodiment. 要通知情報の一例を示す概念図Conceptual diagram showing an example of notification required information 乗員の態様の一例を示す図The figure which shows an example of the aspect of a passenger | crew 図4の例における乗員の態様に応じて各情報提示部を制御する一例を示す図The figure which shows an example which controls each information presentation part according to the passenger | crew's aspect in the example of FIG. 実施形態1の情報処理装置のハードウェア構成の一例を表す概略図Schematic showing an example of the hardware configuration of the information processing apparatus according to the first embodiment. 実施形態1の情報処理装置の処理の流れの一例を示すフロー図FIG. 3 is a flowchart illustrating an example of a processing flow of the information processing apparatus according to the first embodiment. 実施形態1において広告の提示を制御する処理の流れの一例を表わすフロー図FIG. 3 is a flowchart illustrating an example of a process flow for controlling advertisement presentation in the first embodiment. 実施形態2の情報処理装置の機能ブロックの一例を示すブロック図FIG. 3 is a block diagram illustrating an example of functional blocks of an information processing apparatus according to a second embodiment.

以下、本発明の実施の形態について、添付図面を用いて説明する。なお、本発明は、これら実施形態に何ら限定されるべきものではなく、その要旨を逸脱しない範囲において、種々なる態様で実施し得る。
<実施形態1>
<概要>
Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. In addition, this invention should not be limited to these embodiments at all, and can be implemented in various modes without departing from the gist thereof.
<Embodiment 1>
<Overview>

図1は、本実施形態の情報処理装置が採用されている自動運転が可能な車両の車内態様の一例を示す概念図である。図示するように前列に座る乗員は進行方向に背を向け手元のタブレットPCを利用している。そして、後列に座る乗員はラップトップPCを利用している。なお、この車両には、運転するための情報やナビゲーション情報などを表示するための表示装置がダッシュボードに備わっている。   FIG. 1 is a conceptual diagram illustrating an example of an in-vehicle aspect of a vehicle capable of automatic driving in which the information processing apparatus of the present embodiment is employed. As shown in the figure, the occupant sitting in the front row is using the tablet PC at hand with his back in the traveling direction. And the passenger | crew who sits in a back row uses laptop PC. In addition, this vehicle is equipped with a display device for displaying information for driving, navigation information, and the like on the dashboard.

このような状況において、例えば、ダッシュボードに備わる表示装置を介して広告の提示を行ったとしても、背を向けている乗員に適切にその広告が届くか否かは疑わしい。そこで、本装置では、背を向けている乗員に対しては、その乗員が利用しているタブレット型の端末装置を介して広告を提示する。これにより乗員に対して広告を的確に伝えることが可能になる。
<構成>
In such a situation, for example, even if an advertisement is presented via a display device provided in the dashboard, it is doubtful whether the advertisement can be properly delivered to an occupant turning his back. Therefore, in this device, an advertisement is presented to the occupant turning his back through the tablet terminal device used by the occupant. This makes it possible to accurately convey the advertisement to the occupant.
<Configuration>

図2は、本実施形態の情報処理装置の機能ブロックの一例を示すブロック図である。なお、以下に記載する本装置の機能ブロックは、ハードウェア及びソフトウェアの組み合わせとして実現され得る。具体的には、コンピュータを利用するものであれば、CPU(中央演算装置)や主メモリ、システムバス、あるいは二次記憶装置(ハードディスクドライブや不揮発性メモリ、CDやDVDなどの記憶メディアとそれらメディアの読取ドライブなど)、情報入力に利用される入力デバイス、表示装置、その他の外部周辺装置などのハードウェア構成部、またその外部周辺装置用のインターフェース、通信用インターフェース、それらハードウェアを制御するためのドライバプログラムやその他アプリケーションプログラム、ユーザ・インターフェース用アプリケーションなどが挙げられる。   FIG. 2 is a block diagram illustrating an example of functional blocks of the information processing apparatus according to the present embodiment. Note that the functional blocks of the apparatus described below can be realized as a combination of hardware and software. Specifically, if a computer is used, a CPU (Central Processing Unit), a main memory, a system bus, or a secondary storage device (a storage medium such as a hard disk drive, a non-volatile memory, a CD or a DVD, and those media) To control the hardware components such as input devices used for information input, display devices, other external peripheral devices, interfaces for external peripheral devices, communication interfaces, and hardware. Driver programs, other application programs, user interface applications, and the like.

そして主メモリ上に展開したプログラムに従ったCPUの演算処理によって、入力デバイスやその他インターフェースなどから入力され、メモリやハードディスク上に保持されているデータなどが加工、蓄積されたり、上記各ハードウェアやソフトウェアを制御するための命令が生成されたりする。あるいは本装置の機能ブロックは専用ハードウェアによって実現されてもよい。また、本装置は一つのハードウェアやソフトウェアにより構成される場合に限られず、複数のハードウェアやソフトウェアの組み合わせによって構成されてもよく、ネットワークを介在したサーバ装置を含んで構成されてもよい。   Then, by CPU processing according to the program developed on the main memory, the data input from the input device or other interface and held in the memory or hard disk is processed and stored, An instruction for controlling the software is generated. Alternatively, the functional blocks of this apparatus may be realized by dedicated hardware. Further, the present apparatus is not limited to being configured by a single piece of hardware or software, and may be configured by a combination of a plurality of pieces of hardware or software, or may be configured including a server apparatus via a network.

また、この発明は装置として実現できるのみでなく、方法としても実現可能である。また、このような発明の一部をソフトウェアとして構成することができる。さらに、そのようなソフトウェアをコンピュータに実行させるために用いるプログラム、及びプログラムを固定した記録媒体も、当然にこの発明の技術的な範囲に含まれる(本明細書の全体を通じて同様である)。   The present invention can be realized not only as an apparatus but also as a method. A part of the invention can be configured as software. Furthermore, a program used for causing a computer to execute such software and a recording medium on which the program is fixed are naturally included in the technical scope of the present invention (the same applies throughout this specification).

図2に示すように、本実施形態における情報処理装置0200は、情報提示部0201と、要通知情報取得部0202と、乗員態様判別部0203と、提示制御部0204と、広告提示制御部0205と、広告情報取得部0206を有する。なお、要通知情報取得部0202、提示制御部0204及び広告情報取得部0206は、本実施形態の情報処理装置の必須の構成ではない。   As illustrated in FIG. 2, the information processing apparatus 0200 according to the present embodiment includes an information presentation unit 0201, a notification information acquisition unit 0202, an occupant aspect determination unit 0203, a presentation control unit 0204, and an advertisement presentation control unit 0205. And an advertisement information acquisition unit 0206. Note that the notification information acquisition unit 0202, the presentation control unit 0204, and the advertisement information acquisition unit 0206 are not essential components of the information processing apparatus of this embodiment.

本装置は、上述の通り自動運転可能な車両の乗員に対して要通知情報を提示することを想定するものであるが、自動運転のレベル(個別運転支援、半自動運転、準自動運転、完全自動運転などの段階的に定義されるレベル)を特定するものではなく、ADAS(Advanced Driver Assistance System:先進運転支援システム)を採用する自動車においても有効に作用する。   As mentioned above, this device assumes that notification information is required for a vehicle occupant capable of automatic driving, but the level of automatic driving (individual driving support, semi-automatic driving, semi-automatic driving, fully automatic It does not specify the level defined in stages such as driving), and it works effectively even in an automobile adopting ADAS (Advanced Driver Assistance System).

また、車両には自家用車のみならず商用車、工事等用車両なども含まれ四輪車(六輪や八輪などの多輪車を含む)のほか三輪車や二輪車(立ち乗り二輪車を含む)が含まれ、また、船舶や飛行機を含むものとしてもよい。   Vehicles include not only private vehicles but also commercial vehicles, construction vehicles, etc., as well as four-wheeled vehicles (including multi-wheeled vehicles such as six-wheeled and eight-wheeled vehicles), as well as three-wheeled vehicles and two-wheeled vehicles (including standing and two-wheeled vehicles). It is also possible to include ships and airplanes.

情報提示部0201は、車両の乗員に情報を提示することができる。例えば、車速度や燃料などの車両走行に関する情報を示すディスプレイや音響装備や空調装備などの状態を示すとともにそれらを操作するためのタッチスクリーンや、ナビゲーション装置などが該当するほか、車両の操作とは関係なく映像コンテンツなどを表示するために車内に備わるディスプレイ(例えば後席乗員のためのディスプレイ)などが該当する。   The information presentation unit 0201 can present information to the vehicle occupant. For example, a display showing information related to vehicle travel, such as vehicle speed and fuel, status of sound equipment and air conditioning equipment, touch screens for operating them, navigation devices, etc. are applicable. A display (for example, a display for a rear seat occupant) provided in the vehicle for displaying video content or the like is applicable.

また、乗員が車内に持ち込んだスマートフォンやタブレットPCなどの情報処理装置も該当する。なお、情報の提示とは、乗員の視覚、聴覚、触覚などに訴え何らかの情報を示すことをいう。例えば、像や光などにより視覚に訴え、音などにより聴覚に訴え、振動などにより触覚に訴えることにより情報を示す。このように情報提示部は複数存在し得る。   Moreover, information processing apparatuses, such as a smart phone and a tablet PC which the passenger brought into the vehicle, also correspond. In addition, presentation of information means showing some information appealing to a passenger | crew's vision, hearing, touch, etc. For example, information is shown by appealing to the sense of vision with an image or light, appealing to the sense of hearing with sound or the like, and appealing to the sense of touch with vibration or the like. Thus, there can be a plurality of information presenting units.

要通知情報取得部0202は、車両の運行に関して情報提示部を介して乗員に通知すべき情報である要通知情報を取得する。要通知情報としては、例えば、燃料の残量低下、タイヤの空気圧低下、パンク、各種装備の故障(故障のおそれも含む)、避けられない衝突などの車両自体に関して通知すべき情報がある。また、事故や災害による通行止めや通行規制、渋滞、緊急車両や障害物の接近、降雪や路面凍結などの車両運行と関連する周辺環境に関して通知すべき情報がある。図3は、取得した要通知情報の一例を示す概念図である。図示するように要通知情報の内容のほか情報の種別や取得日時などと併せて取得してもよい。また、情報の取得先、通知に対する乗員からの応答の有無、再度の通知の要否などを併せて取得及び保持してもよい。   The notification required information acquisition unit 0202 acquires notification required information that is information to be notified to the occupant via the information presenting unit regarding the operation of the vehicle. The notification information that needs to be notified includes information to be notified about the vehicle itself such as a decrease in the remaining amount of fuel, a decrease in tire air pressure, puncture, failure of various equipment (including the possibility of failure), and an unavoidable collision. In addition, there is information to be notified about the surrounding environment related to vehicle operations such as traffic closure and traffic regulation due to accidents and disasters, traffic jams, approach of emergency vehicles and obstacles, snowfall and road surface freezing. FIG. 3 is a conceptual diagram showing an example of the acquired notification required information. As shown in the figure, in addition to the contents of the notification required information, it may be acquired together with the type of information, acquisition date and the like. Further, the information acquisition destination, the presence / absence of a response from the occupant to the notification, the necessity of another notification, and the like may be acquired and held together.

これらの要通知情報の取得は、例えば、車両自体に関する情報であれば、車両が備える各種検知手段により取得することができ、また、周辺環境に関する情報であれば、VICS(道路交通情報通信システム、登録商標)による情報を受信したり、インターネットを利用して取得したり、レーダー、LIDAR、GPS、カメラなどにより取得することができる。   For example, if the information on the vehicle itself is information about the vehicle itself, it can be acquired by various detection means included in the vehicle, and if it is information about the surrounding environment, the VICS (road traffic information communication system, (Registered trademark) can be received, acquired using the Internet, or acquired by radar, LIDAR, GPS, camera, or the like.

乗員態様判別部0203は、前記乗員の前記情報提示部に対する態様を判別する。情報提示部に対する乗員の態様は、様々に規定することができる。例えば、ナビゲーションのための情報や車両に関する情報を示す車両に備わる情報提示部に対する乗員の態様としては、それら情報提示部と乗員との位置関係、情報提示部に対する乗員の姿勢、情報提示部が乗員に対して提示している情報の内容などがある。また、乗員の体温、他の乗員との会話の有無、会話の内容、喫食をしているか否か、喫食している飲食物などを判別してもよい。   The occupant mode determination unit 0203 determines the mode of the occupant with respect to the information presentation unit. Various aspects of the passenger with respect to the information presentation unit can be defined. For example, as an aspect of the occupant with respect to the information presenting unit provided in the vehicle indicating the information for navigation and the vehicle, the positional relationship between the information presenting unit and the occupant, the posture of the occupant with respect to the information presenting unit, the information presenting unit is the occupant There are contents of information presented to. Further, the body temperature of the occupant, the presence / absence of a conversation with another occupant, the content of the conversation, whether or not you are eating, and the food and drink you are eating may be determined.

このような乗員の態様については、情報提示部が人感センサや視線センサや顔認識センサを備えたりカメラを備えたりすることで判別することができる。また、情報提示部に対する操作の有無から近傍の乗員の存否を判別することができる。また、車両の座席に圧力センサを備えたり車内を赤外線カメラにより撮影したりすることで車内における乗員の位置を判別することができる。   Such an occupant aspect can be determined by the information presenting unit including a human sensor, a line-of-sight sensor, a face recognition sensor, or a camera. Moreover, the presence or absence of a nearby passenger can be determined from the presence or absence of an operation on the information presenting unit. Moreover, the position of the passenger | crew in a vehicle can be discriminate | determined by providing a pressure sensor in the seat of a vehicle, or image | photographing the inside of a vehicle with an infrared camera.

また、スマートフォンなどの携帯端末やタブレットPCなどのように乗員が車内に持ち込んだ情報提示部に対する乗員の態様としては、情報提示部が乗員によって操作されているか否か、情報提示部がどんな情報を提示しているかなどといったことが挙げられる。また、ディスプレイ全体のうちどの領域に乗員の視線が向いているかなどを判別してもよい。   In addition, as an aspect of the occupant with respect to the information presenting unit that the occupant brought into the vehicle such as a mobile terminal such as a smartphone or a tablet PC, whether the information presenting unit is operated by the occupant or what information the information presenting unit For example, it is presenting. Further, it may be determined in which region of the entire display the occupant's line of sight is directed.

これらの乗員の態様の判別は、情報提示部が振動センサや人感センサなどを備えることで情報提示部を手元に置く乗員の存否を検知するとともに、情報提示部の動作状況(動画コンテンツの表示、音楽コンテンツの再生、インターネットの利用など)を取得することなどにより行う。併せて、乗員の車両内での位置を検知し、その乗員が車両内のどこで、どの情報提示部をどのように利用しているかを判別してもよい。   These occupant modes are determined by detecting the presence or absence of an occupant who has the information presenting unit at hand by providing the information presenting unit with a vibration sensor, a human sensor, etc. Music content playback, Internet usage, etc.). At the same time, the position of the occupant in the vehicle may be detected to determine where the occupant is using which information presentation unit in the vehicle.

情報提示部が検知した情報や情報提示部の動作状況を示す情報などの取得は、車両自体の種々の情報の取得、保持及び表示等の各種処理やナビゲーションのために車両に備わる情報処理装置(以下、車載情報処理装置とも称する)によって行い得る。また、情報提示部からの各種情報の取得は、車両に持ち込まれた情報提示部と上記の車載情報処理装置との通信を確立することにより実現される。なお、かかる通信は、近距離無線通信、無線LAN、インターネットなどを介して実現される。   Information such as information detected by the information presenting unit and information indicating the operation status of the information presenting unit is acquired by an information processing apparatus (provided in the vehicle for various processes such as acquisition, holding, and display of various information of the vehicle itself) Hereinafter, it may be performed by a vehicle information processing apparatus. In addition, acquisition of various types of information from the information presentation unit is realized by establishing communication between the information presentation unit brought into the vehicle and the above-described in-vehicle information processing apparatus. Such communication is realized via short-range wireless communication, wireless LAN, the Internet, or the like.

図4に、乗員態様判別部が判別した乗員の態様の一例を示す図である。本例においては、情報提示部は計4つ設定されている。「位置」は、乗員001の位置を示し、ここでは前席右に位置している。「位置関係」は、各情報提示部と乗員001との位置関係及び姿勢などを示すものである。図示するように、乗員001は運転用ディスプレイの近くにいるものの背面を向けている。一方、携帯端末は乗員の手元にあることが示されている。また、「提示内容」は、各情報提示部が提示している内容を示す。運転用ディスプレイには運転用情報が提示され、ナビ用ディスプレイには地図が提示されているが経路案内は行われていない。また、携帯端末はゲームを提示している。   FIG. 4 is a diagram illustrating an example of the occupant mode determined by the occupant mode determination unit. In this example, a total of four information presentation units are set. “Position” indicates the position of the occupant 001, and is located on the right side of the front seat here. The “positional relationship” indicates the positional relationship and posture between each information presentation unit and the occupant 001. As shown, the occupant 001 is facing the back of what is near the display for driving. On the other hand, the mobile terminal is shown to be in the hand of the passenger. “Presentation content” indicates content presented by each information presentation unit. Driving information is presented on the driving display and a map is presented on the navigation display, but route guidance is not performed. In addition, the mobile terminal presents a game.

以上のように、乗員態様判別部は、乗員が複数の情報提示部のうちいずれの情報提示部を利用しているかを特定することもでき、かかる機能を果たす手段として情報提示部特定手段を有しているといえる。   As described above, the occupant mode determination unit can also specify which information presentation unit is used by the occupant among a plurality of information presentation units, and has an information presentation unit identification unit as a unit that performs such a function. It can be said that.

提示制御部0204は、前記乗員態様判別部により判別された乗員の態様に応じてその乗員に要通知情報を提示するよう情報提示部を制御する。図5は、図4の例における乗員の態様に応じて各情報提示部を制御する一例を示す図である。例えば、運転用ディスプレイに対しては運転用情報と併せて要通知情報を表示し注意喚起のための音声出力も行うよう制御する。また、ナビゲーション用のディスプレイには地図の表示に換えて要通知情報を表示するように制御する。また、乗員の手元にある携帯端末に対してはゲーム画面に換えて要注意情報を表示し、注意喚起のための音声を出力するとともに携帯端末を振動させるよう制御する。一方、タブレットPCには要通知情報を表示させるための制御は行わない。   The presentation control unit 0204 controls the information presenting unit to present notification information to the occupant according to the occupant mode determined by the occupant mode determination unit. FIG. 5 is a diagram illustrating an example of controlling each information presentation unit in accordance with the occupant mode in the example of FIG. 4. For example, it is controlled to display notifying information together with driving information on the driving display and to output a sound for alerting. In addition, the navigation display is controlled to display the notification required information instead of the map display. In addition, for the mobile terminal in the vicinity of the passenger, the caution information is displayed instead of the game screen, and the mobile terminal is controlled to vibrate while outputting sound for alerting. On the other hand, control for displaying notification required information on the tablet PC is not performed.

このように、乗員の近くに存在し乗員の注意が向けられていることが推測し得る情報提示部が他に優先して要通知情報を乗員に提示するよう制御する。そして、提示された要注意情報に応答するための操作等を行うことが推測し得る運転用ディスプレイやナビ用ディスプレイに対しても要注意情報の提示を行うよう制御する。また、タブレット端末に対しては乗員の注意が向けられていないことが推測できること及び要通知情報を提示する情報提示部が分散して存在することでかえって乗員を混乱させたり的確に対応することの妨げになりかねないので提示させないという制御を行う。なお、上述のとおり、提示の制御には提示させないことも含まれる。   In this way, the information presenting unit that is in the vicinity of the occupant and can guess that the occupant is paying attention is controlled so as to present the notice information to the occupant with priority over others. Then, control is performed so that the caution information is also presented to the driving display and the navigation display that can be presumed to perform an operation for responding to the presented caution information. In addition, it can be presumed that the occupant's attention has not been directed to the tablet terminal, and the presence of information presentation units presenting notification information in a distributed manner can confuse the occupant and respond appropriately. Since it may be a hindrance, it is controlled not to be presented. Note that, as described above, the presentation control includes not presenting.

また、要通知情報を提示した後に提示した情報の確認を乗員に求めるためのボタンを表示したり、音声返答を受付けるための処理を行うなどしてもよい。また、確認の操作や返答、通知された情報に応答する操作等が乗員によりなされるまで、継続して要通知情報の提示を行うように制御してもよい。   In addition, after presenting the notification required information, a button for requesting the occupant to confirm the presented information may be displayed, or a process for accepting a voice response may be performed. Further, it may be controlled so that the notification required information is continuously presented until an occupant performs a confirmation operation, a response, an operation in response to the notified information, or the like.

以上のように、通知制御部は、乗員が利用していると特定された情報提示部が要通知情報を提示するよう制御することができ、かかる機能を果たす手段として特定提示制御手段を有しているといえる。   As described above, the notification control unit can control the information presenting unit identified as being used by the occupant to present the notification required information, and has the specific presentation control unit as a unit that performs such a function. It can be said that.

以上のように、乗員の情報提示部に対する態様を判別し、判別した態様に応じてその乗員に要通知情報を提示するよう情報提示部を制御することにより、通知すべき情報を的確に通知することができる。   As described above, the aspect of the information presentation unit of the occupant is determined, and the information presentation unit is controlled so as to present the notification required information to the occupant according to the determined mode, so that the information to be notified is accurately notified. be able to.

広告提示制御部0205は、前記乗員態様判別部により判別された乗員の態様または車両に関する条件の少なくとも一方に応じて広告を提示するよう情報提示部を制御する。乗員に対する広告の提示も、乗員の態様や車両の走行状況や周辺環境などに応じて行うことで、より有効に作用すると考えられる。なお、広告提示制御による制御には、広告を提示しないことも含まれる。また、広告は、主に収益を目的として商品やサービスを宣伝するものであって、その広告主を明示するものをいう。   The advertisement presentation control unit 0205 controls the information presentation unit to present an advertisement in accordance with at least one of the occupant mode determined by the occupant mode determination unit or the conditions regarding the vehicle. It is considered that the advertisement is presented to the occupant more effectively by performing according to the occupant's aspect, the traveling state of the vehicle, the surrounding environment, and the like. The control by the advertisement presentation control includes not presenting an advertisement. In addition, the advertisement is for advertising a product or service mainly for the purpose of profit and clearly showing the advertiser.

乗員の態様は乗員態様判別部での説明の通りである。「車両に関する条件」とは、車両自体に関する条件や車両を取り巻く周囲や環境などの条件、車両内の情報提示部により提示されている情報の種類など多種多様な条件が該当する。例えば、車検の有効期限、車両の形状、燃料の残量、自動運転のレベル、天気、気候、走行速度、エアコンの運転状況、窓やサンルーフの開閉状況、乗員数、現在地、一般道か高速道路か、周囲の交通量、周辺車両との車間距離や速度差、路側における駐車車両の存否、周囲の車両の自動運転の態様(隊列走行や、隊列を構成する車両数など)、同伴車両の有無や位置関係、目的地、走行履歴などの諸条件が該当する。   The form of the occupant is as described in the occupant form determination unit. “Vehicle conditions” correspond to various conditions such as conditions related to the vehicle itself, conditions such as surroundings and environments surrounding the vehicle, and types of information presented by the information presentation unit in the vehicle. For example, vehicle expiry date, vehicle shape, fuel level, automatic driving level, weather, climate, running speed, air conditioner operating status, window and sunroof opening / closing status, number of passengers, current location, general road or highway Or surrounding traffic volume, inter-vehicle distance and speed difference with the surrounding vehicles, presence or absence of parked vehicles on the roadside, modes of automatic driving of surrounding vehicles (for example, platooning or the number of vehicles in the platoon), presence of accompanying vehicles And other conditions such as positional relationship, destination, and travel history.

これらの諸条件は、車両が備える情報処理装置やナビゲーション装置に保持されていたり、車両が備える各種センサにより取得したり、乗員の操作により入力されたり、放送やインターネットを介して取得したり、GPSにより取得したりするなどにより取得及び保持等することができる。なお、車両に関する条件を取得する構成として、車両条件取得部を本実施形態の情報処理装置が有するものとしてもよい。併せて、車両条件取得部が取得した車両条件に応じて広告を提示するよう情報提示部を制御する車両条件依存広告手段を広告提示制御部が有するものとしてもよい。   These conditions are held in an information processing device and a navigation device provided in the vehicle, acquired by various sensors provided in the vehicle, input by an occupant's operation, acquired through broadcasting or the Internet, GPS, It can be acquired and held by acquiring. In addition, as a structure which acquires the conditions regarding a vehicle, it is good also as what has the vehicle condition acquisition part in the information processing apparatus of this embodiment. In addition, the advertisement presentation control unit may include a vehicle condition-dependent advertising unit that controls the information presentation unit so as to present an advertisement according to the vehicle condition acquired by the vehicle condition acquisition unit.

本情報処理装置が車両条件取得部を有し、広告提示制御部が車両条件依存広告提示制御手段を有する場合の態様として、例えば、車両条件として車両が県境を越えたことを取得した場合、新たに入った県の特産物の広告を提示するよう情報提示部を制御する。また、制御の他の例として、車両条件として狭い道や通行人が多い道を走行していることを取得した場合、広告を提示しないよう情報提示部を制御する。また、渋滞でADASが有効に働いているときは広告を出すよう情報提示部を制御する。   As an aspect in the case where the information processing apparatus has a vehicle condition acquisition unit and the advertisement presentation control unit has a vehicle condition-dependent advertisement presentation control unit, for example, when acquiring that the vehicle has crossed a prefectural border as a vehicle condition, The information presentation unit is controlled so as to present advertisements of special products of the prefecture that entered. As another example of control, when it is acquired that the vehicle condition is traveling on a narrow road or a road with many passers-by, the information presenting unit is controlled not to present an advertisement. Moreover, when ADAS is working effectively due to traffic jams, the information presentation unit is controlled so as to issue an advertisement.

また、広告提示制御部による制御の態様として、乗員態様判別部が提示情報種別取得手段を有し、広告提示制御部が提示情報依存広告提示制御手段を有する場合の態様がある。提示情報種別取得手段は、情報提示部により乗員が提示されている情報である提示情報の種別である提示情報種別を取得する。提示情報の種別は、例えば、車両走行のための情報、経路案内、テレビ放送、媒体に記録された動画コンテンツ、インターネットの利用、ゲーム、各種アプリケーションの実行など種々あげることができる。さらに、放送されている番組、動画コンテンツの内容、利用しているサイトなどのようにより詳細な種別を提示情報種別として取得してもよい。   Further, as a mode of control by the advertisement presentation control unit, there is a mode in which the occupant mode determination unit has a presentation information type acquisition unit and the advertisement presentation control unit has a presentation information-dependent advertisement presentation control unit. The presentation information type acquisition unit acquires a presentation information type that is a type of presentation information that is information on which an occupant is presented by the information presentation unit. There are various types of presentation information, such as information for driving a vehicle, route guidance, television broadcasting, moving image content recorded on a medium, use of the Internet, game, and execution of various applications. Further, a more detailed type such as a broadcast program, contents of moving image content, a site being used, and the like may be acquired as a presentation information type.

提示情報依存広告提示制御手段は、取得した提示情報種別に応じて広告をその情報提示部が提示するよう制御する。例えば、運転用ディスプレイに表示されている燃費の累積データを見ている乗員に対して自動車用品店の広告を提示するよう運転用ディスプレイを制御する。また、ナビゲーション装置で周辺の飲食店の検索を行っている乗員に対して飲食店の広告を提示するようナビゲーション装置を制御する。また、タブレット端末で観光地の情報を閲覧している乗員に対して旅行の広告を提示するようタブレット端末を制御する。なお、携帯端末やタブレット端末に対する広告の提示として、クーポン券やアクセス図などをそれらの端末に送信することを含んでもよい。また、車両に印刷装置が備わる場合は、クーポン券やアクセス図が印刷される命令を含むものとしてもよい。   The presentation information dependent advertisement presentation control unit controls the information presentation unit to present the advertisement according to the acquired presentation information type. For example, the driving display is controlled so as to present an advertisement of an automobile supply store to an occupant who is viewing cumulative data of fuel consumption displayed on the driving display. In addition, the navigation device is controlled so that advertisements of restaurants are presented to passengers searching for nearby restaurants using the navigation device. In addition, the tablet terminal is controlled so that a travel advertisement is presented to a passenger who is browsing the information on the sightseeing spot on the tablet terminal. In addition, you may include transmitting a coupon ticket, an access figure, etc. to those terminals as presentation of an advertisement with respect to a portable terminal or a tablet terminal. In addition, when the vehicle is equipped with a printing device, it may include a command for printing a coupon or an access diagram.

また、広告提示制御部は、広告の提示の態様を乗員の態様や車両に関する条件に応じたものとなるよう情報提示部を制御してもよい。例えば、運転用ディスプレイに対面している乗員に対しては音声出力によってのみ広告を提示するよう制御する。また、渋滞中のオートパイロット走行のときには音声を含む動画の広告を相対的に長時間提示するよう制御し、曲がりくねった山間路を走行しているときは、静止画に商品名の音声出力を合わせたような簡略な広告を提示するよう制御する。   In addition, the advertisement presentation control unit may control the information presentation unit so that the advertisement presentation mode is in accordance with the occupant mode and the vehicle-related conditions. For example, control is performed so that an advertisement is presented only by voice output to an occupant facing the driving display. Also, during autopilot driving in a traffic jam, control is performed so that video advertisements containing sound are presented for a relatively long time, and when driving on winding mountain roads, the sound output of the product name is aligned with the still image. Control to present a simple advertisement.

また、広告提示制御部は、広告の内容によってその広告を提示させる情報提示部を特定し、特定した情報提示部がその広告を提示するよう制御してもよい。例えば、自動車部品店の広告や給油所の広告を提示する場合には、運転用の情報が提示される情報提示部のみがそれらの広告を提示するよう制御する。また、周辺の観光施設の広告を提示する場合には、車両内で乗員により利用されているすべての情報提示部がその広告を提示するよう各情報提示部を制御する。   The advertisement presentation control unit may specify an information presentation unit that presents the advertisement according to the content of the advertisement, and may control the identified information presentation unit to present the advertisement. For example, when presenting an advertisement for an automobile parts store or an advertisement for a gas station, only the information presenting unit where the driving information is presented is controlled to present these advertisements. When presenting advertisements for nearby tourist facilities, each information presenting unit is controlled so that all information presenting units used by passengers in the vehicle present the advertisements.

また、広告提示制御部は、広告の提示を要通知情報の提示に劣後させるよう情報提示部を制御する劣後広告制御手段を有してもよい。要通知情報は広告よりも乗員に提示する優先度が高いからである。本手段による制御は、例えば、要通知情報が提示されているときは広告の提示を行わないよう情報提示部を制御する。また、要通知情報が提示されて所定時間経過後や通知された情報に対する応答操作が乗員により行われた後に広告を提示するよう制御してもよい。また、広告の提示を行っているときに、要通知情報取得部が要通知情報を取得した場合に、映像による広告の提示を中止し文字のみによる広告を表示画面の隅に表示するよう情報提示部を制御してもよい。   The advertisement presentation control unit may include a subordinate advertisement control unit that controls the information presentation unit so that the advertisement presentation is subordinated to the presentation of the notification-necessary information. This is because the notification required information has a higher priority to be presented to the occupant than the advertisement. The control by this means, for example, controls the information presenting unit so as not to present the advertisement when the notification required information is presented. Further, it may be controlled such that an advertisement is presented after notification information is presented and a predetermined time elapses or after a response operation for the notified information is performed by a passenger. In addition, when presenting advertisements, if the required information acquisition unit acquires required notification information, the information is presented to stop presenting advertisements by video and display advertisements only in characters at the corner of the display screen. The unit may be controlled.

また、本実施形態の情報処理装置は、要通知情報取得部が取得した要通知情報の種別である要通知情報種別を取得する要通知情報種別取得部を有し、広告提示制御部は、取得した要通知情報種別に応じて広告を提示するよう情報提示部を制御する要通知情報依存広告提示制御手段を有するものとしてもよい。   In addition, the information processing apparatus according to the present embodiment includes a notification required information type acquisition unit that acquires a notification required information type that is a type of notification required information acquired by the notification required information acquisition unit, and the advertisement presentation control unit acquires It is good also as what has a notification information required advertisement presentation control means which controls an information presentation part so that an advertisement may be shown according to the required notification information classification.

要通知情報種別は、図3に示した周辺環境や車両といったように大まかな種別であってもよいし、天候、渋滞、事故、周辺の地理、故障、車両の装備などのようにより細かく分けてもよい。また、要通知情報種別の取得は、要通知情報取得部が取得した要通知情報に種別が付されている場合には、その付された種別を要通知情報種別として取得することができる。また、種別が付されていない場合には、要通知情報が示す情報の内容とそれに応じた種別とを対応付けたテーブルを保持し、そのテーブルを参照して要通知情報種別取得部が要通知情報種別を取得するようにしてもよい。   The notification information type may be a rough type such as the surrounding environment or vehicle shown in FIG. Also good. Further, when the notification required information type is attached to the notification required information acquired by the notification required information acquisition unit, the attached notification type can be acquired as the notification required information type. In addition, when a type is not attached, a table that associates the content of the information indicated by the notification required information with the corresponding type is stored, and the notification required information type acquisition unit refers to the table to notify The information type may be acquired.

要通知情報種別依存広告提示制御部による広告の提示の態様は、例えば、事故に種別される要通知情報が提示された場合に自動車損害保険の広告を提示したり、周辺の地理に種別される要通知情報が提示された場合にその地域の特産物販売店の広告を提示するといった具合である。   The advertisement presentation mode by the notification information type-dependent advertisement presentation control unit is, for example, presenting an automobile accident insurance advertisement when classified notification information classified as an accident is presented, or classified into the surrounding geography For example, when notification information is required, an advertisement of a local specialty store is presented.

また、広告の提示のタイミングを要通知情報種別に応じて制御してもよい。例えば、事故や故障に種別される要通知情報が提示された場合は、要通知情報の提示後ただちに広告を提示するのではなく、すこし時間が経過してから広告を提示するよう制御する。事故や故障などの要通知情報が提示された直後は、それらの事態に対処するため乗員が広告に注意を払う余裕がない場合があるからである。   Moreover, you may control the timing of presentation of an advertisement according to a notification information classification required. For example, when required notification information classified as an accident or a failure is presented, the advertisement is controlled not to be presented immediately after the notification required information is presented, but to be presented after a short time has passed. This is because immediately after the notification information required for an accident or breakdown is presented, the passenger may not be able to afford to pay attention to the advertisement in order to deal with the situation.

広告情報取得部0206は、広告を提示するための情報である広告情報を、判別された乗員の態様、車両に関する条件、提示情報種別、要通知情報、乗員を含むユーザの属性情報、車両の状態を示す車両状態情報、車両の付属機器の状態を示す車両付属機器状態情報、車両の移動履歴を示す移動履歴情報、車両の移動予定を示す移動予定情報のいずれか一又は複数に応じて取得する。なお、乗員を含むユーザの属性情報、車両の状態を示す車両状態情報、車両の付属機器の状態を示す車両付属機器状態情報、車両の移動履歴を示す移動履歴情報、車両の移動予定を示す移動予定情報については実施形態2で説明する。   The advertisement information acquisition unit 0206 displays the advertisement information, which is information for presenting the advertisement, the determined occupant mode, vehicle conditions, presentation information type, notification information required, user attribute information including the occupant, vehicle state Vehicle status information indicating vehicle accessory device status information indicating vehicle status, vehicle history information indicating movement history of the vehicle, and movement schedule information indicating the vehicle movement schedule . In addition, attribute information of users including passengers, vehicle state information indicating the state of the vehicle, vehicle accessory device state information indicating the state of the accessory device of the vehicle, movement history information indicating the vehicle movement history, movement indicating the vehicle movement schedule The schedule information will be described in the second embodiment.

本実施形態の情報処理装置は、上述した通り、乗員の態様や車両に関する条件などの様々な条件に応じて広告の提示が制御される。そして、提示される広告も乗員の態様や車両に関する条件などの様々な条件に応じたものとなる。そこで、上述した種々の条件のうちいずれか一又は複数に応じて広告を提示するための広告情報を取得する。広告情報の取得は、通信回線や公衆放送などを介して取得することができる。
<ハードウェア構成>
As described above, in the information processing apparatus of the present embodiment, the presentation of advertisements is controlled according to various conditions such as the occupant's aspect and the conditions regarding the vehicle. Then, the presented advertisement is also in accordance with various conditions such as the occupant's aspect and conditions regarding the vehicle. Therefore, advertisement information for presenting an advertisement is acquired according to any one or more of the various conditions described above. The advertisement information can be acquired via a communication line or public broadcasting.
<Hardware configuration>

図6は、上記機能的な各構成要件をハードウェアとして実現した際の、情報処理装置の構成の一例を表す概略図である。この図を利用して情報処理装置に係るそれぞれのハードウェア構成の働きについて説明する。   FIG. 6 is a schematic diagram illustrating an example of the configuration of the information processing apparatus when the functional components are realized as hardware. The operation of each hardware configuration related to the information processing apparatus will be described using this figure.

この図にあるように、情報処理装置は、各種演算処理を実行するためのCPU0601と、主メモリ0602と、二次記憶装置0603と、通信インターフェース0604と、各種の検知手段0605と、ディスプレイ0606と、スピーカ0607などを備える。二次記憶装置には検知データ、提示制御プログラムをはじめとする各種プログラムなどが格納されている。CPUはこれら各種プログラムを主メモリに展開したうえで実行する。前記の各ハードウェア構成はシステムバスなどのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。   As shown in this figure, the information processing apparatus includes a CPU 0601 for executing various arithmetic processes, a main memory 0602, a secondary storage device 0603, a communication interface 0604, various detection means 0605, and a display 0606. Speaker 0607 and the like. The secondary storage device stores detection data, various programs including a presentation control program, and the like. The CPU executes these various programs after developing them in the main memory. The hardware configurations described above are connected to each other by a data communication path such as a system bus, and perform transmission / reception and processing of information.

まず、CPUは、要通知情報取得プログラムを実行し、格納されている検知データを読出し、さらに通信インターフェースを介して各種の情報を取得し、要通知情報を取得する。そして、乗員態様判別プログラムを実行し、格納されている検知データを読出し乗員の態様を判別する。なお、検知データには、通信インターフェースを介して接続される携帯端末0608やPC装置0609などの機器から取得した検知データも含まれる。   First, the CPU executes a notification required information acquisition program, reads the stored detection data, acquires various information via the communication interface, and acquires the notification required information. Then, the occupant mode determination program is executed, and the stored detection data is read to determine the occupant mode. The detection data includes detection data acquired from devices such as the portable terminal 0608 and the PC device 0609 connected via the communication interface.

そして、提示制御プログラムを実行し、ディスプレイ及びスピーカによる要通知情報の提示を制御する。また、通信インターフェースを介して接続される携帯端末0608やPC装置0609に対して要通知情報を送信するとともにそれらの機器による要通知情報の提示を制御する。   Then, the presentation control program is executed to control the presentation of the notification required information by the display and the speaker. In addition, it transmits notification required information to the portable terminal 0608 and the PC device 0609 connected via the communication interface and controls the presentation of the notification required information by those devices.

また、広告情報提示プログラムを実行し、判別された乗員の態様などに応じて広告情報を取得する。そして、広告提示制御プログラムを実行し、ディスプレイ及びスピーカを介した広告の提示や携帯端末などによる広告の提示を制御する。あるいは、広告の提示を要通知情報の提示に劣後させるようディスプレイなどを制御する。
<処理の流れ>
Moreover, an advertisement information presentation program is executed, and advertisement information is acquired according to the determined aspect of the occupant. Then, an advertisement presentation control program is executed to control advertisement presentation via a display and a speaker or advertisement presentation by a portable terminal. Or a display etc. are controlled so that presentation of an advertisement is inferior to presentation of notification required information.
<Process flow>

図7は、本実施形態の情報処理装置における処理の流れの一例を表すフロー図である。なお、以下に示すステップは、上記のような計算機の各ハードウェア構成によって実行されるステップであっても良いし、媒体に記録され計算機を制御するためのプログラムを構成する処理ステップであっても構わない。   FIG. 7 is a flowchart illustrating an example of a processing flow in the information processing apparatus of the present embodiment. The steps shown below may be steps executed by each hardware configuration of the computer as described above, or may be processing steps that constitute a program for controlling the computer recorded on a medium. I do not care.

図示するように、まず、車両の運行に関して情報提示部を介して乗員に通知すべき情報である要通知情報を取得する(要通知情報取得ステップ:S0701)。そして、乗員の前情報提示部に対する態様を判別する(乗員態様判別ステップ:S0702)。そして、乗員態様判別ステップにて判別された乗員の態様に応じてその乗員に要通知情報を提示するよう情報提示部を制御する(提示制御ステップ:S0703)。   As shown in the drawing, first, notification information that is information that should be notified to the occupant via the information presentation unit regarding the operation of the vehicle is acquired (notification information acquisition step: S0701). And the aspect with respect to a passenger | crew's front information presentation part is discriminate | determined (occupant aspect discrimination | determination step: S0702). Then, the information presenting unit is controlled so as to present notice information to the occupant in accordance with the occupant mode determined in the occupant mode determination step (presentation control step: S0703).

図8は、本実施形態において広告の提示を制御する処理の流れの一例を表わすフロー図である。図示するように、まず、乗員の前情報提示部に対する態様を判別する(乗員態様判別ステップ:S0801)。そして、乗員態様判別ステップにて判別された乗員の態様または車両に関する条件の少なくとも一方に応じて広告を提示するよう情報提示部を制御する(広告提示制御ステップ:S0802)。なお、判別された乗員の態様などに応じて広告情報を取得するステップを含むものとしてもよい。
<効果>
FIG. 8 is a flowchart showing an example of the flow of processing for controlling the presentation of advertisements in the present embodiment. As shown in the figure, first, the mode of the occupant's previous information presenting unit is determined (passenger mode determination step: S0801). Then, the information presentation unit is controlled so as to present an advertisement according to at least one of the occupant aspect or the vehicle condition determined in the occupant aspect determination step (advertisement presentation control step: S0802). In addition, it is good also as a thing including the step which acquires advertisement information according to the aspect | mode of the determined passenger | crew.
<Effect>

本実施形態の情報処理装置により、車両内外の種々の条件や乗員の態様に応じて広告の提示を行うことにより、乗員に対する広告の訴求効果を高め得る。
<実施形態2>
<概要>
By using the information processing apparatus according to the present embodiment to present advertisements according to various conditions inside and outside the vehicle and the occupant's aspect, it is possible to increase the advertising appeal effect to the occupant.
<Embodiment 2>
<Overview>

本実施形態の情報処理装置は、実施形態1を基本とし、乗員を含むユーザの属性情報等に応じて広告を提示することを特徴とする。
<構成>
The information processing apparatus according to the present embodiment is based on the first embodiment, and is characterized by presenting an advertisement according to attribute information of a user including a passenger.
<Configuration>

図9は、本実施形態の情報処理装置の機能ブロックの一例を示すブロック図である。図9に示すように、本実施形態における情報処理装置0900は、情報提示部0901と、乗員態様判別部0902と、広告提示制御部0903、属性等情報取得手段0904を有し、広告提示制御部0903は属性等情報依存広告提示制御手段0905を有する。なお、要通知情報取得部、提示制御部及び広告情報取得部については図示及び説明を省略する。また、情報提示部0901及び乗員態様判別部0902は実施形態1と同様であるので説明を省略する。   FIG. 9 is a block diagram illustrating an example of functional blocks of the information processing apparatus according to the present embodiment. As shown in FIG. 9, the information processing apparatus 0900 in the present embodiment includes an information presentation unit 0901, an occupant aspect determination unit 0902, an advertisement presentation control unit 0903, and attribute information acquisition means 0904, and an advertisement presentation control unit 0903 has attribute etc. information dependent advertisement presentation control means 0905. In addition, illustration and description are abbreviate | omitted about a notification required information acquisition part, a presentation control part, and an advertisement information acquisition part. In addition, the information presentation unit 0901 and the occupant aspect determination unit 0902 are the same as those in the first embodiment, and thus description thereof is omitted.

属性等情報取得手段0904は、乗員を含むユーザの属性情報、車両の状態を示す車両状態情報、車両の付属機器の状態を示す車両付属機器状態情報、車両の移動履歴を示す移動履歴情報、車両の移動予定を示す移動予定情報のいずれか一以上の情報である属性等情報を取得する。   The attribute information acquisition means 0904 includes attribute information of users including passengers, vehicle state information indicating the state of the vehicle, vehicle accessory device state information indicating the state of the accessory device of the vehicle, movement history information indicating the vehicle movement history, vehicle The attribute information, which is any one or more pieces of the movement schedule information indicating the movement schedule, is acquired.

ユーザとは、現に車両に乗車しているか否かにかかわらず本情報処理装置を利用し得る者すべてを指す。乗員を含むユーザの属性情報は、例えば性別、年齢、職業、趣味、何らかの会員である場合の会員登録番号などユーザに関する種々の情報である。ユーザの属性情報の取得はユーザによる入力操作等によってなされる。   The user refers to all persons who can use the information processing apparatus regardless of whether the user is actually in the vehicle. The attribute information of the user including the occupant is various information related to the user such as sex, age, occupation, hobby, membership registration number in the case of any member. Acquisition of user attribute information is performed by an input operation or the like by the user.

車両状態情報及び車両付属機器状態情報は、車両もしくは付属機器が備える検知手段などを介して取得されあるいはユーザがそれらの情報を入力することにより取得される。また、移動履歴情報及び移動予定情報は、車両に備わるナビゲーション装置から取得したりユーザの入力によって取得される。属性等情報は、車検の有効期限や点検整備内容等の車検情報、任意保険の有効期限や契約内容等の保険情報その他、車両の運行に直接または間接に関連する他の情報でもあってもよい。   The vehicle state information and the vehicle accessory device state information are acquired via a detection unit provided in the vehicle or the accessory device, or are acquired by the user inputting the information. Further, the movement history information and the movement schedule information are acquired from a navigation device provided in the vehicle or acquired by a user input. The attribute information may be vehicle inspection information such as vehicle inspection expiry date and inspection and maintenance details, insurance information such as voluntary insurance expiry date and contract details, and other information directly or indirectly related to vehicle operation. .

属性等情報依存広告提示制御手段0905は、取得した属性等情報に応じて広告を提示するよう情報提示部を制御する。例えば、ユーザに子供が含まれる場合には、遊園地などの広告を提示するよう制御する。また、属性等情報依存広告提示制御手段0905は、属性等情報に応じ、複数の情報提示部のうち、どの画面に表示するか、どのような表現内容(画像や文字などの表現形式など)で提示するかも制御する。また、ユーザの趣味に関連した広告を提示するよう制御する。また、ユーザに老人が含まれる場合には、出力音声やテキストの表示を大きくして広告を提示するよう制御する。   The attribute information dependent advertisement presentation control unit 0905 controls the information presentation unit to present an advertisement according to the acquired attribute information. For example, when a user includes a child, control is performed so as to present an advertisement such as an amusement park. Also, the attribute-dependent information-dependent advertisement presentation control unit 0905 displays on which screen of the plurality of information presentation units, and what expression content (expression format such as images and characters) according to the attribute information. Also controls the presentation. Moreover, it controls so that the advertisement relevant to a user's hobby is shown. In addition, when the user includes an elderly person, control is performed to present an advertisement by increasing the display of the output voice or text.

また、ユーザがポイントサービスやマイレージサービスなどの各種サービスを享受し得る会員となっている場合には、それらのサービスを享受し得る施設等の広告を提示するよう制御する。あるいは、ユーザが会員となっていない各種サービス事業者等の広告を提示するよう制御してもよい。   In addition, when the user is a member who can enjoy various services such as a point service and a mileage service, control is performed so as to present an advertisement of a facility or the like that can enjoy those services. Or you may control to show advertisements, such as various service providers in which a user is not a member.

また、車両状態情報としての車両の初度登録日に応じて自動車ディーラーや自動車整備工場の広告を提示するよう制御したり、装着タイヤが夏用タイヤであるという車両付属機器状態情報に応じて12月になったらタイヤ販売店の広告を提示するよう制御したりする。また、目的地がキャンプ場であるという移動予定情報に応じて目的地までの経路周辺のスーパーマーケットやアウトドア用品店などの広告を提示するよう制御する。
<効果>
Further, control is performed so as to present an advertisement of an automobile dealer or an automobile maintenance factory according to the vehicle's initial registration date as vehicle status information, or in accordance with vehicle accessory device status information that the mounted tire is a summer tire. If it becomes, it will control to show the advertisement of the tire dealer. In addition, control is performed so as to present advertisements such as supermarkets and outdoor goods stores around the route to the destination according to the travel schedule information that the destination is a campsite.
<Effect>

属性等情報に応じて広告を提示することにより、よりユーザや車両と関連性の高い広告を適時に行うことができる。   By presenting an advertisement according to information such as attributes, it is possible to perform an advertisement more relevant to the user or the vehicle in a timely manner.

0200 情報処理装置
0201 情報提示部
0202 要通知情報取得部
0203 乗員態様判別部
0204 提示制御部
0205 広告提示制御部
0206 広告情報取得部
0200 Information processing device 0201 Information presentation unit 0202 Notification required information acquisition unit 0203 Crew aspect determination unit 0204 Presentation control unit 0205 Advertisement presentation control unit 0206 Advertisement information acquisition unit

Claims (8)

車両の乗員に情報を提示することができる情報提示部と、
前記乗員の前記情報提示部に対する態様を判別する乗員態様判別部と、
前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう情報提示部を制御する広告提示制御部と、
を有する情報処理装置。
An information presentation unit capable of presenting information to a vehicle occupant;
An occupant aspect determination unit that determines an aspect of the information presentation unit of the occupant;
An advertisement presentation control unit that controls the information presentation unit to present an advertisement in accordance with at least one of the passenger mode determined by the occupant mode determination unit and the vehicle-related conditions;
An information processing apparatus.
車両の運行に関して情報提示部を介して乗員に通知すべき情報である要通知情報を取得する要通知情報取得部を有し、
広告提示制御部は、広告の提示を要通知情報の提示に劣後させるよう情報提示部を制御する劣後広告提示制御手段を有する請求項1に記載の情報処理装置。
It has a notification required information acquisition unit that acquires notification required information that is information to be notified to the occupant via the information presentation unit regarding the operation of the vehicle,
The information processing apparatus according to claim 1, wherein the advertisement presentation control unit includes a subordinate advertisement presentation control unit that controls the information presentation unit so that the advertisement presentation is subordinated to the presentation of the notification-necessary information.
乗員態様判別部は、情報提示部により乗員が提示されている情報である提示情報の種別である提示情報種別を取得する提示情報種別取得手段を有し、
広告提示制御部は、取得した提示情報種別に応じて広告をその情報提示部が提示するよう制御する提示情報依存広告提示制御手段を有する請求項1又は2に記載の情報処理装置。
The occupant mode determination unit has a presentation information type acquisition unit that acquires a presentation information type that is a type of presentation information that is information that the occupant is presented by the information presentation unit,
The information processing apparatus according to claim 1, wherein the advertisement presentation control unit includes a presentation information-dependent advertisement presentation control unit that controls the information presentation unit to present an advertisement according to the acquired presentation information type.
乗員を含むユーザの属性情報、車両の状態を示す車両状態情報、車両の付属機器の状態を示す車両付属機器状態情報、車両の移動履歴を示す移動履歴情報、車両の移動予定を示す移動予定情報のいずれか一以上の情報である属性等情報を取得する属性等情報取得部を有し、
広告提示制御部は、取得した属性等情報に応じて広告を提示するよう情報提示部を制御する属性等情報依存広告提示制御手段を有する請求項1から3のいずれか一に記載の情報処理装置。
User attribute information including passengers, vehicle state information indicating the state of the vehicle, vehicle accessory device state information indicating the state of the accessory device of the vehicle, movement history information indicating the movement history of the vehicle, movement schedule information indicating the vehicle movement schedule An attribute information acquisition unit that acquires attribute information that is one or more of the information,
The information processing apparatus according to any one of claims 1 to 3, wherein the advertisement presentation control unit includes an attribute information dependent advertisement presentation control unit that controls the information presentation unit so as to present an advertisement according to the acquired attribute information. .
車両に関する条件である車両条件を取得する車両条件取得部を有し、
広告提示制御部は、取得した車両条件に応じて広告を提示するよう情報提示部を制御する車両条件依存広告提示制御手段を有する請求項1から4のいずれか一に記載の情報処理装置。
A vehicle condition acquisition unit for acquiring a vehicle condition that is a condition related to the vehicle;
The information processing apparatus according to claim 1, wherein the advertisement presentation control unit includes a vehicle condition-dependent advertisement presentation control unit that controls the information presentation unit to present an advertisement according to the acquired vehicle condition.
要通知情報取得部が取得した要通知情報の種別である要通知情報種別を取得する要通知情報種別取得部をさらに有し、
広告提示制御部は、前記取得した要通知情報種別に応じて広告を提示するよう情報提示部を制御する要通知情報依存広告提示制御手段を有する
請求項2又は請求項2に従属する請求項3から5のいずれか一に記載の情報処理装置。
It further has a notification required information type acquisition unit that acquires a notification required information type that is a type of notification required information acquired by the notification required information acquisition unit,
The advertisement presentation control unit has a notification-necessary information-dependent advertisement presentation control unit that controls the information presentation unit to present an advertisement according to the acquired notification-necessary information type. Claim 3 dependent on claim 2 or claim 2 To 5. The information processing device according to any one of 5.
車両の乗員に情報を提示することができる情報提示部を有する情報処理装置における情報処理方法であって、
前記乗員の前記情報提示部に対する態様を判別する乗員態様判別ステップと、
前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう前記情報提示部を制御する広告提示制御ステップと、
を有する情報処理方法。
An information processing method in an information processing apparatus having an information presentation unit capable of presenting information to an occupant of a vehicle,
An occupant aspect determination step for determining an aspect of the occupant with respect to the information presentation unit;
An advertisement presenting control step for controlling the information presenting unit to present an advertisement according to at least one of the condition of the passenger and the vehicle determined by the passenger mode determining unit;
An information processing method comprising:
車両の乗員に情報を提示することができる情報提示部を有する情報処理装置を動作させるプログラムであって、
前記乗員の前記情報提示部に対する態様を判別する乗員態様判別ステップと、
前記乗員態様判別部により判別された乗員の態様及び車両に関する条件の少なくとも一方に応じて広告を提示するよう前記情報提示部を制御する広告提示制御ステップと、
を計算機に実行させるプログラム。
A program for operating an information processing apparatus having an information presentation unit capable of presenting information to a vehicle occupant,
An occupant aspect determination step for determining an aspect of the occupant with respect to the information presentation unit;
An advertisement presenting control step for controlling the information presenting unit to present an advertisement according to at least one of the condition of the passenger and the vehicle determined by the passenger mode determining unit;
A program that causes a computer to execute.
JP2015174218A 2015-09-03 2015-09-03 Information processing apparatus, information processing method, and information processing program Active JP6667059B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2015174218A JP6667059B2 (en) 2015-09-03 2015-09-03 Information processing apparatus, information processing method, and information processing program
US15/194,071 US10000217B2 (en) 2015-09-03 2016-06-27 Notification-needed information presenting apparatus, notification-needed information presenting method, and non-transitory computer readable storage medium
US15/655,181 US10358144B2 (en) 2015-09-03 2017-07-20 Notification-needed information presenting apparatus, notification-needed information presenting method, and non-transitory computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015174218A JP6667059B2 (en) 2015-09-03 2015-09-03 Information processing apparatus, information processing method, and information processing program

Publications (2)

Publication Number Publication Date
JP2017049489A true JP2017049489A (en) 2017-03-09
JP6667059B2 JP6667059B2 (en) 2020-03-18

Family

ID=58279589

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015174218A Active JP6667059B2 (en) 2015-09-03 2015-09-03 Information processing apparatus, information processing method, and information processing program

Country Status (1)

Country Link
JP (1) JP6667059B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220019113A (en) * 2020-08-05 2022-02-16 한양대학교 에리카산학협력단 System of self driving cars
WO2023210176A1 (en) * 2022-04-28 2023-11-02 パイオニア株式会社 Advertisement output device, advertisement output method, and program

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004226070A (en) * 2003-01-20 2004-08-12 Nissan Motor Co Ltd Information acquiring device for vehicle, and vehicle roadside communication system
JP2012203650A (en) * 2011-03-25 2012-10-22 Toshiba Corp Information distribution device, system, and information display device
JP2013045169A (en) * 2011-08-22 2013-03-04 Toyota Infotechnology Center Co Ltd Advertisement system for vehicle, on-vehicle information terminal and advertisement server
JP2013073290A (en) * 2011-09-27 2013-04-22 Zenrin Datacom Co Ltd Information collection server, information collection method, and information collection system
JP2013161360A (en) * 2012-02-07 2013-08-19 Chugoku Electric Power Co Inc:The Digital signage distribution system
JP2014016654A (en) * 2010-09-28 2014-01-30 Nec Corp Information processing system, and advertisement presentation method
JP2014098769A (en) * 2012-11-13 2014-05-29 Dainippon Printing Co Ltd Management server, advertisement system, utilization method of advertisement system
WO2015122406A1 (en) * 2014-02-13 2015-08-20 三菱電機株式会社 Communication device, operation assistance device, and operation assistance system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004226070A (en) * 2003-01-20 2004-08-12 Nissan Motor Co Ltd Information acquiring device for vehicle, and vehicle roadside communication system
JP2014016654A (en) * 2010-09-28 2014-01-30 Nec Corp Information processing system, and advertisement presentation method
JP2012203650A (en) * 2011-03-25 2012-10-22 Toshiba Corp Information distribution device, system, and information display device
JP2013045169A (en) * 2011-08-22 2013-03-04 Toyota Infotechnology Center Co Ltd Advertisement system for vehicle, on-vehicle information terminal and advertisement server
JP2013073290A (en) * 2011-09-27 2013-04-22 Zenrin Datacom Co Ltd Information collection server, information collection method, and information collection system
JP2013161360A (en) * 2012-02-07 2013-08-19 Chugoku Electric Power Co Inc:The Digital signage distribution system
JP2014098769A (en) * 2012-11-13 2014-05-29 Dainippon Printing Co Ltd Management server, advertisement system, utilization method of advertisement system
WO2015122406A1 (en) * 2014-02-13 2015-08-20 三菱電機株式会社 Communication device, operation assistance device, and operation assistance system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220019113A (en) * 2020-08-05 2022-02-16 한양대학교 에리카산학협력단 System of self driving cars
KR102382118B1 (en) 2020-08-05 2022-04-05 한양대학교 에리카산학협력단 System of self driving cars
WO2023210176A1 (en) * 2022-04-28 2023-11-02 パイオニア株式会社 Advertisement output device, advertisement output method, and program

Also Published As

Publication number Publication date
JP6667059B2 (en) 2020-03-18

Similar Documents

Publication Publication Date Title
US10358144B2 (en) Notification-needed information presenting apparatus, notification-needed information presenting method, and non-transitory computer readable storage medium
CN108474665B (en) Autonomous vehicle service
CN106364430B (en) Vehicle control device and vehicle control method
JP7241685B2 (en) Vehicle management system, vehicle management method, and program
US8930122B2 (en) Methods and systems for associating vehicles en route to a common destination
US9767698B2 (en) Methods and systems for facilitating stops for vehicles en route to a common destination
US8768569B2 (en) Information providing method for mobile terminal and apparatus thereof
CN104395945B (en) On-vehicle information transmission system and method
US10810621B2 (en) Vehicle advertisement
US20100161207A1 (en) Mobile terminal and method for providing location-based service thereof
JP2020052072A (en) Information processing device, information processing method, and program
JP2009058799A (en) Annunciator for vehicle
JPWO2013088510A1 (en) Display device and display method
JP7119929B2 (en) Information system, information processing method and program
JP6197218B2 (en) Notification required information presentation device, notification required information presentation method, and notification required information presentation program
JP6667059B2 (en) Information processing apparatus, information processing method, and information processing program
JP2017224346A (en) Necessity notice information presentation device, necessity notice information presentation method and necessity notice information presentation program
US11858526B2 (en) Apparatus and method for use with vehicle
JP5087352B2 (en) Car navigation system
JP2010072701A (en) On-vehicle device and information output method
JP6346326B2 (en) Notification required information presentation device, notification required information presentation method, and notification required information presentation program
CN116057597A (en) Method and device for providing information in a vehicle
JP6981743B2 (en) Information processing equipment, information processing methods and information processing programs
JP7264096B2 (en) signage system
JP2016021210A (en) On-vehicle unit, server device, and attention attraction system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161104

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20161104

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20170106

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170303

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170630

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20170718

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20170915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180518

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181101

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190530

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20191101

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20191112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191113

R150 Certificate of patent or registration of utility model

Ref document number: 6667059

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350