JP2020106968A - 車載用情報処理装置、プログラム、及び制御方法 - Google Patents

車載用情報処理装置、プログラム、及び制御方法 Download PDF

Info

Publication number
JP2020106968A
JP2020106968A JP2018243469A JP2018243469A JP2020106968A JP 2020106968 A JP2020106968 A JP 2020106968A JP 2018243469 A JP2018243469 A JP 2018243469A JP 2018243469 A JP2018243469 A JP 2018243469A JP 2020106968 A JP2020106968 A JP 2020106968A
Authority
JP
Japan
Prior art keywords
vehicle
occupant
information processing
processing device
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018243469A
Other languages
English (en)
Inventor
佳奈 浜上
Kana Hamagami
佳奈 浜上
卓也 前川
Takuya Maekawa
卓也 前川
陽介 中山
Yosuke Nakayama
陽介 中山
晃年 軸丸
Akitoshi Jikumaru
晃年 軸丸
多恵 杉村
Tae Sugimura
多恵 杉村
隆夫 菱川
Takao Hishikawa
隆夫 菱川
真一 足立
Shinichi Adachi
真一 足立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2018243469A priority Critical patent/JP2020106968A/ja
Priority to US16/666,507 priority patent/US20200211079A1/en
Priority to CN201911096282.9A priority patent/CN111382657A/zh
Publication of JP2020106968A publication Critical patent/JP2020106968A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0265Vehicular advertisement
    • G06Q30/0266Vehicular advertisement based on the position of the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Multimedia (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

【課題】識別記号を有効に活用した車両の乗員へのコンテンツ提供に寄与できる車載用情報処理装置を提供する。【解決手段】制御部11と、車両100の外部を撮像する車外カメラを含む撮像部14と、撮像部14によって取得された情報を、車両100の車室内で乗員に対して出力する出力部16と、を備え、撮像部14は、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化する識別記号を撮像し、制御部11は、撮像された識別記号に関連付けられたコンテンツを取得し、取得されたコンテンツを、車室内の乗員に対して出力部16により出力する。【選択図】図1

Description

本発明は、車載用情報処理装置、プログラム、及び制御方法に関する。
従来、車両に搭載された車外カメラにより識別記号を撮像して、識別記号に関連付けられているコンテンツを車両が取得する技術が知られている。例えば、特許文献1には、屋内施設内の路面に描かれ、位置情報を含むバーコード又はQRコード(登録商標)を車載カメラで撮像し、撮像されたバーコード又はQRコードに含まれる位置情報に基づいて、車両の位置を検出する車両位置検出装置が開示されている。
特許第5015749号公報
位置情報のような固定のコンテンツと関連付けられた固定の識別記号を用いるのではなく、随時更新されるコンテンツと関連付けられコンテンツごとに変化する識別記号を有効に活用して、店舗等が車両の乗員に対してコンテンツを提供したいという要求があった。
かかる事情に鑑みてなされた本発明の目的は、識別記号を有効に活用した車両の乗員へのコンテンツ提供に寄与できる車載用情報処理装置、プログラム、及び制御方法を提供することにある。
本発明の一実施形態に係る車載用情報処理装置は、
制御部と、
車両の外部を撮像する車外カメラを含む撮像部と、
前記撮像部によって取得された情報を、前記車両の車室内で乗員に対して出力する出力部と、
を備え、
前記撮像部は、
サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像し、
前記制御部は、
撮像された前記識別記号に関連付けられた前記コンテンツを取得し、
取得された前記コンテンツを、前記車室内の前記乗員に対して前記出力部により出力する。
本発明の一実施形態に係るプログラムは、
車載用情報処理装置において動作するプログラムであって、
前記車載用情報処理装置に、
サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを取得するステップと、
取得された前記コンテンツを、車両の車室内の乗員に対して出力するステップと、
を実行させる。
本発明の一実施形態に係る制御方法は、
車載用情報処理装置における制御方法であって、
前記車載用情報処理装置において、
サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像するステップと、
撮像された前記識別記号に関連付けられた前記コンテンツを取得するステップと、
取得された前記コンテンツを、車両の車室内の乗員に対して出力するステップと、
を含む。
本発明の一実施形態に係る車載用情報処理装置、プログラム、及び制御方法によれば、識別記号を有効に活用した車両の乗員へのコンテンツ提供に寄与できる。
本発明の一実施形態に係る車載用情報処理装置を含む情報処理システムの概略構成を示す図である。 本発明の一実施形態に係る車載用情報処理装置の概略構成を示すブロック図である。 図1の第1情報処理装置の概略構成を示すブロック図である。 図3の第1情報処理装置の制御部によって処理される情報の具体例を示す図である。 図1の第2情報処理装置の概略構成を示すブロック図である。 情報処理システムの動作のフローの第1例を示すシーケンス図である。 情報処理システムの動作のフローの第2例を示すシーケンス図である。
以下、添付図面を参照しながら本発明の一実施形態について説明する。
図1は、本発明の一実施形態に係る車載用情報処理装置10を含む情報処理システム1の概略構成を示す図である。図1を参照して、本発明の一実施形態に関連する情報処理システム1の構成及び機能について主に説明する。
情報処理システム1は、車載用情報処理装置10を搭載する車両100と、第1情報処理装置20と、第2情報処理装置30と、を有する。車載用情報処理装置10、第1情報処理装置20、及び第2情報処理装置30のそれぞれは、例えば移動体通信網及びインターネット等を含むネットワーク40と通信可能に接続されている。
車両100は、例えば自動車であるが、これに限定されず、人間が搭乗可能な任意の車両であってもよい。車両100は、運転者によって運転される車両であるが、これに限定されず、例えば、自動運転を行う車両であってもよい。自動運転は、例えば、SAE(Society of Automotive Engineers)において定義されるレベル1乃至5を含むが、これらに限定されず、任意に定義されてもよい。図1では説明の簡便のため、車両100について1台のみを図示しているが、情報処理システム1が有する車両100の数は1台以上であればよい。
第1情報処理装置20は、例えば車両100の乗員を含む顧客に対して任意のサービスを提供するサービス提供者が所有する、1つ又は互いに通信可能な複数のサーバ装置である。第1情報処理装置20は、これに限定されず、PC(Personal Computer)又はスマートフォン等の任意の汎用の電子機器であってもよいし、情報処理システム1に専用の他の電子機器であってもよい。サービス提供者は、例えば店舗及び商業施設等を運営する。
第2情報処理装置30は、例えばクレジットカード会社等の決済サービスを提供する会社が所有する、1つ又は互いに通信可能な複数のサーバ装置である。第2情報処理装置30は、これに限定されず、PC又はスマートフォン等の任意の汎用の電子機器であってもよいし、情報処理システム1に専用の他の電子機器であってもよい。図1では説明の簡便のため、第2情報処理装置30を構成するサーバ装置を1つだけ例示的に図示している。
図2は、本発明の一実施形態に係る車載用情報処理装置10の概略構成を示すブロック図である。
車載用情報処理装置10は、制御部11と、通信部12と、記憶部13と、撮像部14と、入力部15と、出力部16と、乗員情報取得部17と、を有する。車載用情報処理装置10を構成するこれらの構成部は、例えばCAN(Controller Area Network)等の車載ネットワーク又は専用線を介して、互いに通信可能に接続されている。
一実施形態の概要として、撮像部14は、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化する識別記号を撮像する。コンテンツは、例えば、サービス提供者が顧客に対して提供する商品内容、顧客が注文した商品に関連付けられた決済情報、店舗又は商業施設における混雑状況、商業施設内の施設情報、店舗又は商業施設の駐車場の空き状況、及び店舗又は商業施設で利用可能なクーポン情報等を含む。制御部11は、撮像部14が識別記号を撮像したか否かを判定してもよい。制御部11は、例えば撮像部14が識別記号を撮像したと判定すると、撮像された識別記号に関連付けられたコンテンツを取得する。制御部11は、取得されたコンテンツを、車両100の車室内の乗員に対して出力部16により出力する。車両100の乗員は、車両100の運転者及び同乗者を含む。車両100の乗員の数は、1人であってもよいし、複数であってもよい。
このように、一実施形態によれば、識別記号を有効に活用した車両100の乗員へのコンテンツ提供に寄与できる。より具体的には、撮像部14が撮像する識別記号が、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化することで、サービス提供者が車両100の乗員に対してその都度提供したいと所望するコンテンツを適切に提供可能である。車両100の乗員は、上述した様々なコンテンツを、最新の状態で確認することができる。加えて、車両100の乗員は、車両100から降りることなく車室内にとどまった状態で様々なコンテンツを容易に確認することができる。
次に、車載用情報処理装置10の各構成について、詳細に説明する。
制御部11は、1つ以上のプロセッサを有する。一実施形態において「プロセッサ」は、汎用のプロセッサ、又は特定の処理に特化した専用のプロセッサであるが、これらに限定されない。車両100に搭載されたECU(Electronic Control Unit)が、制御部11として機能してもよい。制御部11は、車載用情報処理装置10を構成する各構成部と例えば通信可能に接続され、車載用情報処理装置10全体の動作を制御する。一実施形態では、例えば、制御部11は、撮像部14、入力部15、及び乗員情報取得部17を制御して各種情報を取得する。
通信部12は、車載ネットワーク又は専用線を介して通信する通信モジュールを含む。通信部12は、ネットワーク40に接続する通信モジュールを含む。例えば、通信部12は、4G(4th Generation)及び5G(5th Generation)等の移動体通信規格に対応する通信モジュールを含んでもよい。例えばDCM(Data Communication Module)等の車載通信機が通信部12として機能してもよい。一実施形態において、車載用情報処理装置10は、通信部12を介してネットワーク40に接続されている。
記憶部13は、1つ以上のメモリを含む。一実施形態において「メモリ」は、例えば半導体メモリ、磁気メモリ、又は光メモリ等であるが、これらに限定されない。記憶部13に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部13は、車載用情報処理装置10の動作に用いられる任意の情報を記憶する。例えば、記憶部13は、システムプログラム、アプリケーションプログラム、及び車載用情報処理装置10によって取得された各種情報等を記憶してもよい。記憶部13に記憶された情報は、例えば通信部12を介してネットワーク40から取得される情報で更新可能であってもよい。
撮像部14は、車両100の外部を撮像する車外カメラを含む。撮像部14は、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化する識別記号を撮像する。識別記号は、QRコードを含む。これに限定されず、識別記号は、バーコード等の任意の記号を含んでもよい。撮像部14は、例えば車両100の外部を常時撮像しながらこのような識別記号を撮像してもよいし、入力部15を用いた車両100の乗員の操作に基づいて、このような識別記号を撮像してもよい。
撮像部14又は制御部11は、任意の画像認識技術を用いて、車外カメラによって撮像された画像から識別記号を認識してもよい。
入力部15は、車両100の乗員による入力操作を受け付ける。一実施形態では、入力部15は、例えばカーナビゲーション装置が有する入力インタフェースを含む。入力部15は、車両100の乗員による入力操作を受け付け、車両100の乗員による入力情報を取得する。入力部15は、取得した車両100の乗員による入力情報を制御部11に出力する。
出力部16は、撮像部14によって取得された情報を、車両100の車室内で乗員に対して出力する。一実施形態では、出力部16は、カーナビゲーション装置を含む。例えば、出力部16は、カーナビゲーション装置を構成する液晶モニタ等の出力デバイスを含む。出力部16を構成するカーナビゲーション装置は、例えば、コンテンツを画像及び音声の少なくとも一方により出力する。
出力部16は、これに限定されず、車両100の乗員の視覚及び聴覚の少なくとも一方に影響を及ぼす任意の出力デバイスを含んでもよい。出力部16は、例えば、車両100の乗員の聴覚に主に影響を及ぼす、カーナビゲーション装置以外の他の任意の音声出力デバイスを含んでもよい。出力部16は、例えば、車両100の乗員の視覚に主に影響を及ぼす、カーナビゲーション装置以外の他の任意の画像出力デバイスを含んでもよい。
乗員情報取得部17は、車両100の車室内で乗員に関する情報を取得する。一実施形態では、乗員情報取得部17は、車両100の車室内を撮像する車室内カメラを含む。乗員情報取得部17は、例えば、車室内カメラによって撮像された画像から乗員に関する情報を取得する。このとき、乗員に関する情報は、車両100の乗員の年齢、性別、国籍、及び人種等を含む属性、人数、顔、表情、顔向き、視線、瞬き状態、仕草、言動、人数、所持品、並びに運転(乗車)継続時間の少なくとも1つを含む。乗員情報取得部17は、乗員に関する情報を常時取得してもよいし、適宜なタイミングで取得してもよい。
乗員情報取得部17は、例えば顔認識技術を用いて、車室内カメラによって撮像された画像から、乗員の顔、表情、顔向き、視線、及び瞬き状態等の乗員に関する情報を取得してもよい。その他にも、乗員情報取得部17は、任意の画像認識技術を用いて、車室内カメラによって撮像された画像から乗員に関する情報を取得してもよい。
乗員情報取得部17の構成は、上記の内容に限定されない。乗員情報取得部17は、車室内カメラとは異なる、任意の他の画像センサを含んでもよい。乗員情報取得部17は、CANに接続されている任意の他のセンサを含んでもよい。
例えば、乗員情報取得部17は、車両100の車室内に設置され、CANに接続されている任意の音センサを含んでもよい。乗員情報取得部17は、例えば、音センサによって出力された出力情報から乗員に関する情報を取得してもよい。このとき、乗員に関する情報は、例えば乗員の会話内容、その他の音声言語を表出する乗員の行動により生じた音声、及びその他の音を表出する乗員の行動により生じた音等を含む乗員に起因する音情報を含んでもよい。
乗員情報取得部17は、例えば音声認識技術及び他の任意の認識技術を用いて、音センサによって出力された出力情報から乗員に関する情報を取得してもよい。
例えば、乗員情報取得部17は、車両100の車室内に設置され、CANに接続されている任意の生体センサを含んでもよい。乗員情報取得部17は、例えば、生体センサによって出力された出力情報から乗員に関する情報を取得してもよい。このとき、乗員に関する情報は、例えば脳波、脳血流、血圧、血糖値、血中アミノ酸、心拍、脈拍、体温、体感温度、空腹感、及び疲れ等を含む乗員の生体状態を含んでもよい。
図3は、図1の第1情報処理装置20の概略構成を示すブロック図である。図3に示すように、第1情報処理装置20は、制御部21と、通信部22と、記憶部23と、表示部24と、を有する。
制御部21は、1つ以上のプロセッサを有する。制御部21は、第1情報処理装置20を構成する各構成部と接続され、第1情報処理装置20全体の動作を制御する。例えば、制御部21は、通信部22を制御して、ネットワーク40を介して車載用情報処理装置10の乗員情報取得部17から乗員に関する情報を取得する。例えば、制御部21は、記憶部23を制御して、第1情報処理装置20の動作に必要な情報を記憶部23に格納する。
通信部22は、ネットワーク40に接続する通信モジュールを含む。例えば、通信部22は、有線LAN(Local Area Network)規格に対応する通信モジュールを含んでもよい。一実施形態において、第1情報処理装置20は、通信部22を介してネットワーク40に接続されている。
記憶部23は、1つ以上のメモリを含む。記憶部23に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部23は、第1情報処理装置20の動作に用いられる任意の情報を記憶する。記憶部23に記憶された情報は、例えば通信部22を介してネットワーク40から取得される情報で更新可能であってもよい。例えば、記憶部23は、システムプログラム及びアプリケーションプログラムを記憶してもよい。
例えば、記憶部23は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報を記憶してもよい。例えば、記憶部23は、第1情報処理装置20を所有するサービス提供者が顧客への提供を所望するコンテンツ、及び車両100の乗員の乗員に関する情報に適合したコンテンツと関連付けられる識別記号に関する情報を記憶してもよい。その他にも、記憶部23は、例えばサービス提供者によって提供されたサービスに対する顧客の購買データを顧客ごとにビッグデータとして記憶していてもよい。このような購買データは、例えば、複数の車両100に搭載された車載用情報処理装置10の乗員情報取得部17により過去に取得された複数の乗員に関する情報ごとに、そのときの顧客の購買内容を関連付けて、制御部21により構築されてもよい。
表示部24は、車載用情報処理装置10の撮像部14が撮像する識別記号を表示する任意の表示デバイスを含む。例えば、表示部24は、液晶モニタを含む。表示部24は、例えば、サービス提供者が運営する店舗及び商業施設等における任意の箇所に設置されてもよい。表示部24は、例えば、第1情報処理装置20を所有するサービス提供者の店舗におけるドライブスルーの入り口付近及び店舗における公道に面した箇所等に設置されてもよい。表示部24は、例えば、第1情報処理装置20を所有するサービス提供者の商業施設の駐車場の入り口付近等に設置されてもよい。
制御部21は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報に適合したコンテンツと関連付けて識別記号を生成してもよい。制御部21は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報に基づいて、記憶部23により記憶されたコンテンツのうち当該乗員に関する情報に適合したコンテンツを、例えば機械学習により選択してもよい。制御部21は、このような選択処理を実行するために任意の学習処理の構成を有してもよい。制御部21は、機械学習による最適なコンテンツの選択にあたり、例えば、記憶部23にビッグデータとして記憶されている顧客の購買データを参照してもよい。制御部21は、選択されたコンテンツと関連付けられた識別記号を表示部24に表示する。
図4は、図3の第1情報処理装置20の制御部21によって処理される情報の具体例を示す図である。図4を参照しながら、第1情報処理装置20の制御部21によって処理される情報についてより具体的に説明する。
例えば、制御部21は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報として、車両100の乗員の人数が3人であり、性別がそれぞれ男性、女性、及び男の子であり、年齢がそれぞれ40歳、35歳、及び0歳であることを車載用情報処理装置10より取得する。このとき、制御部21は、当該乗員に関する情報に適合させて、記憶部23が記憶するコンテンツのうち、商業施設内の施設情報としてベビー用品店に関する情報を、及びクーポン情報としてベビー用品の割引クーポンに関する情報を選択する。制御部21は、当該乗員に関する情報に適合したこれらのコンテンツと関連付けて識別記号S1を生成し、表示部24に表示する。
例えば、制御部21は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報として、車両100の乗員の人数が4人であり、性別がそれぞれ男性であり、空腹感有りであることを車載用情報処理装置10より取得する。このとき、制御部21は、当該乗員に関する情報に適合させて、記憶部23が記憶するコンテンツのうち、商業施設内の施設情報として飲食店に関する情報を、及びクーポン情報として飲食店の割引クーポンに関する情報を選択する。制御部21は、当該乗員に関する情報に適合したこれらのコンテンツと関連付けて識別記号S2を生成し、表示部24に表示する。
例えば、制御部21は、車載用情報処理装置10の乗員情報取得部17により取得された乗員に関する情報として、車両100の乗員の顔を車載用情報処理装置10より取得する。このとき、制御部21は、記憶部23が記憶する顧客の購買データも参照して、乗員に関する情報に基づき車両100の乗員の来店回数及び過去の購買内容等を取得する。制御部21は、記憶部23が記憶するコンテンツのうち、サービス提供者が顧客に対して提供する商品内容として、車両100の乗員が過去に最も多く注文した商品に関する情報を、当該乗員に関する情報に適合させて選択する。制御部21は、当該乗員に関する情報に適合したこのようなコンテンツと関連付けて識別記号S3を生成し、表示部24に表示する。
図5は、図1の第2情報処理装置30の概略構成を示すブロック図である。図5に示すように、第2情報処理装置30は、制御部31と、通信部32と、記憶部33と、を有する。
制御部31は、1つ以上のプロセッサを有する。制御部31は、第2情報処理装置30を構成する各構成部と接続され、第2情報処理装置30全体の動作を制御する。例えば、制御部31は、通信部32を制御して、ネットワーク40を介して車載用情報処理装置10から後述する決済情報を取得する。例えば、制御部31は、記憶部33を制御して、第2情報処理装置30の動作に必要な情報を記憶部33に格納する。
通信部32は、ネットワーク40に接続する通信モジュールを含む。例えば、通信部32は、有線LAN(Local Area Network)規格に対応する通信モジュールを含んでもよい。一実施形態において、第2情報処理装置30は、通信部32を介してネットワーク40に接続されている。
記憶部33は、1つ以上のメモリを含む。記憶部33に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部33は、第2情報処理装置30の動作に用いられる任意の情報を記憶する。記憶部33に記憶された情報は、例えば通信部32を介してネットワーク40から取得される情報で更新可能であってもよい。例えば、記憶部33は、システムプログラム、アプリケーションプログラム、及び車両100の乗員の決済手段に関する情報を当該乗員ごとに記憶してもよい。
例えば、サービス提供者が顧客に対して提供する商品内容をコンテンツが含む場合、車載用情報処理装置10の制御部11は、出力部16により出力された商品内容の中から所定の商品を車両100の乗員が選択するときの入力情報を入力部15から取得する。このとき、制御部11は、車両100の乗員の決済手段に関する情報が登録された外部の第2情報処理装置30に対して、選択された商品に関連付けられた決済情報を通信部12により送信する。加えて、制御部11は、外部の第2情報処理装置30に対して、車両100の乗員の識別情報を通信部12により送信する。
第2情報処理装置30の制御部31は、車載用情報処理装置10から取得した車両100の乗員の識別情報と、記憶部33に記憶されている決済手段に関する情報と、を照合して、選択された商品に関連付けられた決済情報に対して決済処理を実行する。制御部31は、例えば決済処理の結果を、ネットワーク40を介して車載用情報処理装置10及び第1情報処理装置20に送信する。以上により、第2情報処理装置30を介した決済処理が完了する。
図6は、情報処理システム1の動作のフローの第1例を示すシーケンス図である。図6は、車載用情報処理装置10と第1情報処理装置20との間で実行される、車両100の乗員に対してコンテンツを提供するまでのフローの一例を示す。図6を参照して、情報処理システム1の動作フローの一例について説明する。
ステップS100:車載用情報処理装置10の制御部11は、乗員情報取得部17により、車両100の車室内で乗員に関する情報を取得する。
ステップS101:車載用情報処理装置10の制御部11は、ステップS100において取得された乗員に関する情報を通信部12により第1情報処理装置20に送信する。
ステップS102:第1情報処理装置20の制御部21は、ステップS101において車載用情報処理装置10から取得した乗員に関する情報に基づいて、当該乗員に関する情報に適合したコンテンツと関連付けて識別記号を生成する。このとき、制御部21は、必要に応じて、記憶部23にビッグデータとして記憶されている顧客の購買データを参照してもよい。
ステップS103:第1情報処理装置20の制御部21は、ステップS102において生成された識別記号を表示部24に表示する。
ステップS104:車載用情報処理装置10の制御部11は、ステップS103において第1情報処理装置20の表示部24に表示された識別記号を、撮像部14により撮像する。
ステップS105:車載用情報処理装置10の制御部11は、ステップS104において撮像部14により撮像された識別記号に関連付けられたコンテンツを取得する。
ステップS106:車載用情報処理装置10の制御部11は、ステップS105において取得されたコンテンツを、車両100の車室内の乗員に対して出力部16により出力する。
図7は、情報処理システム1の動作のフローの第2例を示すシーケンス図である。図7は、主に車載用情報処理装置10と第2情報処理装置30との間で実行されるフローの一例を示す。より具体的には、図7は、提供されたコンテンツに対して車両100の乗員が選択操作を行ってから決済処理が完了するまでのフローの一例を示す。図7を参照して、情報処理システム1の動作フローの一例について説明する。
ステップS200:車載用情報処理装置10の制御部11は、例えば、出力部16により出力された商品内容の中から所定の商品を車両100の乗員が選択するときの入力情報を入力部15から取得する。
ステップS201:車載用情報処理装置10の制御部11は、ステップS200において選択された商品に関連付けられた決済情報を通信部12により第2情報処理装置30に送信する。加えて、制御部11は、車両100の乗員の識別情報を通信部12により第2情報処理装置30に送信する。
ステップS202:第2情報処理装置30の制御部31は、ステップS201において車載用情報処理装置10から取得した車両100の乗員の識別情報と、記憶部33に記憶されている決済手段に関する情報と、を照合する。
ステップS203:第2情報処理装置30の制御部31は、ステップS201において車載用情報処理装置10から取得した決済情報に対して決済処理を実行する。
ステップS204:第2情報処理装置30の制御部31は、ステップS203における決済処理の結果を、ネットワーク40を介して車載用情報処理装置10及び第1情報処理装置20に送信する。
以上述べたように、一実施形態に係る車載用情報処理装置10によれば、識別記号を有効に活用した車両100の乗員へのコンテンツ提供に寄与できる。より具体的には、撮像部14が撮像する識別記号が、サービス提供者側で随時更新されるコンテンツと関連付けられコンテンツごとに変化することで、サービス提供者が車両100の乗員に対してその都度提供したいと所望するコンテンツを適切に提供可能である。例えば、サービス提供者が顧客に対して提供する商品内容をコンテンツが含む場合、サービス提供者は、商品の入れ替え及び変更等に応じて現行化された最新の商品内容を車両100の乗員に適切に提供可能である。このように、車両100の乗員は、上述した様々なコンテンツを、最新の状態で確認することができる。
例えば、サービス提供者が所定期間提供したいと所望するコンテンツと関連付けられた識別記号を、第1情報処理装置20の表示部24が対応する期間中常時表示することで、第1情報処理装置20は、車両100を個別に認識するような処理を実行する必要がない。仮に、表示部24に識別記号が表示されないと、サービス提供者が車両100の乗員にコンテンツを提供するためには、何かしらの方法で、店舗及び商業施設等に車両100が到着したことを第1情報処理装置20が検知する必要がある。一実施形態に係る情報処理システム1では、表示部24に識別記号を常時表示させて、店舗及び商業施設等に到着した車両100の車載用情報処理装置10がコンテンツを自動的に取得することで、このような第1情報処理装置20による車両100の個別認識に関する処理が不要となる。
加えて、車両100の乗員は、車両100から降りることなく車室内にとどまった状態で様々なコンテンツを容易に確認することができる。例えば、車載用情報処理装置10が店舗における公道に面した箇所で表示された識別記号に基づいてコンテンツを取得するような場合、車両100の乗員は、店舗にわざわざ入らなくても、店舗の前を通過するだけで、当該店舗に関連するコンテンツを容易に入手可能である。例えば、車載用情報処理装置10が店舗におけるドライブスルーの入り口付近で表示された識別記号に基づいてコンテンツを取得するような場合、車両100の乗員は、ドライブスルー内に設置された看板を遠目に見るようなことをする必要もなく、出力部16によりコンテンツを容易に確認することができる。
例えば、顧客が注文した商品に関連付けられた決済情報をコンテンツが含む場合、車両100の乗員は、出力部16により出力された決済情報を車両100の車室内で確認して、入力部15を操作しながら車両100の車室内で決済処理を完了させることも可能となる。このとき、例えば、図7を用いて説明した動作フローと同様のフローに基づいて、決済処理が実行されてもよい。以上により、車両100の乗員は、決済処理を完了させるにあたって、車両100の車室内で入力部15を操作するだけでよく、例えばドライブスルー等で財布を出して店舗の窓口に立っている従業員にお金を支払う等の手間を省くことができる。したがって、ドライブスルー等での注文及び決済の流れが円滑化する。
識別記号が、乗員情報取得部17によって取得された乗員に関する情報に適合したコンテンツと関連付けられることで、サービス提供者は、車両100の乗員が魅力を感じるコンテンツを、車両100の乗員のその時々の状態に応じて提供可能である。車両100の乗員は、その時の自身の状態に合った満足度の高いコンテンツをサービス提供者から受けることができる。
車載用情報処理装置10は、車室内カメラによって撮像された画像から乗員に関する情報を取得することで、乗員に関する情報を視覚情報として取得することができる。これにより、第1情報処理装置20は、乗員に関する情報に適合したコンテンツを、視覚情報に基づいて正確に選択することができる。
車載用情報処理装置10は、乗員に関する情報を取得可能な任意のセンサによって出力された出力情報から車両100の乗員に関する情報を取得することで、視覚情報によっては取得できない種々の乗員に関する情報を取得することができる。例えば、車載用情報処理装置10は、視覚情報によっては取得できない乗員に起因する音情報を、音センサによって出力された出力情報から取得することができる。例えば、車載用情報処理装置10は、視覚情報によっては取得できない微妙な感情の変化を乗員の生体状態として、生体センサによって出力された出力情報から取得することができる。
乗員が商品を選択するときの入力情報に基づいて、車載用情報処理装置10が第2情報処理装置30に対して決済情報を送信することで、車両100の乗員は、入力部15を操作しながら車両100の車室内で決済処理を完了させることも可能となる。これにより、注文及び決済の流れが円滑化し、車両100の乗員の利便性が向上する。
本発明を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。したがって、これらの変形及び修正は本発明の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を1つに組み合わせたり、或いは分割したりすることが可能である。
例えば、上述した実施形態において、車載用情報処理装置10の各構成部は、車両100に搭載されるとして説明した。しかしながら、車載用情報処理装置10の各構成部が実行する一部又は全部の処理動作を、例えばスマートフォン又はコンピュータ等の任意の電子機器が実行する構成も可能である。
例えば、スマートフォン及びコンピュータ等の汎用の電子機器を、上述した実施形態に係る車載用情報処理装置10の各構成部、第1情報処理装置20、及び第2情報処理装置30の少なくとも1つとして機能させる構成も可能である。例えば、実施形態に係る通信部12等の各機能を実現する処理内容を記述したプログラムを、電子機器のメモリに格納し、電子機器のプロセッサによって当該プログラムを読み出して実行させる。したがって、一実施形態に係る発明は、プロセッサが実行可能なプログラムとしても実現可能である。
上述した実施形態において、車載用情報処理装置10と第1情報処理装置20とは、ネットワーク40を介して通信接続されているとして説明した。しかしながら、車載用情報処理装置10と第1情報処理装置20とは、ネットワーク40を介さずに、任意の通信方式を用いて直接的に通信接続されてもよい。
1 情報処理システム
10 車載用情報処理装置
11 制御部
12 通信部
13 記憶部
14 撮像部
15 入力部
16 出力部
17 乗員情報取得部
20 第1情報処理装置
21 制御部
22 通信部
23 記憶部
24 表示部
30 第2情報処理装置
31 制御部
32 通信部
33 記憶部
40 ネットワーク
100 車両
S1、S2、S3 識別記号

Claims (8)

  1. 制御部と、
    車両の外部を撮像する車外カメラを含む撮像部と、
    前記撮像部によって取得された情報を、前記車両の車室内で乗員に対して出力する出力部と、
    を備え、
    前記撮像部は、
    サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像し、
    前記制御部は、
    撮像された前記識別記号に関連付けられた前記コンテンツを取得し、
    取得された前記コンテンツを、前記車室内の前記乗員に対して前記出力部により出力する、
    車載用情報処理装置。
  2. 前記車両の前記車室内で乗員に関する情報を取得する乗員情報取得部を備え、
    前記識別記号は、前記乗員情報取得部によって取得された前記乗員に関する情報に適合した前記コンテンツと関連付けられる、
    請求項1に記載の車載用情報処理装置。
  3. 前記乗員情報取得部は、前記車両の車室内を撮像する車室内カメラを含み、前記車室内カメラによって撮像された画像から前記乗員に関する情報を取得する、
    請求項2に記載の車載用情報処理装置。
  4. 通信部と、
    前記車両の前記乗員による入力操作を受け付ける入力部と、
    を備え、
    前記コンテンツは、前記サービス提供者が顧客に対して提供する商品内容を含み、
    前記制御部は、前記出力部により出力された前記商品内容の中から所定の商品を前記乗員が選択するときの入力情報を前記入力部から取得すると、前記乗員の決済手段に関する情報が登録された外部の情報処理装置に対して、選択された前記商品に関連付けられた決済情報を前記通信部により送信する、
    請求項1乃至3のいずれか1項に記載の車載用情報処理装置。
  5. 前記出力部は、カーナビゲーション装置を含み、
    前記カーナビゲーション装置は、前記コンテンツを画像及び音声の少なくとも一方により出力する、
    請求項1乃至4のいずれか1項に記載の車載用情報処理装置。
  6. 前記識別記号は、QRコードを含む、
    請求項1乃至5のいずれか1項に記載の車載用情報処理装置。
  7. 車載用情報処理装置において動作するプログラムであって、
    前記車載用情報処理装置に、
    サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像するステップと、
    撮像された前記識別記号に関連付けられた前記コンテンツを取得するステップと、
    取得された前記コンテンツを、車両の車室内の乗員に対して出力するステップと、
    を実行させる、
    プログラム。
  8. 車載用情報処理装置における制御方法であって、
    前記車載用情報処理装置において、
    サービス提供者側で随時更新されるコンテンツと関連付けられ前記コンテンツごとに変化する識別記号を撮像するステップと、
    撮像された前記識別記号に関連付けられた前記コンテンツを取得するステップと、
    取得された前記コンテンツを、車両の車室内の乗員に対して出力するステップと、
    を含む、
    制御方法。
JP2018243469A 2018-12-26 2018-12-26 車載用情報処理装置、プログラム、及び制御方法 Pending JP2020106968A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018243469A JP2020106968A (ja) 2018-12-26 2018-12-26 車載用情報処理装置、プログラム、及び制御方法
US16/666,507 US20200211079A1 (en) 2018-12-26 2019-10-29 Vehicle-mounted information processing device, program, and control method
CN201911096282.9A CN111382657A (zh) 2018-12-26 2019-11-11 车载信息处理装置、程序和控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018243469A JP2020106968A (ja) 2018-12-26 2018-12-26 車載用情報処理装置、プログラム、及び制御方法

Publications (1)

Publication Number Publication Date
JP2020106968A true JP2020106968A (ja) 2020-07-09

Family

ID=71123009

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018243469A Pending JP2020106968A (ja) 2018-12-26 2018-12-26 車載用情報処理装置、プログラム、及び制御方法

Country Status (3)

Country Link
US (1) US20200211079A1 (ja)
JP (1) JP2020106968A (ja)
CN (1) CN111382657A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7172523B2 (ja) * 2018-12-03 2022-11-16 トヨタ自動車株式会社 情報処理システム、プログラム、及び制御方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06197246A (ja) * 1992-10-30 1994-07-15 A D S:Kk 自動車に積載のコードリーダ
JP2008241507A (ja) * 2007-03-28 2008-10-09 Sanyo Electric Co Ltd ナビゲーション装置
JP2009301555A (ja) * 2009-07-13 2009-12-24 Clarion Co Ltd 自動料金支払いシステムにおける車載器
JP2015055112A (ja) * 2013-09-12 2015-03-23 パイオニア株式会社 情報表示装置、情報処理装置、及び情報処理システム
JP2017198799A (ja) * 2016-04-26 2017-11-02 トヨタ自動車株式会社 情報収集システム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8781900B2 (en) * 2011-09-09 2014-07-15 Gordon*Howard Associates, Inc. Method and system of providing information to an occupant of a vehicle
CN103839173A (zh) * 2012-11-26 2014-06-04 英业达科技有限公司 提供广告推播及行销的系统及其方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06197246A (ja) * 1992-10-30 1994-07-15 A D S:Kk 自動車に積載のコードリーダ
JP2008241507A (ja) * 2007-03-28 2008-10-09 Sanyo Electric Co Ltd ナビゲーション装置
JP2009301555A (ja) * 2009-07-13 2009-12-24 Clarion Co Ltd 自動料金支払いシステムにおける車載器
JP2015055112A (ja) * 2013-09-12 2015-03-23 パイオニア株式会社 情報表示装置、情報処理装置、及び情報処理システム
JP2017198799A (ja) * 2016-04-26 2017-11-02 トヨタ自動車株式会社 情報収集システム

Also Published As

Publication number Publication date
CN111382657A (zh) 2020-07-07
US20200211079A1 (en) 2020-07-02

Similar Documents

Publication Publication Date Title
JP6643461B2 (ja) 広告掲示板ディスプレイ、及び、車両乗員のデモグラフィック情報のセンシングにより広告を選択的に表示する方法
US20170343375A1 (en) Systems to dynamically guide a user to an autonomous-driving vehicle pick-up location by augmented-reality walking directions
US20170329329A1 (en) Controlling autonomous-vehicle functions and output based on occupant position and attention
JP5085598B2 (ja) 広告表示装置、システム、方法及びプログラム
US11455835B2 (en) Information processing apparatus and information processing method
CN109804400B (zh) 信息提供装置和移动体
JP7196683B2 (ja) 情報処理システム、プログラム、及び制御方法
CN104094340A (zh) 可重新配置的个性化车辆显示器
CN109690601B (zh) 信息提供装置和移动体
US20190051414A1 (en) System and method for vehicle-based health monitoring
WO2018123041A1 (ja) 情報処理システム、及び情報処理装置
CN110447046A (zh) 用于车辆显示器的广告牌界面
JP7088076B2 (ja) 情報処理システム、プログラム、及び制御方法
JP2020106968A (ja) 車載用情報処理装置、プログラム、及び制御方法
CN113496193A (zh) 推荐引导系统、推荐引导方法及存储介质
US11302304B2 (en) Method for operating a sound output device of a motor vehicle using a voice-analysis and control device
US11379547B2 (en) Information processing system, server, non-transitory computer-readable storage medium, and method for processing information
US20200300655A1 (en) Vehicle control circuit, vehicle, and data input/output method
CN112238458B (zh) 机器人管理装置、机器人管理方法以及机器人管理系统
WO2020116227A1 (ja) 情報処理装置
JP6906574B2 (ja) 車載装置及び車両管理システム
JP7151400B2 (ja) 情報処理システム、プログラム、及び制御方法
JP7347344B2 (ja) 情報処理装置、情報処理システム、プログラム、及び車両
CN111007994B (zh) 图像生成装置、图像生成方法和记录程序的非暂时性记录介质
US20210224926A1 (en) Server apparatus, control apparatus, medium, mobile shop, and operation method for information processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210420

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220308

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220913