JP7339899B2 - 情報処理装置、車両、プログラム、及び情報処理方法 - Google Patents

情報処理装置、車両、プログラム、及び情報処理方法 Download PDF

Info

Publication number
JP7339899B2
JP7339899B2 JP2020024141A JP2020024141A JP7339899B2 JP 7339899 B2 JP7339899 B2 JP 7339899B2 JP 2020024141 A JP2020024141 A JP 2020024141A JP 2020024141 A JP2020024141 A JP 2020024141A JP 7339899 B2 JP7339899 B2 JP 7339899B2
Authority
JP
Japan
Prior art keywords
character
time
gui
display
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020024141A
Other languages
English (en)
Other versions
JP2021128666A (ja
Inventor
裕司 安井
七海 塚本
美砂子 吉村
健太郎 山田
久嗣 石松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2020024141A priority Critical patent/JP7339899B2/ja
Priority to US17/159,167 priority patent/US20210252981A1/en
Priority to CN202110176481.1A priority patent/CN113263982B/zh
Publication of JP2021128666A publication Critical patent/JP2021128666A/ja
Application granted granted Critical
Publication of JP7339899B2 publication Critical patent/JP7339899B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/30Conjoint control of vehicle sub-units of different type or different function including control of auxiliary equipment, e.g. air-conditioning compressors or oil pumps
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/802D [Two Dimensional] animation, e.g. using sprites
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11Instrument graphical user interfaces or menu aspects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11Instrument graphical user interfaces or menu aspects
    • B60K2360/111Instrument graphical user interfaces or menu aspects for controlling multiple devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • B60K2360/1438Touch screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/165Videos and animations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/583Data transfer between instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85Arrangements for transferring vehicle- or driver-related data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2510/00Input parameters relating to a particular sub-units
    • B60W2510/30Auxiliary equipments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Description

本発明は、情報処理装置、車両、プログラム、及び情報処理方法に関する。
特許文献1には、「車載機器制御装置において、・・・前記ヘッドアップディスプレイまたは前記インストルメントパネルに、前記メッセージを知らせるキャラクターをアニメーション表示してもよい。」と記載されている。
[先行技術文献]
[特許文献]
[特許文献1] 特開2010-076602号公報
本発明の第1の態様においては、情報処理装置が提供される。情報処理装置は、キャラクタの画像と機器への操作指示を受け付けるグラフィカルユーザインタフェース(GUI)とを表示可能な表示部を制御する表示制御部を備える。情報処理装置は、ユーザが意図する機器の操作内容を示す情報を取得する取得部を備える。表示制御部は、キャラクタがGUIを操作する演出画像を表示する演出時間を操作内容に基づいて決定し、演出画像を演出時間にわたり表示部に表示させる。
表示制御部は、機器が操作内容の動作を完了するのに要する所要時間に基づいて演出時間を決定してよい。
表示制御部は、所要時間が長いほど、演出時間を長くしてよい。
表示制御部は、演出時間が予め定められた時間を超える場合に、演出画像としてキャラクタが転ぶ画像を表示部に表示させてよい。
表示制御部は、演出時間が予め定められた時間を超える場合に、演出画像としてキャラクタがGUIの操作に失敗する画像を表示部に表示させてよい。
表示制御部は、演出画像として、キャラクタがGUIの位置に向けて移動する移動画像を表示部に表示させてよい。表示制御部は、キャラクタが移動によってGUIの位置に到達するまでの到達時間を、演出時間に基づき決定してよい。
表示制御部は、演出時間が長いほど到達時間を長くしてよい。
表示制御部は、演出時間が予め定められた時間を超える場合に、キャラクタがGUIに向けて移動する経路を変更することで、到達時間を長くしてよい。
表示制御部は、操作内容に基づいて、キャラクタがGUIの位置に到達するまでの到達時間と、キャラクタがGUIの操作を行う操作時間とを決定してよい。
表示制御部は、操作内容に対応づけられた移動時間にわたってキャラクタがGUIの位置に向けて移動する第1の演出画像を表示部に表示させてよい。表示制御部は、操作内容に対応づけられた操作時間にわたってキャラクタがGUIの操作を行う第2の演出画像を表示部に表示させてよい。
演出画像が表示されていない場合に、GUIに対する操作が行われた場合にユーザの指示を受け付ける指示受付部をさらに備えてよい。指示受付部は、演出画像が表示されている場合に、GUIに対する操作が行われてもユーザの指示を受け付けなくてよい。
機器は、車両の補機であってよい。
本発明の第2の態様においては、車両が提供される。車両は、上記情報処理装置を備える。
本発明の第3の態様においては、プログラムが提供される。プログラムは、コンピュータを上記の情報処理装置として機能させる。
本発明の第3の態様においては、情報処理方法が提供される。情報処理方法は、機器への操作指示を受け付けるグラフィカルユーザインタフェース(GUI)を表示部に表示させる段階を備える。情報処理方法は、ユーザが意図する機器の操作内容を示す情報を取得する段階を備える。情報処理方法は、キャラクタがGUIを操作する演出画像を表示する演出時間を操作内容に基づいて決定する段階を備える。情報処理方法は、演出画像を演出時間にわたり表示部に表示させる段階を備える。
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
車両10が備える構成を概略的に示す。 車両10内の様子を概略的に示す。 情報処理装置14、センサ16、及び表示部100を備える制御システムのシステム構成を示す。 エアコンディショナの操作を行うためのGUI画面の一例を示す。 シート調整を行うためのGUI画面の一例を示す。 CDの切り替えを行うためのGUI画面の一例を示す。 演出時間情報のデータ構造を示す。 追加演出情報のデータ構造を示す。 移動演出情報のデータ構造を示す。 操作演出情報のデータ構造を示す。 情報処理装置14が実行する情報処理方法に係るフローチャートを示す。 本発明の複数の実施形態が全体的又は部分的に具現化され得るコンピュータ2000の例を示す。
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
図1は、車両10が備える構成を概略的に示す。車両10は、例えば自動車等の輸送機器である。図2は、車両10内の様子を概略的に示す。
車両10は、ナビゲーション装置12、情報処理装置14、センサ16、及び補機18を備える。ナビゲーション装置12は、車両10を誘導するナビゲーション機能を備える。また、ナビゲーション装置12は、補機18に対する乗員80の指示を受け付けるGUI画面を表示する機能を備える。補機18は、エアコンディショナ、CD(コンパクトディスク)チェンジャー等の音楽再生装置、乗員80用の着座シートの駆動装置等である。
センサ16は、乗員80の情報を取得する。例えば、センサ16は、乗員80の音声を取得するマイクや、乗員80の画像情報を取得するカメラ等を備える。情報処理装置14は、センサ16が取得した乗員80の音声情報や画像情報に基づいて、乗員80が意図している補機18の操作内容を特定して、補機18を制御する。
例えば、情報処理装置14は、「暑いな」という音声情報を取得すると、乗員80がエアコンディショナの冷房機能を作動させることを意図していると判断する。この場合、情報処理装置14は、エアコンディショナの冷房機能を作動させる。このとき、情報処理装置14は、エアコンディショナの冷房機能を作動させるとともに、ナビゲーション装置12に表示されるGUI画面の表示を制御する。
一例として、図2に示すGUI画面102は、エアコンディショナの冷房機能を作動する指示を受け付けるためのGUI画面である。GUI画面102は、GUI要素30を含む。GUI要素30は、乗員80がエアコンディショナの冷房機能の作動を開始する指示をタッチ入力によって受け付けるためのGUI要素である。情報処理装置14は、GUI要素30が乗員80によってタッチされたことを検出した場合には、エアコンディショナの冷房機能を作動させる。
情報処理装置14は、例えばセンサ16によって「暑いな」という乗員80の音声情報を取得すると、GUI要素30がタッチされていなくても、エアコンディショナの冷房機能を作動させる。このとき、情報処理装置14は、エアコンディショナの冷房機能を作動させるとともに、ナビゲーション装置12の表示部100に、キャラクタ40がGUI要素30を操作する演出画像を表示させる。例えば、情報処理装置14は、GUI画面102上において、キャラクタ40がGUI要素30の表示位置まで歩いて移動した後に、GUI要素30をタッチするようなアニメーションを表示させる。
エアコンディショナやCDチャンジャ―等の補機18は、動作の応答遅れが生じる場合がある。そのため、乗員80は、例えば、GUI要素30をタッチして補機18を作動するように指示した場合、補機18の動作が遅れたように感じてしまう場合がある。しかし、情報処理装置14によれば、乗員80が発した音声等によって補機18の操作意図を取得した場合には、速やかに補機18を作動させるとともに、補機18の応答遅れに応じて、キャラクタ40をGUI要素30まで時間をかけて移動させる。これにより、乗員80に、補機18の応答遅れを感じさせにくくすることができる。
図3は、情報処理装置14、センサ16、及び表示部100を備えるシステムの構成を示す。センサ16は、マイク292及びカメラ294を備える。マイク292は、乗員80が発する音声に基づいて音声情報を生成する。カメラ294は、車両10内の乗員80を撮像して乗員80の画像情報を生成する。乗員80は、車両10に乗車している人物である。例えば、乗員80は、車両10の運転者であってよい。乗員80は、車両10の運転者以外の人物であってよい。
表示部100は、ナビゲーション装置12の表示装置である。表示部100は、キャラクタ40の画像と補機18への操作指示を受け付けるグラフィカルユーザインタフェース(GUI)とを表示可能である。GUIは、ユーザのタッチ入力を取得するためのGUI要素を含む。なお、補機18は、「機器」の一例である。
情報処理装置14は、処理部200と、記憶部280とを備える。処理部200は、例えば、プロセッサを含む演算処理装置により実現される。記憶部280は、不揮発性の記憶媒体を備えて実現される。処理部200は、記憶部280に格納された情報を用いて処理を行う。
処理部200は、指示受付部210、取得部220、表示制御部240、及び補機制御部230を備える。表示制御部240は、表示部100を制御する。
取得部220は、乗員80が意図する補機18の操作内容を示す情報を取得する。取得部220は、例えば、乗員80の音声情報及び画像情報の少なくとも一方に基づいて、乗員80が意図する補機18の操作内容を示す情報を取得する。例えば、取得部220は、乗員80の発話内容を示すテキスト情報を、操作内容を示す情報として取得する。例えば、取得部220は、マイク292が生成した音声情報を車両10の外部の音声認識サーバに送信して、音声認識サーバにおいて抽出されたテキスト情報を取得する。また、取得部220は、乗員80が行ったジェスチャを示すジェスチャ情報を、操作内容を示す情報として取得する。例えば、取得部220は、カメラ294が生成した画像情報を解析してジェスチャ情報を取得する。取得部220は、取得したテキスト情報又はジェスチャ情報に基づいて、乗員80が意図する補機18の操作内容を示す情報を特定する。補機制御部230は、取得部220が取得した操作内容に基づいて、補機18を制御する。
「補機18の操作内容」とは、例えば、「エアコンディショナの冷房機能の作動」、「CDチェンジャのCDの切り替え」、「シートバックを角度を規定量増やす」等である。例えば、取得部220は、「暑いな」というテキスト情報に基づいて、「エアコンディショナの冷房機能の作動」を、補機18の操作内容として取得する。また、取得部220は、「次のCDを変えて」というテキスト情報から、「CDチェンジャのCDの切り替え」を、補機18の操作内容として取得する。また、取得部220は、「シートを少し倒して」というテキスト情報から、「シートバックの角度を規定量増やす」を、補機18の操作内容として取得する。
表示制御部240は、キャラクタ40がGUIを操作する演出画像を表示する演出時間を操作内容に基づいて決定する。表示制御部240は、演出画像を、演出時間にわたって表示部100に表示させる。例えば、表示制御部240は、補機18が操作内容の動作を完了するのに要する所要時間に基づいて演出時間を決定する。具体的には、表示制御部240は、取得部220によって取得された操作内容が「エアコンディショナの冷房機能の作動」である場合、エアコンディショナの冷房機能の作動が開始するまでに要する時間に基づいて、演出内容を決定する。
表示制御部240は、所要時間が長いほど、演出時間を長くしてよい。表示制御部240は、演出時間が予め定められた時間を超える場合に、演出画像としてキャラクタ40が転ぶ画像を表示部100に表示させてよい。表示制御部240は、演出時間が予め定められた時間を超える場合に、演出画像としてキャラクタ40がGUIの操作に失敗する画像を表示部100に表示させてよい。
表示制御部240は、演出画像として、キャラクタ40がGUIの位置に向けて移動する移動画像を表示部100に表示させてよい。表示制御部240は、キャラクタ40が移動によってGUIの位置に到達するまでの到達時間を、演出時間に基づき決定してよい。例えば、表示制御部240は、演出時間が長いほど到達時間を長くしてよい。表示制御部240は、演出時間が予め定められた時間を超える場合に、キャラクタ40がGUIに向けて移動する経路を変更することで、到達時間を長くしてよい。
表示制御部240は、操作内容に基づいて、キャラクタ40がGUIの位置に到達するまでの到達時間と、キャラクタ40がGUIの操作を行う操作時間とを決定してよい。例えば、表示制御部240は、操作内容に対応づけられた移動時間にわたってキャラクタ40がGUIの位置に向けて移動する第1の演出画像を表示部100に表示させてよい。また、表示制御部240は、操作内容に対応づけられた操作時間にわたってキャラクタ40がGUIの操作を行う第2の演出画像を表示部100に表示させてよい。
指示受付部210は、表示部100から、表示部100の表示面に対するタッチ操作情報を取得する。指示受付部210は、タッチ操作情報に基づいてGUIに対する操作を特定する。指示受付部210は、GUIに対する操作に基づいて、乗員80の指示を特定する。指示受付部210は、演出画像が表示されていない場合に、表示部100に表示されたGUIに対する操作が行われた場合に、乗員80の指示を受け付ける。指示受付部210は、演出画像が表示されている場合に、GUIに対する操作が行われても乗員80の指示を受け付けない。例えば、表示制御部240は、演出画像を表示部100に表示させている場合には、取得したタッチ操作情報を乗員80の指示として受け付けないように指示受付部210を制御してよい。
図4は、エアコンディショナの操作を行うためのGUI画面の一例を示す。GUI画面410は、オン・オフボタン401、吹き出し設定ボタン402、設定温度上昇ボタン403、設定温度低下ボタン404、風量増加ボタン405、風量減少ボタン406を含む。オン・オフボタン401、吹き出し設定ボタン402、設定温度上昇ボタン403及び設定温度低下ボタン404、風量増加ボタン405、及び風量減少ボタン406は、それぞれ乗員80がタッチ操作可能なGUI要素である。
エアコンディショナが作動していない状態で乗員80がオン・オフボタン401をタッチすると、指示受付部210は、補機制御部230に、エアコンディショナを作動させる。乗員80が吹き出し設定ボタン402をタッチすると、指示受付部210は、補機制御部230に、吹き出し口の開閉動作を行わせる。乗員80が設定温度上昇ボタン403をタッチすると、指示受付部210は、補機制御部230に設定温度を上昇させる。乗員80が設定温度低下ボタン404をタッチすると、指示受付部210は、補機制御部230に設定温度を低下させる。乗員80が風量増加ボタン405をタッチすると、指示受付部210は、補機制御部230に、送風量量を増加させる。乗員80が風量減少ボタン406をタッチすると、指示受付部210は、補機制御部230に、送風量を減少させる。
GUI画面410を表示しているときには、エアコンディショナは作動していない状態にあるとする。この状態で乗員80が「暑いな」と発話すると、取得部220は、「暑いな」というテキスト情報に基づいて、補機制御部230に、エアコンディショナの冷房機能を作動させる。例えば、補機制御部230は、エアコンディショナ用のコンプレッサを始動させたり、バルブの開閉等の準備動作を行う。
表示制御部240は、乗員80が「暑いな」と発話すると、GUI画面410から、キャラクタ430を表示するGUI画面412に遷移する。表示制御部240は、エアコンディショナの準備動作に要する時間に基づいて、キャラクタ430がオン・オフボタン401の表示位置まで移動する経路420及びキャラクタ430の移動速度を決定する。表示制御部240は、エアコンディショナの冷房機能が作動するまでに要する時間に基づいて、キャラクタ430が移動を開始する位置を決定してよい。
そして、表示制御部240は、GUI画面414に示されるように、キャラクタ430をオン・オフボタン401に向けて経路420に沿って移動する移動画像を、表示部100に表示させる。なお、表示制御部240は、エアコンディショナの冷房機能が作動するまでに要する時間が予め定められた時間より長い場合には、キャラクタ430が経路420を移動している間に、キャラクタ430が転んだり迷ったりする行為を行わせてよい。また、表示制御部240は、エアコンディショナの冷房機能が作動するまでに要する時間が予め定められた時間より長い場合、キャラクタ430が経路420を移動した後に、キャラクタ430がオン・オフボタン401の操作をしようとして失敗したり、オン・オフボタン401の操作をする前にキャラクタ430が考え込んだりする行為を行わせてよい。
そして、GUI画面416に示されるように、キャラクタ430がオン・オフボタン401を操作する操作画像を表示部100に表示させる。これにより、キャラクタ430が移動している間に、エアコンディショナ用のコンプレッサの始動やバルブ等の開閉等の準備動作が完了し、キャラクタ430がオン・オフボタン401を操作するタイミングで、エアコンディショナの作動が開始するようにすることができる。これにより、エアコンディショナの冷房機能の応答遅れを乗員80が感じにくいようにすることができる。
吹き出し設定ボタン402、設定温度上昇ボタン403、設定温度低下ボタン404、風量増加ボタン405、及び風量減少ボタン406に関連づけられる操作についても同様に、表示制御部240は、乗員80の音声情報から特定した操作内容に基づいて、キャラクタ430が対応する各ボタンの表示位置に向けて移動する移動画像や各ボタンを操作する操作画像を表示させる。これにより、エアコンディショナの応答遅れを乗員80が感じにくいようにすることができる。
図5は、シート調整を行うためのGUI画面の一例を示す。GUI画面510は、シートバックの角度調整用のダイヤル501、及びシート高調整用のスライドボタン502を含む。ダイヤル501及びスライドボタン502は、それぞれ乗員80がタッチ操作可能なGUI要素である。
乗員80がダイヤル501を回転させると、指示受付部210は、ダイヤル501の回転量に応じて、補機制御部230に、シートバックの角度調整用モータ等の駆動機構を駆動させ、シートバックの角度を変更する。乗員80がスライドボタン502をスライド操作すると、指示受付部210は、補機制御部230に、スライドボタン502のスライド量に応じて、シート高調整用モータ等の駆動機構を駆動させ、シートの高さを変更する。
例えば、GUI画面510が表示されている状態において、乗員80が「シートを少し倒して」と発話すると、取得部220は、「シートを少し倒して」のテキスト情報に基づいて、補機制御部230に、シートバックの角度調整の駆動機構の準備動作を開始させる。準備動作としては、角度調整モータの電源装置を起動したり、ギア機構やロック機構等をシートバックの角度調整を行える状態にすること等を例示することができる。
シートバックの角度調整の駆動機構の準備動作に並行して、表示制御部240は、GUI画面510から、キャラクタ530を表示するGUI画面512に遷移させる。表示制御部240は、駆動機構の準備動作に要する時間に基づいて、キャラクタ530がダイヤル501まで移動する経路520及び移動速度を決定する。表示制御部240は、駆動機構の準備動作に要する時間に基づいて、キャラクタ530が移動を開始する位置を決定してよい。
そして、表示制御部240は、GUI画面514に示されるように、キャラクタ530をダイヤル501の表示位置に向けて、経路520に沿って移動する移動画像を、表示部100に表示させる。なお、表示制御部240は、駆動機構の準備動作に要する時間が予め定められた時間より長い場合には、キャラクタ530が経路520を移動している間に、キャラクタ530が転んだり迷ったりする行為を行わせてよい。
続いて、GUI画面516に示されるように、キャラクタ530がダイヤル501を回転させる操作画像を、表示部100に表示させる。キャラクタ530がダイヤル501を回転させる操作画像を表示する時間は、シートバックの角度を規定値だけ変更するのに要する時間である。なお、表示制御部240は、シートバックの角度の変更に要する時間が予め定められた時間より長い場合、キャラクタ530がダイヤル501の操作中に失敗したり、ダイヤル501の操作中にキャラクタ430が考え込んだりする行為を行わせてよい。
これにより、キャラクタ530がダイヤル501の表示位置まで移動している間に駆動機構の準備動作が完了し、キャラクタ530がダイヤル501を操作している間にシートバックの角度調整を行うことができる。これにより、乗員80が応答遅れを感じることがないようにシートバックの角度調整を行うことができる。
スライドボタン502についても同様に、乗員80が「シートを少し高くして」という発話をすると、表示制御部240は、補機制御部230に、シートの高さを高くするための駆動機構の準備動作を開始させ、駆動機構の準備動作に要する時間に基づいてキャラクタ530がスライドボタン502まで移動する経路を決定し、キャラクタ530をダイヤル501の表示位置に向けて移動する移動画像を表示部100に表示させる。続いて、表示制御部240は、キャラクタ530がスライドボタン502を上げ下げする操作画像を、駆動機構がシートの高さを規定値だけ変更するのに要する時間をかけて、表示部100に表示させる。これにより、駆動機構の準備動作を、キャラクタ530が移動している間に進行させ、キャラクタ530がスライドボタン502を操作し始めるタイミングでシートの角度調整を行うことができる。これにより、乗員80が応答遅れを感じることがないようにシートの高さ調整を行うことができる。
図6は、CDの切り替えを行うためのGUI画面の一例を示す。GUI画面610は、再生対象となるCDを切り替えるための8個のボタン601、ボタン602、ボタン603、ボタン604、ボタン605、ボタン606、ボタン607、及びボタン608を含む。ボタン601、ボタン602ボタン603、ボタン604、ボタン605、ボタン606、ボタン607、及びボタン608は、それぞれ乗員80がタッチ操作可能なGUI要素である。
ボタン601、ボタン602ボタン603、ボタン604、ボタン605、ボタン606、ボタン607、及びボタン608は、CDチェンジャー装置が備えるマガジン部の8個のCDトレイのうち、対応するCDトレイに収容されているCDを再生する指示を受け付けるためのGUI要素である。例えば、乗員80がボタン601の位置をタッチすると、指示受付部210は、補機制御部230に、ボタン601に対応づけられたCDトレイに収納されたCDを再生させる。補機制御部230は、CDチェンジャーに、現在再生中のCDを、マガジン部のCDトレイに収納するとともに、指示されたCDトレイに収納されたCDをロードして再生するよう指示する。
例えば、GUI画面610が表示されている状態において、乗員80が「8番のCDを再生して」と発話すると、取得部220は、「8番のCDを再生して」のテキスト情報に基づいて、補機制御部230に、CDチェンジャーのCD駆動機構の準備動作を開始させる。CD駆動機構の準備動作としては、現在再生中のCDをマガジン部のCDトレイに収納して、再生対象となる8番のCDをマガジン部のCDトレイからロードして、CDを規定の回転速度で回転させるまでの動作等を例示することができる。
CDチェンジャーの駆動機構の準備動作に並行して、表示制御部240は、GUI画面610から、キャラクタ630を表示するGUI画面612に遷移させる。表示制御部240は、CD駆動機構の準備動作に要する時間に基づいて、キャラクタ630が、8番のCDに対応するボタン608まで移動する経路620及びキャラクタ630の移動速度を決定する。表示制御部240は、CD駆動機構の準備動作に要する時間に基づいて、キャラクタ630が移動を開始する位置を決定してよい。
そして、表示制御部240は、GUI画面614に示されるように、キャラクタ630をボタン608の表示位置に向けて経路620に沿って移動する移動画像を、表示部100に表示させる。キャラクタ630がボタン608の表示位置まで移動する移動時間は、CD駆動機構の準備動作の時間であってよい。なお、表示制御部240は、CD駆動機構の準備動作に要する時間が予め定められた時間より長い場合には、キャラクタ630が経路620を移動している間に、キャラクタ630が転んだり迷ったりする行為を行わせてよい。また、表示制御部240は、CD駆動機構の準備動作に要する時間が予め定められた時間より長い場合、キャラクタ630が経路620を移動した後に、キャラクタ630がボタン601の操作をしようとして失敗したり、ボタン601の操作をする前にキャラクタ630が考え込んだりする行為を行わせてよい。
続いて、GUI画面616に示されるように、キャラクタ630がボタン608を押す操作画像を、表示部100に表示させる。これにより、CD駆動機構の準備動作を、キャラクタ630が移動している間に進行させることができる。これにより、乗員80が応答遅れを感じることがないように、再生するCDを切り替えることができる。
図7は、演出時間情報のデータ構造を示す。演出時間情報は、操作内容と演出時間とを対応づける。
「操作内容」は、操作種別と操作量との組み合わせにより特定される。「操作種別」は、「エアコンON」、「エアコンOFF」、「風量調整」、「シートバック角調整」、「再生対象CDの切り替え」等である。「エアコンON」は、エアコンディショナを作動させる操作である。「エアコンOFF」はエアコンディショナを停止する操作である。「風量調整」は、エアコンディショナの風量を調整する操作である。「シートバック角調整」は、シートバックの角度を調整する操作である。「再生対象CDの切り替え」は、CDチェンジャ装置が再生するCDを変更する操作である。
「操作量」は、各操作における操作の量を表す指標である。例えば、風量調整における「操作量」は、「風量調整量大」、「風量調整量中」、「風量調整量小」等を含んでよい。シートバックの傾斜角調整における「操作量」は、例えば、「角度調整量大」、「角度調整量中」、「角度調整量小」等を含んでよい。
なお、取得部220は、乗員80の発話から取得されたテキスト情報に基づいて、操作種別及び操作量を特定する。例えば、乗員80が「シートを少し倒して」と発話すると、「シート」及び「倒して」というテキスト情報から、操作種別として「シートバック角調整」を特定し、「少し」というテキスト情報から、操作量として「角度調整小」を特定する。また、乗員80が「風量を少し減らして」と発話すると、「風量」及び「減らして」というテキスト情報から、操作種別として「風量調整」を特定し、「少し」というテキスト情報から、操作量として「風量調整小」を特定する。
「演出時間」は、キャラクタの演出を行う全体の時間を表す。「演出時間」は、到達時間及び操作時間を含む。「到達時間」は、キャラクタが操作対象となるGUI要素に向けて移動する時間である。「操作時間」は、キャラクタが操作対象となるGUI要素を操作する時間である。表示制御部240は、演出時間情報を参照して、操作種別及び操作量の組み合わせに対応づけられた到達時間及び操作時間を特定することによって、キャラクタの演出時間を決定する。
図8は、追加演出情報のデータ構造を示す。追加演出情報は、追加演出種別と加算時間を含む。「追加演出種別」は、転ぶ、迷う、操作失敗、考え込む等を示す情報を含む。「転ぶ」は、キャラクタが移動中に転ぶ演出を示す。「迷う」は、キャラクタが移動中に迷う素振りを行う演出を示す。「操作失敗」は、キャラクタがGUI要素の操作を失敗する演出を示す。「考え込む」は、キャラクタがGUI要素の操作中に考え込む行為を行う演出を示す。
「加算時間」は、1回の演出を追加で実行することで演出時間を長くすることが可能になる時間を示す。例えば、図8に示す演出情報では、「転ぶ」という演出を追加で1回行うことによって、演出時間を1秒長くすることができることを意味する。したがって、「エアコンON」の操作を行う場合、「エアコンON」5秒の演出時間を達成するために、キャラクタが転ぶ演出を1回実行すれば、キャラクタをGUI要素まで移動する演出を行う時間を4秒にすることができる。
図9は、移動演出情報のデータ構造を示す。移動演出情報は、到達時間と、平均移動速度と、追加演出種別とを対応づける。表示制御部240は、移動演出情報を参照して、GUI要素に向けてキャラクタが移動している間にどのような演出を追加で実行するかを決定する。
「到達時間」は、キャラクタが操作対象のGUI要素に到達するまでの時間である。「平均移動速度」は、キャラクタが単位時間あたりに移動する移動距離を示す。なお、この「移動距離」は、規格化された長さであってよい。例えば、「移動距離」は、表示部100の表示エリアの長辺の長さで規格化した長さであってよい。「追加演出種別」は、追加で実行するべき演出種別を示す。例えば、到達時間が0秒から2秒未満の演出を行う場合、表示制御部240は、キャラクタの平均移動速度を0.3とし、追加演出は行わないと決定する。一方、到達時間が4秒から6秒未満の演出を行う場合、表示制御部240は、キャラクタの平均移動速度を0.1とし、「転ぶ」及び「迷う」の追加演出をそれぞれ1回ずつ行い、「操作失敗」及び「考え込む」の追加演出は行わないと決定する。
図10は、操作演出情報のデータ構造を示す。操作演出情報は、操作時間と、追加演出種別とを対応づける。表示制御部240は、操作演出情報を参照して、キャラクタがGUI要素を操作している間にどのような演出を追加で実行するかを決定する。
「操作時間」は、キャラクタが操作対象のGUI要素を操作する時間である。「追加演出種別」は、追加で実行するべき演出種別を示す。例えば、操作時間が0秒から3秒未満の演出を行う場合、表示制御部240は、追加の演出は行わないと決定する。一方、操作時間が5秒以上7秒未満の演出を行う場合、表示制御部240は、「操作失敗」及び「考え込む」の追加演出をそれぞれ1回ずつ行うと決定する。
図11は、情報処理装置14が実行する情報処理方法に係るフローチャートを示す。S1102において、取得部220は、乗員80が意図する操作内容を取得する。例えば、取得部220は、乗員80の音声情報及び画像情報に基づいて、乗員80が意図する補機18に対する操作内容を、特定する。S1104において、補機制御部230は、S1102で取得された操作内容に基づいて、補機18を駆動する。具体的には、補機制御部230は、補機18を作動に必要な準備動作を開始させ、準備動作が完了すると補機18の作動を開始させる。
S1106において、表示制御部240は、S1102で取得された操作内容に基づいて、演出時間を決定する。例えば、表示制御部240は、図7に関連して説明した演出時間情報を参照して、S1102で取得された操作内容に対応づけられた到達時間及び操作時間を特定する。
S1108において、表示制御部240は、S1106で特定した演出時間に基づいて、演出内容を決定する。例えば、表示制御部240は、図9に関連して説明した移動演出情報を参照して、S1106で特定した到達時間に対応づけられた平均移動速度と、追加演出の種別及び実行回数とを特定する。また、図10に関連して説明した操作演出情報を参照して、S1106で特定した操作時間に対応づけられた追加演出の種別及び実行回数とを特定する。そして、表示制御部240は、平均移動速度と、図8に関連して説明した追加演出情報とに基づいて、S1106で特定した到達時間を満たすための移動時間を計算して、キャラクタが移動する経路を決定する。また、表示制御部240は、図10に関連して説明した追加演出の実行回数と、図8に関連して説明した追加演出情報と、図7に関連して説明した演出時間情報の操作時間に基づいて、キャラクタがGUI要素を操作するときにどのような演出を行うかを決定する。
S1110において、表示制御部240は、キャラクタが操作対象とするGUI要素に対する乗員80による操作を無効化する。具体的には、表示制御部240は、指示受付部210が、キャラクタが操作対象とするGUI要素に対する操作情報を表示部100から取得しても、乗員80の指示として受け付けないようにする。S1112において、表示制御部240は、S1108で決定した演出内容に従って演出を行う。
なお、S1110において、表示制御部240が操作を無効化するGUI要素は、キャラクタが操作対象とするGUI要素のみであってよい。操作を無効化するGUI要素は、キャラクタが操作対象とするGUI要素を更に含んでよい。例えば、図6に示されるGUI画面612及びGUI画面614において、ボタン608だけでなく、ボタン601、ボタン602、ボタン603、ボタン604、ボタン605、ボタン606及びボタン607も無効化してよい。なお、S1110の処理は行わなくてもよい。
以上に説明したように、情報処理装置14は、応答遅れが生じる補機18を作動させる場合に、キャラクタがGUI要素まで時間をかけて移動し、キャラクタがGUI要素を操作する演出画像を表示する。これにより、補機18の応答遅れを乗員80が感じにくくすることができる。
なお、表示部100は、ナビゲーション装置12が備える表示部に限られない。表示部100は、車両10に設けられたヘッドアップディスプレイであってよい。表示部100は、インストルメントパネルに設けられる表示部であってよい。表示部100は、携帯端末のディスプレイであってよい。表示部100が携帯端末のディスプレイである場合、情報処理装置14が備える少なくとも一部の機能は、携帯端末に実装されてよい。
車両10は、輸送機器の一例である。輸送機器は、乗用車やバス等の自動車の他に、電車、船舶、航空機等を含む。輸送機器は、移動体の一例である。
車両10の補機18は、情報処理装置による制御の対象となる「機器」の一例である。「機器」は、車両10の補機以外の機器であってよい。例えば、「機器」は、家庭用機器であってよい。「機器」が家庭用機器である場合、「情報処理装置」は、住戸に対応して設けられてよい。例えば、「情報処理装置」は、住戸に設けられてよい。「情報処理装置」の機能は住戸外のサーバにより実現されてもよい。
図12は、本発明の複数の実施形態が全体的又は部分的に具現化され得るコンピュータ2000の例を示す。コンピュータ2000にインストールされたプログラムは、コンピュータ2000に、実施形態に係る情報処理装置14等の装置又は当該装置の各部として機能させる、当該装置又は当該装置の各部に関連付けられるオペレーションを実行させる、及び/又は、実施形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ2000に、本明細書に記載の処理手順及びブロック図のブロックのうちのいくつか又はすべてに関連付けられた特定のオペレーションを実行させるべく、CPU2012によって実行されてよい。
本実施形態によるコンピュータ2000は、CPU2012、及びRAM2014を含み、それらはホストコントローラ2010によって相互に接続されている。コンピュータ2000はまた、ROM2026、フラッシュメモリ2024、通信インタフェース2022、及び入力/出力チップ2040を含む。ROM2026、フラッシュメモリ2024、通信インタフェース2022、及び入力/出力チップ2040は、入力/出力コントローラ2020を介してホストコントローラ2010に接続されている。
CPU2012は、ROM2026及びRAM2014内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。
通信インタフェース2022は、ネットワークを介して他の電子デバイスと通信する。フラッシュメモリ2024は、コンピュータ2000内のCPU2012によって使用されるプログラム及びデータを格納する。ROM2026は、アクティブ化時にコンピュータ2000によって実行されるブートプログラム等、及び/又はコンピュータ2000のハードウエアに依存するプログラムを格納する。入力/出力チップ2040はまた、キーボード、マウス及びモニタ等の様々な入力/出力ユニットをシリアルポート、パラレルポート、キーボードポート、マウスポート、モニタポート、USBポート、HDMI(登録商標)ポート等の入力/出力ポートを介して、入力/出力コントローラ2020に接続してよい。
プログラムは、CD-ROM、DVD-ROM、又はメモリカードのようなコンピュータ可読媒体又はネットワークを介して提供される。RAM2014、ROM2026、又はフラッシュメモリ2024は、コンピュータ可読媒体の例である。プログラムは、フラッシュメモリ2024、RAM2014、又はROM2026にインストールされ、CPU2012によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ2000に読み取られ、プログラムと上記様々なタイプのハードウエアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ2000の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。
例えば、コンピュータ2000及び外部デバイス間で通信が実行される場合、CPU2012は、RAM2014にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース2022に対し、通信処理を命令してよい。通信インタフェース2022は、CPU2012の制御下、RAM2014及びフラッシュメモリ2024のような記録媒体内に提供される送信バッファ処理領域に格納された送信データを読み取り、読み取った送信データをネットワークに送信し、ネットワークから受信された受信データを、記録媒体上に提供される受信バッファ処理領域等に書き込む。
また、CPU2012は、フラッシュメモリ2024等のような記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がRAM2014に読み取られるようにし、RAM2014上のデータに対し様々な種類の処理を実行してよい。CPU2012は次に、処理されたデータを記録媒体にライトバックする。
様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理にかけられてよい。CPU2012は、RAM2014から読み取られたデータに対し、本明細書に記載され、プログラムの命令シーケンスによって指定される様々な種類のオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索/置換等を含む、様々な種類の処理を実行してよく、結果をRAM2014にライトバックする。また、CPU2012は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第2の属性の属性値に関連付けられた第1の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、CPU2012は、第1の属性の属性値が指定されている、条件に一致するエントリを当該複数のエントリの中から検索し、当該エントリ内に格納された第2の属性の属性値を読み取り、それにより予め定められた条件を満たす第1の属性に関連付けられた第2の属性の属性値を取得してよい。
上で説明したプログラム又はソフトウェアモジュールは、コンピュータ2000上又はコンピュータ2000近傍のコンピュータ可読媒体に格納されてよい。専用通信ネットワーク又はインターネットに接続されたサーバーシステム内に提供されるハードディスク又はRAMのような記録媒体が、コンピュータ可読媒体として使用可能である。コンピュータ可読媒体に格納されたプログラムを、ネットワークを介してコンピュータ2000に提供してよい。
コンピュータ2000にインストールされ、コンピュータ2000を情報処理装置14として機能させるプログラムは、CPU2012等に働きかけて、コンピュータ2000を、情報処理装置14の各部としてそれぞれ機能させてよい。これらのプログラムに記述された情報処理は、コンピュータ2000に読込まれることにより、ソフトウエアと上述した各種のハードウエア資源とが協働した具体的手段である情報処理装置14の各部として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ2000の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の情報処理装置14が構築される。
様々な実施形態が、ブロック図等を参照して説明された。ブロック図において各ブロックは、(1)オペレーションが実行されるプロセスの段階又は(2)オペレーションを実行する役割を持つ装置の各部を表わしてよい。特定の段階及び各部が、専用回路、コンピュータ可読媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、及び/又はコンピュータ可読媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタル及び/又はアナログハードウエア回路を含んでよく、集積回路(IC)及び/又はディスクリート回路を含んでよい。プログラマブル回路は、論理AND、論理OR、論理XOR、論理NAND、論理NOR、及び他の論理オペレーション、フリップフロップ、レジスタ、フィールドプログラマブルゲートアレイ(FPGA)、プログラマブルロジックアレイ(PLA)等のようなメモリ要素等を含む、再構成可能なハードウエア回路を含んでよい。
コンピュータ可読媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読媒体は、処理手順又はブロック図で指定されたオペレーションを実行するための手段をもたらすべく実行され得る命令を含む製品の少なくとも一部を構成する。コンピュータ可読媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読媒体のより具体的な例としては、フロッピー(登録商標)ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能プログラマブルリードオンリメモリ(EPROM又はフラッシュメモリ)、電気的消去可能プログラマブルリードオンリメモリ(EEPROM)、静的ランダムアクセスメモリ(SRAM)、コンパクトディスクリードオンリメモリ(CD-ROM)、デジタル多用途ディスク(DVD)、ブルーレイ(RTM)ディスク、メモリスティック、集積回路カード等が含まれてよい。
コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ(ISA)命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はSmalltalk、JAVA(登録商標)、C++等のようなオブジェクト指向プログラミング言語、及び「C」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、1又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。
コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ又はプログラマブル回路に対し、ローカルに又はローカルエリアネットワーク(LAN)、インターネット等のようなワイドエリアネットワーク(WAN)を介して提供され、説明された処理手順又はブロック図で指定されたオペレーションを実行するための手段をもたらすべく、コンピュータ可読命令を実行してよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
10 車両
12 ナビゲーション装置
14 情報処理装置
16 センサ
18 補機
30 GUI要素
40 キャラクタ
80 乗員
100 表示部
102 GUI画面
200 処理部
210 指示受付部
220 取得部
230 補機制御部
240 表示制御部
280 記憶部
292 マイク
294 カメラ
401 オン・オフボタン
402 吹き出し設定ボタン
403 設定温度上昇ボタン
404 設定温度低下ボタン
405 風量増加ボタン
406 風量減少ボタン
410、412、414、416 GUI画面
420 経路
430 キャラクタ
501 ダイヤル
502 スライドボタン
510、512、514、516 GUI画面
520 経路
530 キャラクタ
610 GUI画面
601、602、603、604、605、606、607、608 ボタン
610、612、614、616 GUI画面
620 経路
630 キャラクタ
2000 コンピュータ
2010 ホストコントローラ
2012 CPU
2014 RAM
2020 入力/出力コントローラ
2022 通信インタフェース
2024 フラッシュメモリ
2026 ROM
2040 入力/出力チップ

Claims (15)

  1. キャラクタの画像と機器への操作指示を受け付けるグラフィカルユーザインタフェース(GUI)とを表示可能な表示部を制御する表示制御部と、
    ユーザが意図する前記機器の操作内容を示す情報を取得する取得部と
    を備え、
    前記表示制御部は、前記キャラクタが前記GUIを操作する演出画像を表示する演出時間を前記操作内容に基づいて決定し、前記演出画像を前記演出時間にわたり前記表示部に表示させる
    情報処理装置。
  2. 前記表示制御部は、前記機器が前記操作内容の動作を完了するのに要する所要時間に基づいて前記演出時間を決定する
    請求項1に記載の情報処理装置。
  3. 前記表示制御部は、前記所要時間が長いほど、前記演出時間を長くする
    請求項2に記載の情報処理装置。
  4. 前記表示制御部は、前記演出時間が予め定められた時間を超える場合に、前記演出画像として前記キャラクタが転ぶ画像を表示部に表示させる
    請求項1から3のいずれか一項に記載の情報処理装置。
  5. 前記表示制御部は、前記演出時間が予め定められた時間を超える場合に、前記演出画像として前記キャラクタが前記GUIの操作に失敗する画像を前記表示部に表示させる
    請求項1から4のいずれか一項に記載の情報処理装置。
  6. 前記表示制御部は、
    前記演出画像として、前記キャラクタが前記GUIの位置に向けて移動する移動画像を前記表示部に表示させ、
    前記キャラクタが前記移動によって前記GUIの位置に到達するまでの到達時間を、前記演出時間に基づき決定する
    請求項1から5のいずれか一項に記載の情報処理装置。
  7. 前記表示制御部は、前記演出時間が長いほど前記到達時間を長くする
    請求項6に記載の情報処理装置。
  8. 前記表示制御部は、前記演出時間が予め定められた時間を超える場合に、前記キャラクタが前記GUIに向けて移動する経路を変更することで、前記到達時間を長くする
    請求項7に記載の情報処理装置。
  9. 前記表示制御部は、前記操作内容に基づいて、前記キャラクタが前記GUIの位置に到達するまでの到達時間と、前記キャラクタが前記GUIの操作を行う操作時間とを決定する
    請求項1から8のいずれか一項に記載の情報処理装置。
  10. 前記表示制御部は、
    前記操作内容に対応づけられた移動時間にわたって前記キャラクタが前記GUIの位置に向けて移動する第1の演出画像を前記表示部に表示させ、
    前記操作内容に対応づけられた操作時間にわたって前記キャラクタが前記GUIの操作を行う第2の演出画像を前記表示部に表示させる
    請求項9に記載の情報処理装置。
  11. 前記演出画像が表示されていない場合に、前記GUIに対する操作が行われた場合に前記ユーザの指示を受け付ける指示受付部
    をさらに備え、
    前記指示受付部は、前記演出画像が表示されている場合に、前記GUIに対する操作が行われても前記ユーザの指示を受け付けない
    請求項1から10のいずれか一項に記載の情報処理装置。
  12. 前記機器は、車両の補機である
    請求項1から11のいずれか一項に記載の情報処理装置。
  13. 請求項12に記載の情報処理装置を備える車両。
  14. 請求項1から12のいずれか一項に記載の情報処理装置として機能させるためのプログラム。
  15. 機器への操作指示を受け付けるグラフィカルユーザインタフェース(GUI)を表示部に表示させる段階と、
    ユーザが意図する前記機器の操作内容を示す情報を取得する段階と、
    キャラクタが前記GUIを操作する演出画像を表示する演出時間を前記操作内容に基づいて決定する段階と、
    前記演出画像を前記演出時間にわたり前記表示部に表示させる段階と
    を備える情報処理方法。
JP2020024141A 2020-02-17 2020-02-17 情報処理装置、車両、プログラム、及び情報処理方法 Active JP7339899B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2020024141A JP7339899B2 (ja) 2020-02-17 2020-02-17 情報処理装置、車両、プログラム、及び情報処理方法
US17/159,167 US20210252981A1 (en) 2020-02-17 2021-01-27 Information processing device, vehicle, computer-readable storage medium, and information processing method
CN202110176481.1A CN113263982B (zh) 2020-02-17 2021-02-09 信息处理装置、车辆、计算机可读存储介质以及信息处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020024141A JP7339899B2 (ja) 2020-02-17 2020-02-17 情報処理装置、車両、プログラム、及び情報処理方法

Publications (2)

Publication Number Publication Date
JP2021128666A JP2021128666A (ja) 2021-09-02
JP7339899B2 true JP7339899B2 (ja) 2023-09-06

Family

ID=77228116

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020024141A Active JP7339899B2 (ja) 2020-02-17 2020-02-17 情報処理装置、車両、プログラム、及び情報処理方法

Country Status (3)

Country Link
US (1) US20210252981A1 (ja)
JP (1) JP7339899B2 (ja)
CN (1) CN113263982B (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113835570B (zh) * 2021-09-16 2024-04-12 阿波罗智联(北京)科技有限公司 车辆中显示屏的控制方法、装置、设备、存储介质及程序
KR102654561B1 (ko) 2023-09-27 2024-04-05 주식회사 긴트 전기트랙터의 통신 보안 방법 및 그 방법을 구현하기 위한 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000000377A (ja) 1998-06-12 2000-01-07 Umbrella:Kk 音声入力式ヒューマンインタフェースに特徴を有するビデオゲーム機およびプログラム記録媒体
JP3164748U (ja) 2010-10-01 2010-12-16 株式会社スクウェア・エニックス 情報処理装置
JP2015088108A (ja) 2013-11-01 2015-05-07 株式会社ユピテル システム及びプログラム
JP2018013869A (ja) 2016-07-19 2018-01-25 株式会社デンソー 車両用操作装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11143677A (ja) * 1997-11-05 1999-05-28 Virtuality Kk ポインタ装置
KR100755433B1 (ko) * 2004-12-20 2007-09-04 삼성전자주식회사 휴대단말기의 통화 관련 이벤트 처리 장치 및 방법
AU2006266627B2 (en) * 2005-06-30 2009-11-19 Lg Electronics Inc. Method for controlling information display using the avatar in the washing machine
KR101164730B1 (ko) * 2010-02-04 2012-07-12 삼성전자주식회사 터치스크린을 포함한 단말의 캐릭터 객체 표시 방법 및 장치
US10691473B2 (en) * 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10140748B2 (en) * 2017-01-04 2018-11-27 Honda Motor Co., Ltd. Count-down timer display
WO2019016936A1 (ja) * 2017-07-21 2019-01-24 三菱電機株式会社 操作支援装置および操作支援方法
JP2019105944A (ja) * 2017-12-11 2019-06-27 トヨタ自動車株式会社 表示制御装置
KR20210151802A (ko) * 2019-04-18 2021-12-14 소니 세미컨덕터 솔루션즈 가부시키가이샤 정보 처리 장치, 이동 장치 및 방법, 그리고 프로그램

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000000377A (ja) 1998-06-12 2000-01-07 Umbrella:Kk 音声入力式ヒューマンインタフェースに特徴を有するビデオゲーム機およびプログラム記録媒体
JP3164748U (ja) 2010-10-01 2010-12-16 株式会社スクウェア・エニックス 情報処理装置
JP2015088108A (ja) 2013-11-01 2015-05-07 株式会社ユピテル システム及びプログラム
JP2018013869A (ja) 2016-07-19 2018-01-25 株式会社デンソー 車両用操作装置

Also Published As

Publication number Publication date
US20210252981A1 (en) 2021-08-19
CN113263982A (zh) 2021-08-17
CN113263982B (zh) 2024-05-28
JP2021128666A (ja) 2021-09-02

Similar Documents

Publication Publication Date Title
JP6554150B2 (ja) スクロールバー上での直交ドラッギング
US10592198B2 (en) Audio recording/playback device
US10289260B2 (en) Systems and techniques for application multi-tasking
RU2604993C2 (ru) Жест от границы
CN106687889B (zh) 显示器便捷式文本输入和编辑
RU2591671C2 (ru) Краевой жест
JP2023126782A (ja) 仮想コンピュータキーボード
JP5413673B2 (ja) 情報処理装置および方法、並びにプログラム
JP7339899B2 (ja) 情報処理装置、車両、プログラム、及び情報処理方法
EP3000013B1 (en) Interactive multi-touch remote control
US20150135123A1 (en) Cursor-based character input interface
US9804776B2 (en) Window control system and control method thereof
JP6464411B6 (ja) 電子機器、方法及びプログラム
US20160176372A1 (en) Controlling a vehicle
US20120223959A1 (en) System and method for a touchscreen slider with toggle control
JP2015533001A (ja) ジェスチャと重複するキーが除去されるキーボード
JP6509516B2 (ja) 電子機器、方法及びプログラム
US10133473B2 (en) Input apparatus and vehicle including the same
US9639323B2 (en) Audio control system and control method thereof
US10430063B2 (en) Input apparatus for vehicle having metal buttons and control method of the input apparatus
US9862340B2 (en) Vehicle control system and control method thereof
KR101949493B1 (ko) 멀티미디어 콘텐츠의 재생을 제어하기 위한 방법 및 시스템
US20120278729A1 (en) Method of assigning user interaction controls
US20120284031A1 (en) Method and device for operating technical equipment, in particular a motor vehicle
WO2020134864A1 (zh) 视频播放方法、装置及设备

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230630

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230825

R150 Certificate of patent or registration of utility model

Ref document number: 7339899

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150