JP7318043B2 - 投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品 - Google Patents

投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品 Download PDF

Info

Publication number
JP7318043B2
JP7318043B2 JP2022036892A JP2022036892A JP7318043B2 JP 7318043 B2 JP7318043 B2 JP 7318043B2 JP 2022036892 A JP2022036892 A JP 2022036892A JP 2022036892 A JP2022036892 A JP 2022036892A JP 7318043 B2 JP7318043 B2 JP 7318043B2
Authority
JP
Japan
Prior art keywords
application
page
voice
content
projected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022036892A
Other languages
English (en)
Other versions
JP2022069534A (ja
Inventor
▲ヨウ▼ ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Original Assignee
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apollo Intelligent Connectivity Beijing Technology Co Ltd filed Critical Apollo Intelligent Connectivity Beijing Technology Co Ltd
Publication of JP2022069534A publication Critical patent/JP2022069534A/ja
Application granted granted Critical
Publication of JP7318043B2 publication Critical patent/JP7318043B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K37/00—Dashboards
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/04—Rear-view mirror arrangements mounted inside vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/182—Distributing information between displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B60K2360/779—Instrument locations other than the dashboard on or in rear view mirrors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0252—Improving the response speed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/026—Arrangements or methods related to booting a display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)

Description

本願は、人工知能における自動運転、車両インターネット、スマート音声、投影技術分野に関し、特に投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品に関する。
現在、スマートミラーの搭載されている車両が増えている。スマートミラーは、リアビュー機能に加えて、例えば、地図アプリケーション、音声アプリケーション、音楽アプリケーションなどの様々なアプリケーションのインストールを支援し、これらのアプリケーションによって提供されるコンテンツをスマートミラーに表示する。
車内のユーザがスマートミラーの表示コンテンツを見やすくするために、スマートミラーは投影機能も支援する。例示的に、車内のユーザが見やすくするために、スマートミラーの表示画面を車載端末装置のスクリーンに投影することができる。
スマートミラーに音声アプリケーションがインストールされる場合、音声アプリケーションは、頻繁にウェイクアップされる可能性がある。音声アプリケーションがウェイクアップされたとき、現在使用しているアプリケーションのページを音声アプリケーションのページに切り替える必要がある。スマートミラーが投影状態にある場合、音声アプリケーションが頻繁にウェイクアップされることは、車載端末装置のスクリーンに投影される表示画面が大きく遅れることを招く。
本願は、投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品を提供する。
本願の第１の態様によると、車両のスマートミラーに適用される投影シーンの表示制御方法を提供し、前記スマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされており、前記方法は、
前記音声アプリケーションに対応する音声対話命令を受信することと、
前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることと、
前記投影すべきページを前記端末設備のスクリーンに投影することと、を含む。
本願の第２の態様によると、車両のスマートミラーに適用される投影シーンの表示制御装置を提供し、前記スマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされており、前記装置は、
前記音声アプリケーションに対応する音声対話命令を受信することに用いられる受信モジュールと、
前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることに用いられる処理モジュールと、
前記投影すべきページを前記端末設備のスクリーンに投影することに用いられる投影モジュールとを含む。
本願の第３の態様によると、電子設備を提供し、
少なくとも一つのプロセッサと、
前記少なくとも一つのプロセッサに通信接続されるメモリと、を含み、ここで、
前記メモリは、前記少なくとも一つのプロセッサによって実行可能の命令が記憶されており、前記命令は、前記少なくとも一つのプロセッサが第１の態様に記載の方法を実行できるように、前記少なくとも一つのプロセッサによって実行される。
本願の第４の態様によると、コンピュータ命令が記憶される非一時的なコンピュータ読取可能な記憶媒体を提供し、ここで、前記コンピュータ命令は、コンピュータに第１の態様に記載の方法を実行させることに用いられる。
本願の第５の態様によると、コンピュータプログラム製品を提供し、前記コンピュータプログラム製品はコンピュータプログラムを含み、前記コンピュータプログラムは、読取可能な記憶媒体に記憶されており、電子設備の少なくとも一つのプロセッサは、前記読取可能な記憶媒体から前記コンピュータプログラムを読み取ることができ、前記少なくとも一つのプロセッサは、電子設備に第１の態様に記載の方法を実行させるように前記コンピュータプログラムを実行する。
本願の第６の態様によると、スマートミラーを提供し、本願の第３の態様に記載の電子設備を含む。
本部分で説明される内容は、本願の実施例のケーポイント又は重要な特徴を特定することを意図するものではなく、本願の範囲を限定することに用いられるものでもないことを理解すべきである。本願のその他の特徴は、以下の明細書によって理解しやすくなる。
図面は、本案をよりよく理解するために用いられるものであり、本願を制限するものではない。
本願の実施例によって提供される一つのスマートミラーの投影シーンの模式図である。 １組のインターフェースの変化の模式図である。 スマートミラーの投影過程の模式図である。 投影シーンの表示制御過程の模式図である。 本願の実施例によって提供される一つの投影シーンの表示制御方法のフロー模式図である。 本願の実施例によって提供される投影シーンの表示制御過程の模式図である。 本願の実施例によって提供される１組のインターフェースの変化の模式図である。 本願の実施例によって提供される一つのインターフェースの模式図である。 本願の実施例によって提供されるもう一つのインターフェースの模式図である。 本願の実施例によって提供されるもう一つの投影シーンの表示制御方法のフロー模式図である。 本願の実施例によって提供される一つの投影シーンの表示制御装置の構造模式図である。 本願の実施例によって提供される一つの電子設備の構造模式図である。
以下、図面と併せて本願の例示的な実施例について説明し、その中で、理解しやすくするために本願の実施例の様々な詳細が含まれるが、単に例示的なものとして考えるべきである。したがって、当業者は、本願の範囲と要旨を逸脱することなく、ここで説明した実施例に様々な変更や修正を行うことができることを認識すべきである。同様に、明確かつ簡潔にするために、以下の説明では、公知の機能と構造に対する説明を省略する。
本願は、投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品を提供し、人工知能における自動運転、車両インターネット、スマート音声、投影技術分野に適用されて投影画面の表示の遅れを減らす。
現在、スマートミラーの搭載されている車両が増えている。スマートミラーは、独立の操作システム及び独立の実行空間を有し、ユーザによって様々なアプリケーションを自動にインストールし、ケーブルのネットワークに接続することができると共に、運行記録、車両測位、電子測速注意喚起、リバース可視化、リアルタイムのオンラインビデオエンターテイメントなどの機能を同時に提供することができる。
通常、スマートミラーは、例えば、地図アプリケーション、音声アプリケーション、音楽アプリケーションなどの様々なアプリケーションのインストールを支援し、これらのアプリケーションによって提供されるコンテンツをスマートミラーに表示することができる。運転者が運転過程においてスマートミラーの表示コンテンツを見やすくするために、スマートミラーは、投影機能も支援する。つまり、スマートミラーの表示画面を端末設備のスクリーンに投影することができる。ここで、この端末設備は、車両における車載端末装置又はユーザの端末設備であってもよい。本実施例における車載端末装置は、コンソールの内部に取り付けられてもよく、車両のスクリーンがコンソールの表面に設置されることでユーザに様々な情報を表示する。スマートミラーと車載端末装置との間では、ユニバーサル・シリアル・バス（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ，ＵＳＢ）などの有線接続を介して接続されてもよい。或いは、スマートミラーと車載端末装置とは、ブルートゥース（登録商標）接続又はワイヤレス・フィディリティ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ，Ｗｉ－Ｆｉ）などの無線接続を介して接続されてもよい。本実施例におけるユーザの端末設備は、携帯電話、パーソナルデジタルアシスタント（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ，ＰＤＡ）、タブレット、携帯設備（例えば、携帯コンピュータ、ポケットサイズコンピュータ又はハンドヘルドコンピュータ）などを含むが、これらに限定されるものではない。
以下、図１と合わせて、スマートミラーが車載端末装置のスクリーンに投影することを例として説明する。
図１は、本願の実施例によって提供される一つのスマートミラーの投影シーンの模式図である。図１に示すように、スマートミラー１０１は車内に設置され、スマートミラー１０１は、車両内部のウインドシールドの中央付近などの位置に取り付けられてもよい。スマートミラー１０１に表示される画面が車載端末装置１０２のスクリーンに投影されることで、車内のユーザは、車載端末装置１０２のスクリーンを介してスマートミラーの現在実行中のアプリケーションによって提供されるコンテンツを見ることができる。なお、実際応用では、スマートミラー１０１の表示画面が車載端末装置１０２のスクリーンに投影された後、スマートミラー１０１は、画面を同期して表示することができ、或いは、スマートミラー１０１は、表示しないことができ、本実施例でこれについて制限しない。
本願の実施例において、説明しやすくするために、音声でウェイクアップされ、且つユーザの音声対話を支援するアプリケーションを音声アプリケーションと呼ぶ。音声アプリケーションは、例えば音声アシスタントアプリケーションを含んでもよい。
スマートミラーに音声アプリケーションがインストールされる場合、音声アプリケーションは、ウェイクアップされる可能性がある。音声アプリケーションがウェイクアップされるとき、現在表示画面を音声アプリケーションの画面に切り替える必要がある。ここで、現在表示画面とは、スマートミラーのフォアグラウンドで現在実行中のアプリケーションの表示画面である。現在表示画面は、スマートミラーのシステムデスクトップのページであってもよいし、スマートミラーにインストールされる任意の非音声アプリケーションのページであってもよいことを理解すべきである。
図２は、１組のインターフェースの変化の模式図である。図２に示すインターフェースは、スマートミラーの表示インターフェースであってもよいし、スマートミラーから車載端末装置に投影され、車載端末装置によって表示されるインターフェースであってもよい。図２におけるインターフェース２０１に示すように、スマートミラーのフォアグラウンドで現在運行中のアプリケーションが地図アプリケーションであると仮定し、投影モードでは、スマートミラー又は車載端末装置のスクリーンに表示されるものは、地図アプリケーションのページである。当該シーンでは、ユーザが「Ｄさん、Ｄさん」というウェイクアップワードを入力すると、スマートミラーにおける音声アプリケーションがウェイクアップされる。図２におけるインターフェース２０２を参照すると、スマートミラー及び／又は車載端末装置のスクリーンに表示されるページが、音声アプリケーションのページに切り替えられる。つまり、スマートミラーの地図アプリケーションがバックグラウンドで実行するように切り替えられるが、音声アプリケーションがフォアグラウンドで実行するように切り替えられる。図２におけるインターフェース２０３を参照すると、ユーザが「今は何時ですか」という音声命令を入力すると、音声アプリケーションのページに当該音声命令を表示する。さらに、図２におけるインターフェース２０４を参照すると、スマートミラーは、当該音声命令に対して音声認識と語義解析の処理を行った後、当該音声命令に対応する「今は午前１０時です」という返信メッセージを生成し、音声アプリケーションのページに当該返信メッセージを表示する。
音声アプリケーションは、音声ウェイクアップによって対話するため、実際応用では、音声アプリケーションが頻繁にウェイクアップされることがある。スマートミラーが投影状態にある場合、音声アプリケーションが頻繁にウェイクアップされることは、車載端末装置のスクリーンに投影される表示画面が大きく遅れることを招く。
本願の発明者は、スマートミラーの投影の原理を分析することで、投影画面の表示が遅れる原因を特定した。以下、図３と合わせて説明する。
図３は、スマートミラーの投影過程の模式図である。図３に示すように、スマートミラーに複数のアプリケーションがインストールされ、各アプリケーションは対応のコンテナがあり、異なるアプリケーションは対応のコンテナが異なることを仮定する。各アプリケーションに対応するコンテナは、当該アプリケーションに対応する投影すべきページのコンテンツを格納することに用いられる。例示的に、スマートミラーのフォアグラウンドで現在実行中のアプリケーションがアプリケーション１であると仮定すると、アプリケーション１は、その投影すべきページのコンテンツをコンテナ１に入れる。スマートミラーのフォアグラウンドで現在実行中のアプリケーションがアプリケーション２であると仮定すると、アプリケーション２は、その投影すべきページのコンテンツをコンテナ２に入れる。
図３を引き続き参照すると、スマートミラーには、投影モジュールがさらに含まれる。投影モジュールには、エンコーダが搭載されている。投影モジュールは、各アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して投影すべきページのコンテンツを符号化し、符号化結果を得る。投影モジュールは、符号化結果を車載端末装置に送信する。車載端末装置は、受信した符号化結果を復号化し、復号化されたデータに応じて、投影すべきページをレンダリングして表示する。
異なるアプリケーションは対応のコンテナが異なるため、スマートミラーのフォアグラウンドで実行されるアプリケーションが切り替えられるとき、投影モジュールは、相応的なコンテナの切り替えを行わなければならない。コンテナの切り替えが発生するとき、投影モジュールは、エンコーダをリセットし、つまり、エンコーダを再初期化する必要がある。
図４は、投影シーンの表示制御過程の模式図である。例として、スマートミラーは、フォアグラウンドで地図アプリケーションが実行されると仮定し、地図アプリケーションのページを車載端末装置のスクリーンに投影する過程は、以下の通りである。即ち、地図アプリケーションは、投影すべきページにおけるコンテンツを、地図アプリケーションに対応するコンテナに入れる。投影モジュールは、地図アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して投影すべきページのコンテンツを符号化し、符号化結果を得て車載端末装置に送信する。
図４を引き続き参照すると、スマートミラーは、音声アプリケーションのウェイクアップ命令を受信したとき、音声アプリケーションをフォアグラウンドのアプリケーションとして切り替え、現在表示ページを音声アプリケーションのページに切り替える。この時点での投影過程は以下の通りである。即ち、音声アプリケーションは、投影すべきページのコンテンツを、音声アプリケーションに対応するコンテナに入れる。コンテナの変更が発生したため、投影モジュールはエンコーダをリセットする。投影モジュールは、音声アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、リセットされたエンコーダを利用して投影すべきページのコンテンツを符号化し、符号化結果を得る。符号化結果を車載端末装置に送信する。
図４に示すように、投影シーンでは、音声アプリケーションがウェイクアップされた後、投影モジュールのエンコーダをリセットする必要がある。音声アプリケーションは、音声ウェイクアップによって対話するため、実際応用では、音声アプリケーションがウェイクアップされることがよくあり、そのため、投影シーンでは多くのエンコーダリセットの操作が必要となり、その結果、車載端末装置での音声アプリケーションの表示が大きく遅れることで、ユーザが音声アプリケーションの反応速度が遅いと誤解し、ユーザの音声対話体験を低下させてしまう。そして、音声アプリケーションのテクストから音声まで（Ｔｅｘｔ Ｔｏ Ｓｐｅｅｃｈ，ＴＴＳ）のアナウンスとページ表示との間に関連があるため、ページ表示の遅れも、ＴＴＳアナウンスの遅れをさらに招く。
本願の発明者は、上記分析に基づいて本願の発明思想を提出する。即ち、ユーザと音声アプリケーションとの対話過程において、フォアグラウンドで現在実行中のページに音声アプリケーションの表示すべきコンテンツを追加することで、フォアグラウンドで実行されるアプリケーションの切り替えを極力避けて、車載端末装置の投影ページの表示が遅れるという問題を極力避けることができる。
以下、いくつかの具体的な実施例と合わせて本願の技術案について詳細に説明する。以下のいくつかの実施例は互いに組み合わせることができ、同一又は類似の内容について、ある実施例でその説明を省略する。
図５は、本願の実施例によって提供される一つの投影シーンの表示制御方法のフロー模式図である。本実施例の方法は、スマートミラーによって実行されてもよい。ここで、スマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされている。例示的に、音声アプリケーションは、音声アシスタントアプリケーションであってもよく、非音声アプリケーションは、地図アプリケーションや音楽アプリケーションやユースアプリケーションなどを含んでもよい。
図５に示すように、本実施例の方法は、以下のことを含む。
Ｓ５０１：音声アプリケーションに対応する音声対話命令を受信する。
本実施例において、音声対話命令は、音声アプリケーションをウェイクアップするためのウェイクアップ命令であってもよい。例示的に、スマートミラーは、音声を検出し、検出された音声を認識することで、音声アプリケーションに対応するウェイクアップ命令であるかどうかを特定する。
本実施例において、音声対話命令は、音声アプリケーションにプリセット操作を実行することを要求するために用いられる要求命令であってもよい。例示的に、スマートミラーが音声アプリケーションに対応するウェイクアップ命令を受信してからの所定期間には、音声を継続的に検出することで、ユーザによって入力された要求命令を検出して得る。
Ｓ５０２：少なくとも一つの非音声アプリケーションのうち、対応の第１のページが既に端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得る。
ここで、第１のアプリケーションは、前記少なくとも一つの非音声アプリケーションの中の任意のアプリケーションであってもよい。本実施例の端末設備は、車載端末装置であってもよく、ユーザの端末設備であってもよい。
本実施例において、受信した音声対話命令が異なる場合、音声アプリケーションに対応する表示すべきコンテンツは異なってもよい。一例として、受信した音声対話命令がウェイクアップ命令である場合、音声アプリケーションに対応する表示すべきコンテンツは、当該ウェイクアップ命令に対応する返信メッセージであってもよい。例えば、ユーザが「Ｄさん、Ｄさん」というウェイクアップ命令を入力したとき、音声アプリケーションは、「います」、「きました」、「ご指示ください」などの返信メッセージを表示してもよい。
受信した音声対話命令が要求命令である場合、当該音声アプリケーションに対応する表示すべきコンテンツは、当該要求命令自体を含んでもよく、当該要求命令に対応する返信メッセージを含んでもよい。例えば、ユーザが「今は何時ですか」という音声命令を入力したとき、音声アプリケーションは「今は何時ですか」と表示してもよく、当該音声命令に対応する「今は午前１０時です」という返信メッセージを表示してもよい。
また、本実施例におけるＳ５０１及びＳ５０２は、以下のように説明されてもよい。即ち、スマートミラーには、フォアグラウンドで第１のアプリケーションが実行され、且つ第１のアプリケーションに対応する第１のページが既に端末設備のスクリーンに投影された場合、音声アプリケーションに対応する音声対話命令を受信すると、音声アプリケーションに対応する表示すべきコンテンツを第１のページに追加し、第１のアプリケーションに対応する投影すべきページを得る。
本実施例において、ユーザが音声アプリケーションと対話するとき、音声アプリケーションをフォアグラウンドのアプリケーションとして切り替えることでなく、現在実行中の第１のアプリケーションのページに音声アプリケーションの表示すべきコンテンツを表示させることを理解すべきである。つまり、音声アプリケーションがウェイクアップされた後、音声アプリケーションは依然としてバックグラウンドで実行されるが、第１のアプリケーションは依然としてフォアグラウンドで実行される。これにより、フォアグラウンドで実行されるアプリケーションを切り替えることを避けることで、エンコーダをリセットする必要がない。
Ｓ５０３：前記投影すべきページを前記端末設備のスクリーンに投影する。
投影すべきページには音声アプリケーションに対応する表示コンテンツを含むため、投影すべきページが端末設備に投影された後、ユーザは端末設備のスクリーンより音声アプリケーションに対応する表示コンテンツを見えることで、ユーザと音声アプリケーションとの対話体験に影響を与えないことを理解すべきである。
本実施例によって提供される投影シーンの表示制御方法は、以下のことを含む。即ち、音声アプリケーションに対応する音声対話命令を受信し、前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが既に端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得て、前記投影すべきページを前記端末設備のスクリーンに投影する。このことから分かるように、本実施例において、ユーザが音声アプリケーションと対話するとき、現在実行中の第１のアプリケーションのページによって音声アプリケーションの表示すべきコンテンツを表示することで、フォアグラウンドで実行されるアプリケーションを切り替えることを避けて、エンコーダをリセットする必要がないため、投影画面が遅れるという問題を招かないようになる。
以下、上記実施例に基づき、具体的な一例を挙げて本願の実施例における投影表示制御過程を説明する。
図６は、本願の実施例によって提供される投影シーンの表示制御過程の模式図である。図６に示すように、スマートミラーは、フォアグラウンドで地図アプリケーションが実行されると仮定し、地図アプリケーションのページを車載端末装置のスクリーンに投影する過程は、以下の通りである。即ち、地図アプリケーションは、投影すべきページにおけるコンテンツを、地図アプリケーションに対応するコンテナに入れる。投影モジュールは、地図アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して投影すべきページのコンテンツを符号化し、符号化結果を得て車載端末装置に送信する。
図６を引き続き参照すると、スマートミラーは、音声アプリケーションのウェイクアップ命令を受信するとき、地図アプリケーションに対応するコンテナを取得し、音声アプリケーションに対応する表示すべきコンテンツを、地図アプリケーションに対応するコンテナに入れる。このように、音声アプリケーションの表示すべきコンテンツを地図アプリケーションのページに追加し、地図アプリケーションの投影すべきページを得る。この時、投影すべきページには、地図ページのコンテンツと共に、音声アプリケーションに対応する表示すべきコンテンツも含む。さらに、投影モジュールは、地図アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して投影すべきページのコンテンツを符号化し、符号化結果を得る。コンテナが切り替えられないため、この時のエンコーダをリセットする必要がないことを理解すべきである。投影モジュールは、符号化結果を車載端末装置に送信する。
図６に示すように、本実施例において、ユーザと音声アプリケーションとの対話過程において、音声アプリケーションの表示すべきコンテンツが地図アプリケーションのコンテナに追加され、コンテナが切り替えられることが避けるため、エンコーダをリセットする必要がないことで、投影画面が遅れるという問題を招かないようになる。
図７は、本願の実施例によって提供される１組のインターフェースの変化の模式図である。図７におけるインターフェース７０１に示すように、スマートミラーのフォアグラウンドで現在運行中のアプリケーションが地図アプリケーションであると仮定する。投影モードでは、スマートミラー又は車載端末装置のスクリーンに表示されたものは、地図アプリケーションのページである。ユーザが音声アプリケーションをウェイクアップするためのウェイクアップ命令を入力する（例えば、ユーザが「Ｄさん、Ｄさん」というウェイクアップワードを入力する）とき、地図ページで目標領域を特定し、ウェイクアップ命令に対応する返信メッセージ（例えば、「きました」、「ご指示ください」、「います」など）を当該目標領域に追加し、図７におけるインターフェース７０２を得る。同時に、音声アプリケーションは、バックグラウンドで上記返信メッセージを音声アナウンスする。
さらに、ユーザが音声アプリケーションにプリセット操作の実行を要求するための要求命令を入力するとき、上記目標領域において、音声アプリケーションの表示すべきコンテンツが表示される。一例として、要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツを上記目標領域に追加する。図７におけるインターフェース７０３に示すように、ユーザの入力した「今は何時ですか」という要求命令が目標領域に表示される。
別の例として、要求命令を受信した後、前記要求命令に対応する返信メッセージを上記目標領域に追加する。図７におけるインターフェース７０４に示すように、「今は午前１０時です」という返信メッセージが目標領域に表示される。同時に、音声アプリケーションは、バックグラウンドで上記返信メッセージを音声アナウンスする。
なお、要求命令の返信メッセージが表示されるとき、既に表示された要求命令に加えて返信メッセージの表示を追加してもよく、要求命令の代わりに返信メッセージが表示されてもよい。本実施例は、これに限定されない。
本実施例における目標領域は、地図ページにおける任意の領域にあってもよいことを理解すべきである。本実施例は、これについて限定しない。図７は、地図ページの上部の状態を例示している。実際応用では、目標領域は、地図ページの底部、又は左側や右側にあってもよい。図８Ａは、本願の実施例によって提供される一つのインターフェースの模式図である。図８Ａにおけるインターフェースは、目標領域が地図ページの底部にあることを例示している。図８Ｂは、本願の実施例によって提供されるもう一つのインターフェースの模式図であり、図８Ｂにおけるインターフェースは、目標領域が地図ページの右側にあることを例示している。
上記実施例に基づいて、いくつかのシーンにおいて、音声アプリケーションがウェイクアップされた後、複雑な対話シーンに入る可能性がある。例えば、ユーザの入力した要求命令は、あるコンテンツを照会することを指示し、当該コンテンツの照会結果が複雑であり、上記目標領域を通じて当該照会結果を完全に表示することができない可能性がある。このシーンでは、依然として、音声アプリケーションをフォアグラウンドのアプリケーションとして切り替え、音声アプリケーションの全画面ページを通じて照会結果を表示する必要があるかもしれない。以下、図９と合わせて説明する。
図９は、本願の実施例によって提供されるもう一つの投影シーンの表示制御方法のフロー模式図である。本実施例において、スマートミラーのフォアグラウンドで現在実行中のアプリケーションが地図アプリケーションであり、且つ、スマートミラーの表示画面が車載端末装置のスクリーンに投影されたことを仮定する。図９に示すように、本実施例の方法は、以下のことを含む。
Ｓ９０１：ユーザの入力したウェイクアップワードを受信する。
例えば、ユーザの入力した「Ｄさん、Ｄさん」というウェイクアップワードを受信する。
Ｓ９０２：地図アプリケーションのページにダイアログコントロールを追加し、ウェイクアップワードに対応する返信メッセージをダイアログコントロールに表示し、地図アプリケーションに対応する投影すべきページを生成する。
例えば、図７におけるインターフェース７０２に示すように、地図アプリケーションの現ページの上部に、ダイアログコントロールを追加し、且つ「ご指示ください」という返信メッセージが表示される。
Ｓ９０２の実現形態は、前述実施例についての詳細の説明を参照してもよいことを理解すべきである。ダイアログコントロールを追加した後の地図ページは、端末設備のスクリーンに投影される。当該投影プロセスにおいて、エンコーダのリセットは必要がない。
Ｓ９０３：地図アプリケーションに対応する投影すべきページを端末設備のスクリーンに投影する。
Ｓ９０４：ユーザの入力した要求命令を受信する。
Ｓ９０５：要求命令の受信過程において、受信した要求命令の少なくとも一部のコンテンツに対して意図認識処理を行い、ユーザの意図類別を認識する。
本実施例において、スマートミラーが要求命令を受信する過程において、現在受信した不完全な音声命令に対して音声認識を行い、つまり、要求命令を受信してから認識することでなく、要求命令を受信しながら音声認識を行うようにしている。音声認識の結果に対して意図認識処理を行い、ユーザの意図類別を認識する。本実施例において、完全な要求命令を受信する前に、ユーザの意図類別を既に認識したことを理解すべきである。
本実施例では、意図類別を第１のプリセット類別と第２のプリセット類別に分ける。ユーザの意図類別が第１のプリセット類別である場合、ユーザの要求命令に対応する返信メッセージは簡単であることを示すため、ダイアログコントロールを通じて要求命令に対応する返信メッセージを表示することができる。ユーザの意図類別が第２のプリセット類別である場合、ユーザの要求命令に対応する返信メッセージは複雑であることを示すため、ダイアログコントロールを通じて要求命令に対応する返信メッセージを完全に表示することができなく、そのため、音声アプリケーションの全画面ページを採用して要求命令の返信メッセージを表示する必要がある。
選択可能に、オフラインの語義解析によって意図認識処理を行ってもよく、それにより、意図認識処理の速度を向上させることができる。ここでのオフラインの語義解析とは、高速で簡単な語義解析であると理解してもよく、通常の意味解析と異なり、ユーザの意図類別を予測することだけを目的としたものである。
選択可能に、要求命令のキーワードを認識することで、ユーザの意図類別を特定してもよい。例えば、要求命令が第１類のキーワードを含む場合、ユーザの意図類別が第１のプリセット類別であると特定し、要求命令が第２類のキーワードを含む場合、ユーザの意図類別が第２のプリセット類別であると特定する。
Ｓ９０６：意図類別が第１のプリセット類別である場合、要求命令を受信した後、要求命令に対応する返信メッセージを地図ページのダイアログコントロールに追加し、地図アプリケーションに対応する投影すべきページを得る。
具体的には、要求命令を受信した後、前記要求命令に対して語義解析処理を行い、語義解析結果を得る。前記語義解析結果に応じて前記要求命令に対応する返信メッセージを生成する。前記要求命令に対応する返信メッセージを前記目標領域に追加し、地図アプリケーションに対応する投影すべきページを得る。
Ｓ９０７：地図アプリケーションに対応する投影すべきページを端末設備のスクリーンに投影する。
Ｓ９０７の投影過程について、上記実施例の詳細な説明を参照することができるので、ここで繰り返して説明しない。なお、Ｓ９０７における投影モジュールは、地図アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して符号化処理を行う。コンテナの切り替えに関わらないので、エンコーダのリセットは必要がない。
Ｓ９０８：意図類別が第２のプリセット類別であると、音声アプリケーションの全画面ページを描画し、且つ要求命令を受信した後、前記要求命令に対応する返信メッセージを全画面ページに充填し、音声アプリケーションに対応する投影すべきページを生成する。
具体的には、要求命令を受信した後、前記要求命令に対して語義解析処理を行い、語義解析結果を得る。前記語義解析結果に応じて前記要求命令に対応する返信メッセージを生成する。前記要求命令に対応する返信メッセージを全画面ページに充填する。
本実施例において、要求命令の受信が完了する前に、ユーザの意図類別を既に認識して得たので、ユーザの意図類別が第２のプリセット類別であると特定した場合、意図類別の特定と完全な要求命令に対する語義解析の完了との間の時間差を利用し、音声アプリケーションの全画面ページを事前に描画することができることを理解すべきである。要求命令の受信が完了し、要求命令の語義解析結果に応じて要求命令の返信メッセージを生成した後、描画された全画面ページに返信メッセージを直接に充填することができる。このようにして、本来シリアルで実行される語義解析と全画面ページの描画とを、パラレルで実行されるように変更するに相当する。
Ｓ９０９：音声アプリケーションに対応する投影すべきページを端末設備のスクリーンに投影する。
Ｓ９０９がＳ９０７と異なるとこるは、Ｓ９０７において、投影モジュールは、地図アプリケーションに対応するコンテナから投影すべきページのコンテンツを取り出し、エンコーダを利用して投影すべきページのコンテンツを符号化処理を行うことであると理解すべきである。コンテナの切り替えに関わらないので、エンコーダのリセットは必要がない。Ｓ９０９において、投影モジュールは、音声アプリケーションに対応するコンテナから投影すべきページのコンテンツを取得し、コンテナの切り替えに関わるため、エンコーダをリセットする必要がある。リセットされたエンコーダを利用して投影すべきページのコンテンツに対して符号化処理を行う。
Ｓ９０７又はＳ９０９を実行する同時に、要求命令の語義解析結果に応じて、対応の音声アナウンス又は対応の操作を実行してもよいことを理解すべきである。
本実施例では、要求命令の受信過程において、受信した要求命令の少なくとも一部のコンテンツに応じてユーザの意図類別を予測し、意図類別が第２のプリセット類別である場合のみ、音声アプリケーションをフォアグラウンドで実行されるように切り替え、音声アプリケーションの全画面ページを描画することによって要求命令の返信メッセージを表示し、そうでないと、ユーザと音声アプリケーションとの対話プロセスは、いずれも現在のフォアグラウンドのアプリケーションページに追加されたダイアログコントロールで行われることで、頻繁なエンコーダのリセット操作を避けて、投影表示の遅れを減らす。
図１０は、本願の実施例によって提供される一つの投影シーンの表示制御装置の構造模式図である。本実施例の装置は、ソフトウェア及び／又はハードウェアの形態であってもよい。当該装置は、スマートミラーに適用してもよく、このスマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされている。
図１０に示すように、本実施例によって提供される投影シーンの表示制御装置１０００は、受信モジュール１００１と、処理モジュール１００２と、投影モジュール１００３とを含む。ここで、
受信モジュール１００１は、前記音声アプリケーションに対応する音声対話命令を受信することに用いられ、
処理モジュール１００２は、前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが既に端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることに用いられ、
投影モジュール１００３は、前記投影すべきページを前記端末設備のスクリーンに投影することに用いられる。
一つの可能な実施形態において、各アプリケーションは対応のコンテナがあり、異なるアプリケーションは対応のコンテナが異なり、各アプリケーションに対応するコンテナは、前記アプリケーションに対応する投影すべきページのコンテンツを格納することに用いられ、前記処理モジュール１００２は、具体的に、
前記第１のページのコンテンツを含む、前記第１のアプリケーションに対応するコンテナを取得することと、
前記音声アプリケーションに対応する表示すべきコンテンツを、前記第１のアプリケーションに対応するコンテナに追加することに用いられる。
一つの可能な実施形態において、前記投影モジュール１００３は、
エンコーダを利用し、前記第１のアプリケーションに対応するコンテナにおけるコンテンツを符号化し、符号化結果を得ることに用いられる符号化ユニットと、
前記符号化結果を前記端末設備に送信することに用いられる送信ユニットと、を含む。
一つの可能な実施形態において、前記処理モジュール１００２は、
前記第１のページで目標領域を特定することに用いられる特定ユニットと、
前記音声アプリケーションに対応する表示すべきコンテンツを前記目標領域に追加し、前記第１のアプリケーションに対応する投影すべきページを得ることに用いられる追加ユニットと、を含む。
一つの可能な実施形態において、前記音声対話命令は、前記音声アプリケーションをウェイクアップするためのウェイクアップ命令であり、前記追加ユニットは、具体的に、
前記ウェイクアップ命令に対応する返信メッセージを前記目標領域に追加することに用いられる。
一つの可能な実施形態において、前記音声対話命令は、前記音声アプリケーションにプリセット操作の実施を要求することに用いられる要求命令であり、前記追加ユニットは、具体的に、
前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツを前記目標領域に追加することと、
前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することに用いられる。
一つの可能な実施形態において、前記処理モジュール１００２は、認識ユニットをさらに含み、
前記認識ユニットは、前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツに対して意図認識処理を行い、ユーザの意図類別を認識することに用いられ、
前記追加ユニットは、具体的に、前記意図類別が第１のプリセット類別である場合、前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することに用いられる。
一つの可能な実施形態において、前記処理モジュール１００２は、生成ユニットをさらに含み、前記生成ユニットは、
前記意図類別が第２のプリセット類別である場合、前記音声アプリケーションの全画面ページを描画することと、
前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記全画面ページに充填することに用いられ、
前記投影モジュール１００３は、具体的に、充填された前記全画面ページを前記端末設備のスクリーンに投影することに用いられる。
本実施例によって提供される投影シーンの表示制御装置は、上記任意の方法の実施例における技術案の実行に用いられてもよく、その実現原理と技術的効果は類似であるため、ここで繰り返して説明しない。
本願の実施例によって、本願は、電子設備及び読取可能な記憶媒体をさらに提供する。
本願の実施例によって、本願は、コンピュータプログラムを含むコンピュータプログラム製品をさらに提供し、コンピュータプログラムは、読取可能な記憶媒体に記憶され、電子設備の少なくとも一つのプロセッサは、読取可能な記憶媒体からコンピュータプログラムを読み取ることができ、少なくとも一つのプロセッサは、電子設備に上記いずれか一つの実施例によって提供される方案を実行させるように、コンピュータプログラムを実行する。
図１１は、本願の実施例を実施するための電子設備の例の模式ブロック図を示す。電子設備は、例えば、ラップトップ型コンピュータ、デスクトップコンピュータ、ワークテーブル、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、大型コンピュータ及びその他の適切なコンピュータなどの様々な形態のデジタルコンピュータを指すことを目的とする。電子設備は、例えば、パーソナルデジタルアシスタント、携帯電話、スマートフォン、ウェアラブルデバイス、及びその他の類似のコンピューティングデバイスなどの様々な形態のモバイルデバイスを指してもよい。本実施例の電子設備は、スマートミラー、又はスマートミラーに集積されたチップやモジュールや装置であってもよい。本明細書で示される部品、それらの接続と関係、及びそれらの機能は、例としてのみ示されており、且つ本明細書に記載及び／又は請求されている本開示の実施を制限することを意図していない。
図１１に示すように、電子設備１１００は、読取り専用メモリ（ＲＯＭ）１１０２に記憶されるコンピュータプログラム、又は記憶ユニット１１０８からランダムアクセスメモリ（ＲＡＭ）１１０３にロードされたコンピュータプログラムに応じて、様々な適切な動作と処理を実行することができるコンピューティングユニット１１０１を含む。ＲＡＭ １１０３には、電子設備１１００の操作に必要な各種のプログラムやデータがさらに記憶されてもよい。コンピューティングユニット１１０１、ＲＯＭ １１０２及びＲＡＭ １１０３は、バス１１０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）接続ポート１１０５も、バス１１０４に接続されている。
電子設備１１００における複数の部品は、Ｉ／Ｏ接続ポート１１０５に接続され、複数の部品は、キーボードやマウスなどの入力ユニット１１０６と、様々なディスプレイやスピーカーなどの出力ユニット１１０７と、磁気ディスクや光ディスクなどの記憶ユニット１１０８と、ネットワークカードやモデムや無線通信トランシーバーなどの通信ユニット１１０９とを含む。通信ユニット１１０９は、電子設備１１００がインターネットなどのコンピュータネットワーク及び／又は様々な通信ネットワークを介してその他の設備と情報／データを交換することを可能にする。
コンピューティングユニット１１０１は、処理能力および計算能力を有する様々な汎用及び／又は専用な処理コンポーネントであってもよい。コンピューティングユニット１１０１のいくつかの例には、中央処理ユニット（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、様々な専用な人工知能（ＡＩ）コンピューティングチップ、機械学習モデルアルゴリズムを実行するための様々なコンピューティングユニット、デジタルシグナルプロセッサ（ＤＳＰ）、及び任意の適切なプロセッサ、コントローラ、マイクロコントローラなどが含まれるが、これらに限定されない。コンピューティングユニット１１０１は、投影シーンの表示制御方法などの上述した様々な方法や処理を実行する。例えば、いくつかの実施例において、投影シーンの表示制御方法は、記憶ユニット１１０８などの機械読取可能媒体に具体的に含まれるコンピュータソフトウェアプログラムとして実現されてもよい。いくつかの実施例において、コンピュータプログラムの一部又は全部は、ＲＯＭ １１０２及び／又は通信ユニット１１０９を介して電子設備１１００にロード及び／又はインストールされてもよい。コンピュータプログラムは、ＲＡＭ １１０３にロードされてコンピューティングユニット１１０１によって実行されるとき、上述した投影シーンの表示制御方法の一つ又は複数のステップが実行されることができる。あるいは、その他の実施例において、コンピューティングユニット１１０１は、その他の任意の適切な形態によって（例えば、ファームウェアによって）投影シーンの表示制御方法を実行するように配置されてもよい。
本願の実施例によって、本願は、スマートミラーをさらに提供する。スマートミラーは、上記実施例における電子設備を含んでもよい。具体的には、スマートミラーは、少なくとも一つのプロセッサと、前記少なくとも一つのプロセッサに通信接続されるメモリとを含み、ここで、前記メモリには、前記少なくとも一つのプロセッサによって実行可能の命令が記憶されており、前記命令は、前記少なくとも一つのプロセッサが上記任意の実施例における投影シーンの表示制御方法を実行できるように、前記少なくとも一つのプロセッサによって実行される。
上述したシステム及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、フィールド・プログラマブル・ゲート・アレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ，ＦＰＧＡ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ，ＡＳＩＣ）、特定用途向け標準部品（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｓｔａｎｄａｒｄ Ｐｒｏｄｕｃｔｓ，ＡＳＳＰ）、システムオンチップ（Ｓｙｓｔｅｍ ｏｎ Ｃｈｉｐ、ＳＯＣ）、コンプレックスプログラマブルロジックデバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ ｌｏｇｉｃ ｄｅｖｉｃｅ，ＣＰＬＤ）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はそれらの組み合わせで実現されてもよい。これらの様々な実施形態は、一つ又は複数のコンピュータプログラムで実施することを含んでもよく、当該一つ又は複数のコンピュータプログラムは、少なくとも一つのプログラマブルプロセッサを含むプログラマブルシステムで実行及び／又は解釈されてもよく、当該プログラマブルプロセッサは、専用又は汎用のプログラマブルプロセッサであってもよく、記憶システムと、少なくとも一つの入力装置と、少なくとも一つの出力装置からデータ及び命令を受信し、データ及び命令を当該記憶システムと、当該少なくとも一つの入力装置と、当該少なくとも一つの出力装置とに送信することができる
本開示の方法を実施するためのプログラムコードは、一つ又は複数のプログラミング言語の任意の組み合わせで作成することができる。これらのプログラムコードは、汎用コンピュータ、専用コンピュータ又はその他のプログラマブルデータ処理装置のプロセッサ又はコントローラに提供され、プログラムコードがプロセッサ又はコントローラによって実行されるとき、フローチャート及び／又はブロック図で規定された機能／操作が実行されるようにしてもよい。プログラムコードは、機械で完全に実行されてもよいし、機械で部分的に実行されてもよいし、独立なパッケージとして機械で部分的に実行され且つリモート機械で部分的に実行され、或いは、リモート機械又はサーバーで完全に実行されてもよい。
本開示の文脈において、機械読取可能媒体は、有形の媒体であってもよく、当該媒体は、命令実行システム、装置又は設備によって使用される、或いは、命令実行システム、装置又は設備と合わせて使用されるプログラムを含む又は保存することであってもよい。機械読取可能な媒体は、機械読取可能信号媒体又は機械読取可能な記憶媒体であってもよい。機械読取可能な媒体には、電子的、磁気的、光学的、電磁的、赤外線的、又は半導体のシステム、装置又は設備、又はこれらの任意の適切な組み合わせが含まれるが、これらに限定されない。械読取可能な媒体のより具体的な例としては、一つ又は複数のワイヤに基づく電気接続、携帯型コンピュータ、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読取り専用メモリ（ＲＯＭ）、消去可能プログラマブル読取専用メモリ（ＥＰＲＯＭ又はフラッシュメモリ）、光ファイバ、携帯型コンパクトディスクリードオンリーメモリ（ＣＤ－ＲＯＭ）、光記憶設備、磁気記憶設備、又はこれらの任意の適切な組み合わせが挙げられる。
ユーザとの対話を提供するために、ここで説明したシステム及び技術は、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（ブラウン管、Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）又はＬＣＤ（液晶ディスプレイ、Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）モニター）と、ユーザがコンピュータに入力を行うためのキーボード及びポインティング装置（例えば、マウス又はトラックボールなど）を有するコンピュータで実施されてもよい。その他の種類の装置は、ユーザとの対話を提供することにも用いられる。例えば、ユーザに提供されるフィードバックは、任意の形態の感覚的なフィードバック（視覚的なフィードバック、聴覚的なフィードバック、又は触覚的なフィードバック）であってもよく、任意の形態（声入力、音声入力又は触覚入力を含む）でユーザからの入力を受け取ってもよい。
ここで記載されるシステム及び技術は、バックグラウンド部品を含むコンピューティングシステム（例えば、データサーバとして）、又はミドルウェア部品を含むコンピューティングシステム（例えば、アプリケーションサーバ）、又はフロントエンド部品を含むコンピューティングシステム（例えば、ユーザがここで記載されるシステム及び技術の実施形態と対話できるようなグラフィカルユーザインターフェース又はネットワークブラウザを備えるユーザコンピュータ）、又はこのようなバックグラウンド部品、ミドルウェア部品又はフロントエンド部品を含む任意の組み合わせのンピューティングシステムで実施されてもよい。システムの部品は、デジタルデータ通信の任意の形態又は媒体（例えば、通信ネットワーク）を介して相互に接続されてもよい。通信ネットワークの例としては、ローカルエリヤネットワーク（ＬＡＮ，Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ワイドエリアネットワーク（ＷＡＮ，Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットを含む。
コンピュータシステムは、クライアントとサーバを含んでもよい。クライアントとサーバは、通常、互いに離れており、且つ通信ネットワークを介して対話を行う。クライアントとサーバとの関係は、対応のコンピュータで実行される、且つ互いにクライアント－サーバ関係を有するコンピュータプログラムを介して産生される。サーバは、クラウドサーバであってもよく、クラウドサーバは、クラウドコンピューティングサーバ又はクラウドホストとも呼ばれ、管理が難しくてビジネスの拡張性が弱いという従来の物理的なホストとＶＰＳサービス（「Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｓｅｒｖｅｒ」、又は「ＶＰＳ」と略称）にある欠点を解決するための、クラウドコンピューティングサービスシステムにおけるホスト製品である。また、サーバは、分散システムのサーバ、又はブロックチェーンを組み合わせたサーバであってもよい。
以上に示された様々な形態のフローを用いて、ステップを並べ替えたり、追加したり、削除したりすることができることを理解すべきである。例えば、本願に記載されている各ステップは、並行に実行されてもよいし、順次に実行されてもよいし、異なる順序で実行されてもよく、本願で開示された技術案の所望の結果を実現できる限り、ここで制限しない。
上記具体的な実施形態は、本願の保護範囲を制限するものではない。当業者にとっては、設計要求及びその他の要因に応じて、様々な変更、組み合わせ、下位組み合わせ及び置換を行われてもよいことを理解すべきである。本願の主旨の範囲内で行われた変更、均等置換及び改善などは、いずれも本願の保護範囲に含まれるべきである。

Claims (20)

  1. 車両のスマートミラーに適用される投影シーンの表示制御方法であって、前記スマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされており、前記方法は、
    前記音声アプリケーションに対応する音声対話命令を受信することと、
    前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが既に端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることと、
    前記投影すべきページを前記端末設備のスクリーンに投影することと、を含む投影シーンの表示制御方法。
  2. 各アプリケーションは対応のコンテナがあり、異なるアプリケーションは対応のコンテナが異なり、各アプリケーションに対応するコンテナは、前記アプリケーションに対応する投影すべきページのコンテンツを格納することに用いられ、
    前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることは、
    前記第１のページのコンテンツを含む、前記第１のアプリケーションに対応するコンテナを取得することと、
    前記音声アプリケーションに対応する表示すべきコンテンツを、前記第１のアプリケーションに対応するコンテナに追加することと、を含む請求項１に記載の方法。
  3. 前記投影すべきページを前記端末設備のスクリーンに投影することは、
    エンコーダを利用して前記第１のアプリケーションに対応するコンテナにおけるコンテンツを符号化し、符号化結果を得ることと、
    前記符号化結果を前記端末設備に送信することと、を含む請求項２に記載の方法。
  4. 前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることは、
    前記第１のページで目標領域を特定することと、
    前記音声アプリケーションに対応する表示すべきコンテンツを前記目標領域に追加し、前記第１のアプリケーションに対応する投影すべきページを得ることと、を含む請求項１～３のいずれか一項に記載の方法。
  5. 前記音声対話命令は、前記音声アプリケーションをウェイクアップするためのウェイクアップ命令であり、前記音声アプリケーションに対応する表示すべきコンテンツを前記目標領域に追加することは、
    前記ウェイクアップ命令に対応する返信メッセージを前記目標領域に追加することを含む、請求項４に記載の方法。
  6. 前記音声対話命令は、前記音声アプリケーションにプリセット操作を実施することを要求するための要求命令であり、前記音声アプリケーションに対応する表示すべきコンテンツを前記目標領域に追加することは、
    前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツを前記目標領域に追加することと、
    前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することと、を含む請求項４に記載の方法。
  7. 前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツに対して意図認識処理を行い、ユーザの意図類別を認識することと、
    前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することは、
    前記意図類別が第１のプリセット類別である場合、前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することを含む、請求項６に記載の方法。
  8. 前記ユーザの意図類別を認識した後、
    前記意図類別が第２のプリセット類別である場合、前記音声アプリケーションの全画面ページを描画することと、
    前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記全画面ページに充填することと、
    充填された前記全画面ページを前記端末設備のスクリーンに投影することと、をさらに含む請求項７に記載の方法。
  9. 車両のスマートミラーに適用される投影シーンの表示制御装置であって、前記スマートミラーには、音声アプリケーションと少なくとも一つの非音声アプリケーションがインストールされており、前記装置は、
    前記音声アプリケーションに対応する音声対話命令を受信することに用いられる受信モジュールと、
    前記少なくとも一つの非音声アプリケーションのうち、対応の第１のページが既に端末設備のスクリーンに投影された第１のアプリケーションがある場合、前記音声アプリケーションに対応する表示すべきコンテンツを前記第１のページに追加し、前記第１のアプリケーションに対応する投影すべきページを得ることに用いられる処理モジュールと、
    前記投影すべきページを前記端末設備のスクリーンに投影することに用いられる投影モジュールと、を含む投影シーンの表示制御装置。
  10. 各アプリケーションは対応のコンテナがあり、異なるアプリケーションは対応のコンテナが異なり、各アプリケーションに対応するコンテナは、前記アプリケーションに対応する投影すべきページのコンテンツを格納することに用いられ、前記処理モジュールは、具体的に、
    前記第１のページのコンテンツを含む、前記第１のアプリケーションに対応するコンテナを取得することと、
    前記音声アプリケーションに対応する表示すべきコンテンツを、前記第１のアプリケーションに対応するコンテナに追加することに用いられる、請求項９に記載の装置。
  11. 前記投影モジュールは、
    エンコーダを利用して前記第１のアプリケーションに対応するコンテナにおけるコンテンツを符号化し、符号化結果を得ることに用いられる符号化ユニットと、
    前記符号化結果を前記端末設備に送信することに用いられる送信ユニットと、を含む請求項１０に記載の装置。
  12. 前記処理モジュールは、
    前記第１のページで目標領域を特定することに用いられる特定ユニットと、
    前記音声アプリケーションに対応する表示すべきコンテンツを前記目標領域に追加し、前記第１のアプリケーションに対応する投影すべきページを得ることに用いられる追加ユニットと、を含む請求項９～１１のいずれか一項に記載の装置。
  13. 前記音声対話命令は、前記音声アプリケーションをウェイクアップするためのウェイクアップ命令であり、前記追加ユニットは、具体的に、
    前記ウェイクアップ命令に対応する返信メッセージを前記目標領域に追加することに用いられる、請求項１２に記載の装置。
  14. 前記音声対話命令は、前記音声アプリケーションにプリセット操作を実施することを要求することに用いられる要求命令であり、前記追加ユニットは、具体的に、
    前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツを前記目標領域に追加することと、
    前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することに用いられる、請求項１２に記載の装置。
  15. 前記処理モジュールは、認識ユニットをさらに含み、
    前記認識ユニットは、前記要求命令の受信過程において、受信した前記要求命令の少なくとも一部のコンテンツに対して意図認識処理を行い、ユーザの意図類別を認識することに用いられ、
    前記追加ユニットは、前記意図類別が第１のプリセット類別である場合、前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記目標領域に追加することに用いられる、請求項１４に記載の装置。
  16. 前記処理モジュールは、生成ユニットをさらに含み、前記生成ユニットは、
    前記意図類別が第２のプリセット類別である場合、前記音声アプリケーションの全画面ページを描画することと、
    前記要求命令を受信した後、前記要求命令に対応する返信メッセージを前記全画面ページに充填することに用いられ、
    前記投影モジュールは、具体的に、充填された前記全画面ページを前記端末設備のスクリーンに投影することに用いられる、請求項１５に記載の装置。
  17. 電子設備であって、
    少なくとも一つのプロセッサと、
    前記少なくとも一つのプロセッサに通信接続されるメモリと、を含み、ここで、
    前記メモリには、前記少なくとも一つのプロセッサによって実行可能の命令が記憶されており、前記命令は、前記少なくとも一つのプロセッサが請求項１～８のいずれか一項に記載の方法を実行できるように、前記少なくとも一つのプロセッサによって実行される、電子設備。
  18. コンピュータ命令が記憶される非一時的なコンピュータ読取可能な記憶媒体であって、前記コンピュータ命令は、コンピュータに請求項１～８のいずれか一項に記載の方法を実行させることに用いられる、非一時的なコンピュータ読取可能な記憶媒体。
  19. コンピュータプログラムであって、前記コンピュータプログラムは、プロセッサによって実行されるとき、請求項１～８のいずれか一項に記載の方法を実現するコンピュータプログラム。
  20. 請求項１７に記載の電子設備を含むスマートミラー。
JP2022036892A 2021-04-16 2022-03-10 投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品 Active JP7318043B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110412533.0A CN113138737B (zh) 2021-04-16 2021-04-16 投屏场景的显示控制方法、装置、设备、介质及程序产品
CN202110412533.0 2021-04-16

Publications (2)

Publication Number Publication Date
JP2022069534A JP2022069534A (ja) 2022-05-11
JP7318043B2 true JP7318043B2 (ja) 2023-07-31

Family

ID=76812859

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022036892A Active JP7318043B2 (ja) 2021-04-16 2022-03-10 投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品

Country Status (5)

Country Link
US (1) US11955039B2 (ja)
EP (1) EP4011674B1 (ja)
JP (1) JP7318043B2 (ja)
KR (1) KR20220054756A (ja)
CN (1) CN113138737B (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114035973A (zh) * 2021-10-08 2022-02-11 阿波罗智联(北京)科技有限公司 一种应用程序的投屏方法、装置、电子设备及存储介质
CN114567802B (zh) * 2021-12-29 2024-02-09 沈阳中科创达软件有限公司 一种数据显示方法和装置
CN115273517B (zh) * 2022-08-12 2023-07-18 润芯微科技(江苏)有限公司 一种车载智能显示方法及其显示系统
CN115579010B (zh) * 2022-12-08 2023-04-28 中国汽车技术研究中心有限公司 智能座舱跨屏联动方法、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005182168A (ja) 2003-12-16 2005-07-07 Sharp Corp コンテンツ処理装置、コンテンツ処理方法、コンテンツ処理プログラム、および記録媒体
US20170357387A1 (en) 2016-06-12 2017-12-14 Apple Inc. Identifying applications on which content is available
US20190272820A1 (en) 2017-02-16 2019-09-05 Tencent Technology (Shenzhen) Company Limited Voice activation method, apparatus, electronic device, and storage medium
WO2020135811A1 (zh) 2018-12-29 2020-07-02 华为技术有限公司 一种语音交互方法，设备和系统
CN111625094A (zh) 2020-05-25 2020-09-04 北京百度网讯科技有限公司 智能后视镜的交互方法、装置、电子设备和存储介质
CN111645521A (zh) 2020-05-29 2020-09-11 北京百度网讯科技有限公司 用于智能后视镜的控制方法、装置、电子设备和存储介质

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10282987A (ja) * 1997-04-04 1998-10-23 Hitachi Ltd 音声認識システムおよび方法
US6980092B2 (en) * 2000-04-06 2005-12-27 Gentex Corporation Vehicle rearview mirror assembly incorporating a communication system
US7937667B2 (en) 2006-09-27 2011-05-03 Donnelly Corporation Multimedia mirror assembly for vehicle
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
CN104057887A (zh) * 2014-05-28 2014-09-24 广东多纳勒振华汽车系统有限公司 一种语音智能型多功能汽车内后视镜
JP6346281B2 (ja) * 2014-07-04 2018-06-20 クラリオン株式会社 車載対話型システム、及び車載情報機器
JP6570651B2 (ja) 2015-11-25 2019-09-04 三菱電機株式会社 音声対話装置および音声対話方法
US10140770B2 (en) * 2016-03-24 2018-11-27 Toyota Jidosha Kabushiki Kaisha Three dimensional heads-up display unit including visual context for voice commands
US10482801B2 (en) 2017-03-22 2019-11-19 Solera Holdings, Inc. Start and stop methods for a vehicle smart mirror
KR102332826B1 (ko) * 2017-05-30 2021-11-30 현대자동차주식회사 차량용 음성 인식 장치, 상기 차량용 음성 인식 장치를 포함하는 차량, 차량용 음성 인식 시스템 및 상기 차량용 음성 인식 장치의 제어 방법
CN107835398B (zh) * 2017-09-27 2020-02-18 苏州车萝卜汽车电子科技有限公司 一种基于投屏的定制化导航信息显示方法、装置
CN108259665B (zh) * 2017-12-29 2021-05-28 苏州车萝卜汽车电子科技有限公司 车内互动显示方法以及移动通信终端
CN108337667B (zh) * 2018-02-12 2020-12-01 武汉卡比特信息有限公司 手机与车载显示终端在投屏状态蓝牙配对的装置及方法
CN208188811U (zh) * 2018-02-25 2018-12-04 绿驰汽车科技（上海）有限公司 一种汽车驾驶虚拟舱多屏互动控制系统
CN108312967B (zh) * 2018-03-28 2021-05-04 京东方科技集团股份有限公司 车辆后视镜装置、系统、方法及计算机可读介质
CN108845736A (zh) 2018-06-12 2018-11-20 苏州思必驰信息科技有限公司 用于车载语音系统的交互方法及系统
US10735472B2 (en) * 2018-07-10 2020-08-04 Cisco Technology, Inc. Container authorization policies for network trust
CN110908625B (zh) * 2018-09-18 2023-05-30 斑马智行网络(香港)有限公司 多屏显示方法、装置、设备、系统、舱体及存储介质
DE102019204054A1 (de) 2019-03-25 2020-10-01 Volkswagen Aktiengesellschaft Verfahren zur Bereitstellung eines Sprachdialogs in Gebärdensprache bei einem Sprachdialog-System für ein Fahrzeug
CN110310638A (zh) * 2019-06-26 2019-10-08 芋头科技（杭州）有限公司 投屏方法、装置、电子设备和计算机可读存储介质
CN112394891B (zh) * 2019-07-31 2023-02-03 华为技术有限公司 一种投屏方法及电子设备
CN110733425A (zh) * 2019-10-28 2020-01-31 武汉极目智能技术有限公司 基于adas预警和导航投屏车机的方法、装置及系统
CN212181920U (zh) 2020-04-09 2020-12-18 成都鹰明智通科技股份有限公司 智能语音交互后视镜
CN111541919B (zh) * 2020-05-13 2022-07-29 阿波罗智联(北京)科技有限公司 视频帧传输方法、装置、电子设备及可读存储介质
CN111666056B (zh) * 2020-05-28 2024-01-05 阿波罗智联(北京)科技有限公司 屏幕切换显示方法、装置、智能后视镜和可读存储介质
CN111736785B (zh) * 2020-05-29 2023-12-22 阿波罗智联(北京)科技有限公司 投屏播放的控制方法、装置、设备和计算机存储介质
CN111634188B (zh) * 2020-05-29 2023-03-24 阿波罗智联(北京)科技有限公司 用于投屏的方法和装置
CN112331202B (zh) * 2020-11-04 2024-03-01 北京奇艺世纪科技有限公司 一种语音投屏方法及装置、电子设备和计算机可读存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005182168A (ja) 2003-12-16 2005-07-07 Sharp Corp コンテンツ処理装置、コンテンツ処理方法、コンテンツ処理プログラム、および記録媒体
US20170357387A1 (en) 2016-06-12 2017-12-14 Apple Inc. Identifying applications on which content is available
US20190272820A1 (en) 2017-02-16 2019-09-05 Tencent Technology (Shenzhen) Company Limited Voice activation method, apparatus, electronic device, and storage medium
WO2020135811A1 (zh) 2018-12-29 2020-07-02 华为技术有限公司 一种语音交互方法，设备和系统
JP2022516491A (ja) 2018-12-29 2022-02-28 華為技術有限公司 音声対話の方法、装置、及びシステム
CN111625094A (zh) 2020-05-25 2020-09-04 北京百度网讯科技有限公司 智能后视镜的交互方法、装置、电子设备和存储介质
JP2021103580A (ja) 2020-05-25 2021-07-15 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッドＢｅｉｊｉｎｇ Ｂａｉｄｕ Ｎｅｔｃｏｍ Ｓｃｉｅｎｃｅ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ． スマートバックミラーのインタラクション方法、装置、電子機器及び記憶媒体
CN111645521A (zh) 2020-05-29 2020-09-11 北京百度网讯科技有限公司 用于智能后视镜的控制方法、装置、电子设备和存储介质
JP2021108187A (ja) 2020-05-29 2021-07-29 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッドＢｅｉｊｉｎｇ Ｂａｉｄｕ Ｎｅｔｃｏｍ Ｓｃｉｅｎｃｅ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．， Ｌｔｄ． スマートバックミラーを制御するための方法、装置、電子機器及び記憶媒体

Also Published As

Publication number Publication date
US11955039B2 (en) 2024-04-09
JP2022069534A (ja) 2022-05-11
US20220208039A1 (en) 2022-06-30
CN113138737B (zh) 2023-11-03
EP4011674A2 (en) 2022-06-15
KR20220054756A (ko) 2022-05-03
EP4011674A3 (en) 2022-10-26
EP4011674B1 (en) 2023-11-01
CN113138737A (zh) 2021-07-20

Similar Documents

Publication Publication Date Title
JP7318043B2 (ja) 投影シーンの表示制御方法、装置、設備、媒体及びプログラム製品
JP7266635B2 (ja) 画面切り替え表示方法、装置、スマートバックミラー及び読み取り可能な記憶媒体
CN107430853B (zh) 将用于具有选择性离线能力的话音动作的数据本地保存在支持话音的电子装置中
KR20210039352A (ko) 방송 텍스트를 결정하는 방법, 장치, 기기 및 매체
CN107943834B (zh) 人机对话的实现方法、装置、设备及存储介质
US10346026B1 (en) User interface
EP4030794B1 (en) Method and apparatus for interconnecting vehicle and machine
JP7264957B2 (ja) 音声インタラクション方法、装置、電子機器、コンピュータ読取可能な記憶媒体及びコンピュータプログラム
JP7483781B2 (ja) 情報をプッシュするための方法、装置、電子機器、コンピュータ可読記憶媒体及びコンピュータプログラム
JP2021105725A (ja) 車載多音域に基づくノイズ低減方法、装置、電子機器及び記憶媒体
KR20210068333A (ko) 응용 프로그램의 조작 안내 방법, 장치, 기기 및 판독 가능 저장 매체
CN113674742B (zh) 人机交互方法、装置、设备以及存储介质
JP7360505B2 (ja) 認証コードの同期方法、装置、電子機器および記憶媒体
CN110807111A (zh) 三维图形的处理方法及装置、存储介质、电子设备
JP2022091904A (ja) ミニプログラムページのスキン切り替え方法、装置及び電子機器
EP3882909B1 (en) Speech output method and apparatus, device and medium
KR20210042272A (ko) 지능형 응답 방법, 장치, 기기， 저장 매체 및 컴퓨터 프로그램
CN112527235A (zh) 语音播放方法、装置、设备以及存储介质
EP4134812A2 (en) Method and apparatus of displaying information, electronic device and storage medium
CN113641439A (zh) 文本识别和展示方法、装置、电子设备和介质
EP4207714A1 (en) Page display method and electronic device
US20220385724A1 (en) Speech processing method and apparatus, device, storage medium and program
JP2022088494A (ja) テキスト生成方法、装置、電子機器及び記憶媒体
CN115767469A (zh) 车载终端与移动终端的交互系统、方法、车载终端和介质
CN110991148A (zh) 信息处理方法及装置、信息交互方法及装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220310

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230705

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230719

R150 Certificate of patent or registration of utility model

Ref document number: 7318043

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150