JP2021144728A - Screen switching display method and device, smart rearview mirror, and readable storage medium - Google Patents

Screen switching display method and device, smart rearview mirror, and readable storage medium Download PDF

Info

Publication number
JP2021144728A
JP2021144728A JP2021088434A JP2021088434A JP2021144728A JP 2021144728 A JP2021144728 A JP 2021144728A JP 2021088434 A JP2021088434 A JP 2021088434A JP 2021088434 A JP2021088434 A JP 2021088434A JP 2021144728 A JP2021144728 A JP 2021144728A
Authority
JP
Japan
Prior art keywords
display
screen
switched
target
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021088434A
Other languages
Japanese (ja)
Other versions
JP7266635B2 (en
Inventor
リュウ,ロン
Rong Liu
シャン,ウェイ
Wei Xiang
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Publication of JP2021144728A publication Critical patent/JP2021144728A/en
Application granted granted Critical
Publication of JP7266635B2 publication Critical patent/JP7266635B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02Rear-view mirror arrangements
    • B60R1/06Rear-view mirror arrangements mounted on vehicle exterior
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

To provide a screen switching display method, a device, and a smart rearview mirror which ensure consistency of application program display after a screen is switched.SOLUTION: A display method includes the steps of: during running of a target application program, storing display data of the target application program on a current screen; in response to monitoring screen switching signal, determining a switched display state; determining a target display style matched with the switched display state; and displaying the display data on the switched screen on the basis of the target display style.EFFECT: A technical problem that the display data of the application program is interrupted and lost after the screen is switched is solved, and consistency of data display of the application program after the screen is switched is ensured, and use experience of a user is improved.SELECTED DRAWING: Figure 1

Description

本出願はコンピュータ技術に関し、特に自動車のインターネット技術分野に関する。 This application relates to computer technology, especially the Internet technology field of automobiles.

現在のスマートカーには一般的にスマートバックミラーが取り付けられている。スマートバックミラーは、ユーザがソフトウェア、ゲーム、ナビゲーションなど、サードパーティプロバイダにより提供されるアプリケーションプログラムをインストールでき、アプリケーションプログラムにより提供されるコンテンツをスマートバックミラーの画面に表示できる、独立したオペレーティングシステムを有する。 Today's smart cars are generally fitted with smart rearview mirrors. The smart rear-view mirror has an independent operating system that allows users to install application programs provided by third-party providers, such as software, games, and navigation, and display the content provided by the application programs on the screen of the smart rear-view mirror. ..

運転者が運転中にスマートバックミラー内のアプリケーションプログラムにより提供されるコンテンツを見ることを容易にするために、スマートバックミラー自体の画面に表示する必要がある場合もあり、スマートバックミラーの内容を他の車載端末、例えば車載インフォテインメントの画面に投影して、他の車載端末の画面に表示する必要がある場合もある。スマートバックミラー内のアプリケーションプログラムにより提供されるコンテンツをスマートバックミラーの画面及び他の車載端末の画面に切り替えて表示する必要がある。 In order to make it easier for the driver to see the content provided by the application program in the smart rearview mirror while driving, it may be necessary to display the contents of the smart rearview mirror on the screen of the smart rearview mirror itself. It may be necessary to project it onto the screen of another vehicle-mounted terminal, for example, vehicle-mounted infotainment, and display it on the screen of another vehicle-mounted terminal. It is necessary to switch and display the content provided by the application program in the smart rear-view mirror on the screen of the smart rear-view mirror and the screen of another in-vehicle terminal.

特定のアプリケーションプログラムの実行中にスマートバックミラーが画面を切り替えると、切り替えられた画面にデフォルトのインターフェースを表示し、該アプリケーションプログラムの表示データが強制的に中断され、表示データが失われてしまい、ユーザの使用体験に影響を与える。 If the smart rearview mirror switches screens while a particular application program is running, it will display the default interface on the switched screens, forcibly interrupting the display data of that application program and losing the display data. Affects the user experience.

本出願の実施例は、画面が切り替えられた後にアプリケーションプログラム表示の一貫性を確保する画面切り替え表示方法、装置、スマートバックミラー及び読み取り可能な記憶媒体を提供する。 The embodiments of the present application provide screen switching display methods, devices, smart rearview mirrors and readable storage media that ensure consistency of application program display after screen switching.

第1の態様によれば、本出願の実施例は、ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するステップと、画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定するステップと、前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップと、前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するステップと、を含む、画面切り替え表示方法を提供する。 According to the first aspect, the embodiment of the present application responds to the step of storing the display data on the current screen of the target application program and the monitoring of the screen switching signal during the execution of the target application program. Then, a step of determining a switched display state including a mirrored display state and a local display state, a step of determining a target display style matching the switched display state, and switching based on the target display style. Provided is a screen switching display method including a step of displaying the display data on the displayed screen.

第2の態様によれば、本出願の実施例は、ターゲットアプリケーションプログラムの表示すべきデータを取得するステップと、ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得するステップと、前記現在の表示状態とマッチングするターゲット表示スタイルを決定するステップと、前記ターゲット表示スタイルに基づいて、前記表示すべきデータを前記現在の表示状態に対応する画面に表示するステップと、を含む、画面切り替え表示方法を提供する。 According to the second aspect, the embodiment of the present application includes a step of acquiring data to be displayed by the target application program, a step of acquiring a current display state including a mirrored display state and a local display state, and the present. Screen switching display including a step of determining a target display style that matches the display state of the above, and a step of displaying the data to be displayed on the screen corresponding to the current display state based on the target display style. Provide a method.

第3の態様によれば、本出願の実施例は、ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するための表示データ記憶モジュールと、画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定するための表示状態決定モジュールと、前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するためのターゲット表示スタイル決定モジュールと、前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するための表示データ表示モジュールと、を備える、画面切り替え表示装置を提供する。 According to the third aspect, the embodiment of the present application provides a display data storage module for storing display data on the current screen of the target application program and a screen switching signal during execution of the target application program. In response to monitoring, a display state determination module for determining a switched display state including a mirrored display state and a local display state, and a target display style for determining a target display style that matches the switched display state. Provided is a screen switching display device including a target display style determining module and a display data display module for displaying the display data on a switched screen based on the target display style.

第4の態様によれば、本出願の実施例は、ターゲットアプリケーションプログラムの表示すべきデータを取得するための表示すべきデータ取得モジュールと、ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得するための現在の表示状態取得モジュールと、前記現在の表示状態とマッチングするターゲット表示スタイルを決定するためのターゲット表示スタイル決定モジュールと、前記ターゲット表示スタイルに基づいて、前記表示すべきデータを前記現在の表示状態に対応する画面に表示するための表示すべきデータの表示モジュールと、を備える、画面切り替え表示装置を提供する。 According to the fourth aspect, the embodiment of the present application displays a data acquisition module to be displayed for acquiring data to be displayed by the target application program, and a current display state including a mirroring display state and a local display state. The current display state acquisition module for acquisition, the target display style determination module for determining the target display style that matches the current display state, and the data to be displayed based on the target display style are described. Provided is a screen switching display device including a display module of data to be displayed for displaying on a screen corresponding to the current display state.

第5の態様によれば、本出願の実施例はスマートバックミラーを提供し、前記スマートバックミラーは、少なくとも1つのプロセッサと、前記少なくとも1つのプロセッサに通信接続されるメモリと、を備え、前記メモリには、前記少なくとも1つのプロセッサによって実行可能な命令が記憶されており、前記命令は、前記少なくとも1つのプロセッサが第1の態様及び第2の態様のいずれか1項に記載の画面切り替え表示方法を実行できるように、前記少なくとも1つのプロセッサによって実行される。 According to a fifth aspect, an embodiment of the present application provides a smart back mirror, said smart back mirror comprising at least one processor and a memory communicatively connected to the at least one processor. An instruction that can be executed by the at least one processor is stored in the memory, and the instruction is a screen switching display according to any one of the first aspect and the second aspect by the at least one processor. It is performed by the at least one processor so that the method can be performed.

第6の態様によれば、本出願の実施例は、コンピュータ命令を記憶する非一時的なコンピュータ読み取り可能な記憶媒体を提供し、前記コンピュータ命令は、前記コンピュータに第1の態様及び第2の態様のいずれか1項に記載の画面切り替え表示方法を実行させるために用いられる。 According to a sixth aspect, an embodiment of the present application provides a non-temporary computer-readable storage medium for storing computer instructions, wherein the computer instructions give the computer a first aspect and a second aspect. It is used to execute the screen switching display method according to any one of the embodiments.

第7の態様によれば、本出願の実施例は、コンピュータプログラムを提供し、前記コンピュータ命令は、コンピュータ上で実行される際、前記コンピュータに第1の態様及び第2の態様のいずれか1項に記載の画面切り替え表示方法を実行させるために用いられる。 According to a seventh aspect, an embodiment of the present application provides a computer program, and when the computer instruction is executed on the computer, the computer is subjected to either one of the first aspect and the second aspect. It is used to execute the screen switching display method described in the section.

本出願の技術によれば、画面が切り替えられた後にアプリケーションプログラムの表示データが中断され、失われるという技術的課題を解決し、画面が切り替えられた後にアプリケーションプログラムのデータ表示の一貫性を確保し、ユーザの使用体験を向上させる。 According to the technology of the present application, the technical problem that the display data of the application program is interrupted and lost after the screen is switched is solved, and the data display of the application program is ensured to be consistent after the screen is switched. , Improve the user experience.

なお、この部分に記述した内容は、本開示の実施例の肝心な特徴又は重要な特徴を限定することを意図しておらず、本開示の範囲を限定することも意図していない。本開示の他の特徴は、以下の明細書により理解されやすくなる。 It should be noted that the content described in this section is not intended to limit the essential features or important features of the examples of the present disclosure, nor is it intended to limit the scope of the present disclosure. Other features of the disclosure are facilitated by the following specification.

図面は、本技術案がよりよく理解されるためのものであり、本出願を限定するものではない。
本出願の実施例に係る第1の画面切り替え表示方法の概略フローチャートである。 本出願の実施例に係る第2の画面切り替え表示方法の概略フローチャートである。 本出願の実施例に係る第3の画面切り替え表示方法の概略フローチャートである。 本出願の実施例に係る第4の画面切り替え表示方法の概略フローチャートである。 本出願の実施例に係るスマートバックミラーの画面表示概略図である。 本出願の実施例に係る車載インフォテインメントの画面表示概略図である。 本出願の実施例に係る第5の画面切り替え表示方法の概略フローチャートである。 本出願の実施例に係る画面切り替え表示のフローチャートである。 本出願の実施例に係る画面切り替え表示装置の概略構成図である。 本出願の実施例に係る他の画面切り替え表示装置の概略構成図である。 本出願の実施例に係る画面切り替え表示方法のスマートバックミラーのブロック図である。
The drawings are for a better understanding of the proposed technology and are not intended to limit the application.
It is a schematic flowchart of the 1st screen switching display method which concerns on embodiment of this application. It is a schematic flowchart of the 2nd screen switching display method which concerns on embodiment of this application. It is a schematic flowchart of the 3rd screen switching display method which concerns on embodiment of this application. It is a schematic flowchart of the 4th screen switching display method which concerns on embodiment of this application. It is a screen display schematic diagram of the smart rearview mirror which concerns on embodiment of this application. It is a screen display schematic diagram of the vehicle-mounted infotainment according to the embodiment of this application. It is a schematic flowchart of the 5th screen switching display method which concerns on embodiment of this application. It is a flowchart of the screen switching display which concerns on embodiment of this application. It is a schematic block diagram of the screen switching display device which concerns on embodiment of this application. It is a schematic block diagram of another screen switching display device which concerns on embodiment of this application. It is a block diagram of the smart rearview mirror of the screen switching display method which concerns on embodiment of this application.

以下、図面を参照しながら本出願の例示的な実施例を説明し、理解を容易にするために本出願の実施例の様々な詳細を含んでおり、それらは単なる例示するものと見なされるべきである。従って、当業者は、本出願の範囲及び趣旨から逸脱することなく、ここで説明される実施例に対して様々な変更と修正を行うことができることを理解されたい。同様に、明確及び簡潔にするために、以下の説明では、周知の機能及び構成の説明を省略する。 Hereinafter, exemplary examples of the present application are described with reference to the drawings and include various details of the examples of the present application for ease of understanding, which should be considered merely exemplary. Is. It should be appreciated that one of ordinary skill in the art can therefore make various changes and amendments to the examples described herein without departing from the scope and intent of this application. Similarly, for clarity and brevity, the following description omits the description of well-known functions and configurations.

本出願の実施例によれば、図1は本出願の実施例に係る第1の画面切り替え表示方法の概略フローチャートであり、本実施例は、スマートバックミラーにおけるあるアプリケーションプログラムの実行中に、該アプリケーションプログラムにより提供されるコンテンツをスマートバックミラーの画面と他の車載端末の画面に切り替えて表示する場合に適用される。他の車載端末は、スマートカーにおけるすべての車載端末のうちスマートバックミラーのほかの端末であり、車載インフォテインメント、指紋リーダー、身元認識装置及び運転行為分析装置などを含むがこれらに限られず、他の車載端末は、画面を配置し、かつスマートバックミラーと通信接続できることが必要とされている。 According to an embodiment of the present application, FIG. 1 is a schematic flowchart of a first screen switching display method according to an embodiment of the present application, in which the present embodiment is described during execution of an application program in a smart rear-view mirror. It is applied when the content provided by the application program is displayed by switching between the screen of the smart rear-view mirror and the screen of another in-vehicle terminal. Other in-vehicle terminals are other terminals of the smart rear-view mirror among all in-vehicle terminals in a smart car, and include, but are not limited to, in-vehicle infotainment, fingerprint readers, identity recognition devices, driving behavior analyzers, and the like. Other in-vehicle terminals are required to have a screen arranged and to be able to communicate with a smart rear-view mirror.

該方法は、画面切り替え表示装置により実行されてもよく、該装置は、ソフトウェア及び/又はハードウェアの形態で実現されてもよく、スマートバックミラーに集積されてもよい。 The method may be performed by a screen switching display device, which device may be implemented in the form of software and / or hardware, or integrated in a smart rearview mirror.

図1に示すように、本実施例に係る画面切り替え表示方法は、以下のステップを含んでもよい。 As shown in FIG. 1, the screen switching display method according to this embodiment may include the following steps.

S110:ターゲットアプリケーションプログラムの実行中に、ターゲットアプリケーションプログラムの現在の画面での表示データを記憶する。 S110: The display data on the current screen of the target application program is stored during the execution of the target application program.

ターゲットアプリケーションプログラムは、スマートバックミラーにインストールされる任意のアプリケーションプログラムであってもよく、例えば、音声アシスタント、オーディオビデオ又はゲームなどのアプリケーションプログラムであってもよい。現在の画面は、スマートバックミラーの画面又は他の車載端末の画面、例えば車載インフォテインメントの画面であってもよい。車載インフォテインメントを例として、スマートバックミラーが車載インフォテインメントと接続関係を確立した後、ターゲットアプリケーションプログラムの表示データがスマートバックミラーの画面から車載インフォテインメントの画面に切り替え、このとき、現在の画面が車載インフォテインメントの画面であり、スマートバックミラーの画面が閉じるか又はスクリーンセーバーを表示し、スマートバックミラーが車載インフォテインメントと接続関係を遮断した後、ターゲットアプリケーションプログラムの表示データが車載インフォテインメントの画面からスマートバックミラーの画面に切り替え、このとき、現在の画面がスマートバックミラーの画面であり、車載インフォテインメントの画面が閉じるか又はスクリーンセーバーを表示する。 The target application program may be any application program installed in the smart rearview mirror, for example, an application program such as a voice assistant, audio video or game. The current screen may be the screen of a smart rear-view mirror or the screen of another vehicle-mounted terminal, for example, the screen of vehicle-mounted infotainment. Taking in-vehicle infotainment as an example, after the smart rear-view mirror establishes a connection relationship with in-vehicle infotainment, the display data of the target application program switches from the smart rear-view mirror screen to the in-vehicle infotainment screen. Is the in-vehicle infotainment screen, and after the smart rear-view mirror screen closes or displays a screen saver and the smart rear-view mirror cuts off the connection with the in-vehicle infotainment, the display data of the target application program is in-vehicle. The infotainment screen is switched to the smart rear-view mirror screen, and at this time, the current screen is the smart rear-view mirror screen, and the in-vehicle infotainment screen is closed or the screen saver is displayed.

スマートバックミラーは、ターゲットアプリケーションプログラムを実行するとき、ターゲットアプリケーションプログラムの現在の画面での表示データをリアルタイムに記憶する。例えば、ユーザがゲームアプリケーションプログラムにログインした後、現在の画面に表示されたゲームインターフェースにおけるグイン情報、画像などが表示データである。選択可能には、スマートバックミラーは、ターゲットアプリケーションプログラムの実行中の現在の画面での全部の表示データを記憶してもよく、ターゲットアプリケーションプログラムの現在の画面での最も新しい表示データのみを記憶して、履歴データをカバーしてもよい。 When the target application program is executed, the smart rear-view mirror stores the display data of the target application program on the current screen in real time. For example, after the user logs in to the game application program, the display data includes guinea information, images, and the like in the game interface displayed on the current screen. To be selectable, the smart rearview mirror may store all display data on the current screen of the target application program running, or only the latest display data on the current screen of the target application program. The historical data may be covered.

S120:画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定する。 S120: In response to monitoring the screen switching signal, the switched display state including the mirroring display state and the local display state is determined.

ユーザは、スマートバックミラーと他の車載端末との接続関係を遮断又は確立することにより、画面を切り替えることができる。選択可能には、車載インフォテインメントは、スマートバックミラーとUSB(Universal Serial Bus、汎用シリアルバス)を介して接続し、データ交換を実現することができる。これに基づいて、ユーザは、USBインターフェースを抜き差しすることで画面を切り替えることができる。 The user can switch the screen by blocking or establishing a connection relationship between the smart rear-view mirror and another in-vehicle terminal. Selectably, the in-vehicle infotainment can be connected to the smart rear-view mirror via USB (Universal Serial Bus) to realize data exchange. Based on this, the user can switch screens by plugging and unplugging the USB interface.

車載インフォテインメントを例として、スマートバックミラー及び車載インフォテインメントには、いずれもデータ伝送用のアプリケーションプログラムがインストールされ、スマートバックミラーがUSBを介して車載インフォテインメントに接続される場合、データ伝送用のアプリケーションプログラムの起動をトリガーし、データ伝送を用意する。スマートバックミラーにおけるデータ伝送用のアプリケーションプログラムは、起動した後、スマートバックミラーから車載インフォテインメントへの画面切り替え信号を送信する。対応して、スマートバックミラーと車載インフォテインメントとのUSB接続が遮断される場合、データ伝送のアプリケーションプログラムを終了するようにトリガーする。スマートバックミラーにおけるデータ伝送用のアプリケーションプログラムが終了される前、車載インフォテインメントからスマートバックミラーへの画面切り替え信号を送信する。 Taking in-vehicle infotainment as an example, when an application program for data transmission is installed in both the smart back mirror and the in-vehicle infotainment, and the smart back mirror is connected to the in-vehicle infotainment via USB, data Trigger the start of the application program for transmission and prepare the data transmission. After the application program for data transmission in the smart rear-view mirror is started, the screen switching signal from the smart rear-view mirror to the in-vehicle infotainment is transmitted. Correspondingly, when the USB connection between the smart rear-view mirror and the in-vehicle infotainment is cut off, it triggers to terminate the data transmission application program. Before the application program for data transmission in the smart rear-view mirror is terminated, the screen switching signal from the in-vehicle infotainment to the smart rear-view mirror is transmitted.

選択可能には、スマートバックミラーは、画面切り替え信号を受信した後、すなわち、画面切り替え信号を監視したことに応答して、切り替えられた表示状態及び切り替えられた画面を決定する。なお、本実施例での表示状態がスマートバックミラーの表示状態であり、スマートバックミラーから車載インフォテインメントへの画面切り替えを受信すると、すなわち、スマートバックミラーから車載インフォテインメントへの画面切り替え通知を受信すると、スマートバックミラーがミラーリング表示状態に切り替え、切り替えられた画面が車載インフォテインメントであり、車載インフォテインメントからスマートバックミラーへの画面切り替えを監視すると、すなわち、車載インフォテインメントからスマートバックミラーへの画面切り替え通知を受信すると、スマートバックミラーをローカル表示状態に切り替え、切り替えられた画面がスマートバックミラーである。 To be selectable, the smart rearview mirror determines the switched display state and the switched screen after receiving the screen switching signal, i.e., in response to monitoring the screen switching signal. The display state in this embodiment is the display state of the smart rear-view mirror, and when the screen switching from the smart rear-view mirror to the in-vehicle infotainment is received, that is, the screen switching notification from the smart rear-view mirror to the in-vehicle infotainment is received. When the message is received, the smart rear-view mirror switches to the mirroring display state, and the switched screen is the in-vehicle infotainment, and when the screen switching from the in-vehicle infotainment to the smart rear-view mirror is monitored, that is, from the in-vehicle infotainment to the smart When the screen switching notification to the rear-view mirror is received, the smart rear-view mirror is switched to the local display state, and the switched screen is the smart rear-view mirror.

なお、本実施例は、ターゲットアプリケーションプログラムの実行中に画面切り替えを監視する場合に適用され、アプリケーションプログラムが中断されることを回避するために、切り替えられた表示状態とマッチングするターゲット表示スタイルを決定し、ターゲット表示スタイルに基づいて、切り替えられた画面に表示データを表示する必要がある。これに対して、ターゲットアプリケーションプログラムが実行されていないとき、例えば、デスクトップが表示されるとき又は待機するとき、画面切り替えを監視すると、有効表示データがないため、後続のステップを実行する必要がない。 Note that this embodiment is applied when monitoring screen switching during execution of the target application program, and in order to avoid interruption of the application program, a target display style that matches the switched display state is determined. However, it is necessary to display the display data on the switched screen based on the target display style. On the other hand, when the target application program is not running, for example, when the desktop is displayed or waiting, and the screen switching is monitored, there is no valid display data, so there is no need to perform subsequent steps. ..

S130:切り替えられた表示状態とマッチングするターゲット表示スタイルを決定する。 S130: A target display style that matches the switched display state is determined.

上記説明に基づいて、切り替えられた表示状態は、切り替えられた後にどの画面に表示するかを指示し、異なる画面が異なる解像度を有し、正常に見ることに影響を与えないように、異なる画面に対して解像度に適応する表示スタイルを決定すべきである。当然ながら、相互に切り替えられる2つの画面が同じ解像度を有しても、画面の取り付け位置、表示性能などのパラメータに基づいて、表示スタイルを決定することができる。 Based on the above description, the switched display state indicates which screen to display after switching, so that different screens have different resolutions and do not affect normal viewing. The display style that adapts to the resolution should be determined. Of course, even if two screens that can be switched to each other have the same resolution, the display style can be determined based on parameters such as screen mounting position and display performance.

本実施例では、表示状態は、表示スタイルと対応関係を有する。切り替えられた表示状態がローカル表示状態であり、切り替えられた画面がスマートバックミラーの画面である場合、ローカル表示状態とマッチングするターゲット表示スタイルがスマートバックミラーの画面とマッチングするスタイルであるべきである。切り替えられた表示状態がミラーリング表示状態であり、切り替えられた画面がその他の車載端末の画面である場合、ミラーリング表示状態とマッチングするターゲット表示スタイルがその他の車載端末の画面とマッチングするスタイルであるべきだ。説明と区別の便宜上、切り替えられた表示状態とマッチングする表示スタイルがターゲット表示スタイルと呼ばれる。選択可能には、ターゲット表示スタイルは、表示データ(例えば文字又は画像)のフォーマット、ページレイアウト及び表示データに対するトリガー位置とトリガー効果などを含む。 In this embodiment, the display state has a correspondence relationship with the display style. If the switched display state is the local display state and the switched screen is the smart rearview mirror screen, the target display style that matches the local display state should be the style that matches the smart rearview mirror screen. .. When the switched display state is the mirroring display state and the switched screen is the screen of another in-vehicle terminal, the target display style that matches the mirrored display state should be the style that matches the screen of the other in-vehicle terminal. is. For convenience of description and distinction, a display style that matches the switched display state is called a target display style. To be selectable, the target display style includes the format of the display data (eg, characters or images), the page layout and the trigger position and trigger effect on the display data.

S140:ターゲット表示スタイルに基づいて、切り替えられた画面に表示データを表示する。 S140: Display data is displayed on the switched screen based on the target display style.

現在の画面が車載インフォテインメントの画面であり、切り替えられた画面がスマートバックミラーの画面である場合、スマートバックミラーは、記憶された表示データをローカル画面にターゲット表示スタイルでレンダリングして表示する。現在の画面がスマートバックミラーの画面であり、切り替えられた画面が車載インフォテインメントの画面である場合、ターゲット表示スタイルに基づいて、前記表示データを車載インフォテインメントの画面に表示する。 If the current screen is the in-vehicle infotainment screen and the switched screen is the smart rearview mirror screen, the smart rearview mirror renders and displays the stored display data on the local screen in a target display style. .. When the current screen is the screen of the smart rear-view mirror and the switched screen is the screen of the vehicle-mounted infotainment, the display data is displayed on the screen of the vehicle-mounted infotainment based on the target display style.

本出願の実施例では、ターゲットアプリケーションプログラムの実行中に前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶することにより、切り替えられた画面にデータソースを提供し、ターゲットアプリケーションプログラムの表示データが中断されないことを確保し、切り替えられた表示状態とマッチングするターゲット表示スタイルに基づいて、表示データを表示することにより、ターゲット表示スタイルが切り替えられた画面に適応し、表示データを切り替えられた画面に表示することを確保するとともに、明瞭、完全かつ美しく表示することを確保する。よって、本実施例は、画面が切り替えられた後にアプリケーションプログラムの表示データが中断され、失われるという技術的課題を解決し、画面が切り替えられた後にアプリケーションプログラムのデータ表示の一貫性を確保し、ユーザの使用体験、並びに表示の明瞭さ、完全性及び美しさを向上させる。 In the embodiment of the present application, by storing the display data on the current screen of the target application program during execution of the target application program, a data source is provided on the switched screen, and the display data of the target application program is displayed. By displaying the display data based on the target display style that matches the switched display state while ensuring that it is not interrupted, the target display style adapts to the switched screen and the display data is changed to the switched screen. Ensure display and ensure clear, complete and beautiful display. Therefore, this embodiment solves the technical problem that the display data of the application program is interrupted and lost after the screen is switched, and ensures the consistency of the data display of the application program after the screen is switched. Improve the user experience, as well as the clarity, completeness and beauty of the display.

本出願の実施例によれば、図2は本出願の実施例に係る第2の画面切り替え表示方法の概略フローチャートであり、本実施例は、上記実施例を最適化したものである。 According to the embodiment of the present application, FIG. 2 is a schematic flowchart of the second screen switching display method according to the embodiment of the present application, and this embodiment is an optimized version of the above embodiment.

選択可能には、「前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定する」という動作を「前記切り替えられた表示状態が前記表示データの現在の表示スタイルとマッチングしない場合、前記切り替えられた表示状態とマッチングするターゲット表示スタイルを作成する」に細分化し、ターゲット表示スタイルの決定方法を提供する。 To be selectable, the operation of "determining the target display style that matches the switched display state" is changed to "if the switched display state does not match the current display style of the display data, the switch is made. It is subdivided into "Create a target display style that matches the display state" and provides a method for determining the target display style.

選択可能には、「前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示する」という動作を「前記スマートバックミラーにおいて、前記ターゲット表示スタイルに基づいて前記表示データをレンダリングして、ビデオデータを生成し、前記車載インフォテインメントが前記ビデオデータを車載インフォテインメントの画面に表示するように、前記ビデオデータを前記車載インフォテインメントに送信する」に細分化し、表示スタイルに基づいてデータ表示を行う機能を有さない車載インフォテインメントに適用される。 To be selectable, the operation of "displaying the display data on the switched screen based on the target display style" is performed by "in the smart back mirror, the display data is rendered based on the target display style. , Generate video data and transmit the video data to the in-vehicle infotainment so that the in-vehicle infotainment displays the video data on the in-vehicle infotainment screen ”, based on the display style. It is applied to in-vehicle infotainment that does not have a function to display data.

図2に示すように、本実施例に係る画面切り替え表示方法は、以下のステップを含んでもよい。 As shown in FIG. 2, the screen switching display method according to this embodiment may include the following steps.

S210:ターゲットアプリケーションプログラムの実行中に、ターゲットアプリケーションプログラムの現在の画面での表示データを記憶する。 S210: The display data on the current screen of the target application program is stored during the execution of the target application program.

S220:画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定する。 S220: In response to monitoring the screen switching signal, the switched display state including the mirroring display state and the local display state is determined.

S230:切り替えられた表示状態が表示データの現在の表示スタイルとマッチングするか否かを判断し、マッチングすると、すなわち、切り替えられた表示状態が表示データの現在の表示スタイルとマッチングすると、S231に移行し、マッチングしない場合、すなわち、切り替えられた表示状態が表示データの現在の表示スタイルとマッチングしない場合、S232に移行する。 S230: Determines whether or not the switched display state matches the current display style of the display data, and if matching is performed, that is, when the switched display state matches the current display style of the display data, the process proceeds to S231. However, if there is no match, that is, if the switched display state does not match the current display style of the display data, the process proceeds to S232.

S231:現在の表示スタイルに基づいて、切り替えられた画面に前記表示データを表示する。今回の動作が終了する。 S231: The display data is displayed on the switched screen based on the current display style. This operation ends.

S232:切り替えられた表示状態とマッチングするターゲット表示スタイルを作成する。さらにS233を実行する。 S232: Create a target display style that matches the switched display state. Further, S233 is executed.

1つの実施例では、切り替えられた画面の解像度に基づいてターゲット表示スタイルを作成する。さらに、ターゲット表示スタイルを作成した後、現在の表示スタイル及び現在の画面での表示インターフェースを破棄し、ストレージスペースを解放する。現在の画面での表示インターフェースが破棄された後、その代わりにデフォルトのインターフェースを用いる。例えば、デフォルトのインターフェースがデフォルトのメニューインターフェイスであり、スマートバックミラーの画面の表示状態がローカル表示状態からミラーリング表示状態に切り替え、ミラーリング表示状態が現在の表示スタイルとマッチングしない場合、現在の表示インターフェースを破棄し、デフォルトのメニューインターフェイスを表示することで、スマートバックミラーの画面が切り替えられた後、表示データをさらに表示しないようにし、表示データの漏洩を回避し、ユーザのプライバシーを保護し、ユーザが切り替えられた画面を使用するとき、他の人が現在の画面での表示データを操作することを防止し、セキュリティを高める。 In one embodiment, the target display style is created based on the switched screen resolution. In addition, after creating the target display style, the current display style and the display interface on the current screen are destroyed, freeing up storage space. After the display interface on the current screen is destroyed, the default interface is used instead. For example, if the default interface is the default menu interface, the smart rearview mirror screen display state switches from the local display state to the mirrored display state, and the mirrored display state does not match the current display style, then the current display interface is used. By discarding and displaying the default menu interface, after the screen of the smart rearview mirror is switched, the display data will not be displayed further, the display data leakage will be avoided, the user's privacy will be protected, and the user will be able to use it. When using the switched screen, prevent others from manipulating the data displayed on the current screen and increase security.

1つの応用シーンでは、ローカル表示状態が表示スタイルAとマッチングすると仮定すれば、ミラーリング表示状態が表示スタイルBとマッチングする。ある場合、切り替えられた表示状態がミラーリング表示状態であり、現在の表示スタイルが表示スタイルAであるため、マッチングはできず、さらにミラーリング表示状態とマッチングする表示スタイルBを作成し、表示スタイルA及びスマートバックミラーの表示インターフェースを破棄し、デフォルトのメニューインターフェイスを表示する。他の場合、切り替えられた表示状態がミラーリング表示状態であり、現在の表示スタイルが表示スタイルBであり、切り替えられた表示状態が現在の表示スタイルとマッチングし、表示スタイルBをターゲット表示スタイルとし、スマートバックミラーの表示インターフェースを破棄し、デフォルトのメニューインターフェイスを表示する。もう1つの場合、切り替えられた表示状態がローカル表示状態であり、現在の表示スタイルが表示スタイルBであるため、マッチングはできず、さらにローカル表示状態とマッチングする表示スタイルAを作成し、表示スタイルB及び車載インフォテインメントの表示インターフェースを破棄し、デフォルトのメニューインターフェイスを表示する。他の場合、切り替えられた表示状態がローカル表示状態であり、現在の表示スタイルが表示スタイルAであり、切り替えられた表示状態が現在の表示スタイルとマッチングし、表示スタイルAをターゲット表示スタイルとし、車載インフォテインメントの表示インターフェースを破棄し、デフォルトのメニューインターフェイスを表示する。 In one application scene, assuming that the local display state matches the display style A, the mirrored display state matches the display style B. In some cases, since the switched display state is the mirrored display state and the current display style is the display style A, matching is not possible, and a display style B that matches the mirrored display state is created, and the display style A and the display style A and the display style A are created. Destroy the smart rearview mirror display interface and display the default menu interface. In other cases, the switched display state is the mirrored display state, the current display style is the display style B, the switched display state matches the current display style, and the display style B is the target display style. Destroy the smart rearview mirror display interface and display the default menu interface. In the other case, since the switched display state is the local display state and the current display style is the display style B, matching is not possible, and a display style A that matches the local display state is created to create a display style. Destroy the display interface of B and in-vehicle infotainment and display the default menu interface. In other cases, the switched display state is the local display state, the current display style is the display style A, the switched display state matches the current display style, and the display style A is the target display style. Discard the in-vehicle infotainment display interface and display the default menu interface.

S233:前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示する。 S233: The display data is displayed on the switched screen based on the target display style.

ある応用シーンでは、他の車載端末が車載インフォテインメントであり、現在の画面がスマートバックミラーの画面であり、前記切り替えられた画面が車載インフォテインメントの画面である。これに基づいて、前記スマートバックミラーにおいて、前記ターゲット表示スタイルに基づいて前記表示データをレンダリングして、ビデオデータを生成し、前記車載インフォテインメントが前記ビデオデータを車載インフォテインメント画面に表示するように、前記ビデオデータを前記車載インフォテインメントに送信する。 In one application scene, the other in-vehicle terminal is the in-vehicle infotainment, the current screen is the screen of the smart rear-view mirror, and the switched screen is the in-vehicle infotainment screen. Based on this, the smart rear-view mirror renders the display data based on the target display style to generate video data, and the vehicle-mounted infotainment displays the video data on the vehicle-mounted infotainment screen. As described above, the video data is transmitted to the in-vehicle infotainment.

具体的には、スマートバックミラーは、その補助スクリーンにおいて前記ターゲット表示スタイルに基づいて前記表示データをレンダリングしてビデオデータを生成し、スマートバックミラーの補助スクリーンがユーザにとって見えないものであり、ビデオデータを複数種の車載端末に投影するために、補助スクリーンの解像度を全部の車載端末の解像度よりも高くする必要がある。該ビデオデータは、それぞれ表示データの現在の画面での表示ページに対応する少なくとも1つのビデオフレームを含む。例えば、表示データは、現在のインターフェースに1つの表示ページだけがある場合、前記ターゲット表示スタイルに基づいて前記表示データをレンダリングして1つのビデオフレームを生成する。続いて、ビデオデータを符号化した後に車載インフォテインメントに送信する。車載インフォテインメントは符号化されたビデオデータを受信した後、復号してビデオデータを得て、得られたビデオデータが車載インフォテインメント画面とマッチングするスタイルであり、車載インフォテインメントは、表示スタイルを調整することなく、直接ビデオデータを車載インフォテインメント画面に表示することができる。 Specifically, the smart rearview mirror renders the display data on its auxiliary screen based on the target display style to generate video data, and the auxiliary screen of the smart rearview mirror is invisible to the user, and the video. In order to project the data to a plurality of types of in-vehicle terminals, it is necessary to make the resolution of the auxiliary screen higher than the resolution of all the in-vehicle terminals. Each of the video data includes at least one video frame corresponding to the displayed page of the displayed data on the current screen. For example, if the current interface has only one display page, the display data renders the display data based on the target display style to generate one video frame. Subsequently, the video data is encoded and then transmitted to the in-vehicle infotainment. In-vehicle infotainment is a style in which after receiving the encoded video data, it is decoded to obtain the video data, and the obtained video data is matched with the in-vehicle infotainment screen, and the in-vehicle infotainment is displayed. Video data can be displayed directly on the in-vehicle infotainment screen without adjusting the style.

本実施例では、スマートバックミラーが表示データをレンダリングして、ビデオデータを生成することにより、車載インフォテインメントが直接表示することができ、車載インフォテインメントの動作過程を減少させ、画面切り替え表示の効率を向上させるとともに、表示スタイルに基づいてデータ表示を行う機能を有しない車載インフォテインメントに適用される。 In this embodiment, the smart rear-view mirror renders the display data to generate video data, so that the in-vehicle infotainment can be displayed directly, the operation process of the in-vehicle infotainment is reduced, and the screen switching display is performed. It is applied to in-vehicle infotainment that does not have the function of displaying data based on the display style.

本実施例では、ターゲットアプリケーションプログラムの実行中に画面を切り替え、切り替えられた表示状態が表示データの現在のインターフェーススタイルとマッチングしない場合、それ以上古い表示スタイルを用いず、切り替えられた表示状態とマッチングするターゲット表示スタイルを作成し、作成することで、表示スタイルと表示状態のマッチング性を確保し、表示データを切り替えられた画面に明瞭かつ完全に表示することができ、ユーザーエクスペリエンスを向上させる。 In this embodiment, when the screen is switched during the execution of the target application program and the switched display state does not match the current interface style of the display data, the older display style is not used and the switched display state is matched. By creating and creating a target display style, the display style and display state can be matched, and the display data can be displayed clearly and completely on the switched screen, improving the user experience.

本出願の実施例によれば、図3は本出願の実施例に係る第3の画面切り替え表示方法の概略フローチャートであり、本実施例は、上記実施例をさらに最適化したものであり、具体的には動的プロキシを用いて表示状態の決定、ターゲット表示スタイルの決定及び表示動作を実行することができる。 According to the embodiment of the present application, FIG. 3 is a schematic flowchart of a third screen switching display method according to the embodiment of the present application, and the present embodiment is a further optimization of the above embodiment. The dynamic proxy can be used to determine the display state, determine the target display style, and execute the display operation.

図3に示すように、本実施例に係る画面切り替え表示方法は、以下のステップを含んでもよい。 As shown in FIG. 3, the screen switching display method according to this embodiment may include the following steps.

S310:ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶する。 S310: The display data on the current screen of the target application program is stored during the execution of the target application program.

S320:画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を動的プロキシによって決定する。 S320: In response to monitoring the screen switching signal, the switched display state including the mirroring display state and the local display state is determined by the dynamic proxy.

S330:前記切り替えられた表示状態とマッチングするターゲット表示スタイルを前記動的プロキシによって決定する。 S330: The dynamic proxy determines a target display style that matches the switched display state.

S340:前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを前記動的プロキシによって表示する。 S340: The display data is displayed by the dynamic proxy on the switched screen based on the target display style.

本実施例では、画面切り替え信号を監視したことに応答するとき、リフレクションメカニズムを用いて動的プロキシを動的に作成する。該動的プロキシは、スマートバックミラーにおける現在の表示オブジェクトをプロキシするために用いられる。該表示オブジェクトは、表示データをデフォルトの表示スタイル(スマートバックミラーの表示スタイル又は他の車載端末の表示スタイル)にしたがって、対応する画面に表示するために用いられる。画面が切り替えられた後、引き続き古い表示スタイルでデータを表示するか、又は、古い表示スタイルを用い、戻って、デフォルトのインターフェースを表示する。本実施例では、ターゲットアプリケーションプログラムの実行中に画面切り替えを監視するとき、表示オブジェクトの代わりに、動的プロキシによってS320〜S340の動作を実行する。対応して、動的プロキシが代理する動作は、S320〜S340の動作である。 In this embodiment, a dynamic proxy is dynamically created by using a reflection mechanism when responding to monitoring the screen switching signal. The dynamic proxy is used to proxy the current display object in the smart rearview mirror. The display object is used to display display data on a corresponding screen according to a default display style (smart rearview mirror display style or other in-vehicle terminal display style). After the screen is switched, continue to display the data in the old display style, or use the old display style and go back to display the default interface. In this embodiment, when the screen switching is monitored during the execution of the target application program, the operations of S320 to S340 are executed by the dynamic proxy instead of the display object. Correspondingly, the operations represented by the dynamic proxy are the operations of S320 to S340.

なお、本実施例は、表示中断の可能性があるターゲットアプリケーションプログラムのみに対して、動的プロキシを作成し、動的プロキシによって前述動作を実行し、現在の表示オブジェクトに影響を与えることなく、スマートバックミラーにインストールされた、表示中断の可能性がない他のアプリケーションプログラムに対して、動的プロキシを作成する必要がなく、引き続き、現在の表示オブジェクトを介して正常に表示することができる。例えば、マップアプリケーションプログラムの表示データがある都市のマップ画像であり、画面が切り替えられた後、マップ画像に対してスタイル調整を行うことなく、切り替えられた画面に適応するように、切り替えられた画面が該都市のマップを自動的に等比率で拡大又は縮小する。従って、本実施例は、表示オブジェクトの代わりに動的プロキシによって前述動作を実行し、表示オブジェクトの動作位置を改定することなく、コードが容易に実現される。また、その他のアプリケーションプログラムの正常表示に影響を与えることはない。 In this embodiment, a dynamic proxy is created only for the target application program that may interrupt the display, the above operation is executed by the dynamic proxy, and the current display object is not affected. There is no need to create a dynamic proxy for other non-disruptive application programs installed in the smart rearview mirror, and they can continue to display normally through the current display object. For example, a map image of a city with display data of a map application program, and after the screen is switched, the screen is switched so as to adapt to the switched screen without adjusting the style of the map image. Automatically scales the map of the city at equal proportions. Therefore, in this embodiment, the above-mentioned operation is executed by a dynamic proxy instead of the display object, and the code is easily realized without revising the operation position of the display object. In addition, it does not affect the normal display of other application programs.

本出願の実施例によれば、図4aは本出願の実施例に係る第4の画面切り替え表示方法の概略フローチャートであり、本実施例は上記実施例をさらに最適化したものである。 According to the embodiment of the present application, FIG. 4a is a schematic flowchart of the fourth screen switching display method according to the embodiment of the present application, and this embodiment is a further optimization of the above embodiment.

選択可能には、「前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定する」という動作を「予め記憶された表示スタイルから、切り替えられた表示状態とマッチングする表示スタイル候補を決定し、前記表示スタイル候補が2つ以上である場合、前記切り替えられた画面の解像度を取得し、前記表示スタイル候補から、前記切り替えられた画面の解像度に適応するターゲット表示スタイルをスクリーニングする」に細分化することで、ターゲット表示スタイルの決定効率を向上させ、表示効率をさらに向上させる。 To be selectable, the operation of "determining the target display style that matches the switched display state" is performed by "determining a display style candidate that matches the switched display state from the pre-stored display style, and the above. When there are two or more display style candidates, the resolution of the switched screen is acquired, and the target display style that matches the resolution of the switched screen is screened from the display style candidates. Therefore, the efficiency of determining the target display style is improved, and the display efficiency is further improved.

選択可能には、「ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶する」という動作を「音声アプリケーションプログラムの実行中に、音声アプリケーションプログラムの現在の画面での対話テキストを記憶する」に細分化し、対応して、「前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定する」という動作を「前記切り替えられた表示状態とマッチングするテキストフォーマット、及びテキストのトリガー位置とトリガー効果を決定する」に細分化し、ターゲットアプリケーションプログラムを音声アプリケーションプログラムに限定し、対話テキストの表示スタイルを細分化する。 To be selectable, the operation of "remembering the display data on the current screen of the target application program while the target application program is being executed" is changed to "during the execution of the voice application program, on the current screen of the voice application program." The operation of "determining the target display style that matches the switched display state" is subdivided into "memorize the dialogue text of", and the operation "the text format that matches the switched display state and the text" The target application program is limited to the voice application program, and the display style of the dialogue text is subdivided.

図4aに示すように、本実施例に係る画面切り替え表示方法は、以下のステップを含んでもよい。 As shown in FIG. 4a, the screen switching display method according to the present embodiment may include the following steps.

S410:音声アプリケーションプログラムの実行中に、音声アプリケーションプログラムの現在の画面での対話テキストを記憶する。 S410: During the execution of the voice application program, the dialogue text on the current screen of the voice application program is stored.

音声アプリケーションプログラムの実行中に、ユーザが音声アプリケーションプログラムに対して音声を出し、音声アプリケーションプログラムがユーザの音声を認識した後、応答コンテンツを生成する。ユーザの音声及び/又は応答コンテンツに対応するテキストが対話テキストと呼ばれ、現在の画面に表示されることから、対話テキストが現在の画面での表示データであることが分かる。 During execution of the voice application program, the user makes a voice to the voice application program, the voice application program recognizes the user's voice, and then the response content is generated. Since the text corresponding to the user's voice and / or the response content is called the dialogue text and is displayed on the current screen, it can be understood that the dialogue text is the display data on the current screen.

選択可能には、音声アプリケーションプログラムの実行中に、ユーザと音声アプリケーションプログラムとの間に最も新しく生成される1組の対話テキストをリアルタイムに記憶する。具体的には、1つのノードを用いて1組の対話テキストを記憶し、古いノードの代わりに新しいノードを用い、それにより、最も新しいノードを残し、すなわち、最も新しい1組の対話テキストを記憶することを確保する。 Selectably, during the execution of the voice application program, the most recently generated set of dialogue text between the user and the voice application program is stored in real time. Specifically, one node is used to store a set of dialogue text, and a new node is used instead of the old node, thereby leaving the newest node, that is, storing the newest set of dialogue text. Ensure that you do.

図4bは本出願の実施例に係るスマートバックミラーの画面表示概略図である。1組の対話テキストを含む音声アプリケーションプログラムの対話インターフェースが該画面に表示される。具体的には、ユーザが音声アプリケーションプログラムに対して「張三の電話番号を表示してください」という音声を出し、該音声をテキスト形式で現在の画面に表示し、張三の電話番号を表示する。また、ユーザが発声した音声に対応するテキスト及び応答コンテンツに対応するテキスト「張三の電話番号」をノードに記憶する。この後、ユーザが「李四の電話番号を表示してください」というその他の音声を出すと、この前に表示されているデータのほか、続いて後続の対話テキスト「李四の電話番号を表示してください」及び李四の電話番号を表示することができる。しかし、記憶するとき、後続の対話テキストで履歴対話テキストをカバーする必要があり、すなわち、「李四の電話番号を表示してください」及び李四の電話番号のみを記憶し、少ない表示データの記憶量を用い、それにより、画面が切り替えられたデータ表示量を減少させ、画面の切り替え効率を向上させる。 FIG. 4b is a schematic screen display of a smart rear-view mirror according to an embodiment of the present application. The dialogue interface of the voice application program containing a set of dialogue texts is displayed on the screen. Specifically, the user makes a voice "Please display Zhang San's phone number" to the voice application program, displays the voice in text format on the current screen, and displays Zhang San's phone number. do. In addition, the text corresponding to the voice uttered by the user and the text "Zhangsan's telephone number" corresponding to the response content are stored in the node. After this, when the user makes another voice saying "Please display Li 4's phone number", in addition to the data displayed before this, the subsequent dialogue text "Display Li 4's phone number" is displayed. Please, "and Lee Shi's phone number can be displayed. However, when memorizing, it is necessary to cover the historical dialogue text with the subsequent dialogue text, that is, "Please display Li 4's phone number" and remember only Li 4's phone number, with less display data. The amount of storage is used, thereby reducing the amount of data displayed on which the screen has been switched and improving the efficiency of switching screens.

S420:画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定する。 S420: In response to monitoring the screen switching signal, the switched display state including the mirroring display state and the local display state is determined.

S430:前記切り替えられた表示状態とマッチングするテキストフォーマット、及びテキストのトリガー位置とトリガー効果を決定する。 S430: The text format matching the switched display state, the trigger position of the text, and the trigger effect are determined.

表示データは、対話テキストであり、その表示スタイルがテキストフォーマット及びテキストのトリガー位置とトリガー効果を含む。テキストフォーマットは、テキストのフォント、単語間隔、行間隔などであってもよく、テキストのトリガー位置は、テキストへの選択、ジャンプ及び改定などの動作のトリガー位置であってもよく、トリガー効果は、テキストに対して選択、ジャンプ及び改定などの動作を行うときの視覚効果、例えばハイライト、フォント拡大、フォーカス状態などである。 The display data is interactive text, the display style of which includes the text format and the trigger position and trigger effect of the text. The text format may be the font of the text, word spacing, line spacing, etc., the trigger position of the text may be the trigger position of actions such as selection, jump and revision to the text, and the trigger effect is: Visual effects such as selection, jumping, and revision of text, such as highlighting, font enlargement, and focus state.

選択可能には、スマートバックミラーには、切り替えられた表示状態とマッチングする少なくとも1つの表示スタイル(すなわち、テキストフォーマット及びテキストのトリガー位置)を予め記憶することができる。各表示スタイルが異なる解像度とそれぞれ対応する。切り替えられた表示状態を決定した後、予め記憶された表示スタイルから、切り替えられた表示状態とマッチングする表示スタイル候補を決定することができる。前記表示スタイル候補が2つ以上である場合、前記切り替えられた画面の解像度を取得し、前記表示スタイル候補から、前記切り替えられた画面の解像度に適応する表示スタイルを、ターゲット表示スタイルとしてスクリーニングすることができる。表示スタイル候補が1つだけである場合、表示スタイル候補を直接ターゲット表示スタイルとする。 Selectably, the smart rearview mirror can pre-store at least one display style (ie, the text format and the trigger position of the text) that matches the switched display state. Each display style corresponds to a different resolution. After determining the switched display state, it is possible to determine a display style candidate that matches the switched display state from the display styles stored in advance. When there are two or more display style candidates, the resolution of the switched screen is acquired, and from the display style candidates, a display style adapted to the resolution of the switched screen is screened as a target display style. Can be done. When there is only one display style candidate, the display style candidate is directly set as the target display style.

例示的には、スマートバックミラーは、解像度A×B、2A×B及びA×2Bのそれぞれに適応する表示スタイル1、表示スタイル2及び表示スタイル3を予め記憶し、表示スタイルがテキストフォーマット及びテキストのトリガー位置を含む。表示スタイルがローカル表示状態とマッチングし、表示スタイル2及び表示スタイル3がミラーリング表示状態とマッチングする。スマートバックミラーの解像度がA×Bであり、車載インフォテインメント1の解像度が2A×Bであり、車載インフォテインメント2の解像度がA×2Bである。切り替えられた表示状態がミラーリング表示状態であるとき、表示スタイル候補が表示スタイル2及び表示スタイル3を含むと決定し、さらに、切り替えられた画面が車載インフォテインメント1の画面である場合、表示スタイル2をターゲット表示スタイルとし、切り替えられた画面が車載インフォテインメント2の画面である場合、表示スタイル3をターゲット表示スタイルとする。 Illustratively, the smart rearview mirror stores in advance display style 1, display style 2 and display style 3 corresponding to the resolutions A × B, 2A × B and A × 2B, respectively, and the display style is a text format and text. Includes the trigger position of. The display style matches the local display state, and the display style 2 and the display style 3 match the mirrored display state. The resolution of the smart rear-view mirror is AxB, the resolution of the vehicle-mounted infotainment 1 is 2AxB, and the resolution of the vehicle-mounted infotainment 2 is Ax2B. When the switched display state is the mirroring display state, it is determined that the display style candidates include the display style 2 and the display style 3, and when the switched screen is the screen of the in-vehicle infotainment 1, the display style 2 is the target display style, and when the switched screen is the screen of the in-vehicle infotainment 2, the display style 3 is the target display style.

S440:テキストフォーマット、及びテキストのトリガー位置とトリガー効果に基づいて、切り替えられた画面に対話テキストを表示する。 S440: Display the dialogue text on the switched screen based on the text format and the trigger position and trigger effect of the text.

図4bにおいて、スマートバックミラーの画面解像度がA×Bであり、対話テキストの現在の表示スタイルは、フォントサイズ4号、単語間隔0.3ポイント、単一行間隔、テキストへの選択、ジャンプ及び改定などの動作のトリガー位置、並びに、フォントサイズ、単語間隔及び行間隔とマッチングするトリガー効果を含む。図4bは、電話番号に対して選択動作を行うときのハイライトのトリガー効果を示す。 In FIG. 4b, the screen resolution of the smart rearview mirror is AxB, and the current display style of the dialogue text is font size 4, word spacing 0.3 points, single line spacing, text selection, jumping and revision. Includes trigger positions for actions such as, as well as trigger effects that match font size, word spacing, and line spacing. FIG. 4b shows a highlight trigger effect when performing a selection operation on a telephone number.

図4cは本出願の実施例に係る車載インフォテインメントの画面表示概略図である。スマートバックミラーの画面解像度が2A×Bであり、対話テキストのターゲット表示スタイルは、フォントサイズ15pt、単語間隔0.4ポイント、1・5行の行間隔を含み、トリガー位置が対話テキストの表示位置の変化とともに変化し、トリガー効果がターゲット表示スタイルのうちのフォントサイズ、単語間隔及び行間隔とマッチングすべきである。図4cは、テキストに対して選択動作を行うときのハイライトのトリガー効果であり、ハイライトの範囲が図4bよりも広くかつ長い。 FIG. 4c is a schematic screen display of the in-vehicle infotainment according to the embodiment of the present application. The screen resolution of the smart rearview mirror is 2A x B, the target display style of the dialogue text includes a font size of 15pt, a word spacing of 0.4 points, and a line spacing of 1.5 lines, and the trigger position is the dialogue text display position. The trigger effect should match the font size, word spacing, and line spacing of the target display style. FIG. 4c is a highlight trigger effect when performing a selection operation on the text, and the highlight range is wider and longer than that of FIG. 4b.

本実施例では、表示スタイルを予め記憶し、切り替えられた表示状態とマッチングした、切り替えられた画面に適応するターゲット表示スタイルを予め記憶した表示スタイルからスクリーニングし、それによって、表示スタイルを作成又は破棄する必要がなく、ターゲット表示スタイルの決定効率を向上させ、表示効率をさらに向上させ、画面切り替え過程での表示流暢さを向上させる。 In this embodiment, the display style is stored in advance, and the target display style that matches the switched display state and adapts to the switched screen is screened from the stored display style in advance, thereby creating or discarding the display style. It is not necessary to improve the efficiency of determining the target display style, further improve the display efficiency, and improve the display fluency in the screen switching process.

本実施例は、音声アプリケーションプログラムの実行中に、画面を切り替える場合に適用され、現在の画面での対話テキストを記憶することで、切り替えられた画面にデータソースを提供し、ターゲットアプリケーションプログラムの表示データが中断されないことを確保し、切り替えられた表示状態とマッチングするテキストフォーマット、及びテキストのトリガー位置とトリガー効果に基づいて対話データを表示することで、画面が切り替えられた後に音声アプリケーションプログラムの対話テキストが中断され、失われるという技術的課題を解決し、画面が切り替えられた後に音声アプリケーションプログラムの対話テキストの一貫性を確保し、ユーザの使用体験、並びに表示の明瞭さ、完全性及び美しさを向上させる。 This embodiment is applied when switching screens during execution of a voice application program. By storing the dialogue text on the current screen, a data source is provided on the switched screens and the target application program is displayed. The dialogue of the voice application program after the screen is switched by ensuring that the data is uninterrupted and displaying the dialogue data based on the text format that matches the switched display state and the trigger position and trigger effect of the text. It solves the technical problem of text being interrupted and lost, ensuring the consistency of the interactive text of the voice application program after the screen is switched, the user experience, and the clarity, completeness and beauty of the display. To improve.

本出願の実施例によれば、図5は本出願の実施例に係る第5の画面切り替え表示方法の概略フローチャートであり、本実施例は、画面切り替えのシーンで、アプリケーションプログラムの表示すべきデータを表示する場合に用いられる。1つの実施例では、アプリケーションプログラムの実行中に画面切り替えが監視されなかったか、又は、画面切り替えの前後に該アプリケーションプログラムが実行されなかった場合、画面が切り替えられた後、該アプリケーションプログラムに対して、切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するのではなく、引き続き、切り替えられた画面にマッチングしない表示スタイルで表示し、表示エラーを引き起こしてしまう。該課題を解決するために、本実施例は、画面切り替え表示方法を提供し、ターゲットアプリケーションプログラムの表示すべきデータをトリガー条件とすることで、ターゲット表示スタイルの決定動作及び表示動作をトリガーする。なお、本実施例は、この前に画面が切り替えられなかった場合、又は、画面が切り替えられた後に、マッチングするターゲット表示スタイルを決定した場合にも適用され、この場合、本実施例に係る方法を実行すると、表示スタイル及び最終的な表示インターフェースを変更することはない。つまり、本実施例に係る方法の実行本体は、表示すべきデータを取得する前の画面切り替え状況に注目する必要がない。 According to the embodiment of the present application, FIG. 5 is a schematic flowchart of the fifth screen switching display method according to the embodiment of the present application. In the present embodiment, the data to be displayed by the application program in the screen switching scene. Is used to display. In one embodiment, if screen switching is not monitored during execution of the application program, or if the application program is not executed before or after the screen switching, then after the screen is switched, the application program is , Instead of determining the target display style that matches the switched display state, it continues to display in a display style that does not match the switched screen, causing a display error. In order to solve the problem, the present embodiment provides a screen switching display method, and triggers a target display style determination operation and a display operation by using data to be displayed by the target application program as a trigger condition. It should be noted that this embodiment is also applied when the screen is not switched before this, or when the target display style to be matched is determined after the screen is switched. In this case, the method according to this embodiment is applied. Does not change the display style or final display interface. That is, the execution body of the method according to this embodiment does not need to pay attention to the screen switching status before acquiring the data to be displayed.

該方法は、画面切り替え表示装置により実行されてもよく、該装置は、ソフトウェア及び/又はハードウェアの形態で実現されてもよく、具体的な計算能力のスマートバックミラーに集積されてもよい。図5に示すように、本実施例に係る画面切り替え表示方法は、以下のステップを含んでもよい。 The method may be performed by a screen switching display device, which device may be implemented in the form of software and / or hardware, or integrated in a smart rearview mirror of specific computing power. As shown in FIG. 5, the screen switching display method according to the present embodiment may include the following steps.

S510:ターゲットアプリケーションプログラムの表示すべきデータを取得する。 S510: Acquire the data to be displayed of the target application program.

ターゲットアプリケーションプログラムについての説明は、詳しく上記実施例を参照でき、ここで繰り返し説明しない。 The description of the target application program can be referred to in detail in the above embodiment and will not be repeated here.

ターゲットアプリケーションプログラムの実行中に、スマートバックミラーは、ターゲットアプリケーションプログラムの表示すべきデータ、すなわち、生成されたか表示されていないデータをリアルタイムに取得することができる。表示すべきデータがスマートバックミラー画面などの現在の画面、又は、車載インフォテインメントの画面などの他の車載端末の画面に表示される。 During execution of the target application program, the smart rearview mirror can acquire the data to be displayed, that is, the generated or undisplayed data of the target application program in real time. The data to be displayed is displayed on the current screen such as the smart rear-view mirror screen or the screen of another in-vehicle terminal such as the in-vehicle infotainment screen.

S520:ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得する。 S520: Acquires the current display state including the mirroring display state and the local display state.

ターゲットアプリケーションプログラムの表示すべきデータを得た後、現在の画面の現在の表示状態を決定し、現在の画面がローカル表示状態である場合、表示すべきデータが現在の画面に表示されることは示され、現在の画面がミラーリング表示状態である場合、表示すべきデータが他の車載端末の画面に表示されることは示される。 After obtaining the data to be displayed by the target application program, determine the current display state of the current screen, and if the current screen is in the local display state, the data to be displayed may be displayed on the current screen. It is shown that when the current screen is in the mirroring display state, the data to be displayed is displayed on the screen of another in-vehicle terminal.

S530:現在の表示状態とマッチングするターゲット表示スタイルを決定する。 S530: Determine the target display style that matches the current display state.

S540:ターゲット表示スタイルに基づいて、現在の表示状態に対応する画面に表示すべきデータを表示する。 S540: Based on the target display style, the data to be displayed is displayed on the screen corresponding to the current display state.

S530及びS540での「ターゲット表示スタイルに基づいて、表示すべきデータを表示する」についての詳細な説明は、上記各実施例の記載を参照でき、ここで繰り返し説明しない。 A detailed description of "displaying data to be displayed based on the target display style" in S530 and S540 can be referred to in the description of each of the above embodiments, and will not be repeated here.

本実施例では、ターゲットアプリケーションプログラムの実行中に、表示すべきデータ及び現在の表示状態を取得し、表示すべきデータを現在の表示状態とマッチングするターゲット表示スタイルで表示することで、画面が切り替えられた後、ターゲット表示スタイルをタイムリーに決定できず、続いてマッチングしない表示スタイルを用いるため、表示エラーを引き起こす状況を回避し、ユーザの使用体験、並びに表示の明瞭さ、完全性及び美しさを向上させ、ユーザーエクスペリエンスを向上させる。 In this embodiment, the screen is switched by acquiring the data to be displayed and the current display state during execution of the target application program and displaying the data to be displayed in the target display style that matches the current display state. After being done, the target display style cannot be determined in a timely manner, followed by the use of non-matching display styles, avoiding situations that cause display errors, the user experience, and the clarity, completeness and beauty of the display. And improve the user experience.

選択可能には、図6は本出願の実施例に係る画面切り替え表示のフローチャートであり、S530及びS540について詳細に説明する。 To be selectable, FIG. 6 is a flowchart of a screen switching display according to an embodiment of the present application, and S530 and S540 will be described in detail.

S601:開始。
S602:スマートバックミラーは、現在の表示状態がミラーリング表示状態であるか否かを判断する。ミラーリング表示状態である場合、S603を実行し、ミラーリング表示状態ではない場合、S604を実行する。
S601: Start.
S602: The smart rear-view mirror determines whether or not the current display state is the mirroring display state. If it is in the mirroring display state, S603 is executed, and if it is not in the mirroring display state, S604 is executed.

S603:現在の表示スタイルがミラーリング表示状態とマッチングするか否かを判断し、ミラーリング表示状態である場合、S605を実行し、ミラーリング表示状態ではない場合、S606を実行する。 S603: It is determined whether or not the current display style matches the mirroring display state, and if it is in the mirroring display state, S605 is executed, and if it is not in the mirroring display state, S606 is executed.

S604:現在の表示スタイルがローカル表示状態とマッチングするか否かを判断し、マッチングすると、S607を実行し、マッチングしない場合、S608を実行する。 S604: It is determined whether or not the current display style matches the local display state, and if it matches, S607 is executed, and if it does not match, S608 is executed.

S605:現在の表示スタイルに基づいて、車載インフォテインメントの画面に表示すべきデータを表示する。今回の動作を終了する。 S605: Data to be displayed on the in-vehicle infotainment screen is displayed based on the current display style. This operation ends.

S606:ミラーリング表示状態とマッチングするターゲット表示スタイルを作成し、現在の表示スタイルを破棄する。S609を実行する。 S606: Creates a target display style that matches the mirrored display state, and discards the current display style. Execute S609.

S607:現在の表示スタイルに基づいて、スマートバックミラーの画面に表示すべきデータを表示する。今回の動作を終了する。 S607: Displays data to be displayed on the screen of the smart rearview mirror based on the current display style. This operation ends.

S608:ローカル表示状態とマッチングするターゲット表示スタイルを作成し、現在の表示スタイルを破棄する。S610を実行する。 S608: Creates a target display style that matches the local display state, and discards the current display style. Execute S610.

S609:ターゲット表示スタイルに基づいて、車載インフォテインメントの画面に表示すべきデータを表示する。今回の動作を終了する。 S609: Data to be displayed on the in-vehicle infotainment screen is displayed based on the target display style. This operation ends.

S610:ターゲット表示スタイルに基づいて、スマートバックミラーの画面に表示すべきデータを表示する。今回の動作を終了する。 S610: Display the data to be displayed on the screen of the smart rearview mirror based on the target display style. This operation ends.

以下、ターゲットアプリケーションプログラムが音声アプリケーションプログラムであり、他の車載端末が車載インフォテインメントであることを例として、本実施例に係る方法について詳細に説明する。 Hereinafter, the method according to this embodiment will be described in detail by taking as an example that the target application program is a voice application program and another in-vehicle terminal is an in-vehicle infotainment.

音声アプリケーションプログラムは、起動後、音声アプリケーションプログラムの表示すべきデータを取得し、音声アプリケーションプログラムの起動後の最初のバッチの表示すべきデータを現在の表示状態とマッチングするターゲット表示スタイルで表示できることを確保し、それにより、後続の表示すべきデータもターゲット表示スタイルで表示できることを確保し、ユーザの使用体験、並びに音声インターフェースの明瞭さ、完全性及び美しさを向上させる。当然ながら、ターゲットアプリケーションプログラムの実行中に表示すべきデータを取得してもよい。 After the voice application program is started, the data to be displayed by the voice application program can be acquired, and the data to be displayed in the first batch after the voice application program is started can be displayed in a target display style that matches the current display state. Ensuring, thereby ensuring that subsequent data to be displayed can also be displayed in the target display style, improving the user experience and the clarity, completeness and beauty of the voice interface. Of course, you may get the data to be displayed during the execution of the target application program.

1つの実施例では、ある場合、スマートバックミラーがローカル表示状態であるとき、音声アプリケーションプログラムが実行されかつ終了され、それによって現在の表示スタイルがローカル表示状態とマッチングする。次に、スマートバックミラーは、ミラーリング表示状態に切り替えた後、表示スタイルが変わらず、音声アプリケーションプログラムを起動して表示すべきデータを取得し、ミラーリング表示状態とマッチングするターゲット表示スタイルを決定し、前記ターゲット表示スタイルに基づいて、車載インフォテインメントの画面に前記表示すべきデータを表示する。 In one embodiment, in some cases, when the smart rearview mirror is in the local display state, the audio application program is executed and terminated so that the current display style matches the local display state. Next, after switching to the mirrored display state, the smart rearview mirror does not change the display style, starts the audio application program, acquires the data to be displayed, determines the target display style that matches the mirrored display state, and determines the target display style. Based on the target display style, the data to be displayed is displayed on the in-vehicle infotainment screen.

他の場合、スマートバックミラーがミラーリング表示状態であるとき、音声アプリケーションプログラムが実行されかつ終了され、それによって現在の表示スタイルがミラーリング表示状態とマッチングする。次に、スマートバックミラーは、ローカル表示状態に切り替えた後、表示スタイルが変わらず、音声アプリケーションプログラムを起動して表示すべきデータを取得し、ローカル表示状態とマッチングするターゲット表示スタイルを決定し、前記ターゲット表示スタイルに基づいて、スマートバックミラーの画面に前記表示すべきデータを表示する。 In other cases, when the smart rearview mirror is in the mirrored display state, the audio application program is executed and terminated so that the current display style matches the mirrored display state. Next, after switching to the local display state, the smart rearview mirror does not change the display style, starts the audio application program, acquires the data to be displayed, determines the target display style that matches the local display state, and Based on the target display style, the data to be displayed is displayed on the screen of the smart rear-view mirror.

他の場合、音声アプリケーションプログラムの実行中に画面切り替え信号を監視したことに応答して、スマートバックミラーは、ミラーリング表示状態に切り替え、ミラーリング表示状態とマッチングするターゲット表示スタイルを決定する。このとき、音声アプリケーションプログラムの表示すべきデータを取得し、ミラーリング表示状態がターゲット表示スタイルとマッチングし、前記ターゲット表示スタイルに基づいて、車載インフォテインメントの画面に前記表示すべきデータを表示する。 In other cases, in response to monitoring the screen switching signal while the audio application program is running, the smart rearview mirror switches to the mirrored display state and determines the target display style that matches the mirrored display state. At this time, the data to be displayed by the voice application program is acquired, the mirroring display state matches the target display style, and the data to be displayed is displayed on the in-vehicle infotainment screen based on the target display style.

もう1つの場合、音声アプリケーションプログラムの実行中に画面切り替え信号を監視したことに応答して、スマートバックミラーは、ローカル表示状態に切り替え、ローカル表示状態とマッチングするターゲット表示スタイルを決定する。このとき、音声アプリケーションプログラムの表示すべきデータを取得し、ローカル表示状態がターゲット表示スタイルとマッチングし、前記ターゲット表示スタイルに基づいて、スマートバックミラーの画面に前記表示すべきデータを表示する。 In the other case, in response to monitoring the screen switching signal during execution of the voice application program, the smart rearview mirror switches to the local display state and determines the target display style that matches the local display state. At this time, the data to be displayed by the voice application program is acquired, the local display state matches the target display style, and the data to be displayed is displayed on the screen of the smart rear-view mirror based on the target display style.

本出願の実施例によれば、図7は本出願の実施例に係る画面切り替え表示装置の概略構成図であり、本出願の実施例に係る画面切り替え表示方法を実行することができ、実行方法に対応する機能モジュール及び有益な効果を備える。図7に示すように、該装置700は、ターゲットアプリケーションプログラムの実行中に、ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するための表示データ記憶モジュール701と、画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定するための表示状態決定モジュール702と、切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するためのターゲット表示スタイル決定モジュール703と、ターゲット表示スタイルに基づいて、切り替えられた画面に表示データを表示するための表示データ表示モジュール704と、を備える。 According to the embodiment of the present application, FIG. 7 is a schematic configuration diagram of the screen switching display device according to the embodiment of the present application, and the screen switching display method according to the embodiment of the present application can be executed. It has a corresponding functional module and beneficial effects. As shown in FIG. 7, the apparatus 700 monitored the display data storage module 701 for storing the display data on the current screen of the target application program and the screen switching signal during the execution of the target application program. In response to, the display state determination module 702 for determining the switched display state including the mirrored display state and the local display state, and the target display style for determining the target display style that matches the switched display state. It includes a determination module 703 and a display data display module 704 for displaying display data on the switched screen based on the target display style.

選択可能には、ターゲット表示スタイル決定モジュール703は、具体的には、切り替えられた表示状態が表示データの現在のインターフェーススタイルとマッチングしない場合、切り替えられた表示状態とマッチングするターゲット表示スタイルを作成するために用いられる。 To be selectable, the target display style determination module 703 specifically creates a target display style that matches the switched display state if the switched display state does not match the current interface style of the display data. Used for

選択可能には、ターゲット表示スタイル決定モジュール703は、具体的には、予め記憶された表示スタイルから、切り替えられた表示状態とマッチングする表示スタイル候補を決定し、前記表示スタイル候補が2つ以上である場合、前記切り替えられた画面の解像度を取得し、前記表示スタイル候補から、前記切り替えられた画面の解像度に適応するターゲット表示スタイルをスクリーニングするために用いられる。 Specifically, the target display style determination module 703 determines a display style candidate that matches the switched display state from the display style stored in advance, and the target display style candidate is two or more. In some cases, it is used to obtain the resolution of the switched screen and screen the target display style that matches the resolution of the switched screen from the display style candidates.

選択可能には、表示状態決定モジュール702は、具体的には、画面切り替え信号を監視したことに応答して、切り替えられた表示状態を動的プロキシによって決定するために用いられ、ターゲット表示スタイル決定モジュール703は、具体的には、切り替えられた表示状態とマッチングするターゲット表示スタイルを動的プロキシによって決定するために用いられ、表示データ表示モジュール704は、具体的には、ターゲット表示スタイルに基づいて、切り替えられた画面に表示データを動的プロキシによって表示するために用いられる。 Selectably, the display state determination module 702 is specifically used to determine the switched display state by a dynamic proxy in response to monitoring the screen switching signal to determine the target display style. Module 703 is specifically used by the dynamic proxy to determine the target display style that matches the switched display state, and display data display module 704 is specifically based on the target display style. , Used to display the display data on the switched screen by a dynamic proxy.

選択可能には、現在の画面がスマートバックミラーの画面であり、切り替えられた画面が車載インフォテインメントの画面であり、表示データ表示モジュール704は、ターゲット表示スタイルに基づいて、スマートバックミラーにおいて表示データをレンダリングして、ビデオデータを生成するためのビデオデータ生成ユニットと、ビデオデータを車載インフォテインメントに送信して、車載インフォテインメントがビデオデータを車載インフォテインメントの画面に表示するためのビデオデータ送信ユニットと、を備える。 Selectable, the current screen is the screen of the smart back mirror, the switched screen is the screen of the in-vehicle infotainment, and the display data display module 704 is displayed on the smart back mirror based on the target display style. A video data generation unit for rendering the data and generating the video data, and for sending the video data to the in-vehicle infotainment so that the in-vehicle infotainment can display the video data on the in-vehicle infotainment screen. It is equipped with a video data transmission unit.

選択可能には、表示データ記憶モジュール701は、具体的には、音声アプリケーションプログラムの実行中に、音声アプリケーションプログラムの現在の画面での対話テキストを記憶するために用いられ、ターゲット表示スタイル決定モジュール703は、具体的には、切り替えられた表示状態とマッチングするテキストフォーマット、及びテキストのトリガー位置とトリガー効果を決定するために用いられる。 Selectably, the display data storage module 701 is specifically used to store the dialogue text on the current screen of the voice application program during execution of the voice application program, and the target display style determination module 703 Is specifically used to determine the text format that matches the switched display state, and the trigger position and trigger effect of the text.

本出願の実施例では、ターゲットアプリケーションプログラムの実行中に前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶することで、切り替えられた画面にデータソースを提供し、ターゲットアプリケーションプログラムの表示データが中断されないことを確保し、切り替えられた表示状態とマッチングするターゲット表示スタイルに基づいて表示データを表示することで、ターゲット表示スタイルが切り替えられた画面に適応し、表示データを切り替えられた画面に表示することを確保し、表示の明瞭さ、完全性及び美しさを確保する。よって、本実施例は、画面が切り替えられた後にアプリケーションプログラムの表示データが中断され、失われるという技術的課題を解決し、画面が切り替えられた後にアプリケーションプログラムのデータ表示の一貫性を確保し、ユーザの使用体験、並びに表示の明瞭さ、完全性及び美しさを向上させる。 In the embodiment of the present application, by storing the display data on the current screen of the target application program during execution of the target application program, a data source is provided on the switched screen, and the display data of the target application program is displayed. By ensuring that it is not interrupted and displaying the display data based on the target display style that matches the switched display state, the target display style adapts to the switched screen and the display data is displayed on the switched screen. Ensure that the display is clear, complete and beautiful. Therefore, this embodiment solves the technical problem that the display data of the application program is interrupted and lost after the screen is switched, and ensures the consistency of the data display of the application program after the screen is switched. Improve the user experience, as well as the clarity, completeness and beauty of the display.

本出願の実施例によれば、図8は本出願の実施例に係る他の画面切り替え表示装置の概略構成図であり、本出願の実施例に係る画面切り替え表示方法を実行することができ、実行方法に対応する機能モジュール及び有益な効果を備える。図8に示すように、該装置800は、ターゲットアプリケーションプログラムの表示すべきデータを取得するための表示すべきデータ取得モジュール801と、ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得するための現在の表示状態取得モジュール802と、現在の表示状態とマッチングするターゲット表示スタイルを決定するためのターゲット表示スタイル決定モジュール803と、ターゲット表示スタイルに基づいて、現在の表示状態に対応する画面に表示すべきデータを表示するための表示すべきデータの表示モジュール804と、を備えてもよい。 According to the embodiment of the present application, FIG. 8 is a schematic configuration diagram of another screen switching display device according to the embodiment of the present application, and the screen switching display method according to the embodiment of the present application can be executed. It has functional modules and beneficial effects that correspond to the execution method. As shown in FIG. 8, the apparatus 800 acquires the data acquisition module 801 to be displayed for acquiring the data to be displayed by the target application program, and the current display state including the mirroring display state and the local display state. The current display state acquisition module 802 for determining the target display style for determining the target display style that matches the current display state, and the target display style determination module 803 for determining the target display style, and the screen corresponding to the current display state based on the target display style. A display module 804 of data to be displayed for displaying data to be displayed may be provided.

選択可能には、表示すべきデータ取得モジュール801は、具体的には、音声アプリケーションプログラムの起動に応答して、音声アプリケーションプログラムの表示すべきデータを取得するために用いられ。 Selectably, the data acquisition module 801 to be displayed is specifically used to acquire the data to be displayed in the voice application program in response to the activation of the voice application program.

本実施例では、ターゲットアプリケーションプログラムの実行中に、表示すべきデータ及び現在の表示状態を取得することで、表示すべきデータを現在の表示状態とマッチングするターゲット表示スタイルで表示することができ、画面が切り替えられた後、ターゲット表示スタイルをタイムリーに決定できず、引き続きマッチングしない表示スタイルを用いるため、表示エラーを引き起こす状況を回避し、ユーザの使用体験、並びに表示の明瞭さ、完全性及び美しさを向上させ、ユーザーエクスペリエンスを向上させる。 In this embodiment, by acquiring the data to be displayed and the current display state during the execution of the target application program, the data to be displayed can be displayed in the target display style that matches the current display state. After the screen is switched, the target display style cannot be determined in a timely manner and continues to use a display style that does not match, avoiding situations that cause display errors, the user experience, as well as the clarity, completeness and completeness of the display. Improve beauty and improve user experience.

本出願の実施例によれば、本出願は、スマートバックミラー及び読み取り可能な記憶媒体をさらに提供する。 According to an embodiment of the present application, the present application further provides a smart rearview mirror and a readable storage medium.

図9に示すように、本出願の実施例に係る画面切り替え表示方法のスマートバックミラーのブロック図である。スマートバックミラーは、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピュータ、及び他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことを目的とする。スマートバックミラーは、携帯情報端末、携帯電話、スマートフォン、ウェアラブルデバイス、他の同様のコンピューティングデバイスなどの様々な形態のモバイルデバイスを表すこともできる。本明細書で示されるコンポーネント、それらの接続と関係、及びそれらの機能は単なる例であり、本明細書の説明及び/または要求される本出願の実現を制限することを意図したものではない。 As shown in FIG. 9, it is a block diagram of a smart rearview mirror of a screen switching display method according to an embodiment of the present application. Smart back mirrors are intended to represent various forms of digital computers such as laptop computers, desktop computers, workstations, personal digital assistants, servers, blade servers, mainframe computers, and other suitable computers. Smart rearview mirrors can also represent various forms of mobile devices such as personal digital assistants, mobile phones, smartphones, wearable devices, and other similar computing devices. The components shown herein, their connections and relationships, and their functions are merely examples and are not intended to limit the description and / or the required realization of this application.

図9に示すように、該スマートバックミラーは、1つのまたは複数のプロセッサ901と、メモリ902と、高速インターフェースと低速インターフェースを含む、各コンポーネントを接続するためのインターフェースと、を備える。各コンポーネントは、異なるバスで相互に接続され、共通のマザーボードに取り付けられるか、または必要に応じて他の方式で取り付けることができる。プロセッサは、メモリ内またはメモリ上において外部入力/出力装置(例えば、インターフェースにカップリングされた表示機器)にGUIのグラフィック情報を表示する命令を含んだ、スマートバックミラーに実行される命令を処理する。他の実施形態では、必要であれば、複数のプロセッサ及び/または複数のバスを、複数のメモリとともに使用することができる。同様に、複数のスマートバックミラーを接続することができ、各機器は、一部の必要な操作(例えば、サーババンク、1組のブレードサーバ、またはマルチプロセッサシステムとして)を提供することができる。図9では、1つのプロセッサ901を例とする。 As shown in FIG. 9, the smart rearview mirror comprises one or more processors 901, memory 902, and an interface for connecting each component, including a high speed interface and a low speed interface. The components are interconnected by different buses and can be mounted on a common motherboard or, if desired, in other ways. The processor processes instructions executed in the smart rearview mirror, including instructions for displaying GUI graphic information in or on memory to an external input / output device (eg, a display device coupled to an interface). .. In other embodiments, multiple processors and / or multiple buses can be used with multiple memories, if desired. Similarly, multiple smart rearview mirrors can be connected and each device can provide some necessary operations (eg, as a server bank, a set of blade servers, or a multiprocessor system). In FIG. 9, one processor 901 is taken as an example.

メモリ902は、本出願に係る非一時的なコンピュータ読み取り可能な記憶媒体である。ここで、前記メモリには、前記少なくとも1つのプロセッサが本出願に係る画面切り替え表示方法を実行できるように、少なくとも1つのプロセッサによって実行可能な命令が記憶されている。本出願の非一時的なコンピュータ読み取り可能な記憶媒体には、コンピュータに本出願に係る画面切り替え表示方法を実行させるためのコンピュータ命令が記憶されている。 The memory 902 is a non-temporary computer-readable storage medium according to the present application. Here, the memory stores instructions that can be executed by at least one processor so that the at least one processor can execute the screen switching display method according to the present application. The non-temporary computer-readable storage medium of the present application stores computer instructions for causing the computer to execute the screen switching display method according to the present application.

メモリ902は、非一時的なコンピュータ読み取り可能な記憶媒体として、本出願の実施例に係る画面切り替え表示方法に対応するプログラム命令/モジュールなどの、非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能なプログラム及びモジュールを記憶するように構成される。プロセッサ901は、メモリ902に記憶されている非一時的なソフトウェアプログラム、命令及びモジュールを実行することによって、サーバの様々な機能アプリケーション及びデータ処理を実行し、すなわち、上記方法実施例の画面切り替え表示方法を実現する。 The memory 902 is a non-temporary computer-readable storage medium, such as a non-temporary software program such as a program instruction / module corresponding to the screen switching display method according to the embodiment of the present application, or a non-temporary computer execution. It is configured to store possible programs and modules. The processor 901 executes various functional applications and data processing of the server by executing non-temporary software programs, instructions and modules stored in the memory 902, that is, a screen switching display of the above method embodiment. Realize the method.

メモリ902は、プログラム記憶領域とデータ記憶領域と、を含むことができ、ここで、プログラム記憶領域は、オペレーティングシステム、少なくとも1つの機能に必要なアプリケーションプログラムを記憶することができ、データ記憶領域は、画面切り替え表示方法のスマートバックミラーの使用によって作成されたデータなどを記憶することができる。また、メモリ902は、高速ランダムアクセスメモリを含んでもよく、非一時的なメモリをさらに含んでもよく、例えば、少なくとも1つのディスクストレージデバイス、フラッシュメモリデバイス、または他の非一時的なソリッドステートストレージデバイスである。いくつかの実施例では、メモリ902は、プロセッサ901に対して遠隔に設けられたメモリを選択的に含んでもよく、これらの遠隔メモリは、ネットワークを介して画面切り替え表示方法のスマートバックミラーに接続されてもよい。上記ネットワークの例としては、インターネット、イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク、及びその組み合わせを含むが、これらに限定されない。 The memory 902 can include a program storage area and a data storage area, where the program storage area can store the operating system, an application program required for at least one function, and the data storage area is , Data created by using the smart back mirror of the screen switching display method can be stored. The memory 902 may also include fast random access memory and may further include non-temporary memory, eg, at least one disk storage device, flash memory device, or other non-temporary solid state storage device. Is. In some embodiments, the memory 902 may selectively include memory provided remotely to the processor 901, which remote memory is connected to a smart rearview mirror of the screen switching display method via a network. May be done. Examples of the above networks include, but are not limited to, the Internet, intranets, local area networks, mobile communication networks, and combinations thereof.

画面切り替え表示方法のスマートバックミラーは、さらに、入力装置903及び出力装置904を備えてもよい。プロセッサ901、メモリ902、入力装置903及び出力装置904は、バスまたは他の方式を介して接続することができ、図9では、バスを介して接続することを例とする。 The smart rear-view mirror of the screen switching display method may further include an input device 903 and an output device 904. The processor 901, the memory 902, the input device 903 and the output device 904 can be connected via a bus or other method, and in FIG. 9, the connection via the bus is taken as an example.

入力装置903は、入力された数字またはキャラクタ情報を受信し、画面切り替え表示方法のスマートバックミラーのユーザ設定及び機能制御に関連するキー信号入力を生成してもよく、例えばタッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、インジケータースティック、1つのまたは複数のマウスキー、トラックボール、ジョイスティックなどの入力装置である。出力装置904は、表示機器、補助照明装置(例えば、LED)及び触覚フィードバック装置(例えば、バイブラモータ)などを含んでもよい。該表示機器は、液晶ディスプレイ(LCD)、発光ダイオード(LED)ディスプレイ及びプラズマディスプレイを含んでもよいがこれらに限られない。いくつかの実施形態では、表示機器は、タッチスクリーンであり得る。 The input device 903 may receive the input numerical or character information and generate a key signal input related to user setting and function control of the smart back mirror of the screen switching display method, for example, a touch screen, a key pad, and the like. Input devices such as mice, trackpads, touchpads, indicator sticks, one or more mouse keys, trackballs, joysticks, and the like. The output device 904 may include a display device, an auxiliary lighting device (eg, LED), a tactile feedback device (eg, a vibra motor), and the like. The display device may include, but is not limited to, a liquid crystal display (LCD), a light emitting diode (LED) display and a plasma display. In some embodiments, the display device can be a touch screen.

ここで説明されるシステム及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、特定用途向けASIC(特定用途向け集積回路)、コンピュータハードウェア、ファームウェア、ソフトウェア、及び/またはそれらの組合せで実現することができる。これらの様々な実施形態は、1つまたは複数のコンピュータプログラムで実施されること、を含むことができ、該1つまたは複数のコンピュータプログラムは、少なくとも1つのプログラマブルプロセッサを含むプログラマブルシステムで実行及び/または解釈でき、該プログラマブルプロセッサは、特定用途向けまたは汎用プログラマブルプロセッサであってもよく、ストレージシステム、少なくとも1つの入力装置、及び少なくとも1つの出力装置からデータ及び命令を受信し、該ストレージシステム、該少なくとも1つの入力装置、及び該少なくとも1つの出力装置に伝送することができる。 Various embodiments of the systems and techniques described herein include digital electronic circuit systems, integrated circuit systems, application specific ASICs (ASICs), computer hardware, firmware, software, and / or combinations thereof. Can be realized with. These various embodiments may include being implemented in one or more computer programs, wherein the one or more computer programs are executed and / or run in a programmable system that includes at least one programmable processor. Or interpretable, the programmable processor may be a purpose-built or general purpose programmable processor, receiving data and instructions from a storage system, at least one input device, and at least one output device, the storage system, said. It can be transmitted to at least one input device and the at least one output device.

これらのコンピュータプログラム(プログラム、ソフトウェア、ソフトウェアアプリケーション、またはコードとも称される)は、プログラマブルプロセッサに対するマシン命令を含み、高レベル手続き型及び/またはオブジェクト指向プログラミング言語、および/またはアセンブリ/マシン言語で実装することができる。本明細書で使用される際、「マシン読み取り可能な媒体」及び「コンピュータ読み取り可能な媒体」という用語は、マシン命令及び/またはデータをプログラマブルプロセッサに提供するための任意のコンピュータプログラム製品、機器、及び/または装置(例えば、磁気ディスク、光ディスク、メモリ、プログラマブルロジックデバイス(PLD))であり、マシン読み取り可能な信号であるマシン命令を受信する機器読み取り可能な媒体を含む。用語「マシン読み取り可能な信号」とは、マシン命令及び/またはデータをプログラマブルプロセッサに提供するための任意の信号である。 These computer programs (also referred to as programs, software, software applications, or code) include machine instructions for programmable processors and are implemented in high-level procedural and / or object-oriented programming languages and / or assembly / machine languages. can do. As used herein, the terms "machine readable medium" and "computer readable medium" are any computer program products, devices, for providing machine instructions and / or data to a programmable processor. And / or devices (eg, magnetic disks, optical disks, memories, programmable logic devices (PLDs)) that include device-readable media that receive machine instructions that are machine-readable signals. The term "machine readable signal" is any signal for providing machine instructions and / or data to a programmable processor.

ユーザとのインタラクションを提供するために、ここで説明されているシステム及び技術をコンピュータ上で実施することができ、該コンピュータは、ユーザに情報を表示するための表示機器(例えば、CRT(陰極線管)またはLCD(液晶ディスプレイ)モニタ)と、キーボード及びポインティングデバイス(例えば、マウスまたはトラックボール)とを有し、ユーザは、該キーボード及び該ポインティングデバイスによって入力をコンピュータに提供することができる。他の種類の装置は、ユーザとのインタラクションを提供するために用いられてもよい。例えば、ユーザに提供されるフィードバックは、任意の形態のセンシングフィードバック(例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック)であってもよく、任意の形態(音響入力と、音声入力と、触覚入力と、を含む)でユーザからの入力を受信することができる。 In order to provide interaction with the user, the systems and techniques described herein can be implemented on a computer, which computer is a display device for displaying information to the user (eg, CRT). ) Or LCD (liquid crystal display) monitor) and a keyboard and pointing device (eg, mouse or trackball), the user can provide input to the computer by the keyboard and the pointing device. Other types of devices may be used to provide interaction with the user. For example, the feedback provided to the user may be in any form of sensing feedback (eg, visual feedback, auditory feedback, or tactile feedback) and in any form (acoustic input, audio input, and tactile input). , Including) to receive input from the user.

ここで説明されるシステム及び技術は、バックエンドコンポーネントを含むコンピューティングシステム(例えば、データサーバとする)、またはミドルウェアコンポーネントを含むコンピューティングシステム(例えば、アプリケーションサーバ)、またはフロントエンドコンポーネントを含むコンピューティングシステム(例えば、グラフィカルユーザインターフェースまたはウェブブラウザを有するユーザコンピュータ、ユーザは、該グラフィカルユーザインターフェースまたは該ウェブブラウザによってここで説明されるシステム及び技術の実施形態とインタラクションする)、またはこのようなバックエンドコンポーネント、ミドルウェアコンポーネント、及びフロントエンドコンポーネントの任意の組み合わせを含むコンピューティングシステムで実施することができる。任意の形態または媒体のデジタルデータ通信(例えば、通信ネットワーク)によってシステムのコンポーネントを相互に接続されてもよい。通信ネットワークの例としては、ローカルエリアネットワーク(LAN)と、ワイドエリアネットワーク(WAN)と、インターネットと、を含む。 The systems and techniques described herein are computing systems that include back-end components (eg, data servers), or computing systems that include middleware components (eg, application servers), or computing that includes front-end components. A system (eg, a user computer having a graphical user interface or web browser, the user interacts with embodiments of the system and technology described herein by the graphical user interface or web browser), or such backend components. , Middleware components, and any combination of front-end components can be implemented in computing systems. The components of the system may be interconnected by any form or medium of digital data communication (eg, a communication network). Examples of communication networks include local area networks (LANs), wide area networks (WANs), and the Internet.

コンピュータシステムは、クライアント側とサーバと、を含むことができる。クライアント側とサーバは、一般的に、互いに離れており、通常に通信ネットワークを介してインタラクションする。対応するコンピュータ上で実行され、互いにクライアント−サーバ関係を有するコンピュータプログラムによってクライアント側とサーバとの関係が生成される。 A computer system can include a client side and a server. The client side and the server are generally separated from each other and usually interact with each other via a communication network. A client-server relationship is created by a computer program that runs on the corresponding computer and has a client-server relationship with each other.

上記に示される様々な形式のフローを使用して、ステップを並べ替え、追加、または削除することができることを理解されたい。例えば、本出願に記載されている各ステップは、並列に実行されてもよいし、順次的に実行されてもよいし、異なる順序で実行されてもよいが、本出願で開示されている技術案の所望の結果を実現することができれば、本明細書では限定されない。 It should be understood that steps can be sorted, added, or deleted using the various forms of flow shown above. For example, the steps described in this application may be performed in parallel, sequentially, or in a different order, but the techniques disclosed in this application. The present specification is not limited as long as the desired result of the proposal can be achieved.

上記具体的な実施形態は、本出願の保護範囲を制限するものではない。当業者は、設計要件及び他の要因に応じて、様々な修正、組み合わせ、サブコンビネーション、及び置換を行うことができる。本出願の要旨と原則内で行われる任意の修正、同等の置換や改良などは、いずれも本出願の保護範囲内に含まれるべきである。 The specific embodiments described above do not limit the scope of protection of the present application. One of ordinary skill in the art can make various modifications, combinations, subcombinations, and replacements, depending on design requirements and other factors. The gist of this application and any amendments, equivalent replacements or improvements made within the principles should be included within the scope of protection of this application.

Claims (13)

画面切り替え表示方法であって、
ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するステップと、
画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定するステップと、
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップと、
前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するステップと、を含む、
ことを特徴とする画面切り替え表示方法。
It is a screen switching display method
During the execution of the target application program, the step of storing the display data on the current screen of the target application program, and
In response to monitoring the screen switching signal, the step of determining the switched display state including the mirroring display state and the local display state, and
The step of determining the target display style that matches the switched display state, and
Including a step of displaying the display data on a switched screen based on the target display style.
A screen switching display method characterized by this.
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップは、
前記切り替えられた表示状態が前記表示データの現在の表示スタイルとマッチングしない場合、前記切り替えられた表示状態とマッチングするターゲット表示スタイルを作成するステップを含む、
ことを特徴とする請求項1に記載の方法。
The step of determining the target display style that matches the switched display state is
If the switched display state does not match the current display style of the display data, the step comprises creating a target display style that matches the switched display state.
The method according to claim 1.
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップは、
予め記憶された表示スタイルから、切り替えられた表示状態とマッチングする表示スタイル候補を決定するステップと、
前記表示スタイル候補が2つ以上である場合、前記切り替えられた画面の解像度を取得するステップと、
前記表示スタイル候補から、前記切り替えられた画面の解像度に適応するターゲット表示スタイルをスクリーニングするステップと、を含む、
ことを特徴とする請求項1に記載の方法。
The step of determining the target display style that matches the switched display state is
From the display styles stored in advance, the steps to determine the display style candidates that match the switched display state, and
When there are two or more display style candidates, the step of acquiring the resolution of the switched screen and
A step of screening a target display style that adapts to the switched screen resolution from the display style candidates is included.
The method according to claim 1.
画面切り替え信号を監視したことに応答して、切り替えられた表示状態を決定するステップは、
画面切り替え信号を監視したことに応答して、切り替えられた表示状態を動的プロキシによって決定するステップを含み、
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップは、
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを前記動的プロキシによって決定するステップを含み、
前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するステップは、
前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを前記動的プロキシによって表示するステップを含む、
ことを特徴とする請求項1に記載の方法。
The step of determining the switched display state in response to monitoring the screen switching signal is
Including the step of determining the switched display state by a dynamic proxy in response to monitoring the screen switching signal.
The step of determining the target display style that matches the switched display state is
Including the step of determining the target display style matching the switched display state by the dynamic proxy.
The step of displaying the display data on the switched screen based on the target display style is
A step of displaying the display data by the dynamic proxy on the switched screen based on the target display style.
The method according to claim 1.
前記現在の画面がスマートバックミラーの画面であり、前記切り替えられた画面が車載インフォテインメントの画面であり、
前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するステップは、
前記スマートバックミラーにおいて、前記ターゲット表示スタイルに基づいて前記表示データをレンダリングして、ビデオデータを生成するステップと、
前記車載インフォテインメントが前記ビデオデータを前記車載インフォテインメントの画面に表示するように、前記ビデオデータを前記車載インフォテインメントに送信するステップと、を含む、
ことを特徴とする請求項1に記載の方法。
The current screen is the screen of the smart rear-view mirror, and the switched screen is the screen of in-vehicle infotainment.
The step of displaying the display data on the switched screen based on the target display style is
In the smart rear-view mirror, a step of rendering the display data based on the target display style to generate video data, and
A step of transmitting the video data to the vehicle-mounted infotainment so that the vehicle-mounted infotainment displays the video data on the screen of the vehicle-mounted infotainment.
The method according to claim 1.
ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するステップは、
音声アプリケーションプログラムの実行中に、前記音声アプリケーションプログラムの現在の画面での対話テキストを記憶するステップを含み、
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するステップは、
前記切り替えられた表示状態とマッチングするテキストフォーマット、及びテキストのトリガー位置とトリガー効果を決定するステップを含む、
ことを特徴とする請求項1〜5のいずれか1項に記載の方法。
During the execution of the target application program, the step of storing the display data on the current screen of the target application program is
Including the step of memorizing the dialogue text on the current screen of the voice application program during execution of the voice application program.
The step of determining the target display style that matches the switched display state is
Includes a text format that matches the switched display state, and steps to determine the trigger position and trigger effect of the text.
The method according to any one of claims 1 to 5, wherein the method is characterized by the above.
画面切り替え表示方法であって、
ターゲットアプリケーションプログラムの表示すべきデータを取得するステップと、
ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得するステップと、
前記現在の表示状態とマッチングするターゲット表示スタイルを決定するステップと、
前記ターゲット表示スタイルに基づいて、前記表示すべきデータを前記現在の表示状態に対応する画面に表示するステップと、を含む、
ことを特徴とする画面切り替え表示方法。
It is a screen switching display method
Steps to get the data to be displayed in the target application program,
Steps to get the current display state, including the mirrored display state and the local display state,
The step of determining the target display style that matches the current display state, and
Including a step of displaying the data to be displayed on the screen corresponding to the current display state based on the target display style.
A screen switching display method characterized by this.
ターゲットアプリケーションプログラムの表示すべきデータを取得するステップは、
音声アプリケーションプログラムの起動に応答して、前記音声アプリケーションプログラムの表示すべきデータを取得するステップを含む、
ことを特徴とする請求項7に記載の方法。
The step to get the data to be displayed in the target application program is
Including a step of acquiring data to be displayed of the voice application program in response to the activation of the voice application program.
The method according to claim 7, wherein the method is characterized by the above.
画面切り替え表示装置であって、
ターゲットアプリケーションプログラムの実行中に、前記ターゲットアプリケーションプログラムの現在の画面での表示データを記憶するための表示データ記憶モジュールと、
画面切り替え信号を監視したことに応答して、ミラーリング表示状態及びローカル表示状態を含む切り替えられた表示状態を決定するための表示状態決定モジュールと、
前記切り替えられた表示状態とマッチングするターゲット表示スタイルを決定するためのターゲット表示スタイル決定モジュールと、
前記ターゲット表示スタイルに基づいて、切り替えられた画面に前記表示データを表示するための表示データ表示モジュールと、を備える、
ことを特徴とする画面切り替え表示装置。
It is a screen switching display device
A display data storage module for storing display data on the current screen of the target application program while the target application program is being executed.
A display state determination module for determining the switched display state including the mirroring display state and the local display state in response to monitoring the screen switching signal.
A target display style determination module for determining a target display style that matches the switched display state, and
A display data display module for displaying the display data on the switched screen based on the target display style is provided.
A screen switching display device characterized by this.
画面切り替え表示装置であって、
表示すべきデータ取得モジュールは、ターゲットアプリケーションプログラムの表示すべきデータを取得するために用いられ、
現在の表示状態取得モジュールは、ミラーリング表示状態及びローカル表示状態を含む現在の表示状態を取得するために用いられ、
ターゲット表示スタイル決定モジュールは、前記現在の表示状態とマッチングするターゲット表示スタイルを決定するために用いられ、
表示すべきデータの表示モジュールは、前記ターゲット表示スタイルに基づいて、前記表示すべきデータを前記現在の表示状態に対応する画面に表示するために用いられる、
ことを特徴とする画面切り替え表示装置。
It is a screen switching display device
The data acquisition module to be displayed is used to acquire the data to be displayed in the target application program.
The current display state acquisition module is used to acquire the current display state including the mirrored display state and the local display state.
The target display style determination module is used to determine a target display style that matches the current display state.
The data display module to be displayed is used to display the data to be displayed on the screen corresponding to the current display state based on the target display style.
A screen switching display device characterized by this.
スマートバックミラーであって、
少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに通信接続されるメモリと、を備え、
前記メモリには、前記少なくとも1つのプロセッサによって実行可能な命令が記憶されており、前記命令は前記少なくとも1つのプロセッサが請求項1〜6又は7〜8のいずれか1項に記載の画面切り替え表示方法を実行できるように、前記少なくとも1つのプロセッサによって実行される、
ことを特徴とするスマートバックミラー。
It ’s a smart rearview mirror.
With at least one processor
A memory that is communicatively connected to the at least one processor.
An instruction that can be executed by the at least one processor is stored in the memory, and the instruction is a screen switching display according to any one of claims 1 to 6 or 7 to 8 by the at least one processor. Performed by the at least one processor so that the method can be performed,
A smart rearview mirror that features that.
コンピュータ命令を記憶する非一時的なコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータ命令は、前記コンピュータに請求項1〜6又は7〜8のいずれか1項に記載の画面切り替え表示方法を実行させるために用いられる、
ことを特徴とする非一時的なコンピュータ読み取り可能な記憶媒体。
A non-temporary computer-readable storage medium that stores computer instructions.
The computer instruction is used to cause the computer to execute the screen switching display method according to any one of claims 1 to 6 or 7 to 8.
A non-temporary computer-readable storage medium characterized by that.
コンピュータ上で動作しているときに、請求項1〜6又は7〜8のいずれか1項に記載の画面切り替え表示方法を前記コンピュータに実行させる、
ことを特徴とするコンピュータプログラム。
The computer is made to execute the screen switching display method according to any one of claims 1 to 6 or 7 to 8 while operating on the computer.
A computer program characterized by that.
JP2021088434A 2020-05-28 2021-05-26 Screen switching display method, device, smart rearview mirror and readable storage medium Active JP7266635B2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010470773.1 2020-05-28
CN202010470773.1A CN111666056B (en) 2020-05-28 2020-05-28 Screen switching display method and device, intelligent rearview mirror and readable storage medium

Publications (2)

Publication Number Publication Date
JP2021144728A true JP2021144728A (en) 2021-09-24
JP7266635B2 JP7266635B2 (en) 2023-04-28

Family

ID=72385288

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021088434A Active JP7266635B2 (en) 2020-05-28 2021-05-26 Screen switching display method, device, smart rearview mirror and readable storage medium

Country Status (3)

Country Link
JP (1) JP7266635B2 (en)
KR (1) KR102562060B1 (en)
CN (1) CN111666056B (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113552988A (en) * 2021-06-24 2021-10-26 阿波罗智联(北京)科技有限公司 Interface focus control method and device, electronic equipment and storage medium
CN114020228A (en) * 2021-10-30 2022-02-08 深圳曦华科技有限公司 Screen display method and device
CN114189741A (en) * 2021-11-09 2022-03-15 深圳曦华科技有限公司 Image processing method and related device
CN114257869A (en) * 2021-11-26 2022-03-29 杭州当虹科技股份有限公司 Method for monitoring operation safety of propaganda large-screen equipment
CN115629837A (en) * 2022-11-22 2023-01-20 亿咖通(北京)科技有限公司 Multi-system-based picture display method and device and electronic equipment
WO2024045675A1 (en) * 2022-08-31 2024-03-07 比亚迪股份有限公司 Vehicle-mounted multi-screen interaction method, vehicle-mounted controller, automobile, and storage medium
CN117891645A (en) * 2024-03-14 2024-04-16 上海励驰半导体有限公司 Display fault detection method and device, electronic equipment and storage medium

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112256371A (en) * 2020-10-20 2021-01-22 北京字跳网络技术有限公司 Method and device for displaying information and electronic equipment
CN112256370A (en) * 2020-10-20 2021-01-22 北京字跳网络技术有限公司 Information display method and device and electronic equipment
CN112486621B (en) * 2020-12-07 2022-05-06 广州朗国电子科技股份有限公司 Horizontal and vertical screen adaptation method, device and storage medium based on IO level
CN112861007A (en) * 2021-02-26 2021-05-28 百度在线网络技术(北京)有限公司 Screen saver display method, device, equipment, medium and program product
CN113138737B (en) * 2021-04-16 2023-11-03 阿波罗智联(北京)科技有限公司 Display control method, device, equipment, medium and program product for screen-throwing scene
CN113220399B (en) * 2021-05-17 2023-08-15 百度在线网络技术(北京)有限公司 Interface display method and device, intelligent screen device and storage medium
CN113127101A (en) * 2021-05-17 2021-07-16 北京字节跳动网络技术有限公司 Application program control method, device, equipment and medium
CN114356269A (en) * 2022-01-07 2022-04-15 中国工商银行股份有限公司 Screen picture switching method and device, electronic equipment and storage medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03278094A (en) * 1990-03-27 1991-12-09 Seiko Epson Corp Method for switching font
JP2015148468A (en) * 2014-02-05 2015-08-20 株式会社 ミックウェア Navigation system, room mirror monitor, navigation method, and program
WO2019050020A1 (en) * 2017-09-08 2019-03-14 ローム株式会社 Liquid crystal display device, image display system and vehicle
US20190391780A1 (en) * 2016-12-13 2019-12-26 Baidu Online Network Technology (Beijing) Co., Ltd. Display method and device

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE29608032U1 (en) * 1996-05-03 1996-07-18 MAN Technologie AG, 86153 Augsburg Interactive digital information and entertainment system for vehicles
JP4347322B2 (en) * 2006-07-14 2009-10-21 ソニー株式会社 Receiving apparatus and method, and program
CN103019836B (en) * 2011-09-26 2017-05-24 联想(北京)有限公司 State switching method and electronic equipment
CN103500081A (en) * 2013-09-26 2014-01-08 乐视致新电子科技(天津)有限公司 Display method and display device
CN108958357A (en) * 2017-05-22 2018-12-07 宇龙计算机通信科技(深圳)有限公司 Screen switching, device, terminal and computer readable storage medium
CN107992360B (en) * 2017-11-30 2022-02-22 努比亚技术有限公司 Application switching processing method, mobile terminal and readable storage medium
KR102503936B1 (en) * 2017-12-29 2023-02-28 삼성전자주식회사 Display apparatus for processing user utterance and control method thereof
CN109032485A (en) * 2018-07-10 2018-12-18 广州视源电子科技股份有限公司 Display methods, device, electronic equipment, Intelligent flat and storage medium
CN109495845A (en) * 2018-09-29 2019-03-19 百度在线网络技术(北京)有限公司 Method for changing scenes and equipment
CN111107518A (en) * 2018-10-25 2020-05-05 上海博泰悦臻电子设备制造有限公司 Display method, vehicle-mounted terminal, display system and computer-readable storage medium
CN110069227B (en) * 2019-04-09 2023-01-31 阿波罗智联(北京)科技有限公司 Data interaction display method and device
CN110072012B (en) * 2019-04-28 2021-11-09 维沃移动通信有限公司 Reminding method for screen state switching and mobile terminal
CN110086938A (en) * 2019-04-29 2019-08-02 百度在线网络技术(北京)有限公司 Throw control method, system, electronic equipment and the computer-readable medium of screen display
CN110784758B (en) * 2019-08-22 2021-11-05 腾讯科技(深圳)有限公司 Screen projection processing method and device, electronic equipment and computer program medium
CN111026344A (en) * 2019-11-12 2020-04-17 浙江大搜车软件技术有限公司 Screen projection method, system, computer equipment and storage medium
CN111078173A (en) * 2019-12-12 2020-04-28 苏州飞控软件科技有限公司 Fast switching method and switching system of LED stage screen

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03278094A (en) * 1990-03-27 1991-12-09 Seiko Epson Corp Method for switching font
JP2015148468A (en) * 2014-02-05 2015-08-20 株式会社 ミックウェア Navigation system, room mirror monitor, navigation method, and program
US20190391780A1 (en) * 2016-12-13 2019-12-26 Baidu Online Network Technology (Beijing) Co., Ltd. Display method and device
WO2019050020A1 (en) * 2017-09-08 2019-03-14 ローム株式会社 Liquid crystal display device, image display system and vehicle

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113552988A (en) * 2021-06-24 2021-10-26 阿波罗智联(北京)科技有限公司 Interface focus control method and device, electronic equipment and storage medium
CN114020228A (en) * 2021-10-30 2022-02-08 深圳曦华科技有限公司 Screen display method and device
CN114189741A (en) * 2021-11-09 2022-03-15 深圳曦华科技有限公司 Image processing method and related device
CN114189741B (en) * 2021-11-09 2023-08-18 深圳曦华科技有限公司 Image processing method and related device
CN114257869A (en) * 2021-11-26 2022-03-29 杭州当虹科技股份有限公司 Method for monitoring operation safety of propaganda large-screen equipment
CN114257869B (en) * 2021-11-26 2024-04-16 杭州当虹科技股份有限公司 Operation safety monitoring method for propaganda large screen equipment
WO2024045675A1 (en) * 2022-08-31 2024-03-07 比亚迪股份有限公司 Vehicle-mounted multi-screen interaction method, vehicle-mounted controller, automobile, and storage medium
CN115629837A (en) * 2022-11-22 2023-01-20 亿咖通(北京)科技有限公司 Multi-system-based picture display method and device and electronic equipment
CN117891645A (en) * 2024-03-14 2024-04-16 上海励驰半导体有限公司 Display fault detection method and device, electronic equipment and storage medium

Also Published As

Publication number Publication date
CN111666056B (en) 2024-01-05
JP7266635B2 (en) 2023-04-28
KR20210070251A (en) 2021-06-14
KR102562060B1 (en) 2023-08-02
CN111666056A (en) 2020-09-15

Similar Documents

Publication Publication Date Title
JP2021144728A (en) Screen switching display method and device, smart rearview mirror, and readable storage medium
JP2021099533A (en) Voice interaction processing method, device and electronic apparatus
KR20190082297A (en) App data processing method and apparatus, and storage medium
JP7258071B2 (en) Screen projection method, apparatus, equipment and storage medium
JP7230093B2 (en) Method, device, electronic device and storage medium for controlling smart rearview mirror
JP7269265B2 (en) VIDEO FRAME TRANSMISSION METHOD, DEVICE, ELECTRONIC DEVICE AND READABLE STORAGE MEDIUM
JP7381518B2 (en) Application program operation guidance methods, devices, equipment and readable storage media
US20170264760A1 (en) Information processing apparatus, method for controlling information processing apparatus, and recording medium
US9135914B1 (en) Layered mobile application user interfaces
US8078675B2 (en) Server unit, client unit, server-based computing system, server control method, client control method, and recording medium
JP7318043B2 (en) Projection scene display control method, device, equipment, medium and program product
KR20160060110A (en) Quick tasks for on-screen keyboards
KR102358012B1 (en) Speech control method and apparatus, electronic device, and readable storage medium
US20210090562A1 (en) Speech recognition control method and apparatus, electronic device and readable storage medium
JP6999002B2 (en) Web page processing methods, web page processing devices, electronic devices, non-temporary computer-readable storage media and computer programs
JP2021168190A (en) Method, apparatus, electronic device, and storage medium for providing applet service capability
WO2018098212A1 (en) Methods and apparatuses for configuring message properties in a networked communications systems
JP2021131906A (en) Unlock method and device based upon gesture password
US20210097991A1 (en) Speech control method and apparatus, electronic device, and readable storage medium
US10979582B2 (en) Extension of remote frame buffer (RFB) protocol
JP7142961B2 (en) multilingual keyboard system
JP2021099534A (en) Voice dialogue method, voice dialogue device, electronic device, storage media and computer program product
KR102206486B1 (en) Method for proving translation service by using input application and terminal device using the same
CN112163432A (en) Translation method, translation device and electronic equipment
CN113641439B (en) Text recognition and display method, device, electronic equipment and medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210526

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20211101

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220906

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220913

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20220921

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20220927

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230411

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230418

R150 Certificate of patent or registration of utility model

Ref document number: 7266635

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150