JP2022502719A - 画面ミラーリング方法、装置、端末及び記憶媒体 - Google Patents

画面ミラーリング方法、装置、端末及び記憶媒体 Download PDF

Info

Publication number
JP2022502719A
JP2022502719A JP2019564795A JP2019564795A JP2022502719A JP 2022502719 A JP2022502719 A JP 2022502719A JP 2019564795 A JP2019564795 A JP 2019564795A JP 2019564795 A JP2019564795 A JP 2019564795A JP 2022502719 A JP2022502719 A JP 2022502719A
Authority
JP
Japan
Prior art keywords
application
screen mirroring
screen
user interface
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019564795A
Other languages
English (en)
Other versions
JP7114633B2 (ja
Inventor
一晶 廖
▲凱▼▲鵬▼ 付
建江 屈
▲鳴▼ ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Publication of JP2022502719A publication Critical patent/JP2022502719A/ja
Application granted granted Critical
Publication of JP7114633B2 publication Critical patent/JP7114633B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Abstract

本発明は、画面ミラーリング方法、装置、端末及び記憶媒体を開示する。本発明の実施例は、端末に適用される画面ミラーリング方法であって、前記方法は、第１のアプリケーションのユーザインタフェースを表示するステップと、第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するステップと、ホームページのユーザインタフェースを表示し、第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップと、含む。本発明は、端末における第１のアプリケーションに対してフローティングウィンドウを生成し、画面ミラーリング技術により第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして、第１のアプリケーションを端末のバックグラウンドに後退させ実行状態を維持することにより、ホームページのユーザインタフェースで第２のアプリケーションも実行することができ、ユーザが複数のアプリケーションを同時に実行するという要求に満足する。ユーザは、この方法を使用することにより、画面ミラーリング時に他の操作を行うことができないという問題を解決することができる。【選択図】図１

Description

本発明の実施例は、画面ミラーリングの技術分野に関し、特に、画面ミラーリング方法、装置、端末及び記憶媒体に関する。
画面ミラーリング技術とは、携帯電話などのモバイルデバイスにおけるコンテンツを、テレビなどの他の大画面デバイスにリアルタイムで同期させることである。
画面ミラーリングを行う場合、ユーザは、画面ミラーリングを実行するデバイスに対して他の操作を行う必要があることがある。関連技術において、画面ミラーリングを行う場合、ミラーリングされるアプリケーションがフォアグラウンド実行状態にあるので、ユーザはデバイスの他の機能に対して操作を行うことができない。
本発明の実施例は、画面ミラーリングを行う場合、ミラーリングされるアプリケーションがフォアグラウンド実行状態にあるので、ユーザがデバイスの他の機能に対して操作を行うことができないという問題を解決することができる画面ミラーリング方法、装置、端末及び記憶媒体を提供する。本発明の技術案は、以下の通りである。
本発明の一態様によれば、端末に適用される画面ミラーリング方法であって、
第１のアプリケーションのユーザインタフェースを表示するステップと、
前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するステップと、
ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップと、含む画面ミラーリング方法を提供する。
選択可能な一実施例において、前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップは、
前記第１のアプリケーションをバックグラウンドで実行するように切り替え、前記ホームページのユーザインタフェースを表示し、画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小して前記フローティングウィンドウの形式で表示するステップ、
又は、
前記第１のアプリケーションをバックグラウンドで実行するように切り替え、前記ホームページのユーザインタフェースを表示し、前記フローティングウィンドウの形式で前記第１のアプリケーションのリアルタイム実行画面を表示するステップ、を含む。
選択可能な一実施例において、前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップの後に、前記方法は、
前記端末に対する他の操作命令を受信すると、対応する操作命令を実行し、依然として前記フローティングウィンドウの形式で前記第１のアプリケーションのユーザインタフェースを表示するステップを、さらに含む。
選択可能な一実施例において、前記第１のアプリケーションに対するユーザの画面ミラーリング命令は、
ステータスバーに第１の画面ミラーリングコントロールを表示し、前記第１の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式、
通知バーに第２の画面ミラーリングコントロールを表示し、前記第２の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式、及び
ミニウィンドウ画面ミラーリングコントロールが表示されているフローティング制御ウィンドウを表示し、前記ミニウィンドウ画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式のうちの少なくとも１つの方式によりトリガされる。
選択可能な一実施例において、前記方法は、前記フローティングウィンドウに対するドラッグ操作を受信すると、前記ドラッグ操作に応じて前記フローティングウィンドウの表示状態を変更するステップを、さらに含む。
選択可能な一実施例において、前記方法は、前記第１のアプリケーションに対する全画面表示命令を受信すると、前記フローティングウィンドウをキャンセルし、前記第１のアプリケーションのユーザインタフェースを全画面で表示するステップを、さらに含む。
本発明の一態様によれば、端末に適用される画面ミラーリング装置であって、インタフェース表示モジュールと画面ミラーリングモジュールとを含み、
前記インタフェース表示モジュールは、第１のアプリケーションのユーザインタフェースを表示するように構成されており、
前記画面ミラーリングモジュールは、前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するように構成されており、
前記インタフェース表示モジュールは、ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するように構成されている、画面ミラーリング装置を提供する。
選択可能な一実施例において、前記装置は、プロセシングモジュールをさらに含み、
前記プロセシングモジュールは、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、前記インタフェース表示モジュールは、前記ホームページのユーザインタフェースを表示し、画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小して前記フローティングウィンドウの形式で表示するように構成されているか、又は、前記プロセシングモジュールは、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、前記インタフェース表示モジュールは、前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのリアルタイム実行画面を前記フローティングウィンドウの形式で表示するように切り替えて構成されている。
選択可能な一実施例において、前記プロセシングモジュールは、前記端末に対する他の操作命令を受信すると、対応する操作命令を実行するように構成されており、前記インタフェース表示モジュールは、依然として前記フローティングウィンドウの形式で前記第１のアプリケーションのユーザインタフェースを表示するように構成されている。
選択可能な一実施例において、前記プロセシングモジュールは、ステータスバーに第１の画面ミラーリングコントロールを表示し、前記第１の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
前記プロセシングモジュールは、通知バーに第２の画面ミラーリングコントロールを表示し、前記第２の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
前記プロセシングモジュールは、ミニウィンドウ画面ミラーリングコントロールが表示されているフローティング制御ウィンドウを表示し、前記ミニウィンドウ画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されている。
選択可能な一実施例において、前記インタフェース表示モジュールは、前記フローティングウィンドウに対するドラッグ操作を受信すると、前記ドラッグ操作に応じて前記フローティングウィンドウの表示状態を変更するように構成されている。
選択可能な一実施例において、前記インタフェース表示モジュールは、前記第１のアプリケーションに対する全画面表示命令を受信すると、前記フローティングウィンドウをキャンセルし、前記第１のアプリケーションのユーザインタフェースを全画面で表示するように構成されている。
本発明の一態様によれば、プロセッサとメモリとを含み、前記メモリには、前記プロセッサによって実行され上記の態様に記載の画面ミラーリング方法を実現する少なくとも１つの命令が記憶されている端末を提供する。
本発明の一態様によれば、プロセッサによって実行され上記の態様に記載の画面ミラーリング方法を実現する少なくとも１つの命令が記憶されているコンピュータ読み取り可能な記憶媒体を提供する。
本発明の一態様によれば、前記プロセッサによってロードされて実行され上記の態様に記載の画面ミラーリング方法を実行する少なくとも１つの命令が記憶されているコンピュータプログラム製品をさらに提供する。
本発明の実施例により提供される技術案は、少なくとも下記のような有益な効果を含む。
即ち、端末における第１のアプリケーションに対してフローティングウィンドウを生成し、画面ミラーリング技術により第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして、第１のアプリケーションを端末のバックグラウンドに後退させることにより、ホームページのユーザインタフェースで第２のアプリケーションも実行することができ、ユーザが複数のアプリケーションを同時に実行するという要求に満足する。ユーザは、この方法を使用することにより、画面ミラーリング時に他の操作を行うことができないという問題を解決することができる。
本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートである。 本発明の例示的な一実施例により提供される端末が画面ミラーリング命令を受信する模式図である。 本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートである。 本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートである。 本発明の例示的な一実施例により提供される端末が他の操作命令を受信する模式図である。 本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートである。 本発明の例示的な一実施例により提供される端末がドラッグ操作を受信する模式図である。 本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートである。 本発明の例示的な一実施例により提供される画面ミラーリング装置の構造のブロック図である。 本発明の例示的な一実施例により提供される画面ミラーリング装置の構造のブロック図である。 本発明の例示的な一実施例により提供される端末の構造のブロック図である。
本発明の目的、技術案、及び利点をさらに明確にするために、以下、図面と組み合わせて、本発明の実施形態についてさらに詳細に説明する。
本文に記載される「複数」は、２つ又は２つ以上を指す。「及び／又は」は、関連対象の関連関係を説明し、３つの関係が存在する。例えば、Ａ及び／又はＢは、Ａが単独で存在するか、ＡとＢが同時に存在するか、Ｂが単独で存在する３つの状況を示すことができる。符号「／」は、一般的に前後の関連対象が「又は」との関係を示す。
図１は、本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートを示す。この方法は、端末に適用される画面ミラーリング方法であって、以下のようなステップ１０１と、ステップ１０２と、ステップ１０３と、を含む。
ステップ１０１：第１のアプリケーションのユーザインタフェースを表示する。
選択的に、第１のアプリケーションは、端末のフォアグラウンドで実行し、且つ、全画面で表示されるアプリケーションである。第１のアプリケーションは、端末にインストールされた任意のアプリケーションであってもよく、ユーザがこの第１のアプリケーションに対して画面ミラーリング操作を行う。
ステップ１０２：第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示する。
図２を参照すると、図２は、例示的な一実施例により提供される端末が画面ミラーリング命令を受信する模式図である。図２（ａ）に示すように、ステータスバーに第１の画面ミラーリングコントロール２０１を表示し、第１の画面ミラーリングコントロール２０１により第１のアプリケーションに対する画面ミラーリング命令をトリガする。又は、通知バーに第２の画面ミラーリングコントロール２０２を表示し、第２の画面ミラーリングコントロール２０２により第１のアプリケーションに対する画面ミラーリング命令をトリガする。又は、図２（ｂ）に示すように、ミニウィンドウ画面ミラーリングコントロール２０４が表示されているフローティング制御ウィンドウ２０３を表示し、ミニウィンドウ画面ミラーリングコントロール２０４により第１のアプリケーションに対する画面ミラーリング命令をトリガする。
選択的に、ユーザが上記の画面ミラーリング命令により第１のアプリケーションを成功的にミラーリングした後、上記の画面ミラーリングコントロールを再度操作して、画面ミラーリング終了命令をトリガして、第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示することを終了する。
模式的に、図２（ｂ）に示すように、端末は、フローティング制御ウィンドウ２０３を表示する。フローティング制御ウィンドウ２０３には、この端末と通信可能に接続された他の端末が表示されており、他の端末は、この端末からのミラーリングデータを受信し、ミラーリングされている第１のアプリケーションのユーザインタフェースを表示する。画面ミラーリングデータは、符号データ、文字データ、デジタルデータ、音声データ、画像データ、映像データのうちの少なくとも１つを含む。
選択的に、上記の画面ミラーリング命令のトリガは、画面ミラーリングコントロールに対するシングルクリック操作、ダブルクリック操作、押圧操作及び長押し操作のうちの少なくとも１つを含むが、本発明の実施例はこれを限定するものではない。
選択的に、ホームページのユーザインタフェースで画面ミラーリング操作を受信すると、画面ミラーリング機能を起動するものではない。
ステップ１０３、ホームページのユーザインタフェースを表示し、第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示する。
選択的に、フローティングウィンドウは、デフォルトでホームページのユーザインタフェースの右側の中間位置に表示される。
以上のように、本実施例により提供される方法によれば、端末における第１のアプリケーションに対してフローティングウィンドウを生成し、画面ミラーリング技術により第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして、第１のアプリケーションを端末のバックグラウンドに後退させ実行状態にし、ホームページのユーザインタフェースで第２のアプリケーションも実行することができ、ユーザが複数のアプリケーションを同時に実行するという要求に満足する。
図３を参照すると、図１におけるステップ１０３は、代わりとしてステップ１０３１又はステップ１０３２で実現されてもよい。
ステップ１０３１、第１のアプリケーションをバックグラウンドで実行するように切り替え、ホームページのユーザインタフェースを表示し、画面ミラーリング時の第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示する。
ステップ１０３２、第１のアプリケーションをバックグラウンドで実行するように切り替え、ホームページのユーザインタフェースを表示し、フローティングウィンドウの形式で第１のアプリケーションのリアルタイム実行画面を表示する。
なお、フローティングウィンドウの画面コンテンツと他の端末にミラーリングして表示された画面コンテンツは、必ずしも同一ではない。画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示する場合、フローティングウィンドウの画面コンテンツと他の端末にミラーリングして表示された画面コンテンツは同一である。フローティングウィンドウの形式で前記第１のアプリケーションのリアルタイム実行画面を表示する場合、フローティングウィンドウの画面コンテンツと他の端末にミラーリングして表示された画面コンテンツは異なる。
一例において、第１のアプリケーションをバックグラウンドで実行するように切り替えることは、第１のアプリケーションのアプリケーションのプロセスをバックグラウンドに切り替え、且つアプリケーションのプロセスのプロセス状態を実行状態に維持することを含む。
なお、第１のアプリケーションをバックグラウンドで実行するように切り替える場合、マルチタスク管理インタフェースに画面ミラーリング状態にある第１のアプリケーションを観察することができる。
選択的に、アンドロイドシステムにおいて、ユーザは、端末のメニューボタンをクリックすることにより、マルチタスク管理インタフェースをトリガすることができる。マルチタスク管理インタフェースには、この端末で実行している、画面ミラーリング状態にある第１のアプリケーションを含むすべてのアプリケーションプログラムが表示される。ユーザは、指でスライドして実行しているすべてのアプリケーションプログラムを観察することができる。
マルチタスク管理インタフェースにおける第１のアプリケーションに対する消去操作は、第１のアプリケーションを選択してマルチタスク管理インタフェースのエッジにスライドすること、又は、マルチタスク管理インタフェースの下方の消去コントロールをクリックすることを含む。
第１のアプリケーションを選択してマルチタスク管理インタフェースのエッジにスライドする場合、第１のアプリケーションがロックされているので、第１のアプリケーションは消去されなく、マルチタスク管理インタフェースは変更されなく、端末は、第１のアプリケーションのユーザインタフェースをミラーリングし続ける。
マルチタスク管理インタフェースの下方の消去コントロールをクリックする場合、第１のアプリケーションがロックされているので、第１のアプリケーションは消去されなく、端末は、第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングし続ける。マルチタスク管理インタフェースにおけるロックされている他のアプリケーションも消去されなく、ロックされていないアプリケーションのみは消去されて、マルチタスク管理インタフェースに削除する。
選択的に、ロックを手動で解除することにより、マルチタスク管理インタフェースにおける前記第１のアプリケーションに対する消去操作を受信すると、第１のアプリケーションを前記マルチタスク管理インタフェースに削除し、且つ、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングし続ける。
選択的に、端末は、アンドロイドシステムを使用する。
アクティビティ（Ａｃｔｉｖｉｔｙ）は、アンドロイドシステムのアプリケーションユニットである。アプリケーションは、通常、複数のアクティビティからなり、一般的に、アプリケーションにおけるあるアクティビティをメインアクティビティ、即ちアプリケーション初回起動時にユーザに表示されるアクティビティとして指定する。アクティビティは、いずれもそのユーザインタフェースを描画するためのビュー（Ｖｉｅｗ）を取得し、ビューウィンドウは、全画面に表示されることもでき、画面より小さくて他のウィンドウの上に浮かぶこともできる。表面ビュー（ＳｕｒｆａｃｅＶｉｅｗ）は、ビューの基底クラスであり、ビューに描画専用の表面（Ｓｕｒｆａｃｅ）が埋め込まれ、表面ビューは、この表面の描画位置を制御する。
一部のゲーム類や音声映像再生類のアプリケーションプログラムは、それらのインタフェースがいずれも複雑であり、頻繁に更新する必要があるので、効率的な描画が要求され、一般的に、表面ビューを採用する。ビューを採用する場合、インタフェースは、アプリケーションプログラムのメインスレッドで描画され、ユーザの入力に適時に応答できない。表面ビューは、ダブルバッファリングメカニズムを採用して、複雑で効率的なインタフェースを必要とするビューのために個別の描画面を生成し、且つ個別のスレッドによりそれらのビューのインタフェースを描画する。つまり、表面ビューは、複雑で効率的なインタフェースを実現できるとともに、ユーザの入力に適時に応答できないことはない。
選択的に、ミラーリングされる第１のアプリケーションのために第１の識別子を設定する。ビューによるアプリケーションプログラムの場合、このアプリケーションプログラムは、１つの第１の識別子を備える。表面ビューによるアプリケーションプログラムの場合、２つの描画面があるので、このアプリケーションプログラムは、２つの第１の識別子を備える。第１のアプリケーションに対して画面ミラーリング操作をトリガする場合、第１の識別子を１に設定し、この第１のアプリケーションに対して画面ミラーリング終了操作をトリガする場合、第１の識別子を０に設定する。
表面フリンジャー（ＳｕｒｆａｃｅＦｌｉｎｇｅｒ）は、アンドロイドシステムにおけるアプリケーションプログラムの描画インタフェースにサービスを提供するシステムサービスである。表面フリンジャーにおいて設定された第１の識別子を使用して、第１のアプリケーションに対して画面ミラーリング操作をオン又はオフにする。
以上のように、本実施例により提供される方法によれば、ミラーリングされている第１のアプリケーションに対してフローティングウィンドウを生成し、バックグラウンドに切り替えて実行状態にすることにより、ミラーリングされているアプリケーションをバックグラウンドに切り替えると実行が中断されるという問題を解決する。
図４を参照すると、図１におけるステップ１０３の後に、選択可能的なステップは、ステップ１０４を含む。
ステップ１０４：端末に対する他の操作命令を受信すると、対応する操作命令を実行し、依然としてフローティングウィンドウの形式で第１のアプリケーションのユーザインタフェースを表示する。
選択的に、端末が受信したのは、第２のアプリケーションのアプリケーションエントリに対するトリガ操作命令である。
第２のアプリケーションは、端末にインストールされた第１のアプリケーション以外の任意のアプリケーションである。この場合、第２のアプリケーションは、端末のフォアグラウンドで実行し、第２のアプリケーションのユーザインタフェースは、全画面で端末の画面に表示され、フローティングウィンドウは、第２のアプリケーションのユーザインタフェースに重ねられる。
選択的に、第２のアプリケーションのアプリケーションエントリは、通知バーに位置するアプリケーション起動コントロールと、ステータスバーに位置するアプリケーション起動コントロールと、ホームページのユーザインタフェースに位置するアプリケーションアイコンと、を含む。
選択的に、上記のトリガ操作は、第２のアプリケーションのアプリケーションエントリに対するシングルクリック操作、ダブルクリック操作、押圧操作及び長押し操作のうちの少なくとも１つを含み、本発明の実施例はこれを限定するものではない。
模式的に、図５に示すように、端末は、フローティングウィンドウ２０Ａが重ねられているホームページのユーザインタフェース２０Ｂを表示し、第２のアプリケーションのアプリケーションエントリ２０５に対するトリガ操作を受信すると、ホームページのユーザインタフェース２０Ｂを第２のアプリケーションのユーザインタフェース２０Ｃに切り替え、この時、第２のアプリケーションは、端末のフォアグラウンドで実行し、フローティングウィンドウ２０Ａは、第２のアプリケーションのユーザインタフェース２０Ｃに重ねられる。
以上のように、本実施例により提供される方法によれば、ミラーリングされている第１のアプリケーションに対してフローティングウィンドウを生成し、バックグラウンドに切り替えて実行状態にすることにより、ユーザが端末に対して他の操作を行うことができ、他のアプリケーションを端末のフォアグラウンドで実行し、ユーザが画面ミラーリング時に他のアプリケーションを実行するという要求に満足する。
図６は、本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートを示す。図１に基づいて、ステップ１０３の後に、選択可能的なステップは、ステップ１０５を含む。
ステップ１０５：フローティングウィンドウに対するドラッグ操作を受信すると、ドラッグ操作に応じてフローティングウィンドウの表示状態を変更する。
なお、ドラッグ操作は、フローティングウィンドウの表示状態のみを変更し、端末が第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングすることに影響を与えない。
模式的に、ドラッグ操作は、フローティングウィンドウを上へ移動させる操作、下へ移動させる操作、左へ移動させる操作、及び右へ移動させる操作のうちの少なくとも１つを含む。
ドラッグ操作後、フローティングウィンドウと画面のエッジとの間の距離が閾値未満である場合、フローティングウィンドウを縮小してエッジに表示する。ここで、エッジは、ステータスバー及びナビゲーションバーが位置するエッジ以外の他のエッジを指す。
選択的に、閾値は、端末により設定されており、フローティングウィンドウと画面のエッジの間の距離は、フローティングウィンドウの中心から画面のエッジまでの長さとして定義される。
なお、この時、画面には、ホームページのユーザインタフェースが表示されてもよく、第２のユーザインタフェースが表示されてもよい。
一例において、縮小されたフローティングウィンドウに対する展開操作を受信した後、フローティングウィンドウは、エッジから非エッジ領域に回復され表示される。
選択的に、展開操作は、縮小されたフローティングウィンドウをクリックする操作、又は、縮小されたフローティングウィンドウを画面の非エッジ領域にスライドする操作を含む。
一例において、展開されたフローティングウィンドウに対する縮小操作を受信した後、フローティングウィンドウを非エッジ領域からエッジに表示する。
模式的に、フローティングウィンドウを画面のエッジにスライドする場合、フローティングウィンドウは縮小される。
１つの可能な場合において、フローティングウィンドウとエッジとの間に他のフローティングコントロールが含まれる場合、フローティングウィンドウを目標位置に移動させた後、さらにフローティングウィンドウを縮小してエッジに表示する。ここで、目標位置は、エッジとの間に他のフローティングコントロールが含まれない位置を指す。
選択的に、フローティングコントロールは、フローティングボールと、ゲームツールボックスと、加速ボールと、を含む。
模式的に、図７に示すように、フローティングウィンドウ２０Ａは、ホームページのユーザインタフェース２０Ｂの右上位置に重ねて表示される。ドラッグ操作により、フローティングウィンドウ２０Ａの表示位置は、ホームページのユーザインタフェース２０Ｂの中央に変更される。
閾値がホームページのユーザインタフェース２０Ｂの幅の半分に設定される場合、端末は、フローティングウィンドウ２０Ａとメインユーザインタフェース２０Ｂの左右両側エッジまでの距離を計算する。メインユーザインタフェース２０Ｂの右側エッジまでの距離が設定された閾値未満である場合、フローティングウィンドウ２０Ａは、メインユーザインタフェース２０Ｂの右側エッジまで縮小される。
以上のように、本実施例により提供される方法によれば、ドラッグ操作によりフローティングウィンドウの位置を変更し、展開又は縮小操作によりフローティングウィンドウのサイズを変更することにより、ユーザの他の操作に対するフローティングウィンドウの干渉を低減することができ、全画面使用が必要なゲームまたはビデオプレイなどのアプリケーションに対する操作が便利になる。
図８は、本発明の例示的な一実施例により提供される画面ミラーリング方法のフローチャートを示す。図１に基づいて、ステップ１０３の後に、選択可能的なステップは、ステップ１０６を含む。
ステップ１０６、第１のアプリケーションに対する全画面表示命令を受信すると、フローティングウィンドウをキャンセルし、第１のアプリケーションのユーザインタフェースを全画面で表示する。
選択的に、第１のアプリケーションに対する全画面表示命令は、以下の方式のうちの少なくとも１つによりトリガされる。
I．フローティングウィンドウに対するトリガ操作を受信すると、第１のアプリケーションのユーザインタフェースを全画面で表示する。
模式的に、端末が第１のアプリケーションのユーザインタフェースが他の端末の画面にミラーリングする場合、ホームページのユーザインタフェースにフローティングウィンドウが重ねられ、ユーザがフローティングウィンドウをトリガする場合、端末の表示インタフェースは、ホームページのユーザインタフェースから第１のアプリケーションのユーザインタフェースに変換され、第１のアプリケーションは、バックグラウンド実行状態からフォアグラウンド実行状態に変更される。
II．マルチタスク管理インタフェースにおける第１のアプリケーションのトリガ操作を受信すると、第１のアプリケーションのユーザインタフェースを全画面で表示する。
模式的に、マルチタスク管理インタフェースには、実行しているすべてのアプリケーションプログラムが表示される。ユーザがマルチタスク管理インタフェースにおける第１のアプリケーションをトリガする場合、端末の表示インタフェースは、マルチタスク管理インタフェースから第１のアプリケーションのユーザインタフェースに変換され、第１のアプリケーションは、バックグラウンド実行状態からフォアグラウンド実行状態に変更される。
III．通知バーにおける第１のアプリケーションのトリガ操作を受信すると、第１のアプリケーションのユーザインタフェースを全画面で表示する。
選択的に、ユーザは、端末の画面の頂部を上から下にスライドすることにより、通知バーを起動することができる。システム設定により通知バーを管理でき、通知バーに第１のアプリケーションが表示されることは許可される。
ホームページのユーザインタフェースにおける第１のアプリケーションのアイコンに対するトリガ操作を受信すると、第１のアプリケーションのユーザインタフェースを全画面で表示する。
模式的に、ユーザがホームページのユーザインタフェースにおける第１のアプリケーションをトリガする場合、端末の表示インタフェースは、ホームページのユーザインタフェースから第１のアプリケーションのユーザインタフェースに変換され、第１のアプリケーションは、バックグラウンド実行状態からフォアグラウンド実行状態に変更される。
選択的に、上記のトリガ操作は、シングルクリック操作、ダブルクリック操作、押圧操作及び長押し操作のうちの少なくとも１つを含み、本発明の実施例はこれを限定するものではない。
以上のように、本実施例により提供される方法によれば、トリガ操作により、第１のアプリケーションのユーザインタフェースを全画面で表示するように回復させるとともに、フローティングウィンドウをキャンセルし、端末での第１のアプリケーションの使用に影響を与えない。
図９は、本発明の例示的な一実施例により提供される画面ミラーリング装置の構造のブロック図を示し、この装置は、ソフトウェア、ハードウェア、又は両者の組み合わせを介して端末の全部又は一部を実現することができる。この装置は、インタフェース表示モジュール１００１と画面ミラーリングモジュール１００２とを含む。
インタフェース表示モジュール１００１は、第１のアプリケーションのユーザインタフェースを表示するように構成されており、
画面ミラーリングモジュール１００２は、前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するように構成されており、
インタフェース表示モジュール１００１は、ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するように構成されている。
以上のように、本実施例により提供される装置によれば、端末における第１のアプリケーションがフローティングウィンドウを生成し、画面ミラーリング技術により第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングすることにより、第１のアプリケーションを端末のバックグラウンドに後退させ実行状態にし、ホームページのユーザインタフェースで第２のアプリケーションを実行することができ、ユーザが複数のアプリケーションを同時に実行するという要求に満足する。
図１０は、本発明の例示的な一実施例により提供される画面ミラーリング装置の構造のブロック図を示し、この装置は、ソフトウェア、ハードウェア、又は両者の組み合わせを介して端末の全部又は一部を実現することができる。この装置は、インタフェース表示モジュール１００１と、画面ミラーリングモジュール１００２と、プロセシングモジュール１００３と、を含む。
インタフェース表示モジュール１００１は、第１のアプリケーションのユーザインタフェースを表示するように構成されており、
画面ミラーリングモジュール１００２は、前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するように構成されており、
インタフェース表示モジュール１００１は、ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するように構成されている。
一例において、プロセシングモジュール１００３は、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、前記インタフェース表示モジュール１００１は、前記ホームページのユーザインタフェースを表示し、画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小して前記フローティングウィンドウの形式で表示するように構成されているか、
又は、前記プロセシングモジュール１００３は、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、インタフェース表示モジュール１００１は、前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのリアルタイム実行画面を前記フローティングウィンドウの形式で表示するように切り替えて構成されている。
一例において、プロセシングモジュール１００３は、前記端末に対する他の操作命令を受信すると、対応する操作命令を実行するように構成されており、
インタフェース表示モジュール１００１は、依然として前記フローティングウィンドウの形式で前記第１のアプリケーションのユーザインタフェースを表示するように構成されている。
一例において、プロセシングモジュール１００３は、ステータスバーに第１の画面ミラーリングコントロールを表示し、前記第１の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
プロセシングモジュール１００３は、通知バーに第２の画面ミラーリングコントロールを表示し、前記第２の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
プロセシングモジュール１００３は、ミニウィンドウ画面ミラーリングコントロールが表示されているフローティング制御ウィンドウを表示し、前記ミニウィンドウ画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されている。
一例において、インタフェース表示モジュール１００１は、前記フローティングウィンドウに対するドラッグ操作を受信すると、前記ドラッグ操作に応じて前記フローティングウィンドウの表示状態を変更するように構成されている。
一例において、インタフェース表示モジュール１００１は、前記第１のアプリケーションに対する全画面表示命令を受信すると、前記フローティングウィンドウをキャンセルし、前記第１のアプリケーションのユーザインタフェースを全画面で表示するように構成されている。
図１１は、本発明の例示的な一実施例により提供される端末１１００の構造のブロック図を示す。この端末１１００は、アプリケーションプログラムがインストールされ実行され画面ミラーリングを行うことができるスマートフォン、タブレットＰＣ、電子書籍、携帯用パーソナルコンピュータなどの電子デバイスであってもよい。本発明における端末１１００は、プロセッサ１１１０、メモリ１１２０及び画面１１３０の１つ又は複数の部品を備えてもよい。
プロセッサ１１１０は、１つ又は複数の処理コアを備えてもよい。プロセッサ１１１０は、様々なインタフェース及び線路により端末１１００全体における各部を接続し、メモリ１１２０に記憶された命令、プログラム、コードセット、又は命令セットを実行又は遂行し、メモリ１１２０に記憶されたデータを呼び出すことにより、端末１１００の様々な機能及び処理データを実行する。選択的に、プロセッサ１１１０は、デジタル信号処理（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｉｎｇ，ＤＳＰ）、フィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ，ＦＰＧＡ）、プログラマブルロジックアレイ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ａｒｒａｙ，ＰＬＡ）のうちの少なくとも１つのハードウェアの形式を使用して実現されてもよい。プロセッサ１１１０は、中央処理ユニット（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ，ＣＰＵ）、画像処理ユニット（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ，ＧＰＵ）及びモデムなどのうちの１つ又は複数の組み合わせを集積化することができる。ここで、ＣＰＵは、主に操作システム、ユーザインタフェース及びアプリケーションプログラムなどを処理する。ＧＰＵは、画面１１３０に表示しようとするコンテンツのレンダリング及び描画を担当するためのものである。モデムは、無線通信を処理するためのものである。上記のモデムは、プロセッサ１１１０に集積化されずに、単独に通信チップにより実現されてもよいことと理解すべきである。
メモリ１１２０は、ランダムアクセスメモリ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ，ＲＡＭ）を含んでもよく、読み出し専用メモリ（Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）を含んでもよい。選択的に、このメモリ１１２０は、非一時的なコンピュータ読み取り可能な記憶媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ−ｒｅａｄａｂｌｅ ｓｔｏｒａｇｅ ｍｅｄｉｕｍ）を含む。メモリ１１２０は、命令、プログラム、コード、コードセット又は命令セットを記憶するためのものであってもよい。メモリ１１２０は、プログラム記憶領域及びデータ記憶領域を含んでもよい。ここで、プログラム記憶領域には、操作システムを実現するための命令、少なくとも１つの機能を実現するための命令（例えばタッチ機能、音声再生機能、画像再生機能など）、上記の各方法実施例を実現するための命令などが記憶されてもよく、この操作システムは、アンドロイド（Ａｎｄｒｏｉｄ）システム（アンドロイドシステムによる深層開発システムを含む）、アップル社が開発したＩＯＳシステム（ＩＯＳシステムによる深層開発システムを含む）又は他のシステムであってもよい。データ記憶領域には、使用中の端末１１００などにより作成されたデータ（例えば電話帳、音声映像データ、チャット記録データ）などが記憶されてもよい。
画面１１３０は、タッチディスプレイであってもよく、このタッチディスプレイは、ユーザが指やタッチペンなどの任意の適切なオブジェクトでそれ又はその近くに対して行うタッチ操作を受信し、且つ、各アプリケーションプログラムのユーザインタフェースを表示するためのものである。タッチディスプレイは、通常、端末１１００のフロントパネルに設置される。タッチディスプレイは、フルスクリーン、曲面スクリーン、又は異形スクリーンとして設計されてもよい。タッチディスプレイは、フルスクリーンと曲面スクリーンの組み合わせや、異形スクリーンと曲面スクリーンの組み合わせとして設計されてもよく、本発明の実施例は、これに対して限定しない。
他にも、当業者は、上記の図面に示される端末１１００の構造は、端末１１００を限定しなく、端末は、図示されたものよりも多い又は少ない部品、又はいくつかの部品の組み合わせ、又は異なる部品配置を含むことができることと理解すべきである。例えば、端末１１００には、無線周波数回路、撮像ユニット、センサ、オーディオ回路、ワイファイ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ，ＷｉＦｉ）ユニット、電源、ブルートゥースユニットなどの部品をさらに含むが、ここで説明を省略する。
本発明の実施例は、前記プロセッサによってロードされて実行され前記各実施例に記載の画面ミラーリング方法を実現する少なくとも１つの命令が記憶されているコンピュータ読み取り可能な記憶媒体をさらに提供する。
本発明の実施例は、前記プロセッサによってロードされて実行され前記各実施例に記載の画面ミラーリング方法を実行する少なくとも１つの命令が記憶されているコンピュータプログラム製品をさらに提供する。
当業者にとって、上記１つ又は複数の実施例において、本発明の実施例で説明している機能は、ハードウェア、ソフトウェア、ファームウェア、又はこれらの任意の組み合わせによって実現することができると理解すべきである。ソフトウェアを使用して実現する場合には、これらの機能をコンピュータ読み取り可能な媒体に記憶したり、又はコンピュータ読み取り可能な媒体の１つ又は複数の命令又はコードとして送信されることができる。コンピュータ読み取り可能な媒体は、コンピュータ記憶媒体と通信媒体とを含む。ここで、通信媒体は、１つの場所から別の場所へコンピュータプログラムを伝送するのに便利な任意の媒体を含む。記憶媒体は、一般的又は専用のコンピュータがアクセス可能な任意の媒体でもよい。
上述したのは、本発明の選択的な実施例に過ぎず、本発明を制限するためのものではない。本発明の要旨及び原則内で行う如何なる修正、同等置換、改良等は、何れも、本発明の保護範囲内に含まれる。

Claims (14)

  1. 端末に適用される画面ミラーリング方法であって、
    第１のアプリケーションのユーザインタフェースを表示するステップと、
    前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するステップと、
    ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップと、含むことを特徴とする画面ミラーリング方法。
  2. 前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップは、
    前記第１のアプリケーションをバックグラウンドで実行するように切り替え、前記ホームページのユーザインタフェースを表示し、画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小して前記フローティングウィンドウの形式で表示するステップ、
    又は
    前記第１のアプリケーションをバックグラウンドで実行するように切り替え、前記ホームページのユーザインタフェースを表示し、前記フローティングウィンドウの形式で前記第１のアプリケーションのリアルタイム実行画面を表示するステップ、を含むことを特徴とする請求項１に記載の画面ミラーリング方法。
  3. 前記ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するステップの後に、
    前記端末に対する他の操作命令を受信すると、対応する操作命令を実行し、依然として前記フローティングウィンドウの形式で前記第１のアプリケーションのユーザインタフェースを表示するステップを、さらに含むことを特徴とする請求項１に記載の画面ミラーリング方法。
  4. 前記第１のアプリケーションに対するユーザの画面ミラーリング命令は、
    ステータスバーに第１の画面ミラーリングコントロールを表示し、前記第１の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式、
    通知バーに第２の画面ミラーリングコントロールを表示し、前記第２の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式、及び
    ミニウィンドウ画面ミラーリングコントロールが表示されているフローティング制御ウィンドウを表示し、前記ミニウィンドウ画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガする方式のうちの少なくとも１つの方式によりトリガされることを特徴とする請求項１に記載の画面ミラーリング方法。
  5. 前記フローティングウィンドウに対するドラッグ操作を受信すると、前記ドラッグ操作に応じて前記フローティングウィンドウの表示状態を変更するステップを、さらに含むことを特徴とする請求項１から請求項４のいずれか１項に記載の画面ミラーリング方法。
  6. 前記第１のアプリケーションに対する全画面表示命令を受信すると、前記フローティングウィンドウをキャンセルし、前記第１のアプリケーションのユーザインタフェースを全画面で表示するステップを、さらに含むことを特徴とする請求項１に記載の画面ミラーリング方法。
  7. インタフェース表示モジュールと画面ミラーリングモジュールとを含み、
    前記インタフェース表示モジュールは、第１のアプリケーションのユーザインタフェースを表示するように構成されており、
    前記画面ミラーリングモジュールは、前記第１のアプリケーションに対するユーザの画面ミラーリング命令を受信すると、前記第１のアプリケーションのユーザインタフェースを他の端末の画面にミラーリングして表示するように構成されており、
    前記インタフェース表示モジュールは、ホームページのユーザインタフェースを表示し、前記第１のアプリケーションのユーザインタフェースを縮小してフローティングウィンドウの形式で表示するように構成されていることを特徴とする画面ミラーリング装置。
  8. プロセシングモジュールをさらに含み、
    前記プロセシングモジュールは、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、前記インタフェース表示モジュールは、前記ホームページのユーザインタフェースを表示し、画面ミラーリング時の前記第１のアプリケーションのユーザインタフェースを縮小して前記フローティングウィンドウの形式で表示するように構成されているか、
    又は、
    前記プロセシングモジュールは、前記第１のアプリケーションをバックグラウンドで実行するように切り替えて構成されており、前記インタフェース表示モジュールは、前記ホームページのユーザインタフェースを表示し、前記フローティングウィンドウの形式で前記第１のアプリケーションのリアルタイム実行画面を表示するように切り替えて構成されていることを特徴とする請求項７に記載の画面ミラーリング装置。
  9. プロセシングモジュールをさらに含み、
    前記プロセシングモジュールは、前記端末に対する他の操作命令を受信すると、対応する操作命令を実行するように構成されており、
    前記インタフェース表示モジュールは、依然として前記フローティングウィンドウの形式で前記第１のアプリケーションのユーザインタフェースを表示するように構成されていることを特徴とする請求項７に記載の画面ミラーリング装置。
  10. プロセシングモジュールをさらに含み、
    前記プロセシングモジュールは、ステータスバーに第１の画面ミラーリングコントロールを表示し、前記第１の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
    前記プロセシングモジュールは、通知バーに第２の画面ミラーリングコントロールを表示し、前記第２の画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されており、
    前記プロセシングモジュールは、ミニウィンドウ画面ミラーリングコントロールが表示されているフローティング制御ウィンドウを表示し、前記ミニウィンドウ画面ミラーリングコントロールにより前記第１のアプリケーションに対する画面ミラーリング命令をトリガするように構成されていることを特徴とする請求項７に記載の画面ミラーリング装置。
  11. 前記インタフェース表示モジュールは、前記フローティングウィンドウに対するドラッグ操作を受信すると、前記ドラッグ操作に応じて前記フローティングウィンドウの表示状態を変更するように構成されていることを特徴とする請求項７から請求項１０のいずれか１項に記載の画面ミラーリング装置。
  12. 前記インタフェース表示モジュールは、前記第１のアプリケーションに対する全画面表示命令を受信すると、前記フローティングウィンドウをキャンセルし、前記第１のアプリケーションのユーザインタフェースを全画面で表示するように構成されていることを特徴とする請求項７に記載の画面ミラーリング装置。
  13. プロセッサとメモリとを含み、
    前記メモリには、前記プロセッサによって実行され請求項１から請求項６のいずれか１項に記載の画面ミラーリング方法を実現する少なくとも１つの命令が記憶されていることを特徴とする端末。
  14. プロセッサによって実行され請求項１から請求項６のいずれか１項に記載の画面ミラーリング方法を実現する少なくとも１つの命令が記憶されていることを特徴とするコンピュータ読み取り可能な記憶媒体。
JP2019564795A 2019-08-28 2019-10-10 画面ミラーリング方法、装置、端末及び記憶媒体 Active JP7114633B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201910803914.4A CN110515579A (zh) 2019-08-28 2019-08-28 投屏方法、装置、终端及存储介质
CN201910803914.4 2019-08-28
PCT/CN2019/110475 WO2021035884A1 (zh) 2019-08-28 2019-10-10 投屏方法、装置、终端及存储介质

Publications (2)

Publication Number Publication Date
JP2022502719A true JP2022502719A (ja) 2022-01-11
JP7114633B2 JP7114633B2 (ja) 2022-08-08

Family

ID=68628494

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019564795A Active JP7114633B2 (ja) 2019-08-28 2019-10-10 画面ミラーリング方法、装置、端末及び記憶媒体

Country Status (7)

Country Link
US (1) US11474657B2 (ja)
EP (1) EP3786792A1 (ja)
JP (1) JP7114633B2 (ja)
KR (1) KR102300104B1 (ja)
CN (1) CN110515579A (ja)
RU (1) RU2739586C1 (ja)
WO (1) WO2021035884A1 (ja)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026484A (zh) * 2019-12-02 2020-04-17 维沃移动通信有限公司 一种应用分享方法、第一电子设备及计算机可读存储介质
CN111045772A (zh) * 2019-12-02 2020-04-21 维沃移动通信有限公司 一种应用分享方法、电子设备及计算机可读存储介质
CN111049979B (zh) * 2019-12-02 2021-04-27 维沃移动通信有限公司 一种应用分享方法、电子设备及计算机可读存储介质
CN116055773A (zh) * 2019-12-17 2023-05-02 华为技术有限公司 一种多屏协同方法、系统及电子设备
CN111176506A (zh) * 2019-12-25 2020-05-19 华为技术有限公司 一种屏幕显示方法及电子设备
CN111324327B (zh) * 2020-02-20 2022-03-25 华为技术有限公司 投屏方法及终端设备
CN111314768A (zh) * 2020-02-24 2020-06-19 北京小米移动软件有限公司 投屏方法、投屏装置、电子设备以及计算机可读存储介质
CN111432070B (zh) * 2020-03-17 2022-04-08 阿波罗智联(北京)科技有限公司 应用投屏控制方法、装置、设备和介质
CN111399720A (zh) * 2020-03-24 2020-07-10 北京小米移动软件有限公司 一种显示应用界面的方法、装置及存储介质
CN111459436B (zh) * 2020-03-31 2021-11-16 联想(北京)有限公司 输出控制方法及装置
CN114201128A (zh) 2020-09-02 2022-03-18 华为技术有限公司 一种显示方法及设备
CN111880757A (zh) * 2020-06-30 2020-11-03 北京小米移动软件有限公司 投屏方法、投屏装置及存储介质
CN111930278B (zh) * 2020-07-08 2022-06-10 京东方科技集团股份有限公司 智能交互设备、智能交互方法和存储介质
CN111770379B (zh) * 2020-07-10 2021-08-24 腾讯科技（深圳）有限公司 一种视频投放方法、装置及设备
CN117215697A (zh) * 2020-07-21 2023-12-12 联想(北京)有限公司 一种控制方法及装置
CN111857925B (zh) * 2020-07-21 2022-05-31 联想(北京)有限公司 一种投屏处理方法及装置
CN114115770A (zh) * 2020-08-31 2022-03-01 华为终端有限公司 显示控制的方法及相关装置
CN112243142B (zh) * 2020-10-14 2023-06-30 北京小米移动软件有限公司 一种处理音频数据的方法、装置及存储介质
CN112367422B (zh) * 2020-10-30 2022-07-01 北京数秦科技有限公司 移动终端设备与显示系统的互动方法、装置及存储介质
CN112565839B (zh) * 2020-11-23 2022-11-29 青岛海信传媒网络技术有限公司 投屏图像的显示方法及显示设备
CN114691059B (zh) * 2020-12-25 2024-03-26 华为技术有限公司 一种投屏显示方法及电子设备
CN114816692A (zh) * 2021-01-29 2022-07-29 Oppo广东移动通信有限公司 投屏显示方法、装置、移动终端及存储介质
CN114942802A (zh) * 2021-02-07 2022-08-26 Oppo广东移动通信有限公司 应用切换方法、装置、终端及存储介质
CN112860156B (zh) * 2021-04-06 2023-02-24 展讯通信(天津)有限公司 应用的模块标签交互控制方法及装置、存储介质、计算机设备
CN115268618A (zh) * 2021-04-30 2022-11-01 华为技术有限公司 一种跨设备迁移任务的方法、装置、系统和存储介质
CN113467737A (zh) * 2021-06-29 2021-10-01 阿波罗智联(北京)科技有限公司 传输画面数据的方法、装置、设备及存储介质
US11934850B2 (en) 2021-08-06 2024-03-19 Samsung Electronics Co., Ltd Electronic device for displaying execution screen of application, operating method thereof, and storage medium
KR20230022047A (ko) * 2021-08-06 2023-02-14 삼성전자주식회사 어플리케이션의 실행 화면을 표시하기 위한 전자 장치, 그 동작 방법 및 저장 매체
CN113810760B (zh) * 2021-08-17 2023-04-21 荣耀终端有限公司 控制投屏的方法、电子设备及计算机可读存储介质
CN113760215B (zh) * 2021-11-08 2022-03-08 广州朗国电子科技股份有限公司 基于鸿蒙系统的多终端显示数据传输方法、设备及介质
CN114153542A (zh) * 2021-11-30 2022-03-08 阿波罗智联(北京)科技有限公司 投屏方法、装置、电子设备及计算机可读存储介质
CN114356162A (zh) * 2021-12-30 2022-04-15 Oppo广东移动通信有限公司 内容显示方法及相关产品
KR20230119536A (ko) * 2022-02-07 2023-08-16 삼성전자주식회사 외부 디스플레이 장치를 제어하기 위한 전자 장치 및 그 동작 방법
CN116055793B (zh) * 2022-06-07 2024-04-05 荣耀终端有限公司 投屏进程的管理方法、设备及存储介质
CN116795316B (zh) * 2023-08-24 2023-11-03 南京维赛客网络科技有限公司 投屏时小窗口播放场景内画面的方法、系统及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120173622A1 (en) * 2011-01-04 2012-07-05 Samsung Electronics Co., Ltd. Social screen casting
US20150363066A1 (en) * 2014-06-12 2015-12-17 Apple Inc. Systems and Methods for Efficiently Navigating Between Applications with Linked Content on an Electronic Device with a Touch-Sensitive Display
US20170235435A1 (en) * 2016-02-16 2017-08-17 Samsung Electronics Co., Ltd. Electronic device and method of application data display therefor
WO2018151522A1 (ko) * 2017-02-17 2018-08-23 삼성전자주식회사 화면을 공유하기 위한 전자 장치 및 방법

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7197715B1 (en) * 2002-03-29 2007-03-27 Digeo, Inc. System and method to provide customized graphical user interfaces via an interactive video casting network
AU2003239385A1 (en) * 2002-05-10 2003-11-11 Richard R. Reisman Method and apparatus for browsing using multiple coordinated device
JP4513023B2 (ja) * 2006-04-11 2010-07-28 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
EP1847924A1 (en) * 2006-04-20 2007-10-24 International Business Machines Corporation Optimal display of multiple windows within a computer display
KR101911740B1 (ko) * 2011-06-14 2018-10-26 삼성전자주식회사 모바일 디바이스에서 멀티태스킹 운용 방법 및 장치
WO2012106868A1 (zh) * 2011-07-06 2012-08-16 华为技术有限公司 视频播放内容切换的方法、装置及移动终端
US10776103B2 (en) * 2011-12-19 2020-09-15 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
US20140195675A1 (en) * 2013-01-09 2014-07-10 Giga Entertainment Media Inc. Simultaneous Content Data Streaming And Interaction System
CN103984494A (zh) * 2013-02-07 2014-08-13 上海帛茂信息科技有限公司 用于多种设备间的直觉式用户互动系统及方法
US10691291B2 (en) * 2013-05-24 2020-06-23 Samsung Electronics Co., Ltd. Method and apparatus for displaying picture on portable device
KR102163684B1 (ko) * 2013-07-19 2020-10-12 삼성전자주식회사 디바이스의 홈 스크린 구성 방법 및 장치
US10551995B1 (en) * 2013-09-26 2020-02-04 Twitter, Inc. Overlay user interface
KR102085181B1 (ko) * 2013-10-23 2020-03-05 삼성전자주식회사 데이터 전송 방법, 데이터 수신 방법, 및 디바이스
KR20150077774A (ko) * 2013-12-30 2015-07-08 삼성전자주식회사 화면 전환 방법 및 그 장치
US10417989B2 (en) * 2014-01-02 2019-09-17 Nvidia Corporation GPU and GPU computing system for providing a virtual machine and a method of manufacturing the same
CN104978156B (zh) * 2014-04-02 2021-10-22 联想(北京)有限公司 多屏显示方法及多屏显示处理装置
US10678412B2 (en) * 2014-07-31 2020-06-09 Microsoft Technology Licensing, Llc Dynamic joint dividers for application windows
US9800898B2 (en) * 2014-10-06 2017-10-24 Microsoft Technology Licensing, Llc Syntax structures indicating completion of coded regions
WO2016118519A1 (en) * 2015-01-19 2016-07-28 Berman Matthew System and methods for facile, instant, and minimally disruptive playback of media files
KR102557575B1 (ko) * 2015-08-06 2023-07-20 엘지전자 주식회사 이동단말기 및 그 제어방법
US20170064353A1 (en) * 2015-08-25 2017-03-02 Thomas Kwangsung KIM Planned video production system with feedback
US20170150203A1 (en) * 2015-11-24 2017-05-25 Le Holdings (Beijing) Co., Ltd. Method, apparatus, mobile terminal and computer device for previewing multimedia contents
CN105549819B (zh) * 2015-12-11 2019-04-02 努比亚技术有限公司 后台应用信息的显示方法及装置
CN105867762A (zh) * 2015-12-31 2016-08-17 乐视网信息技术（北京）股份有限公司 播放中视频的显示方法及装置
US20170213389A1 (en) * 2016-01-22 2017-07-27 Lg Electronics Inc. Mobile terminal and operating method thereof
CN105681441B (zh) * 2016-01-29 2019-06-28 腾讯科技（深圳）有限公司 数据传输方法及装置
CN107135366A (zh) * 2016-02-29 2017-09-05 赛尔莱博股份有限公司 插入有音源的图像生成方法及装置
CN106028143A (zh) * 2016-05-27 2016-10-12 北京小米移动软件有限公司 视频直播方法及装置
CN106537319A (zh) * 2016-10-31 2017-03-22 北京小米移动软件有限公司 分屏显示方法及装置
US10585637B2 (en) * 2017-03-27 2020-03-10 Lenovo (Beijing) Co., Ltd. Information processing method and electronic device
CN107037949B (zh) * 2017-03-29 2020-11-27 北京小米移动软件有限公司 一种分屏显示方法及装置
DK180117B1 (en) * 2017-05-15 2020-05-15 Apple Inc. SYSTEMS AND METHODS FOR INTERACTING WITH MULTIPLE APPLICATIONS THAT ARE SIMULTANEOUSLY DISPLAYED ON AN ELECTRONIC DEVICE WITH A TOUCHSENSITIVE DISPLAY
IL256693B2 (en) * 2017-05-27 2023-05-01 Segal Efraim A system and method for managing an online group
CN108255565B (zh) * 2018-01-29 2020-07-17 维沃移动通信有限公司 一种应用推送方法及移动终端
DK180316B1 (en) * 2018-06-03 2020-11-06 Apple Inc Devices and methods for interacting with an application switching user interface
CN109165076B (zh) * 2018-10-17 2022-03-29 Oppo广东移动通信有限公司 游戏应用程序的显示方法、装置、终端及存储介质
CN109889885A (zh) * 2019-02-27 2019-06-14 努比亚技术有限公司 一种投屏控制方法、终端及计算机可读存储介质
CN110109636B (zh) * 2019-04-28 2022-04-05 华为技术有限公司 投屏方法、电子设备以及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120173622A1 (en) * 2011-01-04 2012-07-05 Samsung Electronics Co., Ltd. Social screen casting
US20150363066A1 (en) * 2014-06-12 2015-12-17 Apple Inc. Systems and Methods for Efficiently Navigating Between Applications with Linked Content on an Electronic Device with a Touch-Sensitive Display
US20170235435A1 (en) * 2016-02-16 2017-08-17 Samsung Electronics Co., Ltd. Electronic device and method of application data display therefor
WO2018151522A1 (ko) * 2017-02-17 2018-08-23 삼성전자주식회사 화면을 공유하기 위한 전자 장치 및 방법

Also Published As

Publication number Publication date
EP3786792A1 (en) 2021-03-03
WO2021035884A1 (zh) 2021-03-04
CN110515579A (zh) 2019-11-29
KR20210028046A (ko) 2021-03-11
KR102300104B1 (ko) 2021-09-09
US11474657B2 (en) 2022-10-18
JP7114633B2 (ja) 2022-08-08
US20210064191A1 (en) 2021-03-04
RU2739586C1 (ru) 2020-12-28

Similar Documents

Publication Publication Date Title
JP2022502719A (ja) 画面ミラーリング方法、装置、端末及び記憶媒体
US11429275B2 (en) Electronic device with gesture-based task management
US9645730B2 (en) Method and apparatus for providing user interface in portable terminal
KR102118275B1 (ko) 이머시브 애플리케이션으로서의 데스크탑
JP5841791B2 (ja) 携帯用端末機における電子書籍ページめくり装置及び方法
KR102052424B1 (ko) 단말에서 애플리케이션 실행 윈도우 표시 방법 및 이를 위한 단말
US8988459B2 (en) Method and apparatus for operating a display unit of a mobile device
CN105302784B (zh) 复制/剪切和粘贴数据的方法和系统
US20140235222A1 (en) Systems and method for implementing multiple personas on mobile technology platforms
CN103649902B (zh) 沉浸式和桌面外壳的显示
US9400599B2 (en) Method for changing object position and electronic device thereof
US20120086629A1 (en) Electronic device having movement-based user input and method
US9652142B2 (en) System and method of mode-switching for a computing device
JP2013047919A (ja) 装置、方法、及びプログラム
JP2010538350A (ja) タッチスクリーンを備えた携帯用端末機
CN108319410B (zh) 用于控制媒体装置中的菜单的方法和设备
CN112148170B (zh) 桌面元素调整方法、装置和电子设备
JP2012194842A (ja) 情報処理装置、情報処理方法およびプログラム
US11733855B2 (en) Application identifier display method and terminal device
CN111638828A (zh) 界面显示方法及装置
US20190260864A1 (en) Screen Locking Method, Terminal, and Screen Locking Apparatus
WO2023226422A1 (zh) 内容编辑的控制方法、装置、电子设备及存储介质
JP6118190B2 (ja) 情報端末および制御プログラム
US9529498B2 (en) Input processing apparatus and method using a user interface
CN116302229A (zh) 图标显示方法、装置和可折叠电子设备

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220301

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220713

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220727

R150 Certificate of patent or registration of utility model

Ref document number: 7114633

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150