RU2791547C1 - Control method applied to the screen projection scenario and the corresponding device - Google Patents

Control method applied to the screen projection scenario and the corresponding device Download PDF

Info

Publication number
RU2791547C1
RU2791547C1 RU2022107487A RU2022107487A RU2791547C1 RU 2791547 C1 RU2791547 C1 RU 2791547C1 RU 2022107487 A RU2022107487 A RU 2022107487A RU 2022107487 A RU2022107487 A RU 2022107487A RU 2791547 C1 RU2791547 C1 RU 2791547C1
Authority
RU
Russia
Prior art keywords
screen
navigation
mobile phone
key
contents
Prior art date
Application number
RU2022107487A
Other languages
Russian (ru)
Inventor
Хэцзинь ГУ
Сыюэ НЮ
Original Assignee
Хонор Дивайс Ко., Лтд.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Хонор Дивайс Ко., Лтд. filed Critical Хонор Дивайс Ко., Лтд.
Application granted granted Critical
Publication of RU2791547C1 publication Critical patent/RU2791547C1/en

Links

Images

Abstract

FIELD: computer technology.
SUBSTANCE: the invention relates to means of user interaction with a computer, such as means of interaction based on graphical user interfaces, namely, to control of the device using a screen projection scenario. For this purpose, the contents of the first screen and the identifier of the target navigation function sent by the mobile phone are received; the formation of a collaboration window in accordance with the identifier of the target navigation function, including the projection area of the screen and the navigation panel, and the navigation panel includes three virtual navigation keys. In addition, the contents of the first screen are displayed in the projection area of the screen; receiving keyboard and mouse operations affecting virtual navigation keys; forming the key instruction in accordance with the keyboard and mouse operation and sending the key instruction to the mobile phone so that the mobile phone performs the navigation function in accordance with the key instruction, and the mobile phone is able to adjust the contents of the first screen to the contents of the second screen using the navigation function; and receiving the contents of the second screen sent by the mobile phone by the display device, and the display of the contents of the second screen in the projection area of the screen.
EFFECT: providing replacement functions that are difficult to simulate and implement using keyboard and mouse operations.
14 cl, 13 dwg

Description

ОБЛАСТЬ ТЕХНИКИFIELD OF TECHNOLOGY

Эта заявка относится к области компьютерных технологий и, в частности, к способу управления, применяемому к сценарию проецирования экрана, и соответствующему устройству.This application relates to the field of computer technology and, in particular, to a control method applied to a screen projection scenario and a corresponding device.

УРОВЕНЬ ТЕХНИКИBACKGROUND OF THE INVENTION

С развитием компьютерных технологий устройства разных типов (например, устройства, использующие разные операционные системы) могут выполнять проецирование экрана для реализации совместного использования экрана.With the development of computer technology, different types of devices (eg, devices using different operating systems) can perform screen projection to realize screen sharing.

Используя в качестве примера сценарий проецирования экрана мобильного телефона и компьютера, когда мобильный телефон проецируется на компьютер, компьютер может отображать окно совместной работы. Содержимое экрана мобильного телефона может отображаться в окне совместной работы, то есть на компьютере отображается зеркало мобильного телефона. Пользователь может управлять мобильным телефоном, выполняя операции клавиатуры и мыши в окне совместной работы компьютера.Using the mobile phone and computer screen projection scenario as an example, when the mobile phone is projected onto the computer, the computer can display a collaboration window. The contents of the mobile phone screen can be displayed in a collaborative window, that is, a mirror of the mobile phone is displayed on the computer. The user can control the mobile phone by performing keyboard and mouse operations in the sharing window of the computer.

Однако мобильный телефон обычно использует сенсорный экран в качестве устройства ввода, а компьютер использует клавиатуру и мышь в качестве устройств ввода. Имитация сенсорного управления с помощью мыши или клавиатуры имеет недостатки, что влияет на восприятие пользователем возможности управления мобильным телефоном с помощью компьютера.However, a mobile phone usually uses a touch screen as an input device, while a computer uses a keyboard and mouse as input devices. Simulating touch control using a mouse or keyboard has disadvantages that affect the user's perception of the ability to control a mobile phone using a computer.

СУЩНОСТЬ ИЗОБРЕТЕНИЯSUMMARY OF THE INVENTION

Эта заявка предоставляет способ управления, применяемый к сценарию проецирования экрана, и соответствующее устройство для реализации функций с использованием операций клавиатуры и мыши в сценарии проецирования экрана, чтобы заменить функции, которые трудно имитировать и реализовать с помощью операций клавиатуры и мыши, тем самым улучшая опыт работы пользователя.This application provides a control method applied to a screen projection scenario and a corresponding device for realizing functions using keyboard and mouse operations in a screen projection scenario to replace functions that are difficult to simulate and implement using keyboard and mouse operations, thereby improving the operating experience. user.

Согласно первому аспекту эта заявка обеспечивает способ управления, применяемый к сценарию проецирования экрана. Сценарий проецирования экрана может включать в себя мобильный телефон и устройство отображения. После того, как мобильный телефон и устройство отображения устанавливают соединение, устройство отображения принимает содержимое первого экрана и идентификатор целевой функции навигации, отправленный мобильным телефоном; формирует окно совместной работы, включающее в себя область проецирования экрана и панель навигации (навигационную панель) в соответствии с идентификатором целевой функции навигации, и отображает содержимое первого экрана в области проецирования экрана; принимает операцию клавиатуры и мыши, воздействующую на виртуальные навигационные клавиши на панели навигации; и формирует инструкцию клавиши в соответствии с операцией клавиатуры и мыши и отправляет инструкцию клавиши на мобильный телефон, чтобы предписывать мобильному телефону выполнять функцию навигации в соответствии с инструкцией клавиши, где мобильный телефон может скорректировать содержимое первого экрана на содержимое второго экрана с помощью функции навигации. Устройство отображения принимает содержимое второго экрана, отправленное мобильным телефоном, и отображает содержимое второго экрана в области проецирования экрана.According to a first aspect, this application provides a control method applied to a screen projection scenario. The screen projection scenario may include a mobile phone and a display device. After the mobile phone and the display device establish a connection, the display device receives the contents of the first screen and the navigation target ID sent by the mobile phone; generates a collaboration window including a screen projection area and a navigation bar (navigation bar) according to the navigation target function ID, and displays the contents of the first screen in the screen projection area; receives a keyboard and mouse operation affecting virtual navigation keys on the navigation bar; and generates a key instruction according to the operation of the keyboard and mouse, and sends the key instruction to the mobile phone to cause the mobile phone to perform a navigation function according to the key instruction, where the mobile phone can adjust the contents of the first screen to the contents of the second screen with the navigation function. The display device receives the contents of the second screen sent by the mobile phone and displays the contents of the second screen in the projection area of the screen.

Содержимое первого экрана относится к содержимому, отображаемому на экране мобильного телефона, когда мобильный телефон и устройство отображения устанавливают соединение. Целевые функции навигации включают в себя функции навигации мобильного телефона, за исключением функции навигации с тремя клавишами. Панель навигации включает в себя три виртуальные навигационные клавиши, и три виртуальные навигационные клавиши соответственно соответствуют различным навигационным функциям. Например, три виртуальные навигационные клавиши - это, соответственно, клавиша меню, клавиша рабочего стола и клавиша возврата, где клавиша меню выполнена с возможностью входа в меню задач, клавиша рабочего стола выполнена с возможностью возврата на рабочий стол, а клавиша возврата выполнена с возможностью возврата на более высокий уровень. Можно понять, что функции, показанные выше, являются общими функциями навигации. В реальном приложении функции трех виртуальных навигационных клавиш могут альтернативно быть установлены на функции навигации других типов, что не ограничивается в этой заявке.The content of the first screen refers to the content displayed on the screen of the mobile phone when the mobile phone and the display device establish a connection. The target navigation functions include mobile phone navigation functions except for the three-key navigation function. The navigation bar includes three virtual navigation keys, and the three virtual navigation keys respectively correspond to various navigation functions. For example, the three virtual navigation keys are respectively a menu key, a desktop key, and a back key, where the menu key is configured to enter the task menu, the desktop key is configured to return to the desktop, and the return key is configured to return to a higher level. It can be understood that the functions shown above are general navigation functions. In a real application, the functions of the three virtual navigation keys may alternatively be set to other types of navigation functions, which is not limited in this application.

В этой заявке, если мобильный телефон использует другой способ навигации, кроме навигации с тремя клавишами, устройство отображения устанавливает панель навигации в окне совместной работы, и пользователь может выполнять функцию системной навигации на мобильном телефоне, используя три виртуальные навигационные клавиши на панели навигации, чтобы обеспечить синхронное обновление содержимого экрана мобильного телефона и содержимого окна совместной работы, тем самым уменьшая проблему, связанную с тем, что пользователь склонен к ошибочному прикосновению при управлении мобильным телефоном другим способом навигации, и улучшая опыт, когда пользователь использует устройство отображения для управления мобильным телефоном.In this application, if the mobile phone uses a navigation method other than three-key navigation, the display device sets the navigation bar in the collaboration window, and the user can perform the system navigation function on the mobile phone using the three virtual navigation keys on the navigation bar to provide synchronously updating the screen content of the mobile phone and the content of the collaboration window, thereby reducing the problem that the user is prone to erroneous touch when operating the mobile phone in a different navigation method, and improving the experience when the user uses the display device to control the mobile phone.

В возможной реализации текущая функция навигации включает в себя функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши.In an exemplary implementation, the current navigation function includes a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key.

В другой возможной реализации способ дополнительно включает в себя: когда режим окна совместной работы является режимом развернутого окна и положение указателя не расположено в первой целевой области, скрывают панель навигации, причем первая целевая область является частью в краевой области для области проецирования экрана и соответствует панели навигации; и когда режим окна совместной работы является режимом развернутого окна и положение указателя расположено в первой целевой области, отображают панель навигации в первой целевой области.In another possible implementation, the method further includes: when the collaborative window mode is a maximized window mode and the pointer position is not located in the first target area, hiding the navigation bar, wherein the first target area is a part in the edge area for the screen projection area and corresponds to the navigation bar ; and when the collaboration window mode is the maximized window mode and the pointer position is located in the first target area, displaying the navigation bar in the first target area.

В другой возможной реализации окно совместной работы дополнительно включает в себя строку заголовка; когда режим окна совместной работы является режимом развернутого окна, а положение указателя не расположено во второй целевой области, скрывают строку заголовка, причем вторая целевая область является частью в краевой области для области проецирования экрана и соответствует строке заголовка; и когда режим окна совместной работы является режимом развернутого окна и положение указателя расположено во второй целевой области, отображают строку заголовка во второй целевой области.In another possible implementation, the collaboration window further includes a title bar; when the collaboration window mode is a maximized window mode and the pointer position is not located in the second target area, hiding the title bar, the second target area being a part in the edge area for the screen projection area and corresponding to the title bar; and when the collaboration window mode is the maximized window mode and the pointer position is located in the second target area, displaying a title bar in the second target area.

В другой возможной реализации, когда окно совместной работы представляет собой окно с портретной ориентацией, панель навигации расположена ниже или выше области проецирования экрана, а панель навигации является смежной с областью проецирования экрана; и когда окно совместной работы является окном с альбомной ориентацией, панель навигации расположена с правой или левой стороны области проецирования экрана, и панель навигации является смежной с областью проецирования экрана.In another possible implementation, when the collaboration window is a portrait window, the navigation bar is located below or above the screen projection area, and the navigation bar is adjacent to the screen projection area; and when the collaboration window is a landscape window, the navigation bar is located on the right or left side of the screen projection area, and the navigation bar is adjacent to the screen projection area.

В другой возможной реализации способ дополнительно включает в себя: запрет операции клавиатуры и мыши выполнять имитацию функции навигации, соответствующей идентификатору целевой функции навигации в окне совместной работы.In another possible implementation, the method further includes: preventing a keyboard and mouse operation from simulating a navigation function corresponding to a navigation target identifier in a collaboration window.

Согласно второму аспекту эта заявка обеспечивает способ управления, применяемый к сценарию проецирования экрана. Способ включает в себя следующие этапы: отправка содержимого первого экрана и идентификатора целевой функции навигации на устройство отображения; прием инструкции клавиши, отправленной устройством отображения; выполнение функции навигации, соответствующей инструкции клавиши, в соответствии с предварительно установленным соответствием, где функция навигации используется для корректировки содержимого первого экрана на содержимое второго экрана; и отправку содержимого второго экрана на устройство отображения с помощью мобильного телефона, чтобы предписывать устройству отображения отобразить содержимое второго экрана в области проецирования экрана окна совместной работы.According to a second aspect, this application provides a control method applied to a screen projection scenario. The method includes the following steps: sending the contents of the first screen and the identifier of the target navigation function to the display device; receiving a key instruction sent by the display device; executing a navigation function corresponding to the key instruction according to a preset mapping, where the navigation function is used to adjust the contents of the first screen to the contents of the second screen; and sending the contents of the second screen to the display device using the mobile phone to cause the display device to display the contents of the second screen in the screen projection area of the collaboration window.

Инструкция клавиши формируется устройством отображения в соответствии с операцией клавиатуры и мыши. Идентификатор целевой функции навигации используется для идентификации текущей функции навигации, за исключением функции навигации с тремя клавишами на мобильном телефоне. В возможной реализации текущая функция навигации включает в себя функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши.The key instruction is generated by the display device in accordance with the operation of the keyboard and mouse. The target navigation function ID is used to identify the current navigation function, except for the three-key navigation function on a mobile phone. In an exemplary implementation, the current navigation function includes a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key.

Согласно третьему аспекту эта заявка обеспечивает устройство отображения, функция которого может реализовывать способ управления согласно первому аспекту или любой реализации. Функция может быть реализована с использованием аппаратных средств или может быть реализована с помощью аппаратных средств, выполняющих соответствующее программное обеспечение. Аппаратное или программное обеспечение включает в себя один или несколько модулей, соответствующих вышеуказанной функции.According to a third aspect, this application provides a display device whose function can implement the control method according to the first aspect or any implementation. The function may be implemented using hardware, or may be implemented using hardware running corresponding software. The hardware or software includes one or more modules corresponding to the above function.

Согласно четвертому аспекту эта заявка обеспечивает мобильный телефон, функция которого может реализовывать способ управления согласно второму аспекту или любой реализации. Функция может быть реализована с использованием аппаратных средств или может быть реализована с помощью аппаратных средств, выполняющих соответствующее программное обеспечение. Аппаратное или программное обеспечение включает в себя один или несколько модулей, соответствующих вышеуказанной функции.According to a fourth aspect, this application provides a mobile phone whose function can implement the control method according to the second aspect or any implementation. The function may be implemented using hardware, or may be implemented using hardware running corresponding software. The hardware or software includes one or more modules corresponding to the above function.

В соответствии с пятым аспектом эта заявка обеспечивает систему проецирования экрана. Система проецирования экрана включает в себя устройство отображения в соответствии с третьим аспектом или любой его реализацией и мобильный телефон в соответствии с четвертым аспектом или любой его реализацией.According to a fifth aspect, this application provides a screen projection system. The screen projection system includes a display device according to the third aspect or any implementation thereof, and a mobile phone according to the fourth aspect or any implementation thereof.

В соответствии с шестым аспектом эта заявка обеспечивает компьютерно-читаемый носитель данных, на котором хранятся инструкции, причем инструкции при выполнении на компьютере предписывают компьютеру выполнять способ согласно первому аспекту или второму аспекту.According to a sixth aspect, this application provides a computer-readable storage medium on which instructions are stored, the instructions, when executed on a computer, causing the computer to execute the method according to the first aspect or the second aspect.

В соответствии с седьмым аспектом эта заявка предоставляет компьютерный программный продукт, причем компьютерный программный продукт при запуске на компьютере предписывает компьютеру выполнять способ согласно первому аспекту или второму аспекту.According to a seventh aspect, this application provides a computer program product, wherein the computer program product, when run on a computer, causes the computer to execute the method according to the first aspect or the second aspect.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙBRIEF DESCRIPTION OF THE DRAWINGS

Фиг. 1 - схематическое изображение сценария проецирования экрана в соответствии с этой заявкой;Fig. 1 is a schematic representation of a screen projection scenario in accordance with this application;

Фиг. 2 - диаграмма взаимодействия сигнализации способа управления, применяемого к сценарию проецирования экрана в соответствии с этой заявкой;Fig. 2 is a signaling interaction diagram of a control method applied to a screen projection scenario in accordance with this application;

Фиг. 3А - схематическое изображение окна совместной работы в соответствии с этой заявкой;Fig. 3A is a schematic representation of a collaboration window in accordance with this application;

Фиг. 3B - схематическое изображение окна совместной работы, представляющего собой развернутое окно с портретной ориентацией в соответствии с этой заявкой;Fig. 3B is a schematic representation of a collaboration window, which is a maximized portrait window in accordance with this application;

Фиг. 3C - схематическое представление окна совместной работы, представляющего собой развернутое окно с альбомной ориентацией в соответствии с этой заявкой;Fig. 3C is a schematic representation of a collaboration window, which is a maximized landscape window in accordance with this application;

Фиг. 3D - еще одно схематическое изображение окна совместной работы, представляющего собой развернутое окно с альбомной ориентацией в соответствии с этой заявкой;Fig. 3D is another schematic representation of a collaboration window, which is a maximized landscape window in accordance with this application;

Фиг. 3E - еще одно схематическое изображение окна совместной работы в соответствии с этой заявкой;Fig. 3E is another schematic representation of a collaboration window in accordance with this application;

Фиг. 3F - еще одно схематическое изображение окна совместной работы в соответствии с этой заявкой;Fig. 3F is another schematic representation of a collaboration window in accordance with this application;

Фиг. 4 - схематическое структурное изображение устройства отображения в соответствии с этой заявкой;Fig. 4 is a schematic structural representation of a display device in accordance with this application;

Фиг. 5 - схематическое структурное изображение мобильного телефона в соответствии с этой заявкой;Fig. 5 is a schematic structural representation of a mobile phone in accordance with this application;

Фиг. 6 - схематическое структурное изображение системы проецирования экрана в соответствии с этой заявкой;Fig. 6 is a schematic structural view of a screen projection system in accordance with this application;

Фиг. 7 - еще одно схематическое структурное изображение устройства отображения в соответствии с этой заявкой; иFig. 7 is another schematic structural view of a display device according to this application; And

Фиг. 8 - еще одно схематическое структурное изображение мобильного телефона в соответствии с этой заявкой.Fig. 8 is another schematic structural view of a mobile phone according to this application.

Описание вариантов осуществленияDescription of Embodiments

Эта заявка относится к способу управления, применяемому к сценарию проецирования экрана.This application relates to a control method applied to a screen projection scenario.

Фиг. 1 представляет собой схематическое изображение сценария проецирования экрана. Сценарий проецирования экрана включает в себя мобильный телефон 10 и устройство 20 отображения. Мобильный телефон 10 и устройство 20 отображения могут быть соединены друг с другом через радиоканал 30. В качестве альтернативы мобильный телефон 10 и устройство 20 отображения могут быть соединены проводным способом, например кабелем для передачи данных. После того как мобильный телефон 10 и устройство 20 отображения установят соединение, устройство 20 отображения может сгенерировать окно 40 совместной работы в соответствии с содержимым, отображаемым на экране мобильного телефона 10. Операция пользователя в окне 40 совместной работы может синхронно обновлять содержимое экрана мобильного телефона 10 и содержимое окна 40 совместной работы.Fig. 1 is a schematic representation of a screen projection scenario. The screen projection scenario includes a mobile phone 10 and a display device 20 . Mobile phone 10 and display device 20 may be connected to each other via radio link 30. Alternatively, mobile phone 10 and display device 20 may be connected by wire, such as a data cable. After the mobile phone 10 and the display device 20 establish a connection, the display device 20 can generate a collaboration window 40 according to the content displayed on the screen of the mobile phone 10. The user's operation on the collaboration window 40 can synchronously update the screen content of the mobile phone 10 and the contents of the collaboration window 40.

Устройство 20 отображения относится к вычислительному устройству, которое выполняет операцию ввода с помощью клавиатуры и/или мыши и имеет дисплей, например настольный компьютер или ноутбук. Мобильный телефон 10 также называют сотовым телефоном. Функция системной навигации на мобильном телефоне также называется способом системной навигации. Функция системной навигации включает навигацию с помощью жестов, физическую навигацию вне экрана, навигацию с помощью трех клавиш и т.п.The display device 20 refers to a computing device that performs an input operation using a keyboard and/or mouse and has a display, such as a desktop computer or laptop. Mobile phone 10 is also referred to as a cell phone. The system navigation function on the mobile phone is also called the system navigation method. The system navigation function includes gesture navigation, off-screen physical navigation, three-key navigation, and the like.

Используя в качестве примера устройство 20 отображения, являющееся компьютером, после проецирования мобильного телефона 10 на компьютер, если на мобильном телефоне 10 используется жестовая навигация, пользователь вряд ли сможет точно имитировать операцию навигации мобильного телефона на компьютере с помощью опреации клавиатуры и мыши. Например, рабочий стол возвращается при скольжении вверх от нижнего левого края экрана мобильного телефона. Меню задач открывается при скольжении вверх от нижнего левого края экрана мобильного телефона и удерживании его в течение определенного периода времени. Верхний уровень возвращается при скольжении вправо от крайнего левого края экрана мобильного телефона. Таким образом, пользователь может легко ошибочно запустить функцию навигации при использовании операции клавиатуры и мыши для перемещения на компьютере. Например, когда пользователь собирается войти в меню задач, ошибочно запускается функция возврата на рабочий стол при скольжении указателя мыши вверх от нижнего левого края окна совместной работы.Using the display device 20 being a computer as an example, after projecting the mobile phone 10 onto the computer, if gesture navigation is used on the mobile phone 10, the user is unlikely to be able to accurately simulate the mobile phone's navigation operation on the computer with the keyboard and mouse operation. For example, the desktop returns when you slide up from the bottom left edge of the mobile phone screen. The task menu is opened by sliding up from the lower left edge of the mobile phone screen and holding it for a certain period of time. The top level is returned by sliding to the right from the leftmost edge of the mobile phone screen. Thus, the user may easily mistakenly start the navigation function when using the keyboard and mouse operation to navigate on the computer. For example, when the user is about to enter the task menu, the return to desktop function is erroneously triggered by sliding the mouse pointer up from the bottom left edge of the collaboration window.

В качестве альтернативы, если на мобильном телефоне 10 используется физическая навигация вне экрана, однократное нажатие физической клавиши представляет собой возврат на верхний уровень, а быстрое двукратное нажатие физической клавиши представляет собой возврат к рабочему столу. Ошибочное прикосновение легко вызывается операцией клавиатуры и мыши на компьютере. Например, когда пользователь намеревается запустить функцию возврата на рабочий стол, навигационная функция возврата на верхний уровень запускается тремя щелчками мыши.Alternatively, if off-screen physical navigation is used on the mobile phone 10, a single press of the physical key represents a return to the top level, and a quick double press of the physical key represents a return to the desktop. False touch is easily caused by keyboard and mouse operation on the computer. For example, when the user intends to launch the return to desktop function, the back to top navigation function is triggered by three mouse clicks.

Как видно из вышеизложенного, если мобильный телефон использует навигацию с помощью жестов или физическую навигацию вне экрана, пользователь может легко инициировать ошибочное прикосновение при имитации описанного выше способа навигации с помощью операции клавиатуры и мыши, так что мобильным телефоном нельзя точно управлять для выполнения системной навигации, что приводит к плохому опыту работы пользователя.As can be seen from the above, if the mobile phone uses gesture navigation or off-screen physical navigation, the user can easily trigger an erroneous touch when simulating the above navigation method using keyboard and mouse operation, so that the mobile phone cannot be accurately controlled to perform system navigation, which results in a bad user experience.

Для решения проблем, существующих в описанном выше сценарии, эта заявка предоставляет три виртуальные навигационные клавиши на компьютере для замены операций навигации с помощью жестов. Таким образом, выполнение операций клавиатуры и мыши с тремя виртуальными навигационными клавишами панели навигации может уменьшить случай ошибочного нажатия на другую навигационную функцию и повысить точность, тем самым улучшив опыт пользователя при управлении мобильным телефоном с помощью другого устройства.To solve the problems in the scenario described above, this application provides three virtual navigation keys on a computer to replace gesture navigation operations. Thus, performing keyboard and mouse operations with the three virtual navigation keys of the navigation bar can reduce the case of mistakenly pressing another navigation function and improve accuracy, thereby improving the user experience when operating a mobile phone with another device.

Ниже описан указанный выше способ управления в сценарии проецирования экрана. Ссылаясь на фиг. 2, вариант осуществления способа управления, представленного в этой заявке, включает следующие этапы:The above control method in the screen projection scenario is described below. Referring to FIG. 2, an embodiment of the control method presented in this application includes the following steps:

Этап 201. Устройство отображения принимает содержимое первого экрана и идентификатор целевой функции навигации, отправленный мобильным телефоном.Step 201: The display device receives the content of the first screen and the navigation target ID sent by the mobile phone.

В этом варианте осуществления мобильный телефон может отправлять идентификатор целевой функции навигации на устройство отображения. Идентификатор целевой функции навигации используется для идентификации текущей функции навигации, за исключением функции навигации с тремя клавишами. В частности, идентификатор целевой функции навигации может быть строкой символов или числовым числом, используемым для идентификации текущей функции навигации. В реальном приложении идентификатор целевой функции навигации может быть альтернативно представлен другим способом, например изображением, символом или текстом. Когда мобильный телефон посылает идентификатор целевой функции навигации, идентификатор целевой функции навигации может быть передан в сообщении.In this embodiment, the mobile phone may send the target navigation function identifier to the display device. The target navigation function ID is used to identify the current navigation function, with the exception of the three-key navigation function. In particular, the target navigation function identifier may be a character string or a numeric number used to identify the current navigation function. In a real application, the navigation target identifier may alternatively be represented in another way, such as an image, symbol, or text. When the mobile phone sends the navigation target identifier, the navigation target identifier may be conveyed in the message.

Текущая функция навигации включает в себя, но не ограничивается ими, функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши. Функция навигации с тремя клавишами относится к экранной функции навигации с тремя клавишами или внеэкранной функции навигации с тремя клавишами.The current navigation function includes, but is not limited to, a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key. The three-key navigation function refers to an on-screen three-key navigation function or an off-screen three-key navigation function.

Опционально, устройство отображения отправляет инструкцию запроса на мобильный телефон, и мобильный телефон получает идентификатор целевой функции навигации в соответствии с инструкцией запроса, а затем отправляет идентификатор целевой функции навигации на устройство отображения.Optionally, the display device sends a request instruction to the mobile phone, and the mobile phone obtains the navigation target function ID according to the request instruction, and then sends the navigation target function ID to the display device.

Следует отметить, что устройство отображения может принимать содержимое первого экрана и идентификатор целевой функции навигации, отправленные мобильным телефоном, в один и тот же момент или в разные моменты.It should be noted that the display device may receive the contents of the first screen and the navigation target ID sent by the mobile phone at the same time or at different times.

Этап 202. Устройство отображения формирует окно совместной работы, включающее в себя область проецирования экрана и панель навигации в соответствии с идентификатором целевой функции навигации, и отображает содержимое первого экрана в области проецирования экрана.Step 202. The display device generates a collaboration window including a screen projection area and a navigation bar according to the navigation target ID, and displays the contents of the first screen in the screen projection area.

Когда устройство отображения принимает идентификатор целевой функции навигации, отправленный мобильным телефоном, устройство отображения может определить, что текущая функция навигации, соответствующая идентификатору целевой функции навигации, не является функцией навигации с тремя клавишами. То есть это указывает на то, что имитация функции навигации, которая в настоящее время используется на мобильном телефоне, на компьютере с помощью операции клавиатуры и мыши может вызвать ошибочное прикосновение. При необходимости мобильный телефон может отправлять сервисные состояния всех навигационных функций на устройство отображения, и устройство отображения также может определять функцию навигации, которая в данный момент используется на мобильном телефоне, в соответствии с сервисными состояниями навигационных функций.When the display device receives the target navigation function ID sent by the mobile phone, the display device can determine that the current navigation function corresponding to the navigation target ID is not a three-key navigation function. That is, it indicates that simulating the navigation function currently used on a mobile phone on a computer with a keyboard and mouse operation may cause an erroneous touch. If necessary, the mobile phone can send the service states of all navigation functions to the display device, and the display device can also determine the navigation function currently being used on the mobile phone according to the service states of the navigation functions.

Область проецирования экрана используется для отображения в соответствии с содержимым экрана мобильного телефона.The screen projection area is used to display according to the contents of the mobile phone screen.

Панель навигации включает в себя три виртуальные навигационные клавиши. Три виртуальные навигационные клавиши соответствуют различным навигационным функциям. Например, три виртуальные навигационные клавиши - это, соответственно, клавиша меню, клавиша рабочего стола и клавиша возврата. Клавиша меню настроена на вход в меню задач, клавиша рабочего стола настроена на возврат к рабочему столу, а клавиша возврата настроена на возврат на более высокий уровень. Можно понять, что функции, показанные выше, являются общими функциями навигации. В реальном приложении функции трех виртуальных навигационных клавиш могут альтернативно быть установлены на функции навигации других типов, что не ограничивается в этой заявке.The navigation bar includes three virtual navigation keys. Three virtual navigation keys correspond to various navigation functions. For example, the three virtual navigation keys are respectively a menu key, a desktop key, and a backspace key. The menu key is configured to enter the task menu, the desktop key is configured to return to the desktop, and the return key is configured to return to a higher level. It can be understood that the functions shown above are general navigation functions. In a real application, the functions of the three virtual navigation keys may alternatively be set to other types of navigation functions, which is not limited in this application.

Следует отметить, что устройство отображения может настроить область проецирования экрана и панель навигации в окне совместной работы в один и тот же момент или в разные моменты времени. Например, когда устройство отображения принимает первое содержимое экрана, отправленное мобильным телефоном, устройство отображения формирует область проецирования экрана в окне совместной работы. Когда устройство отображения принимает идентификатор целевой функции навигации, устройство отображения формирует панель навигации в окне совместной работы.It should be noted that the display device may set the screen projection area and the navigation bar in the collaboration window at the same time or at different times. For example, when the display device receives the first screen contents sent by the mobile phone, the display device forms a screen projection area in the collaboration window. When the display device receives the target navigation function ID, the display device generates a navigation bar in the collaboration window.

Этап 203. Устройство отображения принимает операции клавиатуры и мыши, воздействующие на виртуальные навигационные клавиши.Step 203: The display device receives keyboard and mouse operations acting on the virtual navigation keys.

Операция клавиатуры и мыши относится к операции, вводимой с помощью клавиатуры, и/или к операции, вводимой с помощью мыши. Например, когда указатель мыши выбирает виртуальную клавишу, выполняется щелчок по виртуальной навигационной клавише. Операция клавиатуры и мыши не ограничивается вышеприведенным примером.The keyboard and mouse operation refers to a keyboard input operation and/or a mouse input operation. For example, when the mouse pointer selects a virtual key, the virtual navigation key is clicked. Keyboard and mouse operation is not limited to the above example.

Этап 204. Устройство отображения формирует инструкцию клавиши в соответствии с операцией клавиатуры и мыши.Step 204: The display device generates a key instruction in accordance with the keyboard and mouse operation.

Когда операция клавиатуры и мыши выполняется с виртуальной навигационной клавишей, устройство отображения может генерировать инструкцию клавиши, соответствующую виртуальной навигационной клавише. Например, если виртуальная навигационная клавиша является клавишей меню, формируется инструкция клавиши, соответствующая клавише меню. Если виртуальная навигационная клавиша является клавишей рабочего стола, формируется инструкция клавиши, соответствующая клавише рабочего стола. Если виртуальная навигационная клавиша является клавишей возврата, формируется инструкция клавиши, соответствующая клавише возврата.When a keyboard and mouse operation is performed on the virtual navigation key, the display device may generate a key instruction corresponding to the virtual navigation key. For example, if the virtual navigation key is a menu key, a key instruction corresponding to the menu key is generated. If the virtual navigation key is a desktop key, a key instruction corresponding to the desktop key is generated. If the virtual navigation key is a backspace key, a key instruction corresponding to the backspace key is generated.

Этап 205. Устройство отображения отправляет инструкцию клавиши на мобильный телефон.Step 205: The display device sends a key instruction to the mobile phone.

Этап 206. Мобильный телефон выполняет функцию навигации, соответствующую инструкции клавиши, в соответствии с предварительно заданным соответствием, чтобы настроить содержимое первого экрана на содержимое второго экрана.Step 206: The mobile phone performs a navigation function corresponding to the key instruction according to a predetermined mapping to match the contents of the first screen to the contents of the second screen.

Предустановленное соответствие относится к соответствию между инструкциями клавиши от устройства отображения и функциями навигации мобильного телефона. Когда инструкция клавиши соответствует клавише меню, функция навигации, выполняемая на мобильном телефоне, заключается в входе в меню задач. Когда инструкция клавиши соответствует клавише рабочего стола, функция навигации, выполняемая на мобильном телефоне, должна вернуться к рабочему столу. Когда инструкция клавиши соответствует клавише возврата, функция навигации, выполняемая на мобильном телефоне, должна вернуться на верхний уровень. Можно понять, что функции виртуальных навигационных клавиш на компьютере и системные функции навигации мобильного телефона находятся во взаимно однозначном соответствии.The preset correspondence refers to the correspondence between the key instructions from the display device and the navigation functions of the mobile phone. When the key instruction corresponds to the menu key, the navigation function performed on the mobile phone is to enter the task menu. When the key instruction matches the desktop key, the navigation function performed on the mobile phone should return to the desktop. When the key instruction corresponds to the back key, the navigation function performed on the mobile phone should return to the top level. It can be understood that the functions of the virtual navigation keys on the computer and the system navigation functions of the mobile phone are in a one-to-one correspondence.

Этап 207. Устройство отображения принимает содержимое второго экрана, отправленное мобильным телефоном.Step 207: The display device receives the contents of the second screen sent by the mobile phone.

Этап 208. Устройство отображения отображает содержимое второго экрана в области проецирования экрана.Step 208: The display device displays the contents of the second screen in the projection area of the screen.

В этом варианте осуществления, если мобильный телефон использует другую функцию навигации, кроме функции навигации с тремя клавишами, устройство отображения устанавливает панель навигации в окне совместной работы, и пользователь выполняет функцию системной навигации для мобильного телефона с использованием трех виртуальных навигационных клавиш на панели навигации, чтобы содержимое экрана мобильного телефона и содержимое окна совместной работы обновлялись синхронно, тем самым уменьшая проблему, связанную с тем, что пользователь склонен к ошибочному прикосновению при управлении мобильным телефоном другим способом навигации, и улучшая опыт, когда пользователь использует устройство отображения для управления мобильным телефоном.In this embodiment, if the mobile phone uses a navigation function other than the three-key navigation function, the display device sets the navigation bar in the collaboration window, and the user executes the system navigation function for the mobile phone using the three virtual navigation keys in the navigation bar to the screen content of the mobile phone and the content of the collaboration window were updated synchronously, thereby reducing the problem that the user is prone to mistaken touch when operating the mobile phone in a different navigation method, and improving the experience when the user uses the display device to control the mobile phone.

Ссылаясь на фиг. 3А, окно 40 совместной работы этой заявки может включать в себя область 301 проецирования экрана, панель 302 навигации и строку 303 заголовка. Панель 302 навигации и строка 303 заголовка могут быть скрыты в соответствии с фактическими требованиями.Referring to FIG. 3A, the collaboration window 40 of this application may include a screen projection area 301, a navigation bar 302, and a title bar 303. The navigation bar 302 and the title bar 303 may be hidden according to actual requirements.

Панель 302 навигации включает в себя три виртуальные навигационные клавиши, которые соответственно представляют собой первую виртуальную навигационную клавишу 3021, вторую виртуальную навигационную клавишу 3022 и третью виртуальную навигационную клавишу 3023. Опционально, первая виртуальная навигационная клавиша 3021, вторая виртуальная навигационная клавиша 3022 и третья виртуальная навигационная клавиша 3023 являются соответственно клавишей возврата, клавишей рабочего стола и клавишей меню. Функции виртуальных навигационных клавиш и последовательность виртуальных навигационных клавиш можно настроить в соответствии с фактическими требованиями.The navigation bar 302 includes three virtual navigation keys, which are respectively a first virtual navigation key 3021, a second virtual navigation key 3022, and a third virtual navigation key 3023. Optionally, a first virtual navigation key 3021, a second virtual navigation key 3022, and a third virtual navigation key the key 3023 are respectively a back key, a desktop key, and a menu key. The functions of the virtual navigation keys and the sequence of the virtual navigation keys can be customized according to actual requirements.

Панель 302 навигации может быть расположена за пределами области 301 проецирования экрана или может быть расположена в области 301 проецирования экрана. Опционально, когда окно 40 совместной работы является развернутым окном, панель 302 навигации располагается в области 301 проецирования экрана; и когда окно 40 совместной работы не является развернутым окном, панель 302 навигации располагается за пределами области 301 проецирования экрана.The navigation bar 302 may be located outside the screen projection area 301 or may be located in the screen projection area 301 . Optionally, when the collaboration window 40 is a maximized window, the navigation bar 302 is located in the screen projection area 301; and when the collaboration window 40 is not a maximized window, the navigation bar 302 is positioned outside the screen projection area 301 .

Строка 303 заголовка включает в себя клавишу свернутого окна, клавишу развернутого окна и клавишу закрытия окна. Кроме того, строка 303 заголовка может дополнительно включать в себя имя окна, клавишу блокировки направления и т.п., что здесь не ограничивается.The title bar 303 includes a minimized window key, a maximized window key, and a window close key. In addition, the title bar 303 may further include a window name, a direction lock key, and the like, which is not limited here.

Ниже описан случай, когда окно 40 совместной работы является развернутым окном, а панель 302 навигации расположена в области 301 проецирования экрана:The following describes the case where the collaboration window 40 is a maximized window and the navigation bar 302 is located in the screen projection area 301:

В другом опциональном варианте осуществления, когда режим окна 40 совместной работы является режимом развернутого окна, а положение указателя не расположено в первой целевой области, панель 302 навигации скрыта, причем первая целевая область является частью в краевой области для области 301 проецирования экрана и соответствует панели 302 навигации; и когда режим окна 40 совместной работы является режимом развернутого окна и положение указателя расположено в первой целевой области, панель 302 навигации отображается в первой целевой области.In another optional embodiment, when the collaboration window 40 mode is a maximized window mode and the pointer position is not located in the first target area, the navigation bar 302 is hidden, with the first target area being the portion in the edge area for the screen projection area 301 and corresponding to the bar 302 navigation; and when the mode of the collaboration window 40 is the maximized window mode and the pointer position is located in the first target area, the navigation bar 302 is displayed in the first target area.

В частности, первая целевая область может быть одной или комбинацией верхней краевой области, нижней краевой области, левой краевой области или правой краевой области для области 301 проецирования экрана или может быть частью любой краевой области выше, что не ограничено в этой заявке.In particular, the first target region may be one or a combination of the top edge region, the bottom edge region, the left edge region, or the right edge region for the screen projection region 301, or may be part of any edge region above, which is not limited in this application.

Ссылаясь на фиг. 3B, в одном случае окно 40 совместной работы представляет собой развернутое окно с портретной ориентацией, а первая целевая область представляет собой нижний край области 301 проецирования экрана. Когда указатель расположен на нижнем краю области 301 проецирования экрана, панель 302 навигации отображается на нижнем краю области 301 проецирования экрана. Когда указатель не находится на нижнем краю области 301 проецирования экрана, панель 302 навигации скрыта. Способ скрытия панели 302 навигации может быть, но не ограничивается этим: панель 302 навигации перемещается вниз от нижнего края области 301 проецирования экрана и исчезает, или панель 302 навигации исчезает непосредственно.Referring to FIG. 3B, in one case, the collaboration window 40 is a maximized portrait window, and the first target area is the bottom edge of the screen projection area 301. When the pointer is located at the bottom edge of the screen projection area 301, the navigation bar 302 is displayed at the bottom edge of the screen projection area 301. When the pointer is not at the bottom edge of the screen projection area 301, the navigation bar 302 is hidden. The method of hiding the navigation bar 302 may be, but is not limited to, the navigation bar 302 moves down from the bottom edge of the screen projection area 301 and disappears, or the navigation bar 302 disappears directly.

Ссылаясь на фиг. 3C, в другом случае окно 40 совместной работы представляет собой развернутое окно с альбомной ориентацией, а первая целевая область представляет собой правый край области 301 проецирования экрана. Если окно 40 совместной работы представляет собой развернутое окно с альбомной ориентацией, область 301 проецирования экрана может быть полноэкранной областью. Когда указатель находится на правом краю области 301 проецирования экрана, панель 302 навигации отображается на правом краю области 301 проецирования экрана. Когда указатель не находится на правом краю области 301 проецирования экрана, панель 302 навигации скрыта. Способ скрытия панели 302 навигации может быть, но не ограничивается этим: панель 302 навигации перемещается вправо от правого края области 301 проецирования экрана и исчезает, или панель 302 навигации исчезает непосредственно.Referring to FIG. 3C, in another case, the collaboration window 40 is a maximized landscape window, and the first target area is the right edge of the screen projection area 301. If the collaboration window 40 is a maximized landscape window, the screen projection area 301 may be a full screen area. When the pointer is at the right edge of the screen projection area 301, the navigation bar 302 is displayed at the right edge of the screen projection area 301. When the pointer is not at the right edge of the screen projection area 301, the navigation bar 302 is hidden. The method of hiding the navigation bar 302 may be, but is not limited to, the navigation bar 302 moves to the right of the right edge of the screen projection area 301 and disappears, or the navigation bar 302 disappears directly.

Когда панель 302 навигации отображается в первой целевой области в области 301 проецирования экрана, панель 302 навигации может блокировать некоторое отображаемое содержимое области 301 проецирования экрана. Фон панели 302 навигации может быть установлен прозрачным, чтобы уменьшить блокировку в области 301 проецирования экрана.When the navigation bar 302 is displayed in the first target area in the screen projection area 301, the navigation bar 302 may block some display content of the screen projection area 301 . The background of the navigation bar 302 can be set to transparent to reduce blocking in the screen projection area 301 .

Когда режим окна 40 совместной работы является режимом развернутого окна и положение указателя не расположено в первой целевой области, содержимое экрана мобильного телефона может отображаться в полноэкранном режиме путем скрытия панели 302 навигации. Таким образом, обеспечивается способ отображения содержимого экрана мобильного телефона в полноэкранном режиме на компьютере, тем самым улучшая взаимодействие пользователя при просмотре проецируемого экрана. Кроме того, предусмотрена панель навигации, которую можно скрыть или развернуть. Когда пользователь намеревается выполнить навигацию по системе, панель навигации может быть вызвана быстро, тем самым обеспечивая удобный и быстрый доступ.When the collaboration window 40 mode is a maximized window mode and the pointer position is not located in the first target area, the contents of the mobile phone screen can be displayed in full screen mode by hiding the navigation bar 302 . Thus, a method is provided for displaying the contents of a mobile phone screen in full screen mode on a computer, thereby improving the user's experience when viewing the projected screen. In addition, there is a navigation bar that can be hidden or expanded. When the user intends to navigate the system, the navigation bar can be called up quickly, thereby providing convenient and quick access.

Ссылаясь на фиг. 3D, в другом опциональном варианте осуществления вышеуказанный способ дополнительно включает в себя: когда режим окна 40 совместной работы является режимом развернутого окна и положение указателя не расположено во второй целевой области, скрытие строки 303 заголовка, где вторая целевая область является частью краевой области для области 301 проецирования экрана и соответствует строке 303 заголовка; и когда режим окна 40 совместной работы является режимом развернутого окна и положение указателя расположено во второй целевой области, отображение строки 303 заголовка во второй целевой области.Referring to FIG. 3D, in another optional embodiment, the above method further includes: when the collaboration window 40 mode is a maximized window mode and the pointer position is not located in the second target area, hiding the title bar 303 where the second target area is part of the edge area for the area 301 screen projection and corresponds to the header line 303; and when the mode of the collaboration window 40 is the maximized window mode and the pointer position is located in the second target area, displaying the title bar 303 in the second target area.

В этом варианте осуществления окно 40 совместной работы дополнительно включает в себя строку 303 заголовка. В одном случае окно 40 совместной работы является развернутым окном с портретной ориентацией. В другом случае окно 40 совместной работы представляет собой развернутое окно с альбомной ориентацией, а область 301 проецирования экрана в этом случае представляет собой полноэкранную область. В частности, вторая целевая область может быть одной или комбинацией верхней краевой области, нижней краевой области, левой краевой области или правой краевой области для области 301 проецирования экрана или может быть частью любой краевой области выше, что не ограничено в этой заявке. Можно понять, что вторая целевая область и первая целевая область обычно задаются двумя отдельными областями.In this embodiment, the collaboration window 40 further includes a title bar 303 . In one instance, the collaboration window 40 is a maximized portrait window. In another case, the collaboration window 40 is a maximized landscape window, and the screen projection area 301 in this case is a full-screen area. In particular, the second target region may be one or a combination of a top edge region, a bottom edge region, a left edge region, or a right edge region for the screen projection region 301, or may be part of any edge region above, which is not limited in this application. It can be understood that the second target area and the first target area are usually defined by two separate areas.

Когда режим окна 40 совместной работы является режимом развернутого окна, а положение указателя не расположено во второй целевой области, содержимое экрана мобильного телефона может отображаться в полноэкранном режиме путем скрытия строки 303 заголовка. Таким образом, обеспечивается способ отображения содержимого экрана мобильного телефона в полноэкранном режиме на компьютере, тем самым улучшая взаимодействие пользователя при просмотре проецируемого экрана. Когда пользователь намеревается просмотреть строку 303 заголовка или настроить окно 40 совместной работы, строка 303 заголовка может быть вызвана быстро, тем самым обеспечивая удобный и быстрый доступ.When the collaboration window 40 mode is a maximized window mode and the pointer position is not located in the second target area, the mobile phone screen contents can be displayed in full screen mode by hiding the title bar 303 . Thus, a method is provided for displaying the contents of a mobile phone screen in full screen mode on a computer, thereby improving the user's experience when viewing the projected screen. When the user intends to view the title bar 303 or set up the collaboration window 40, the title bar 303 can be called quickly, thereby providing convenient and quick access.

Ниже описан случай, когда панель 302 навигации расположена за пределами области 301 проецирования экрана:The case where the navigation bar 302 is located outside the screen projection area 301 is described below:

Ссылаясь на фиг. 3E, в другом опциональном варианте осуществления, когда окно 40 совместной работы является окном с портретной ориентацией, панель 302 навигации расположена ниже области 301 проецирования экрана, и панель 302 навигации является смежной с областью 301 проецирования экрана. Такие настройки отвечают привычке пользователя использовать функцию навигации с тремя клавишами в портретном режиме, тем самым улучшая пользовательский опыт. Когда окно 40 совместной работы является окном с портретной ориентацией, панель 302 навигации может альтернативно располагаться в другой ориентации области 301 проецирования экрана, такой как указанная выше область 301 проецирования экрана.Referring to FIG. 3E, in another optional embodiment, when the collaboration window 40 is a portrait window, the navigation bar 302 is located below the screen projection area 301, and the navigation bar 302 is adjacent to the screen projection area 301. Such settings respond to the user's habit of using the three-key navigation function in portrait mode, thereby improving the user experience. When the collaboration window 40 is a portrait-oriented window, the navigation bar 302 may alternatively be positioned in a different orientation of the screen projection area 301, such as the screen projection area 301 above.

Ссылаясь на фиг. 3F, в другом опциональном варианте осуществления, когда окно 40 совместной работы представляет собой окно с альбомной ориентацией, панель 302 навигации расположена с правой стороны области 301 проецирования экрана, и панель 302 навигации является смежной с областью 301 проецирования экрана. Такие настройки отвечают привычке пользователя использовать функцию навигации с тремя клавишами в ландшафтном (альбомном) режиме, тем самым улучшая пользовательский опыт. Когда окно 40 совместной работы является окном с альбомной ориентацией, панель 302 навигации может альтернативно располагаться в другой ориентации области 301 проецирования экрана, например, в левой части области 301 проецирования экрана.Referring to FIG. 3F, in another optional embodiment, when the collaboration window 40 is a landscape window, the navigation bar 302 is located on the right side of the screen projection area 301, and the navigation bar 302 is adjacent to the screen projection area 301. Such settings respond to the user's habit of using the three-key navigation function in landscape (landscape) mode, thereby improving the user experience. When the collaborative window 40 is a landscape window, the navigation bar 302 may alternatively be located in a different orientation of the screen projection area 301, such as on the left side of the screen projection area 301.

Следует отметить, что, когда операция масштабирования выполняется в окне 40 совместной работы, устройство отображения может масштабировать область 301 проецирования экрана и панель 302 навигации в одном и том же отношении в соответствии с операцией масштабирования.It should be noted that when the zoom operation is performed on the collaboration window 40, the display device can zoom the screen projection area 301 and the navigation bar 302 in the same ratio according to the zoom operation.

В окне 40 совместной работы этой заявки устройство отображения может запустить несколько функций навигации в один и тот же момент или может запустить только одну функцию навигации и запретить другие функции навигации.In the collaboration window 40 of this application, the display device may start several navigation functions at the same time, or it may start only one navigation function and disable other navigation functions.

В опциональном варианте осуществления каждая функция навигации в окне совместной работы может быть реализована с помощью нескольких типов операций клавиатуры и мыши.In an optional embodiment, each navigation function in the collaboration window may be implemented using several types of keyboard and mouse operations.

Например, навигационная функция возврата на рабочий стол реализована посредством двух операций клавиатуры и мыши. Одной из операций клавиатуры и мыши является нажатие клавиши рабочего стола, где клавиша рабочего стола является виртуальной навигационной клавишей. Еще одна операция клавиатуры и мыши - скольжение вверх из нижнего левого края окна совместной работы. Остальное можно вывести по аналогии, а операции клавиатуры и мыши, используемые для реализации других навигационных функций, можно настроить в соответствии с реальными ситуациями.For example, the back to desktop navigation function is implemented through two keyboard and mouse operations. One of the keyboard and mouse operations is to press the desktop key, where the desktop key is a virtual navigation key. Another keyboard and mouse operation is swiping up from the bottom left edge of the collaboration window. The rest can be inferred by analogy, and the keyboard and mouse operations used to implement other navigational functions can be customized according to actual situations.

Когда устройство отображения запускает несколько функций навигации, пользователь может выбирать операции клавиатуры и мыши для реализации функций навигации в соответствии с требованиями, тем самым обеспечивая гибкость реализации.When the display device triggers multiple navigation functions, the user can select keyboard and mouse operations to implement the navigation functions according to requirements, thereby providing implementation flexibility.

В другом опциональном варианте осуществления вышеизложенный способ дополнительно включает в себя: запрет операции клавиатуры и мыши выполнять имитацию функции навигации, соответствующей идентификатору целевой функции навигации в окне совместной работы.In another optional embodiment, the above method further includes: preventing keyboard and mouse operation from performing a mock navigation function corresponding to a navigation target identifier in the collaboration window.

В этом варианте осуществления, когда мобильный телефон использует жестовую навигацию или физическую навигацию вне экрана, устройство отображения может запретить клавиатуре и мыши имитировать вышеуказанную функцию навигации в окне совместной работы. Устройство отображения обеспечивает только функцию навигации с тремя клавишами, поэтому в окне совместной работы можно избежать ошибочного прикосновения, вызванного использованием клавиатуры и мыши для имитации навигации с помощью жестов или физической навигации вне экрана.In this embodiment, when the mobile phone uses gesture navigation or off-screen physical navigation, the display device may prevent the keyboard and mouse from simulating the above navigation function in the collaboration window. The display device only provides a three-key navigation function, so the collaborative window can avoid erroneous touch caused by using the keyboard and mouse to simulate gesture navigation or off-screen physical navigation.

В другом опциональном варианте осуществления вышеупомянутый способ дополнительно включает в себя: отправку устройством отображения инструкции модификации функции навигации на мобильный телефон в соответствии с идентификатором целевой функции навигации и изменение мобильным телефоном текущей функции навигации на экранную функцию навигации с тремя клавишами в соответствии с инструкцией по модификации функции навигации. В этом варианте осуществления, если мобильный телефон использует другую навигационную функцию, функция навигации мобильного телефона преобразуется в экранную функцию навигации с тремя клавишами. Во время проецирования экрана на мобильном телефоне и устройстве отображения отображается экранная панель навигации с тремя клавишами, и мобильным телефоном можно управлять с помощью экранной панели навигации с тремя клавишами на устройстве отображения.In another optional embodiment, the above method further includes: sending the display device a navigation function modification instruction to the mobile phone according to the target navigation function ID, and changing the mobile phone's current navigation function to a three-key screen navigation function according to the function modification instruction navigation. In this embodiment, if the mobile phone uses another navigation function, the mobile phone's navigation function is converted to a three-key on-screen navigation function. During screen projection, the three-key on-screen navigation bar is displayed on the mobile phone and the display device, and the mobile phone can be operated using the three-key on-screen navigation bar on the display device.

Следует отметить, что в дополнение к мобильному телефону вышеуказанный способ управления может быть дополнительно применен к другому электронному устройству, которое использует навигацию с помощью жестов или физическую навигацию вне экрана.It should be noted that, in addition to a mobile phone, the above control method can be further applied to another electronic device that uses gesture navigation or off-screen physical navigation.

Способ управления этой заявки описан выше, а ниже описывается родственная аппаратура, выполненная с возможностью реализации вышеупомянутого способа управления этой заявки. Ссылаясь на фиг. 4, вариант осуществления аппаратуры отображения, предусмотренный в этой заявке, включает в себя:The control method of this application is described above, and the related apparatus capable of implementing the above-mentioned control method of this application is described below. Referring to FIG. 4, an embodiment of the display equipment provided in this application includes:

приемный модуль 401, выполненный с возможностью приема содержимого первого экрана и идентификатора целевой функции навигации, отправленных мобильным телефоном, причем идентификатор целевой функции навигации используется для идентификации текущей функции навигации, за исключением функции навигации с тремя клавишами на мобильном телефоне;a receiving unit 401, configured to receive the contents of the first screen and the navigation target ID sent by the mobile phone, the navigation target ID being used to identify the current navigation function except for the three-key navigation function on the mobile phone;

модуль 402 отображения, выполненный с возможностью формирования окна совместной работы, включающего в себя область проецирования экрана и панель навигации в соответствии с идентификатором целевой функции навигации, причем панель навигации включает в себя три виртуальные навигационные клавиши; и отображения содержимого первого экрана в области проецирования экрана;a display unit 402, configured to generate a collaboration window including a screen projection area and a navigation bar according to a navigation target function ID, the navigation bar including three virtual navigation keys; and displaying the contents of the first screen in the projection area of the screen;

модуль 403 ввода, выполненный с возможностью приема операций клавиатуры и мыши, воздействующих на виртуальные навигационные клавиши;an input module 403, configured to receive keyboard and mouse operations affecting the virtual navigation keys;

модуль 404 обработки, выполненный с возможностью генерирования инструкции клавиши в соответствии с операцией клавиатуры и мыши;a processing unit 404, configured to generate a key instruction according to a keyboard and mouse operation;

передающий модуль 405, выполненный с возможностью отправки инструкции клавиши на мобильный телефон, чтобы предписывать мобильному телефону выполнять функцию навигации в соответствии с инструкцией клавиши, причем функция навигации используется для корректировки содержимого первого экрана на содержимое второго экрана;a transmission module 405, configured to send a key instruction to the mobile phone to cause the mobile phone to perform a navigation function according to the key instruction, the navigation function being used to adjust the contents of the first screen to the contents of the second screen;

причем приемный модуль 401 дополнительно выполнен с возможностью приема содержимого второго экрана, отправленного мобильным телефоном; иmoreover, the receiving module 401 is further configured to receive the contents of the second screen sent by the mobile phone; And

модуль 402 отображения дополнительно выполнен с возможностью отображения содержимого второго экрана в окне совместной работы.the display module 402 is further configured to display the contents of the second screen in the collaboration window.

В опциональном варианте осуществления текущая функция навигации включает в себя функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши.In an optional embodiment, the current navigation function includes a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key.

В другом опциональном варианте осуществленияIn another optional embodiment

модуль 402 отображения дополнительно выполнен с возможностью того, чтобы: когда режим окна совместной работы является режимом развернутого окна и положение указателя не расположено в первой целевой области, скрывать панель навигации, причем первая целевая область является частью краевой области для области проецирования экрана и соответствует панели навигации; и когда режим окна совместной работы является режимом развернутого окна и положение указателя расположено в первой целевой области, отображать панель навигации в первой целевой области.the display module 402 is further configured to: when the collaborative window mode is a maximized window mode and the pointer position is not located in the first target area, hide the navigation bar, wherein the first target area is part of the edge area for the screen projection area and corresponds to the navigation bar ; and when the collaboration window mode is a maximized window mode and the pointer position is located in the first target area, display the navigation bar in the first target area.

В другом опциональном варианте осуществления окно совместной работы дополнительно включает в себя строку заголовка; иIn another optional embodiment, the collaboration window further includes a title bar; And

модуль 402 отображения дополнительно выполнен с возможностью того, чтобы: когда режим окна совместной работы является режимом развернутого окна и положение указателя не расположено во второй целевой области, скрывать строку заголовка, причем вторая целевая область является частью краевой области для области проецирования экрана и соответствует строке заголовка; и когда режим окна совместной работы является режимом развернутого окна и положение указателя расположено во второй целевой области, отображать строку заголовка во второй целевой области.the display module 402 is further configured to: when the collaborative window mode is a maximized window mode and the pointer position is not located in the second target area, hide the title bar, wherein the second target area is part of the edge area for the screen projection area and corresponds to the title bar ; and when the collaboration window mode is the maximized window mode and the pointer position is located in the second target area, display the title bar in the second target area.

В другом опциональном варианте осуществления модуль 404 обработки дополнительно выполнен с возможностью запрещать операции клавиатуры и мыши имитировать функцию навигации, соответствующую идентификатору целевой функции навигации в окне совместной работы.In another optional embodiment, the processing module 404 is further configured to disable keyboard and mouse operations from simulating a navigation function corresponding to a navigation target identifier in the collaboration window.

Ссылаясь на фиг. 5, вариант осуществления мобильного телефона, представленный в этой заявке, включает в себя:Referring to FIG. 5, the mobile phone embodiment presented in this application includes:

передающий модуль 501, выполненный с возможностью отправки содержимого первого экрана и идентификатора целевой функции навигации на устройство отображения, причем идентификатор целевой функции навигации используется для идентификации текущей функции навигации, за исключением функции навигации с тремя клавишами на мобильном телефоне;a transmission module 501, configured to send the contents of the first screen and the navigation target ID to the display device, the navigation target ID being used to identify the current navigation function except for the three-key navigation function on the mobile phone;

приемный модуль 502, выполненный с возможностью приема инструкции клавиши, отправленной устройством отображения, причем инструкция клавиши формируется устройством отображения в соответствии с операцией клавиатуры и мыши;a receiving module 502, configured to receive a key instruction sent by the display device, the key instruction being generated by the display device in accordance with a keyboard and mouse operation;

модуль 503 обработки, выполненный с возможностью выполнения функции навигации, соответствующей инструкции клавиши, в соответствии с предварительно установленным соответствием, где функция навигации используется для корректировки содержимого первого экрана на содержимое второго экрана; иa processing unit 503, configured to execute a navigation function corresponding to the key instruction according to a preset mapping, where the navigation function is used to adjust the contents of the first screen to the contents of the second screen; And

при этом передающий модуль 501 дополнительно выполнен с возможностью отправки содержимого второго экрана на устройство отображения, чтобы предписывать устройству отображения отображать содержимое второго экрана в области проецирования экрана окна совместной работы.wherein the transmission module 501 is further configured to send the contents of the second screen to the display device to cause the display device to display the contents of the second screen in the screen projection area of the collaboration window.

В опциональном варианте осуществления текущая функция навигации включает в себя функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши.In an optional embodiment, the current navigation function includes a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key.

Ссылаясь на фиг. 6, вариант осуществления системы проецирования экрана, представленной в этой заявке, включает в себя:Referring to FIG. 6, an embodiment of the screen projection system presented in this application includes:

устройство 20 отображения и мобильный телефон 10, где мобильный телефон 10 и устройство 20 отображения соединены друг с другом через радиоканал 30;the display device 20 and the mobile phone 10, where the mobile phone 10 and the display device 20 are connected to each other via a radio link 30;

устройство 20 отображения выполнено с возможностью: принимать содержимое первого экрана и состояние целевой функции навигации, отправленных мобильным телефоном 10, причем целевая функция навигации включает в себя функции навигации мобильного телефона, за исключением функции навигации с тремя клавишами; формировать окно совместной работы, включающее в себя область проецирования экрана и панель навигации, когда состояние целевой функции навигации является запущенным состоянием, и отображать содержимое первого экрана в области проецирования экрана, причем панель навигации включает в себя три виртуальные навигационные клавиши; принимать операцию клавиатуры и мыши, воздействующую на виртуальные навигационные клавиши; формировать инструкцию клавиши в соответствии с операцией клавиатуры и мыши и отправлять инструкцию клавиши на мобильный телефон, чтобы предписывать мобильному телефону выполнять функцию навигации в соответствии с инструкцией клавиши; принимать содержимое второго экрана, отправленного мобильным телефоном; и отображать содержимое второго экрана в области проецирования экрана; иthe display device 20 is configured to: receive the contents of the first screen and the state of the target navigation function sent by the mobile phone 10, the target navigation function including the navigation functions of the mobile phone excluding the three-key navigation function; generating a collaboration window including a screen projection area and a navigation bar when the navigation target function state is a running state, and displaying the contents of the first screen in the screen projection area, the navigation bar including three virtual navigation keys; receive a keyboard and mouse operation affecting the virtual navigation keys; generate a key instruction in accordance with the operation of the keyboard and mouse, and send the key instruction to the mobile phone to cause the mobile phone to perform a navigation function in accordance with the key instruction; receive the content of the second screen sent by the mobile phone; and display the contents of the second screen in the projection area of the screen; And

мобильный телефон 10 выполнен с возможностью: отправлять содержимое первого экрана и состояние целевой функции навигации на устройство 20 отображения; принимать инструкцию клавиши, отправленную устройством отображения, когда состояние целевой функции навигации является запущенным состоянием; выполнять функцию навигации в соответствии с инструкцией клавиши, причем функция навигации используется для корректировки содержимого первого экрана на содержимое второго экрана; и отправлять содержимое второго экрана на устройство отображения.the mobile phone 10 is configured to: send the contents of the first screen and the state of the target navigation function to the display device 20; receive a key instruction sent by the display device when the navigation target function state is the running state; perform a navigation function according to the key instruction, wherein the navigation function is used to adjust the contents of the first screen to the contents of the second screen; and send the contents of the second screen to the display device.

В частности, радиосвязь может быть беспроводной линией (беспроводная точность, Wi-Fi) или связью Bluetooth. Функции устройства 20 отображения могут быть такими же, как у устройства отображения в варианте осуществления, показанном на фиг. 4, или других опциональных вариантах осуществления. Функции мобильного телефона 10 могут быть такими же, как у мобильного телефона в варианте осуществления, показанном на фиг. 5, или других опциональных вариантах осуществления.In particular, the radio link may be a wireless link (wireless fidelity, Wi-Fi) or a Bluetooth link. The functions of the display device 20 may be the same as those of the display device in the embodiment shown in FIG. 4, or other optional embodiments. The functions of the mobile phone 10 may be the same as those of the mobile phone in the embodiment shown in FIG. 5, or other optional embodiments.

Ссылаясь на фиг. 7, другой вариант устройства 20 отображения, предусмотренный в этой заявке, включает в себя:Referring to FIG. 7, another embodiment of the display device 20 provided in this application includes:

аппаратуру 701 ввода, аппаратуру 702 отображения, память 703, процессор 704, приемопередатчик 705 и интерфейс данных 706, причем аппаратура 701 ввода, аппаратура 702 отображения, память 703, процессор 704, приемопередатчик 705, и интерфейс 706 данных могут быть подключены через шину.input apparatus 701, display apparatus 702, memory 703, processor 704, transceiver 705, and data interface 706, wherein input apparatus 701, display apparatus 702, memory 703, processor 704, transceiver 705, and data interface 706 may be connected via a bus.

Аппаратура 701 ввода может быть клавиатурой или мышью.Input equipment 701 may be a keyboard or a mouse.

Аппаратура 702 отображения может быть дисплеем, проектором или другим устройством для отображения.The display apparatus 702 may be a display, projector, or other display device.

Память 703 может быть энергозависимой памятью или энергонезависимой памятью или может включать в себя энергозависимую память и энергонезависимую память. Энергонезависимая память может быть постоянной памятью (read-only memory, ROM), программируемым ROM (programmable ROM, PROM), стираемым PROM (erasable PROM, EPROM), электрически EPROM (electrically EPROM, EEPROM) или флэш-памятью. Энергонезависимая память может быть оперативной памятью (random access memory, RAM), а также использоваться в качестве внешнего кэша. Следует отметить, что память, описанная в данном документе, направлена на то, чтобы включать в себя, но не ограничиваться ими, эти и любые другие подходящие типы памяти.Memory 703 may be volatile memory or non-volatile memory, or may include volatile memory and non-volatile memory. Non-volatile memory can be read-only memory (ROM), programmable ROM (programmable ROM, PROM), erasable PROM (erasable PROM, EPROM), electrically EPROM (electrically EPROM, EEPROM), or flash memory. Non-volatile memory can be random access memory (RAM) and can also be used as an external cache. It should be noted that the memory described herein is intended to include, but not be limited to, these and any other suitable types of memory.

Вышеупомянутый процессор 704 может быть процессором общего назначения, включая центральный процессор (central processing unit, CPU), сетевой процессор (network processor, NP) и т.п.; и, кроме того, может быть цифровым сигнальным процессором (digital signal processor, DSP), специализированной интегральной схемой (application specific integrated circuit, ASIC), программируемой пользователем вентильной матрицей (field-programmable gate array, FPGA) или другим программируемым логическим устройством. Процессор 704 выполнен с возможностью реализации функций устройства отображения в вышеизложенных вариантах осуществления путем вызова программного кода в памяти 703.The above processor 704 may be a general purpose processor, including a central processing unit (CPU), a network processor (network processor, NP), and the like; and may also be a digital signal processor (DSP), application specific integrated circuit (ASIC), field-programmable gate array (FPGA), or other programmable logic device. The processor 704 is configured to implement the functions of the display device in the above embodiments by calling the program code in the memory 703.

Приемопередатчик 705 выполнен с возможностью отправки и приема данных в беспроводной связи. Компонент, выполненный с возможностью реализации функции приема в приемопередатчике 705, может рассматриваться как приемник, а компонент, выполненный с возможностью реализации функции отправки в приемопередатчике 705, может рассматриваться как отправитель. То есть приемопередатчик 705 включает в себя приемник и отправитель. Приемопередатчик 705 также может называться приемопередающей машиной или приемопередающей схемой. Приемник также иногда может называться приемной машиной или приемной схемой. Отправитель также иногда может называться передающей машиной или передающей схемой.The transceiver 705 is configured to send and receive data wirelessly. A component configured to implement a receive function in the transceiver 705 may be considered a receiver, and a component configured to implement a send function in the transceiver 705 may be considered a sender. That is, the transceiver 705 includes a receiver and a sender. The transceiver 705 may also be referred to as a transceiver machine or a transceiver circuit. A receiver may also sometimes be referred to as a receiver machine or a receiver circuit. The sender may also sometimes be referred to as the transmitting machine or transmitting circuit.

Интерфейс 706 данных соединен с мобильным телефоном проводным способом.The data interface 706 is wired to the mobile phone.

Структурная схема, представленная в этом варианте осуществления, показывает только упрощенную конструкцию устройства 20 отображения. В реальном приложении устройство 20 отображения может включать в себя любое количество аппаратур 701 ввода, аппаратур 702 отображения, запоминающих устройств 703, процессоров 704, приемопередатчиков 705 и интерфейсов 706 данных для реализации функций или операций, выполняемых устройством 20 отображения в вариантах осуществления этой заявки и все устройства, которые может реализовать эта заявка, подпадают под область охраны этой заявки. Хотя это и не показано на фигуре, устройство 20 отображения может дополнительно включать в себя источник питания и т.п. Источник питания выполнен с возможностью подачи питания на различные компоненты и может быть логически подключен к процессору 704 с использованием системы управления питанием, тем самым реализуя такие функции, как зарядка, разрядка и управление энергопотреблением с использованием системы управления питанием.The block diagram presented in this embodiment only shows a simplified structure of the display device 20. In an actual application, display device 20 may include any number of input devices 701, display devices 702, memories 703, processors 704, transceivers 705, and data interfaces 706 to implement functions or operations performed by display device 20 in embodiments of this application, and all devices that this application can implement are within the scope of this application. Although not shown in the figure, the display device 20 may further include a power supply and the like. The power supply is configured to supply power to various components and can be logically connected to the processor 704 using the power management system, thereby realizing functions such as charging, discharging, and power management using the power management system.

Ссылаясь на фиг. 8, другой вариант мобильного телефона, представленный в этой заявке, включает в себя:Referring to FIG. 8, another version of the mobile phone presented in this application includes:

такие компоненты, как радиочастотная (radio frequency, RF) схема 810, память 820, блок 830 ввода, блок 840 отображения, модуль 850 Bluetooth, аудиосхема 860, модуль 870 WiFi, процессор 880 и блок 890 питания. Специалист в данной области техники может понять, что структура мобильного телефона, показанная на фиг. 8, не является ограничением для мобильного телефона, и мобильный телефон может включать в себя больше или меньше компонентов, чем показано на рисунке, или некоторые компоненты могут быть объединены, или может использоваться другое развертывание компонентов.components such as radio frequency (radio frequency, RF) circuit 810, memory 820, input unit 830, display unit 840, Bluetooth module 850, audio circuit 860, WiFi module 870, processor 880, and power supply 890. One skilled in the art can appreciate that the structure of the mobile phone shown in FIG. 8 is not limited to a mobile phone, and the mobile phone may include more or fewer components than shown in the figure, or some components may be combined, or a different component deployment may be used.

Ниже приводится подробное описание компонентов мобильного телефона со ссылкой на фиг. 8:The following is a detailed description of the mobile phone components with reference to FIG. 8:

RF-схема 810 может быть выполнена с возможностью отправки и приема сигналов во время процесса приема и отправки информации или процесса вызова. В частности, RF-схема принимает информацию нисходящей линии связи от базовой станции, затем доставляет информацию нисходящей линии связи в процессор 880 для обработки и отправляет рассчитанные данные восходящей линии связи на базовую станцию. Как правило, RF-схема 810 включает в себя, помимо прочего, антенну, по меньшей мере один усилитель, приемопередатчик, ответвитель, малошумящий усилитель (low noise amplifier, LNA), дуплексер и т.п. Кроме того, RF-схема 810 также может связываться с сетью и другим устройством посредством беспроводной связи. Беспроводная связь может использовать любой стандарт или протокол связи, включая, но не ограничиваясь ими, Глобальную систему мобильной связи (Global System for Mobile Communications, GSM), Обычную службу пакетной радиосвязи (General Packet Radio Service, GPRS), Множественный доступ с кодовым разделением каналов (Code Division Multiple Access, CDMA), широкополосный множественный доступ с кодовым разделением каналов (Wideband Code Division Multiple Access, WCDMA), долгосрочное развитие (Long Term Evolution, LTE), электронная почта, служба коротких сообщений (Short Messaging Service, SMS) и тому подобное.The RF circuit 810 may be configured to send and receive signals during an information receiving and sending process or a call process. Specifically, the RF circuit receives the downlink information from the base station, then delivers the downlink information to the processor 880 for processing, and sends the calculated uplink data to the base station. Typically, RF circuitry 810 includes, among other things, an antenna, at least one amplifier, a transceiver, a coupler, a low noise amplifier (LNA), a duplexer, and the like. In addition, the RF circuit 810 can also communicate with a network and another device via wireless communication. Wireless communication may use any communication standard or protocol, including but not limited to Global System for Mobile Communications (GSM), General Packet Radio Service (GPRS), Code Division Multiple Access (Code Division Multiple Access, CDMA), Wideband Code Division Multiple Access (WCDMA), Long Term Evolution (LTE), Email, Short Messaging Service (SMS) and the like.

Память 820 может быть выполнена с возможностью хранения программы и модуля. Процессор 880 запускает программу и модуль, хранящиеся в памяти 820, для реализации различных функциональных приложений и обработки данных мобильного телефона. Память 820 может в основном включать в себя область хранения программ и область хранения данных. Область хранения программ может хранить операционную систему, прикладную программу, требуемую по меньшей мере одной функцией (например, функцией воспроизведения звука и функцией отображения изображения) и т.п. В области хранения данных могут храниться данные (например, аудиоданные и адресная книга), созданные в соответствии с использованием мобильного телефона и т.п. Кроме того, память 820 может включать в себя высокоскоростное RAM и может дополнительно включать в себя энергонезависимую память, такую как по меньшей мере одно запоминающее устройство на магнитном диске, флэш-память или другое энергозависимое твердотельное запоминающее устройство.Memory 820 may be configured to store a program and a module. The processor 880 runs the program and module stored in the memory 820 to implement various functional applications and data processing of the mobile phone. The memory 820 may mainly include a program storage area and a data storage area. The program storage area may store an operating system, an application program required by at least one function (eg, a sound reproduction function and an image display function), and the like. The data storage area may store data (eg, audio data and address book) created in accordance with the use of a mobile phone and the like. In addition, memory 820 may include high speed RAM and may further include non-volatile memory such as at least one magnetic disk storage, flash memory, or other volatile solid state storage device.

Блок 830 ввода может быть выполнен с возможностью приема информации о введенных цифрах или символах и формирования входного сигнала клавиатуры, относящегося к настройке пользователя и управлению функциями мобильного телефона. В частности, блок 830 ввода может включать в себя сенсорную панель 831 и другое устройство 832 ввода. Сенсорная панель 831, которая также может называться сенсорным экраном, может регистрировать сенсорные операции пользователя на сенсорной панели или рядом с ней (например, операции пользователя на сенсорной панели 831 или рядом с ней с использованием любого подходящего объекта, такого как палец или стилус), и привести в действие соответствующее соединительное устройство в соответствии с заданной программой. Опционально сенсорная панель 831 может включать в себя две части: аппаратуру обнаружения касания и сенсорный контроллер. Аппаратура обнаружения касания определяет положение касания пользователя, обнаруживает сигнал, генерируемый операцией касания, и передает сигнал контроллеру касания. Контроллер касания принимает информацию о касании от аппаратуры обнаружения касания, преобразует информацию о касании в координаты точки касания и передает координаты точки касания в процессор 880. Кроме того, контроллер касания может принимать инструкцию, переданную процессором 880, и выполнять эту инструкцию. Кроме того, сенсорная панель 831 может быть реализована с использованием различных типов, например резистивного типа, емкостного типа, инфракрасного типа и типа с поверхностными акустическими волнами. В дополнение к сенсорной панели 831 блок 830 ввода может дополнительно включать в себя другое устройство 832 ввода. В частности, другое устройство 832 ввода может включать в себя, помимо прочего, одну или несколько функциональных клавиш (таких как клавиша регулировки громкости или клавиша переключения), шаровой манипулятор и джойстик.The input unit 830 may be configured to receive information about the entered digits or characters and generate a keypad input related to user setup and mobile phone function control. In particular, the input unit 830 may include a touch pad 831 and another input device 832. The touch panel 831, which may also be referred to as a touch screen, can register user touch operations on or near the touch panel (e.g., user operations on or near the touch panel 831 using any suitable object such as a finger or stylus), and actuate the corresponding connecting device in accordance with the specified program. Optionally, the touch panel 831 may include two parts: a touch detection hardware and a touch controller. The touch detection apparatus detects the touch position of the user, detects the signal generated by the touch operation, and transmits the signal to the touch controller. The touch controller receives the touch information from the touch detection equipment, converts the touch information into touch point coordinates, and transmits the touch point coordinates to the processor 880. In addition, the touch controller may receive an instruction transmitted by the processor 880 and execute the instruction. In addition, the touch panel 831 can be implemented using various types, such as resistive type, capacitive type, infrared type, and surface acoustic wave type. In addition to the touch pad 831, the input unit 830 may further include another input device 832. In particular, the other input device 832 may include, among other things, one or more function keys (such as a volume key or a toggle key), a trackball, and a joystick.

Блок 840 отображения может быть выполнен с возможностью отображения информации, введенной пользователем, или информации, предоставленной пользователю, и различных меню мобильного телефона. Блок 840 дисплея может включать в себя панель 841 дисплея. Опционально, панель 841 дисплея может быть сконфигурирована с использованием жидкокристаллического дисплея (liquid crystal display, LCD), органического светодиода (organic light-emitting diode, OLED) и т.п. Кроме того, сенсорная панель 831 может закрывать панель 841 дисплея. После обнаружения операции касания на сенсорной панели или рядом с ней сенсорная панель 831 передает операцию касания процессору 880 для определения типа события касания. Затем процессор 880 обеспечивает соответствующий визуальный вывод на панели 841 дисплея в соответствии с типом события касания. Хотя на фиг. 8, сенсорная панель 831 и панель 841 дисплея используются как две отдельные части для реализации функций ввода и вывода мобильного телефона, в некоторых вариантах осуществления сенсорная панель 831 и панель 841 дисплея могут быть объединены для реализации функции ввода и вывода мобильного телефона.The display unit 840 may be configured to display information entered by the user or information provided to the user and various menus of the mobile phone. The display unit 840 may include a display panel 841. Optionally, the display panel 841 can be configured with a liquid crystal display (LCD), an organic light-emitting diode (OLED), or the like. In addition, the touch panel 831 may cover the display panel 841. Upon detecting a touch operation on or near the touch pad, the touch pad 831 passes the touch operation to the processor 880 to determine the type of the touch event. The processor 880 then provides the appropriate visual output on the display panel 841 according to the type of touch event. Although in FIG. 8, touch panel 831 and display panel 841 are used as two separate parts to implement mobile phone input and output functions, in some embodiments, touch panel 831 and display panel 841 can be combined to implement mobile phone input and output function.

Мобильный телефон может дополнительно включать в себя модуль 850 Bluetooth.The mobile phone may further include a Bluetooth module 850.

Аудиосхема 860, громкоговоритель 861 и микрофон 862 могут обеспечивать аудиоинтерфейсы между пользователем и мобильным телефоном. Аудиосхема 860 может преобразовывать полученные аудиоданные в электрический сигнал и передавать электрический сигнал на громкоговоритель 861. Громкоговоритель 861 преобразует электрический сигнал в звуковой сигнал для вывода. С другой стороны, микрофон 862 преобразует собранный звуковой сигнал в электрический сигнал. Аудиосхема 860 принимает электрический сигнал и преобразует электрический сигнал в аудиоданные и выводит аудиоданные в процессор 880 для обработки. Затем процессор отправляет аудиоданные, например, на другой мобильный телефон, используя RF-схему 810, или выводит аудиоданные в память 820 для дальнейшей обработки.Audio circuit 860, speaker 861, and microphone 862 may provide audio interfaces between a user and a mobile phone. An audio circuit 860 may convert the received audio data into an electrical signal and transmit the electrical signal to a speaker 861. The speaker 861 converts the electrical signal into an audio signal for output. On the other hand, the microphone 862 converts the collected audio signal into an electrical signal. An audio circuit 860 receives an electrical signal and converts the electrical signal into audio data and outputs the audio data to a processor 880 for processing. The processor then sends the audio data to, for example, another mobile phone using the RF circuit 810, or outputs the audio data to memory 820 for further processing.

WiFi - это технология беспроводной передачи данных на короткие расстояния. С помощью модуля 870 Wi-Fi мобильный телефон может помочь пользователю отправлять и получать электронную почту, просматривать веб-страницы, получать доступ к потоковым мультимедиа и т.п. Это обеспечивает беспроводной широкополосный доступ в Интернет для пользователя. Хотя на фиг. 8 показан модуль 870 WiFi, можно понять, что модуль WiFi не является необходимым компонентом мобильного телефона, и модуль WiFi может быть опущен по мере необходимости при условии, что объем сущности настоящего изобретения не изменяется.WiFi is a technology for wireless transmission of data over short distances. With the Wi-Fi module 870, the mobile phone can help the user send and receive e-mail, surf the web, access streaming media, and the like. This provides wireless broadband Internet access to the user. Although in FIG. 8 shows the WiFi module 870, it can be understood that the WiFi module is not a necessary component of the mobile phone, and the WiFi module can be omitted as needed, as long as the scope of the gist of the present invention is not changed.

Процессор 880 представляет собой центр управления мобильным телефоном и соединен с различными частями всего мобильного телефона с использованием различных интерфейсов и линий. Запуская или выполняя программу и/или модуль, хранящиеся в памяти 820, и вызывая данные, хранящиеся в памяти 820, процессор выполняет различные функции мобильного телефона и выполняет обработку данных, тем самым контролируя весь мобильный телефон. Опционально процессор 880 может включать в себя один или несколько блоков обработки. Например, процессор 880 может объединять процессор приложений и процессор модема. Процессор приложения в основном обрабатывает операционную систему, пользовательский интерфейс, прикладную программу и т.п. Процессор модема в основном обрабатывает беспроводную связь. Понятно, что процессор модема может быть не интегрирован в процессор 880.The processor 880 is the control center of the mobile phone and is connected to various parts of the entire mobile phone using various interfaces and lines. By starting or executing a program and/or module stored in memory 820 and calling data stored in memory 820, the processor performs various functions of the mobile phone and performs data processing, thereby controlling the entire mobile phone. Optionally, processor 880 may include one or more processing units. For example, processor 880 may combine an application processor and a modem processor. The application processor mainly processes an operating system, a user interface, an application program, and the like. The modem's processor primarily handles wireless communications. It is understood that the modem processor may not be integrated into the 880 processor.

Мобильный телефон дополнительно включает в себя источник 890 питания (например, батарею) для подачи питания на компоненты. Например, источник питания может быть логически подключен к процессору 880 с использованием системы управления питанием, тем самым реализуя такие функции, как управление зарядкой, разрядкой и энергопотреблением с использованием системы управления питанием.The mobile phone further includes a power source 890 (eg, a battery) for supplying power to the components. For example, a power supply may be logically connected to the processor 880 using a power management system, thereby realizing functions such as charging, discharging, and power management using the power management system.

Хотя это и не показано на фигуре, мобильный телефон может дополнительно включать в себя камеру, датчик и т.п. Подробности не описаны здесь снова.Although not shown in the figure, the mobile phone may further include a camera, a sensor, or the like. Details are not described here again.

В вариантах осуществления настоящего изобретения посредством вызова программы, хранящейся в памяти 820, процессор 880, включенный в мобильный телефон, может реализовать функции мобильного телефона в варианте осуществления, показанном на фиг. 2, или других опциональных вариантах осуществления.In embodiments of the present invention, by calling a program stored in memory 820, a processor 880 included in a mobile phone can implement the functions of the mobile phone in the embodiment shown in FIG. 2, or other optional embodiments.

В этой заявке «несколько» означает два или более, и другой квантификатор аналогичен этому. «И/или» означает, что могут существовать три отношения. Например, A и/или B могут представлять следующие три случая: имеется только A, имеются и A, и B, и имеется только В. Следует понимать, что порядковые номера вышеописанных процессов не означают последовательности выполнения в различных вариантах осуществления настоящего изобретения. Последовательности выполнения процессов должны определяться в соответствии с функциями и внутренней логикой процессов и не должны рассматриваться как какое-либо ограничение процессов реализации вариантов осуществления настоящего изобретения.In this application, "several" means two or more, and the other quantifier is similar to this. "And/or" means that there can be three relationships. For example, A and/or B may represent the following three cases: only A exists, both A and B exist, and only B exists. The execution sequences of the processes should be determined according to the functions and internal logic of the processes and should not be considered as any limitation of the processes for implementing the embodiments of the present invention.

Эта заявка обеспечивает компьютерный носитель данных, включающий в себя инструкции, причем инструкции при выполнении на вычислительном устройстве предписывают вычислительному устройству выполнять этапы, реализованные устройством отображения в любом вышеописанном варианте осуществления.This application provides a computer storage medium including instructions, the instructions, when executed on a computing device, causing the computing device to perform the steps implemented by the display device in any of the embodiments described above.

Эта заявка дополнительно предоставляет компьютерный носитель данных, включающий в себя инструкции, причем инструкции при запуске на вычислительном устройстве предписывают вычислительному устройству выполнять этапы, реализованные мобильным телефоном в любом варианте осуществления, указанном выше.This application further provides a computer storage medium including instructions, wherein the instructions, when run on a computing device, cause the computing device to perform the steps implemented by the mobile phone in any of the embodiments above.

Эта заявка дополнительно обеспечивает компьютерный программный продукт, причем компьютерный программный продукт при запуске на вычислительном устройстве предписывает вычислительному устройству выполнять этапы, реализуемые устройством отображения в любом из вышеприведенных вариантов осуществления.This application further provides a computer program product, wherein the computer program product, when run on a computing device, causes the computing device to perform the steps implemented by the display device in any of the above embodiments.

Эта заявка дополнительно предоставляет компьютерный программный продукт, причем компьютерный программный продукт при запуске на вычислительном устройстве предписывает вычислительному устройству выполнять этапы, реализуемые мобильным телефоном в любом из вышеприведенных вариантов осуществления.This application further provides a computer program product, wherein the computer program product, when run on a computing device, causes the computing device to perform the steps implemented by the mobile phone in any of the above embodiments.

Все или некоторые из вышеупомянутых вариантов осуществления могут быть реализованы с использованием программного обеспечения, аппаратного обеспечения, микропрограммного обеспечения или их любой комбинации. Когда для реализации используется программное обеспечение, реализация может быть полностью или частично выполнена в виде компьютерного программного продукта.All or some of the above embodiments may be implemented using software, hardware, firmware, or any combination thereof. When software is used for the implementation, the implementation may be wholly or partly in the form of a computer program product.

Компьютерный программный продукт включает в себя одну или несколько компьютерных инструкций. Когда инструкции компьютерной программы загружаются и выполняются на устройстве отображения или мобильном телефоне, процедура или функции в соответствии с этой заявкой полностью или частично генерируются. Компьютерные инструкции могут быть сохранены на компьютерно-читаемом носителе данных или могут быть переданы с компьютерно-читаемого носителя данных на другой компьютерно-читаемый носитель данных. Например, компьютерные инструкции могут передаваться с веб-сайта, компьютера, сервера или центра обработки данных на другой веб-сайт, компьютер, сервер или центр обработки данных по проводной линии (например, коаксиальному кабелю, оптоволоконному кабелю или цифровому абонентскому каналу) или беспроводным способом (например, инфракрасным, радио или микроволновым). Компьютерно-читаемый носитель данных может быть любым пригодным для использования носителем, доступным для компьютера, или устройством хранения данных, таким как сервер или центр обработки данных, включающий один или несколько пригодных для использования носителей. Используемым носителем может быть магнитный носитель (например, гибкий диск, жесткий диск или магнитная лента), оптический носитель (например, DVD), полупроводниковый носитель (например, твердотельный диск (solid state disk, SSD)) или тому подобное.A computer program product includes one or more computer instructions. When computer program instructions are downloaded and executed on a display device or mobile phone, the procedure or functions according to this application are wholly or partly generated. The computer instructions may be stored on a computer-readable storage medium or may be transferred from a computer-readable storage medium to another computer-readable storage medium. For example, computer instructions may be transmitted from a website, computer, server, or data center to another website, computer, server, or data center over a wired line (such as coaxial cable, fiber optic cable, or digital subscriber line) or wirelessly. (e.g. infrared, radio or microwave). A computer-readable storage medium can be any usable medium accessible to a computer, or a storage device such as a server or data center, including one or more usable media. The medium used may be a magnetic medium (eg, floppy disk, hard disk, or magnetic tape), an optical medium (eg, DVD), a semiconductor medium (eg, a solid state disk (SSD)) or the like.

Вышеприведенные варианты осуществления предназначены только для описания технических решений этой заявки, но не для ограничения этой заявки. Хотя эта заявка подробно описана со ссылкой на вышеизложенные варианты осуществления, специалисту в данной области техники должно быть понятно, что в технические решения, записанные в вышеизложенных вариантах осуществления, могут быть внесены модификации, или в некоторые их технические характеристики могут быть внесены эквивалентные замены, и эти модификации или замены не приводят к отходу сущности соответствующих технических решений от объема технических решений вариантов осуществления настоящей заявки.The above embodiments are only intended to describe the technical solutions of this application, but not to limit this application. Although this application has been described in detail with reference to the foregoing embodiments, one skilled in the art will appreciate that modifications may be made to the technical solutions recorded in the foregoing embodiments, or equivalent substitutions may be made to some of their specifications, and these modifications or replacements do not lead to departure of the essence of the respective technical solutions from the scope of the technical solutions of the embodiments of the present application.

Claims (28)

1. Способ управления, применяемый к сценарию проецирования экрана, применяемому к устройству отображения, включающий в себя этапы, на которых:1. A control method applied to a screen projection scenario applied to a display device, including the steps of: принимают содержимое первого экрана, отправленное мобильным телефоном, имеющим текущую функцию навигации, за исключением функции навигации с тремя клавишами на мобильном телефоне;receiving the contents of the first screen sent by the mobile phone having the current navigation function except for the three-key navigation function on the mobile phone; формируют окно совместной работы, содержащее область проецирования экрана и панель навигации, при этом панель навигации содержит три виртуальные навигационные клавиши;forming a collaboration window containing a screen projection area and a navigation bar, the navigation bar including three virtual navigation keys; отображают содержимое первого экрана в области проецирования экрана;displaying the contents of the first screen in a projection area of the screen; принимают операцию клавиатуры и мыши, воздействующую на виртуальные навигационные клавиши;receiving a keyboard and mouse operation affecting the virtual navigation keys; формируют инструкцию клавиши в соответствии с операцией клавиатуры и мыши и отправляют инструкцию клавиши на мобильный телефон, чтобы предписывать мобильному телефону выполнять функцию навигации в соответствии с инструкцией клавиши, при этом функция навигации используется для корректировки содержимого первого экрана на содержимое второго экрана;generating a key instruction according to the operation of the keyboard and mouse, and sending the key instruction to the mobile phone to cause the mobile phone to perform a navigation function according to the key instruction, the navigation function being used to adjust the contents of the first screen to the contents of the second screen; принимают содержимое второго экрана, отправленное мобильным телефоном; иreceiving the contents of the second screen sent by the mobile phone; And отображают содержимое второго экрана в области проецирования экрана.displaying the contents of the second screen in the projection area of the screen. 2. Способ по п. 1, в котором текущая функция навигации содержит функцию навигации с помощью жестов и/или функцию физической навигации вне экрана, а функция физической навигации вне экрана реализуется с использованием физической клавиши.2. The method of claim 1, wherein the current navigation function comprises a gesture navigation function and/or an off-screen physical navigation function, and the off-screen physical navigation function is implemented using a physical key. 3. Способ по п. 1 или 2, в котором3. The method according to claim 1 or 2, in which когда окно совместной работы представляет собой окно с портретной ориентацией, панель навигации располагается ниже или выше области проецирования экрана, и панель навигации является смежной с областью проецирования экрана; иwhen the collaboration window is a portrait-oriented window, the navigation bar is located below or above the screen projection area, and the navigation bar is adjacent to the screen projection area; And когда окно совместной работы является окном с альбомной ориентацией, панель навигации располагается справа или слева от области проецирования экрана.when the collaboration window is a landscape window, the navigation bar is positioned to the right or left of the screen projection area. 4. Способ по любому из пп. 1-3, в котором три виртуальные навигационные клавиши включают в себя клавишу меню, клавишу рабочего стола и клавишу возврата, причем клавиша меню соответствует функции навигации для входа в меню задач, клавиша рабочего стола соответствует функции навигации для возврата на рабочий стол, а клавиша возврата соответствует функции навигации для возврата на более высокий уровень навигации.4. The method according to any one of paragraphs. 1-3, wherein the three virtual navigation keys include a menu key, a desktop key, and a back key, wherein the menu key corresponds to a navigation function to enter the task menu, the desktop key corresponds to a navigation function to return to the desktop, and the return key corresponds to a navigation function to return to a higher level of navigation. 5. Способ по любому из пп. 1-4, в котором операция клавиатуры и мыши содержит однократное нажатие мышью.5. The method according to any one of paragraphs. 1-4, in which the keyboard and mouse operation comprises a single click of the mouse. 6. Способ по п. 1 или 2, в котором панель навигации расположена ниже области проецирования экрана.6. The method according to claim 1 or 2, wherein the navigation bar is located below the projection area of the screen. 7. Способ по любому из пп. 1-6, в котором панель навигации расположена вне области проецирования экрана.7. The method according to any one of paragraphs. 1-6, in which the navigation bar is located outside the screen projection area. 8. Способ по любому из пп. 2-7, в котором навигация с помощью жестов включает в себя:8. The method according to any one of paragraphs. 2-7, in which gesture navigation includes: прием мобильным телефоном операции скольжения вверх от левого нижнего конца экрана мобильного телефона; илиreceiving, by the mobile phone, an upward sliding operation from the lower left end of the screen of the mobile phone; or прием мобильным телефоном операции скольжения вверх от левого нижнего конца экрана мобильного телефона и удерживания в течение некоторого периода времени; или receiving by the mobile phone an operation of sliding up from the lower left end of the screen of the mobile phone and holding for a period of time; or прием мобильным телефоном операции скольжения вправо от крайнего левого края экрана мобильного телефона.receiving by the mobile phone a slide operation to the right from the leftmost edge of the screen of the mobile phone. 9. Способ по п. 8, в котором устройство отображения одновременно позволяет осуществлять навигацию с помощью трех клавиш и навигацию с помощью жестов.9. The method of claim 8, wherein the display device simultaneously allows three-key navigation and gesture navigation. 10. Способ по любому из пп. 1-9, в котором окно совместной работы расположено на правой стороне экрана устройства отображения.10. The method according to any one of paragraphs. 1-9 in which the collaboration window is located on the right side of the screen of the display device. 11. Способ по п. 10, в котором окно совместной работы содержит строку заголовка, а строка заголовка содержит по меньшей мере клавишу свернутого окна, клавишу развернутого окна и клавишу закрытия окна.11. The method of claim 10, wherein the collaboration window includes a title bar, and the title bar includes at least a minimized window key, a maximized window key, and a window close key. 12. Способ по любому из пп. 1-11, причем способ дополнительно включает в себя этапы, на которых:12. The method according to any one of paragraphs. 1-11, wherein the method further includes the steps of: отправляют посредством устройства отображения инструкцию модификации функции навигации на мобильный телефон;sending, by means of the display device, a navigation function modification instruction to the mobile phone; модифицируют посредством мобильного телефона текущую функцию навигации на функцию навигации с помощью трех клавиш в соответствии с инструкцией модификации функции навигации.modifying, via the mobile phone, the current navigation function to the three-key navigation function according to the navigation function modification instruction. 13. Способ по любому из пп. 1-12, в котором мобильный телефон, отображающий содержимое второго экрана, и устройство отображения, отображающее содержимое второго экрана, отображаются синхронно.13. The method according to any one of paragraphs. 1-12, in which the mobile phone displaying the contents of the second screen and the display device displaying the contents of the second screen are displayed synchronously. 14. Компьютерно-читаемый носитель данных, содержащий инструкции, причем инструкции при выполнении на компьютере предписывают компьютеру выполнять способ по любому из пп. 1-13.14. A computer-readable storage medium containing instructions, the instructions, when executed on a computer, instruct the computer to perform the method according to any one of paragraphs. 1-13.
RU2022107487A 2019-08-29 2020-07-22 Control method applied to the screen projection scenario and the corresponding device RU2791547C1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910809113.9 2019-08-29

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2023104324A Division RU2816127C2 (en) 2019-08-29 2020-07-22 Control method applied to screen projection scenario, and corresponding device

Publications (1)

Publication Number Publication Date
RU2791547C1 true RU2791547C1 (en) 2023-03-10

Family

ID=

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2389067C2 (en) * 2003-10-24 2010-05-10 Майкрософт Корпорейшн System and methods of projecting content from computer devices
CN103713847A (en) * 2013-12-25 2014-04-09 华为终端有限公司 System bar control method of user equipment and user equipment
CN104967886A (en) * 2015-05-28 2015-10-07 深圳市创易联合科技有限公司 Wireless projection method and system
US20170017458A1 (en) * 2012-01-26 2017-01-19 Panasonic Intellectual Property Management Co., Ltd. Mobile terminal, television broadcast receiver, and device linkage method
RU2619889C2 (en) * 2011-05-11 2017-05-19 Самсунг Электроникс Ко., Лтд. Method and device for using data shared between various network devices
CN107682724A (en) * 2017-09-29 2018-02-09 北京盛世辉科技有限公司 Display methods, device, intelligent remote controller and computer-readable recording medium
CN107743220A (en) * 2017-10-24 2018-02-27 西安万像电子科技有限公司 The method, apparatus of condition prompting moves on to screen system with
CN108702414A (en) * 2017-06-16 2018-10-23 华为技术有限公司 A kind of screen locking method and device
US20190065030A1 (en) * 2017-08-22 2019-02-28 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
CN109753256A (en) * 2018-03-29 2019-05-14 北京字节跳动网络技术有限公司 A kind of layout method, device and the equipment on window control column

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2389067C2 (en) * 2003-10-24 2010-05-10 Майкрософт Корпорейшн System and methods of projecting content from computer devices
RU2619889C2 (en) * 2011-05-11 2017-05-19 Самсунг Электроникс Ко., Лтд. Method and device for using data shared between various network devices
US20170017458A1 (en) * 2012-01-26 2017-01-19 Panasonic Intellectual Property Management Co., Ltd. Mobile terminal, television broadcast receiver, and device linkage method
CN103713847A (en) * 2013-12-25 2014-04-09 华为终端有限公司 System bar control method of user equipment and user equipment
CN104967886A (en) * 2015-05-28 2015-10-07 深圳市创易联合科技有限公司 Wireless projection method and system
CN108702414A (en) * 2017-06-16 2018-10-23 华为技术有限公司 A kind of screen locking method and device
US20190065030A1 (en) * 2017-08-22 2019-02-28 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
CN107682724A (en) * 2017-09-29 2018-02-09 北京盛世辉科技有限公司 Display methods, device, intelligent remote controller and computer-readable recording medium
CN107743220A (en) * 2017-10-24 2018-02-27 西安万像电子科技有限公司 The method, apparatus of condition prompting moves on to screen system with
CN109753256A (en) * 2018-03-29 2019-05-14 北京字节跳动网络技术有限公司 A kind of layout method, device and the equipment on window control column

Similar Documents

Publication Publication Date Title
US11809704B2 (en) Control method applied to screen projection scenario and related device
US11861161B2 (en) Display method and apparatus
US11809705B2 (en) Touch control method and apparatus
US11579946B2 (en) Method for managing multiple operating systems in a terminal
EP4228226A1 (en) File sending method and apparatus, and electronic device
CN110225180B (en) Content input method and terminal equipment
KR20150040781A (en) Method, apparatus and terminal device for displaying messages
CN108540645B (en) Mobile terminal operation method and mobile terminal
US20200310771A1 (en) Application Processing Method for Terminal Device, and Terminal Device
RU2791547C1 (en) Control method applied to the screen projection scenario and the corresponding device
CN111026454A (en) Function starting method and terminal equipment
RU2816127C2 (en) Control method applied to screen projection scenario, and corresponding device
US20200019305A1 (en) Method for altering display ratio of application, and electronic device that realises same
US10241634B2 (en) Method and apparatus for processing email in electronic device