RU2795130C2 - Terminal device, method and system for screen projection with one touch using remote control - Google Patents

Terminal device, method and system for screen projection with one touch using remote control Download PDF

Info

Publication number
RU2795130C2
RU2795130C2 RU2022124286A RU2022124286A RU2795130C2 RU 2795130 C2 RU2795130 C2 RU 2795130C2 RU 2022124286 A RU2022124286 A RU 2022124286A RU 2022124286 A RU2022124286 A RU 2022124286A RU 2795130 C2 RU2795130 C2 RU 2795130C2
Authority
RU
Russia
Prior art keywords
terminal device
display
tag
screen projection
screen
Prior art date
Application number
RU2022124286A
Other languages
Russian (ru)
Other versions
RU2022124286A (en
Inventor
Цзиньмин ЧЖАН
Юйжэнь СЯО
Липин Ван
Original Assignee
Хонор Девайс Ко., Лтд.
Filing date
Publication date
Application filed by Хонор Девайс Ко., Лтд. filed Critical Хонор Девайс Ко., Лтд.
Publication of RU2022124286A publication Critical patent/RU2022124286A/en
Application granted granted Critical
Publication of RU2795130C2 publication Critical patent/RU2795130C2/en

Links

Images

Abstract

FIELD: communication.
SUBSTANCE: using the terminal device, when the terminal device touches the remote control NFC tag, the NFC tag content is received, wherein the NFC tag content includes the NFC tag identification code, and when the terminal device does not have a tag record, the terminal device displays the first pop-up window, wherein the tag entry includes an identification code, the first pop-up window includes a list of displays comprising the first option, the first option includes a device name for the display, the first user operation on the first option is received by the terminal device, and the terminal device establishes, in response to the first operation, the first connection of the screen projection with the display, the terminal device saves, in response to the first operation, the corresponding relationship between the identification code and the display information, and the terminal device establishes, when the terminal device has the tag record, the second connection of the screen projection with the display corresponding to the identification code, in accordance with the identification code.
EFFECT: accelerating the screen projection.
16 cl, 27 dwg, 3 tbl

Description

Настоящая заявка испрашивает приоритет в отношении китайской патентной заявки № 201910735941.2, поданной Национальной администрацией Китая по интеллектуальной собственности 9 августа 2019 г. и озаглавленной «METHOD AND SYSTEM FOR ONE-TOUCH SCREEN PROJECTION», и патентной заявки № 202010381287.2, поданной Национальной администрацией Китая по интеллектуальной собственности 8 мая 2020 г. и озаглавленной «TERMINAL DEVICE, METHOD, AND SYSTEM FOR IMPLEMENTING ONE-TOUCH SCREEN PROJECTION BY USING REMOTE CONTROL», которые включены в настоящую заявку посредством ссылки во всей их полноте.This application claims priority over Chinese Patent Application No. 201910735941.2 filed by the National Intellectual Property Administration of China on August 9, 2019, entitled "METHOD AND SYSTEM FOR ONE-TOUCH SCREEN PROJECTION" and Patent Application No. 202010381287.2 filed by the National Intellectual Property Administration of China property on May 8, 2020 and entitled "TERMINAL DEVICE, METHOD, AND SYSTEM FOR IMPLEMENTING ONE-TOUCH SCREEN PROJECTION BY USING REMOTE CONTROL", which are hereby incorporated by reference in their entirety.

Область техники, к которой относится изобретениеThe field of technology to which the invention belongs

Настоящая заявка относится к области связи на короткое расстояние и, в частности, к области экранной проекции с использованием NFC.The present application relates to the field of short distance communication and, in particular, to the field of screen projection using NFC.

Уровень техникиState of the art

Связь в ближнем поле (Near-field communication, NFC) является технологией беспроводной связи на короткое расстояние, основанной на несущей частоте 13,56 мегагерц (МГц), и позволяет бесконтактную передачу данных типа «точка-точка» между устройствами. Благодаря высокой степени защищенности, NFC в последние годы получила растущую популярность и публичное признание. Разработка терминалов, поддерживающих NFC, идет особенно быстро. Поддерживающие NFC терминалы могут действовать в трех режимах: режим считывания/записи, режим эмуляции карты и режим «точка-точка». В настоящее время получает все большее распространение считывание тегов в режиме считывания/записи с тем, чтобы использовать приложения.Near-field communication (NFC) is a short-range wireless communication technology based on a carrier frequency of 13.56 megahertz (MHz) that enables point-to-point contactless data transmission between devices. Due to its high degree of security, NFC has gained increasing popularity and public acceptance in recent years. The development of NFC-enabled terminals is proceeding particularly rapidly. NFC-enabled terminals can operate in three modes: reader/writer mode, card emulation mode, and point-to-point mode. Reading tags in read/write mode in order to use applications is now becoming more common.

Режим считывания/записи в NFC может быть инициирован, не вынося сначала приложение на передний план, когда экран мобильного телефона светится. В настоящее время существующая технология тегов позволяет прямое соединение при касании мобильным телефоном, без выполнения пользователем громоздких операций. Кроме того, после касания, можно определить, что мобильный телефон соединен с устройством Интернета вещей (Internet of Things, IOT).The NFC reader/writer mode can be initiated without first bringing the application to the forefront when the mobile phone screen is lit. Currently, existing tag technology allows a direct connection at the touch of a mobile phone, without the user performing cumbersome operations. In addition, after touching, it can be determined that the mobile phone is connected to the Internet of Things (IOT) device.

Раскрытие сущности изобретенияDisclosure of the essence of the invention

Настоящая заявка обеспечивает способ сенсорной проекции экрана, электронное устройство и систему, чтобы помочь повысить эффективность работы пользователя и интеллектуальную степень электронного устройства и улучшить восприятие пользователя.The present application provides a touch screen projection method, an electronic device and a system to help improve user efficiency and intelligence of an electronic device and improve user experience.

В соответствии с первым подходом, обеспечивается система экранной проекции. Система содержит дистанционное управление, оконечное устройство, и дисплей. Дистанционное управление конфигурировано таким образом, что дистанционное управление содержит тег NFC, где тег NFC хранит первую информацию, и первая информация содержит идентификационную информацию дисплея и идентификационный код тега NFC. Оконечное устройство конфигурировано таким образом, что оконечное устройство имеет функцию NFC, получает первую информацию при касании тега NFC дистанционного управления, инициирует первый запрос дисплея, когда первая информация не записана в оконечном устройстве; получает первое ответное сообщение от дисплея; определяет, основываясь на первом ответном сообщении, что дисплей является приемлемым устройством; и принимает первую операцию пользователя и устанавливает соединение с дисплеем для экранной проекции. Касание дистанционного управления для реализации экранной проекции одним касанием более удобно в работе.According to the first approach, a screen projection system is provided. The system contains a remote control, a terminal device, and a display. The remote control is configured such that the remote control includes an NFC tag, where the NFC tag stores first information, and the first information contains display identification information and an NFC tag identification code. The terminal device is configured such that the terminal device has an NFC function, obtains the first information when the remote control NFC tag is touched, initiates the first display request when the first information is not recorded in the terminal device; receives the first response message from the display; determines, based on the first response message, that the display is an acceptable device; and receives the first operation of the user and establishes a connection with the screen projection display. Remote control touch to realize one-touch screen projection is more convenient to operate.

Со ссылкой на первый подход, в первом проекте, соединение для экранной проекции содержит соединение, основанное на протоколе Miracast или на протоколе DLNA. С помощью этого протокола работа будет более удобной.With reference to the first approach, in the first draft, the screen projection connection contains a connection based on the Miracast protocol or on the DLNA protocol. With this protocol, the operation will be more convenient.

Со ссылкой на первый подход, во втором проекте оконечное устройство дополнительно выполнено с возможностью передачи на дисплей второго запроса соединения, чтобы запросить установление соединения P2P для реализации экранной проекции.Referring to the first approach, in the second design, the terminal device is further configured to send a second connection request to the display to request the establishment of a P2P connection to implement screen projection.

Со ссылкой на первый подход, в третьем проекте дисплей дополнительно выполнен с возможностью отображения первой подсказки, когда от оконечного устройства принимается второй запрос соединения, где первая подсказка используется, чтобы подсказать пользователю принять или отклонить второй запрос соединения; и приема второй операции пользователя и установления с оконечным устройством соединения для экранной проекции. Таким образом, пользователю может быть подсказано принять или отклонить запрос соединения.With reference to the first approach, in a third design, the display is further configured to display a first prompt when a second connection request is received from the terminal, where the first prompt is used to prompt the user to accept or reject the second connection request; and receiving the second user operation and establishing a screen projection connection with the terminal. Thus, the user may be prompted to accept or reject the connection request.

Со ссылкой на первый подход, в четвертом проекте оконечное устройство дополнительно выполнено с возможностью передачи дисплею третьего запроса соединения, когда в оконечном устройстве записывается первая информация, где третий запрос соединения с дисплеем используется, чтобы установить услугу экранной проекции. Если соединение было когда-то установлено ранее, этот проект может уменьшить количество этапов, экономя, таким образом, электроэнергию и улучшая отношение пользователя.Referring to the first approach, in the fourth design, the terminal is further configured to send a third connection request to the display when the first information is recorded in the terminal, where the third display connection request is used to set up a screen projection service. If the connection was once established before, this project can reduce the number of steps, thus saving electricity and improving user experience.

Со ссылкой на первый подход, в пятом проекте оконечное устройство дополнительно выполнено с возможностью отображения идентификации дисплея в ответ на первое ответное сообщение. Таким образом, пользователь может быть информирован о применяемом в данный момент дисплее.With reference to the first approach, in the fifth design, the tag is further configured to display a display identification in response to the first response message. Thus, the user can be informed about the currently used display.

Со ссылкой на первый подход, в пятом проекте оконечное устройство дополнительно выполнено с возможностью отображения первого окна при касании тега NFC дистанционного управления, где первое окно содержит идентификационную информацию дисплея. Таким образом, пользователю можно сообщать информацию о дистанционном управлении, улучшая восприятие пользователя.With reference to the first approach, in the fifth design, the tag is further configured to display a first window when the remote control NFC tag is touched, where the first window contains display identification information. Thus, remote control information can be communicated to the user, improving the user's experience.

В соответствии со вторым подходом, обеспечивается способ системы экранной проекции. Способ содержит этапы, на которых:According to the second approach, a screen projection system method is provided. The method contains steps in which:

получают посредством первого электронного устройства первую информацию, когда первое электронное устройство касается второго электронного устройства, где первая информация содержит идентификационную информацию второго электронного устройства и идентификационную информацию третьего электронного устройства, и второе электронное устройство связывается с третьим электронным устройством; передают посредством первого электронного устройства первый запрос третьему электронному устройству, где первый запрос используется для первого электронного устройства, чтобы запросить установление соединения для экранной проекции с третьим электронным устройством; отображают посредством третьего устройства первую информацию подсказки в ответ на первый запрос, где первая информация подсказки используется, чтобы подсказать пользователю отклонить или принять первый запрос; и принимают посредством третьего устройства первую операцию пользователя и устанавливают с первым электронным устройством соединение для экранной проекции. Касание дистанционного управления для реализации экранной проекции одним касанием более удобно в работе.receiving by the first electronic device the first information when the first electronic device touches the second electronic device, where the first information contains the identification information of the second electronic device and the identification information of the third electronic device, and the second electronic device communicates with the third electronic device; transmitting, by means of the first electronic device, a first request to a third electronic device, where the first request is used for the first electronic device to request a screen projection connection to be established with the third electronic device; displaying by the third device first prompt information in response to the first request, where the first prompt information is used to prompt the user to reject or accept the first request; and receiving, through the third device, the first operation of the user, and establishing a screen projection connection with the first electronic device. Remote control touch to realize one-touch screen projection is more convenient to operate.

Со ссылкой на второй подход, в первом проекте соединение для экранной проекции содержит соединение, основанное на протоколе Miracast или на протоколе DLNA. С помощью этого протокола операция становится более удобной.With reference to the second approach, in the first design, the screen projection connection contains a connection based on the Miracast protocol or on the DLNA protocol. With this protocol, the operation becomes more convenient.

Со ссылкой на второй подход, во втором проекте первое электронное устройство и второе электронное устройство оба имеют функцию NFC.With reference to the second approach, in the second design, the first electronic device and the second electronic device both have an NFC function.

Со ссылкой на второй подход, в третьем проекте тег NFC устанавливается во втором электронном устройстве.With reference to the second approach, in the third project, the NFC tag is installed in the second electronic device.

Со ссылкой на второй подход, в четвертом проекте идентификационная информация второго электронного устройства или идентификационная информация третьего электронного устройства содержат по меньшей мере одно из следующего: название устройства, тип устройства, информация о МАС-адресе, идентификационный код, информация о производителе и параметр экранной проекции.With reference to the second approach, in the fourth draft, the identification information of the second electronic device or the identification information of the third electronic device contains at least one of the device name, device type, MAC address information, identification code, manufacturer information, and screen projection parameter. .

В соответствии с третьим подходом, эта заявка дополнительно обеспечивает электронное устройство. Электронное устройство содержит один или более процессоров, память, многочисленные прикладные программы и одну или более компьютерных программ, где одна или более компьютерных программ хранятся в памяти, одна или более компьютерных программ содержат команды и когда команды исполняются электронным устройством, электронное устройство принуждается выполнять следующие операции: получение первой информации, когда электронное устройство касается второго электронного устройства, где первая информация содержит идентификационную информацию второго электронного устройства и идентификационную информацию третьего электронного устройства, и второе электронное устройство связывается с третьим электронным устройством; передают первый запрос третьему электронному устройству, где первый запрос используется для электронного устройства, чтобы запросить установление соединения с третьим электронным устройством для экранной проекции; и установление электронным устройством соединения с третьим электронным устройством для экранной проекции. Касание дистанционного управления для реализации экранной проекции одним касанием более удобно в работе.Under a third approach, this application further provides an electronic device. An electronic device includes one or more processors, a memory, multiple application programs, and one or more computer programs, where one or more computer programs are stored in memory, one or more computer programs contain instructions, and when the instructions are executed by the electronic device, the electronic device is forced to perform the following operations : obtaining first information when the electronic device touches the second electronic device, where the first information contains the identification information of the second electronic device and the identification information of the third electronic device, and the second electronic device communicates with the third electronic device; transmitting the first request to the third electronic device, where the first request is used for the electronic device to request to establish a connection with the third electronic device for screen projection; and connecting the electronic device with the third electronic device for screen projection. Remote control touch to realize one-touch screen projection is more convenient to operate.

В отношении третьего подхода, в первом проекте соединение для экранной проекции содержит соединение, основанное на протоколе Miracast или протоколе DLNA. С помощью существующего протокола работа становится более удобной.With respect to the third approach, in the first design, the screen projection connection contains a connection based on the Miracast protocol or the DLNA protocol. With the help of the existing protocol, the work becomes more convenient.

Со ссылкой на третий подход, во втором проекте электронное устройство и второе электронное устройство оба имеют функции NFC.With reference to the third approach, in the second design, the electronic device and the second electronic device both have NFC functions.

Со ссылкой на третий подход, в третьем проекте функция NFC и функция WLAN электронного устройства обе разрешены.With reference to the third approach, in the third draft, the NFC function and the WLAN function of the electronic device are both allowed.

Со ссылкой на третий подход, в четвертом проекте электронное устройство дополнительно выполняет следующее: принимает первое ответное сообщение перед установлением соединения с третьим электронным устройством для экранной проекции, где первый ответ используется, чтобы указать, что третье электронное устройство приняло первый запрос; и в ответ на первый ответ устанавливает соединение с третьим электронным устройством для электронной проекции.With reference to the third approach, in the fourth design, the electronic device further performs the following: receives a first response message before establishing a connection with the third electronic device for screen projection, where the first response is used to indicate that the third electronic device has received the first request; and in response to the first response establishes a connection with the third electronic device for electronic projection.

Со ссылкой на третий подход, в пятом проекте электронное устройство дополнительно выполняет следующее: отображает поле подсказок, когда получена первая информация, где поле подсказок содержит идентификационную информацию третьего электронного устройства.With reference to the third approach, in the fifth design, the electronic device further performs the following: displays a prompt field when the first information is received, where the prompt field contains identification information of the third electronic device.

Со ссылкой на третий подход, в шестом проекте электронное устройство дополнительно выполняет следующее: отображает второе поле подсказок в ответ на операцию касания, когда функция WLAN электронного устройства запрещается, где второе поле подсказок используется для подсказки пользователю, разрешать ли функцию WLAN.With reference to the third approach, in the sixth design, the electronic device further performs the following: displays a second prompt field in response to a touch operation when the WLAN function of the electronic device is disabled, where the second prompt field is used to prompt the user whether to enable the WLAN function.

В соответствии с четвертым подходом техническое решение обеспечивает устройство. Устройство содержится в электронном устройстве. Устройство может реализовать поведение электронного устройства при предшествующих подходах и возможных вариантах осуществления предшествующих подходов. Функции могут быть реализованы аппаратными средствами или могут быть реализованы аппаратными средствами, выполняющими соответствующее программное обеспечение. Аппаратные средства или программное обеспечение содержат один или более модулей или блоков, соответствующих функциям.In accordance with the fourth approach, the device provides the technical solution. The device is contained in an electronic device. The device may implement the behavior of the electronic device in the prior approaches and possible embodiments of the prior approaches. The functions may be implemented in hardware, or may be implemented in hardware running corresponding software. The hardware or software contains one or more modules or blocks corresponding to functions.

В соответствии с пятым подходом техническое решение обеспечивает электронное устройство, содержащее один или более процессоров, память, многочисленные прикладные программы и одну или более компьютерных программ. Одна или более компьютерных программ хранятся в памяти и одна или более компьютерных программ содержат команды. Когда команды выполняются электронным устройством, электронное устройство принуждается выполнять способ любым из возможных вариантов осуществления любого из предшествующих подходов.In accordance with the fifth approach, the technical solution provides an electronic device containing one or more processors, memory, multiple application programs and one or more computer programs. One or more computer programs are stored in memory and one or more computer programs contain instructions. When the commands are executed by the electronic device, the electronic device is forced to execute the method by any of the possible embodiments of any of the previous approaches.

В соответствии с шестым подходом, техническое решение обеспечивает электронное устройство, содержащее один или более процессоров и одну или более памятей. Одна или больше памятей связываются с одним или более процессорами. Одна или более памятей выполнены с возможностью хранения управляющей компьютерной программы. Управляющая компьютерная программа содержит машинные команды. Когда один или более процессоров выполняют машинные команды, электронное устройство принуждается выполнять способ сенсорной проекции экрана в любом из возможных вариантов осуществления любого из предшествующих подходов.According to the sixth approach, the technical solution provides an electronic device containing one or more processors and one or more memories. One or more memories are associated with one or more processors. One or more memories are configured to store a control computer program. The control computer program contains machine instructions. When one or more processors execute machine instructions, the electronic device is forced to perform the touch screen projection method in any of the possible embodiments of any of the previous approaches.

В соответствии с седьмым подходом, техническое решение обеспечивает носитель компьютерного запоминающего устройства, содержащий машинные команды. Когда машинные команды работают на электронном устройстве, электронное устройство принуждается выполнять способ сенсорной проекции экрана в любом из возможных вариантов осуществления любого из предшествующих подходов.According to the seventh approach, the technical solution provides a computer storage medium containing machine instructions. When the machine instructions are running on the electronic device, the electronic device is forced to perform the touch screen projection method in any of the possible embodiments of any of the previous approaches.

В соответствии с восьмым подходом, техническое решение обеспечивает компьютерный программный продукт. Когда компьютерный программный продукт работает на электронном устройстве, электронное устройство принуждается выполнять способ сенсорной проекции экрана в любом из возможных проектов любого из перечисленных выше подходов.According to the eighth approach, the technical solution provides a computer software product. When a computer program product is running on an electronic device, the electronic device is forced to perform a touch screen projection method in any of the possible designs of any of the approaches listed above.

В соответствии с девятым подходом, техническое решение обеспечивает систему микросхем, содержащую процессор, выполненный с возможностью вызова из памяти и выполнения компьютерной программы, так чтобы электронное устройство, в которое устанавливается система микросхем, выполняло способ, соответствующий первому подходу, второму подходу или третьему подходу или любому проекту первого подхода, второго подхода или третьего подхода. Дополнительно, дополнительная система микросхем содержит память.According to the ninth approach, the technical solution provides a chip system comprising a processor capable of recalling and executing a computer program so that the electronic device in which the chip system is installed performs the method corresponding to the first approach, the second approach, or the third approach, or any first approach, second approach or third approach project. Additionally, the additional chip system contains memory.

В соответствии с десятым подходом, настоящая заявка дополнительно обеспечивает дистанционное управление. Дистанционное управление содержит тег NFC и процессор. Тег NFC хранит информацию устройства для дисплея, соединенного с дистанционным управлением, и тег NFC обладает уникальным идентификационным кодом. Хранение идентификационной информации дисплея в дистанционном управлении может реализовывать проекцию экрана более быстро.According to the tenth approach, the present application further provides remote control. The remote control contains an NFC tag and a processor. The NFC tag stores device information for the display connected to the remote control, and the NFC tag has a unique identification code. Storing display identification information in the remote control can realize screen projection more quickly.

Краткое описание чертежейBrief description of the drawings

Фиг. 1 – первое схематичное представление оконечного устройства, соответствующего варианту осуществления настоящей заявки;Fig. 1 is a first schematic representation of a terminal device according to an embodiment of the present application;

фиг. 2 – второе схематичное представление оконечного устройства, соответствующего варианту осуществления настоящей заявки;fig. 2 is a second schematic representation of a terminal device according to an embodiment of the present application;

фиг. 3 - первое схематичное представление системы экранной проекции, соответствующей варианту осуществления настоящей заявки;fig. 3 is a first schematic representation of a screen projection system according to an embodiment of the present application;

фиг. 4 - первое схематичное представление способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 4 is a first schematic representation of a screen projection method according to an embodiment of the present application;

фиг. 5 - первая диаграмма интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 5 is a first diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 6 – вторая диаграмма интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 6 is a second user interface diagram of a screen projection method according to an embodiment of the present application;

фиг. 7 – вторая схема способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 7 is a second diagram of a screen projection method according to an embodiment of the present application;

фиг. 8 – третья схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 8 is a third user interface diagram of a screen projection method according to an embodiment of the present application;

фиг. 9A - третья схема способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 9A is a third diagram of a screen projection method according to an embodiment of the present application;

фиг. 9B – четвертая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 9B is a fourth user interface diagram of a screen projection method according to an embodiment of the present application;

фиг. 9C – пятая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 9C is a fifth user interface diagram of a screen projection method according to an embodiment of the present application;

фиг. 9D - шестая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 9D is a sixth diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 10 – четвертая схема способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 10 is a fourth diagram of a screen projection method according to an embodiment of the present application;

фиг. 11 - пятая схема способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 11 is a fifth diagram of a screen projection method according to an embodiment of the present application;

фиг. 12 - шестая схема способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 12 is a sixth diagram of a screen projection method according to an embodiment of the present application;

фиг. 13 - седьмая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 13 is a seventh diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 14 - восьмая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 14 is an eighth diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 15 - седьмая схема системы экранной проекции, соответствующей варианту осуществления настоящей заявки;fig. 15 is a seventh diagram of a screen projection system according to an embodiment of the present application;

фиг. 16 - восьмая схема системы экранной проекции, соответствующей варианту осуществления настоящей заявки;fig. 16 is an eighth diagram of a screen projection system according to an embodiment of the present application;

фиг. 17 - девятая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 17 is a ninth diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 18 - десятая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 18 is a tenth user interface diagram of a screen projection method according to an embodiment of the present application;

фиг. 19A - одиннадцатая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 19A is an eleventh diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 19B - двенадцатая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 19B is a twelfth diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 20 - седьмая схема интерфейса пользователя способа экранной проекции, соответствующего варианту осуществления настоящей заявки;fig. 20 is a seventh diagram of a user interface of a screen projection method according to an embodiment of the present application;

фиг. 21 - третья схема оконечного устройства, соответствующего варианту осуществления настоящей заявки;fig. 21 is a third diagram of a terminal device according to an embodiment of the present application;

фиг. 22 - десятая схема оконечного устройства, соответствующего варианту осуществления настоящей заявки; иfig. 22 is a tenth diagram of a terminal device according to an embodiment of the present application; And

фиг. 23 - одиннадцатая схема оконечного устройства, соответствующего варианту осуществления настоящей заявки.fig. 23 is an eleventh diagram of a terminal device according to an embodiment of the present application.

Осуществление изобретенияImplementation of the invention

На фиг. 1 представлена первая структурная схема оконечного устройства 100.In FIG. 1 is a first block diagram of terminal device 100.

Оконечное устройство 100 может содержать процессор 110, интерфейс 120 внешней памяти, внутреннюю память 121, интерфейс 130 универсальной последовательной шины (universal serial bus, USB), модуль 140 управления зарядом, модуль 141 управления электропитанием, батарею 142, антенну 1, антенну 2, модуль 150 мобильной связи, модуль 160 беспроводной связи, аудиомодуль 170, громкоговоритель 170A, головной телефон 170B, микрофон 170C, разъем 170D наушника, модуль 180 датчика, клавишу 190, двигатель 191, индикатор 192, камеру 193, экран 194 дисплея, интерфейс 195 карты модуля идентификации абонентов (subscriber identification module, SIM) и т.п.. Модуль 180 датчика может содержать датчик 180A давления, гироскопический датчик 180B, датчик 180С атмосферного давления 180C, магнитный датчик, датчик 180E ускорения, датчик 180F расстояния, оптический бесконтактный датчик 180G, датчик 180Н отпечатка пальца, датчик 180J температуры, сенсорный датчик 180K, датчик 180L освещенности, датчик 180М костной проводимости и т.п.End device 100 may include processor 110, external memory interface 120, internal memory 121, universal serial bus (USB) interface 130, charge control module 140, power management module 141, battery 142, antenna 1, antenna 2, module 150 mobile, wireless module 160, audio module 170, loudspeaker 170A, headset 170B, microphone 170C, headphone jack 170D, sensor module 180, key 190, motor 191, indicator 192, camera 193, display screen 194, module card interface 195 subscriber identification module (SIM) and the like. The sensor module 180 may include a pressure sensor 180A, a gyro sensor 180B, an atmospheric pressure sensor 180C 180C, a magnetic sensor, an acceleration sensor 180E, a distance sensor 180F, an optical proximity sensor 180G, fingerprint sensor 180H, temperature sensor 180J, touch sensor 180K, light sensor 180L, bone conduction sensor 180M, and the like.

Следует понимать, что структура, представленная в этом варианте осуществления настоящего изобретения, не составляет конкретного ограничения для оконечного устройства 100. В некоторых других вариантах осуществления настоящей заявки оконечное устройство 100 может содержать больше или меньше компонентов, чем показано на чертеже, или объединять некоторые из компонентов, разделять некоторые из компонентов или располагать компоненты по-другому. Показанные компоненты могут быть реализованы аппаратными средствами, программным обеспечением или сочетанием программного обеспечения и аппаратных средств.It should be understood that the structure shown in this embodiment of the present invention does not constitute a specific limitation for the terminal device 100. In some other embodiments of the present application, the terminal device 100 may contain more or fewer components than shown in the drawing, or combine some of the components , separate some of the components, or arrange the components differently. The components shown may be implemented in hardware, software, or a combination of software and hardware.

Процессор 110 может включать один или более процессоров. Например, процессор 110 может содержать прикладной процессор (application processor, AP), модемный процессор, графический процессор (graphics processing unit, GPU), процессор сигналов изображения (image signal processor, ISP), контроллер, видеокодек, цифровой сигнальный процессор (digital signal processor, DSP), основополосный процессор, процессор нейронной сети (neural-network processing unit, NPU) и/или т.п. Различные процессоры могут быть отдельными устройствами или интегрироваться в один или более процессоров.Processor 110 may include one or more processors. For example, processor 110 may include an application processor (AP), a modem processor, a graphics processing unit (GPU), an image signal processor (ISP), a controller, a video codec, a digital signal processor (DSP). , DSP), baseband processor, neural network processor (neural-network processing unit, NPU), and/or the like. The various processors may be separate devices or integrated into one or more processors.

Контроллер может формировать сигнал управления операциями, соответствующий команде управляющей программы и сигналу синхронизации, чтобы управлять командами выборки и командами исполнения.The controller may generate an operation control signal corresponding to a control program instruction and a clock signal to control fetch instructions and execution instructions.

Память может быть дополнительно обеспечиваться в процессоре 110, чтобы хранить команды и данные. В некоторых вариантах осуществления память в процессоре 110 является кэш-памятью. Память может хранить команды или данные, которые процессор 110 только что использовал или использует циклически. Если процессор 110 должен использовать команды или данные снова, процессор может напрямую вызвать команды или данные от памяти, избегая, таким образом, повторного доступа, уменьшая время ожидания процессора 110 и улучшая системную эффективность.Memory may be further provided in processor 110 to store instructions and data. In some embodiments, the memory in processor 110 is a cache. The memory may store instructions or data that processor 110 has just used or is cycling through. If processor 110 needs to use instructions or data again, the processor can directly call instructions or data from memory, thus avoiding re-access, reducing processor 110 latency, and improving system efficiency.

В некоторых вариантах осуществления процессор 110 может содержать один или более интерфейсов. Интерфейс может содержать интерфейс межинтегральной схемы (inter-integrated circuit, I2C), звуковой интерфейс межинтегральной схемы (inter-integrated circuit sound, I2S), интерфейс импульсно-кодовой модуляции (pulse code modulation, PCM), универсальный интерфейс асинхронного приемника/передатчика (universal asynchronous receiver/transmitter, UART), интерфейс мобильного промышленного процессора (mobile industry processor interface, MIPI), универсальный интерфейс ввода/вывода (general-purpose input/output, GPIO), интерфейс модуля идентификации абонента (subscriber identity module, SIM), интерфейс универсальной последовательной шины (universal serial bus, USB) и/или т.п.In some embodiments, processor 110 may include one or more interfaces. The interface may include an inter-integrated circuit (I2C) interface, an inter-integrated circuit sound (I2S) interface, a pulse code modulation (PCM) interface, a universal asynchronous receiver/transmitter interface (universal asynchronous receiver/transmitter, UART), mobile industry processor interface (MIPI), general-purpose input/output (GPIO), subscriber identity module (SIM), interface universal serial bus (USB) and/or the like.

Интерфейс I2C является двунаправленной синхронной последовательной шиной и содержит последовательную линию передачи данных (serial data line, SDA) и последовательную линию синхронизации (serial clock line, SCL). В некоторых вариантах осуществления процессор 110 может содержать многочисленные шины I2C. Процессор 110 может быть связан с сенсорным датчиком 180K, зарядным устройством, флэш-памятью, камерой 193 и т.п., используя различные шинные интерфейсы I2C. Например, процессор 110 может быть связан с сенсорным датчиком 180K, используя интерфейс I2C так, что процессор 110 и сенсорный датчик 180K осуществляют связь через шинный интерфейс I2C, чтобы реализовывать сенсорную функцию оконечного устройства 100.The I2C interface is a bidirectional synchronous serial bus and contains a serial data line (serial data line, SDA) and a serial clock line (serial clock line, SCL). In some embodiments, processor 110 may include multiple I2C buses. The processor 110 may communicate with the touch sensor 180K, charger, flash memory, camera 193, and the like using various I2C bus interfaces. For example, processor 110 may communicate with touch sensor 180K using an I2C interface such that processor 110 and touch sensor 180K communicate through the I2C bus interface to implement the touch function of terminal device 100.

Интерфейс I2S может использоваться для аудиосвязи. В некоторых вариантах осуществления процессор 110 может содержать многочисленные шины I2S. Процессор 110 может быть связан с аудиомодулем 170, используя шину I2S, чтобы осуществлять связь между процессором 110 и аудиомодулем 170. В некоторых вариантах осуществления аудиомодуль 170 может передавать аудиосигнал к модулю 160 беспроводной связи через интерфейс I2S, чтобы реализовать функцию ответа на вызовы через наушник Bluetooth.The I2S interface can be used for audio communication. In some embodiments, processor 110 may include multiple I2S buses. The processor 110 may communicate with the audio module 170 using an I2S bus to communicate between the processor 110 and the audio module 170. In some embodiments, the audio module 170 may transmit an audio signal to the wireless module 160 via the I2S interface to implement call answering functionality via a Bluetooth earpiece. .

Интерфейс PCM может также использоваться для аудиосвязи, чтобы делать выборку, квантовать и кодировать аналоговый сигнал. В некоторых вариантах осуществления аудиомодуль 170 и модуль 160 радиосвязи могут быть связаны, используя шинный интерфейс PCM. В некоторых вариантах осуществления аудиомодуль 170 может также передавать аудиосигнал модулю 160 беспроводной связи через интерфейс PCM, так чтобы реализовывать функцию ответа на вызовы через наушник Bluetooth. Как интерфейс I2S, так и интерфейс PCM оба могут использоваться для аудиосвязи.The PCM interface can also be used for audio communications to sample, quantize and encode an analog signal. In some embodiments, audio module 170 and radio module 160 may be connected using a PCM bus interface. In some embodiments, the audio module 170 may also transmit an audio signal to the wireless communication module 160 via the PCM interface so as to implement call answering functionality via a Bluetooth headset. Both the I2S interface and the PCM interface can both be used for audio communication.

Интерфейс UART является универсальной последовательной шиной данных, используемой для асинхронной передачи. Шина может быть шиной двусторонней связи. Она преобразовывает данные, которые должны передаваться, между последовательной передачей и параллельной передачей. В некоторых вариантах осуществления интерфейс UART обычно выполняется с возможностью соединения процессора 110 с модулем 160 беспроводной связи. Например, процессор 110 осуществляет связь с модулем Bluetooth модуля 160 беспроводной связи через интерфейс UART, чтобы реализовывать функцию Bluetooth. В некоторых вариантах осуществления аудиомодуль 170 может передавать аудиосигнал модулю 160 беспроводной связи через интерфейс UART, так чтобы реализовывать функцию воспроизведения музыки через наушник Bluetooth.The UART interface is a universal serial data bus used for asynchronous transmission. The bus may be a talkback bus. It converts the data to be transmitted between serial transmission and parallel transmission. In some embodiments, the UART interface is typically configured to connect processor 110 to wireless communication module 160. For example, the processor 110 communicates with the Bluetooth module of the wireless communication module 160 via the UART interface to implement the Bluetooth function. In some embodiments, the audio module 170 may transmit an audio signal to the wireless communication module 160 via a UART interface so as to implement a Bluetooth headphone music playback function.

Интерфейс MIPI может быть выполнен с возможностью соединения процессора 110 с экраном 194 дисплея, камерой 193 и другими периферийными устройствами. Интерфейс MIPI содержит последовательный интерфейс камеры (camera serial interface интерфейс, CSI), последовательный интерфейс дисплея (выведите на экран последовательный интерфейс, DSI), и т.п. В некоторых вариантах осуществления процессор 110 и камера 193 связываются через интерфейс CSI, чтобы реализовать функцию терминального устройства 100. Процессор 110 и экран 194 дисплея связываются через интерфейс DSI, чтобы реализовать функцию фотографии оконечного устройства 100.The MIPI interface may be configured to connect processor 110 to display screen 194, camera 193, and other peripherals. The MIPI interface contains a camera serial interface (CSI), a display serial interface (Display Serial Interface, DSI), and the like. In some embodiments, processor 110 and camera 193 communicate via a CSI interface to implement the function of terminal device 100. Processor 110 and display screen 194 communicate via a DSI interface to implement the photography function of terminal device 100.

Интерфейс GPIO может конфигурироваться через программное обеспечение. Интерфейс GPIO может быть сконфигурирован как управляющий сигнал или как сигнал данных. В некоторых вариантах осуществления интерфейс GPIO может быть выполнен с возможностью подключения процессора 110 к камере 193, экрану 194 дисплея, модулю 160 беспроводной связи, аудиомодулю 170, модулю 180 датчиков и т.п. Интерфейс GPIO может альтернативно быть конфигурирован как интерфейс I2C, интерфейс I2S, интерфейс UART, интерфейс MIPI и т.п.The GPIO interface can be configured via software. The GPIO interface can be configured as a control signal or as a data signal. In some embodiments, the GPIO interface may be configured to connect processor 110 to camera 193, display screen 194, wireless module 160, audio module 170, sensor module 180, and the like. The GPIO interface may alternatively be configured as an I2C interface, an I2S interface, a UART interface, a MIPI interface, or the like.

Интерфейс 130 USB является интерфейсом, который выполняет спецификацию стандарта USB, и конкретно может быть интерфейсом мини-USB, интерфейсом микро-USB, интерфейсом типа C USB и т.п. Интерфейс 130 USB может быть выполнен с возможностью подключения зарядного устройства, чтобы заряжать оконечное устройство 100, может также быть выполнен с возможностью передачи данных между терминальным устройством 100 и периферийным устройством и может также быть выполненным с возможностью подключения к наушнику, чтобы воспроизводить аудио через наушник. Этот интерфейс может также быть выполнен с возможностью подключения к другому оконечному устройству, такому как устройство AR.The USB interface 130 is an interface that fulfills the specification of the USB standard, and specifically may be a mini USB interface, a micro USB interface, a USB type C interface, or the like. USB interface 130 may be configured to connect a charger to charge terminal device 100, may also be configured to transfer data between terminal device 100 and a peripheral device, and may also be configured to be connected to an earphone to play audio through the earphone. This interface may also be configured to connect to another terminal device, such as an AR device.

Следует понимать, что соотношение при соединении интерфейсов между модулями, описанными в этом варианте осуществления настоящего изобретения, является иллюстративным, и не составляет структурного ограничения для оконечного устройства 100. В некоторых других вариантах осуществления настоящей заявки оконечное устройство 100 может альтернативно принимать режим интерфейсного соединения, отличающийся от предшествующего варианта осуществления, или являться сочетанием многочисленных режимов интерфейсных соединений.It should be understood that the relationship when connecting interfaces between modules described in this embodiment of the present invention is illustrative, and does not constitute a structural limitation for terminal device 100. In some other embodiments of the present application, terminal device 100 may alternatively accept an interface connection mode that is different from the previous embodiment, or be a combination of multiple interface connection modes.

Модуль 140 управления зарядом выполнен с возможностью приема зарядного ввода от зарядного устройства. Зарядное устройство может быть беспроводным зарядным устройством или проводным зарядным устройством. В некоторых вариантах осуществления проводного зарядного устройства модуль 140 управления зарядом может принимать зарядный ввод от проводного зарядного устройства через интерфейс 130 USB. В некоторых вариантах осуществления беспроводного зарядного устройства модуль 140 управления зарядом может принимать беспроводной зарядный ввод через беспроводную зарядную катушку оконечного устройства 100. Модуль 140 управления зарядом может также подавать питание на оконечное устройство через модуль 141 управления электропитанием во время заряда батареи 142.The charge control module 140 is configured to receive charging input from the charger. The charger can be a wireless charger or a wired charger. In some wired charger embodiments, charge control module 140 may receive charging input from a wired charger via USB interface 130. In some wireless charger embodiments, charge control module 140 may receive a wireless charging input via the wireless charging coil of tag 100. Charge control module 140 may also supply power to the tag via power control module 141 while battery 142 is being charged.

Модуль 141 управления электропитанием выполнен с возможностью подключения к батарее 142, модулю 140 управления зарядом и процессору 110. Модуль 141 управления электропитанием принимает ввод от батареи 142 и/или от модуля 140 управления зарядом, чтобы подать питание на процессор 110, внутреннюю память 121, экран 194 дисплея, камеру 193, модуль 160 беспроводной связи и т.п. Модуль 141 управления электропитанием может также быть выполнен с возможностью контроля параметров, таких как емкость батареи, количество циклов батареи, и состояние батареи (электрическая утечка и импеданс). В некоторых других вариантах осуществления модуль 141 управления электропитанием может альтернативно обеспечиваться в процессоре 110. В некоторых других вариантах осуществления модуль 141 управления электропитанием 141 и модуль 140 управления зарядом могут альтернативно быть обеспечены в одном и том же устройстве.Power management module 141 is configured to be connected to battery 142, charge management module 140, and processor 110. Power management module 141 receives input from battery 142 and/or charge management module 140 to supply power to processor 110, internal memory 121, screen 194 displays, a camera 193, a wireless communication module 160, and the like. The power management module 141 may also be configured to monitor parameters such as battery capacity, battery cycles, and battery condition (electrical leakage and impedance). In some other embodiments, power management module 141 may alternatively be provided in processor 110. In some other embodiments, power management module 141 141 and charge management module 140 may alternatively be provided in the same device.

Функция беспроводной связи оконечного устройства 100 может реализовываться, используя антенну 1, антенну 2, модуль 150 мобильной связи, модуль 160 беспроводной связи, модемный процессор, основополосный процессор и т.п.The wireless communication function of terminal device 100 may be implemented using antenna 1, antenna 2, mobile communication module 150, wireless communication module 160, modem processor, baseband processor, and the like.

Антенна 1 и антенна 2 выполнены с возможностью передачи и приема сигнала электромагнитной волны. Каждая антенна оконечного устройства 100 может быть выполнена с возможностью перекрытия одной или более полос частот связи. Различные антенны могут также мультиплексироваться, чтобы улучшить использование антенны. Например, антенна 1 может быть мультиплексирована как диверсифицированная антенна беспроводной локальной сети. В некоторых других вариантах осуществления антенна может использоваться в комбинации с настраиваемым переключателем.Antenna 1 and antenna 2 are configured to transmit and receive an electromagnetic wave signal. Each antenna of terminal device 100 may be configured to cover one or more communication bands. Different antennas may also be multiplexed to improve antenna utilization. For example, antenna 1 may be multiplexed as a diversified wireless LAN antenna. In some other embodiments, an antenna may be used in combination with a tunable switch.

Модуль 150 мобильной связи может обеспечить решение для беспроводной связи, включающей 2G/3G/4G/5G и т.п. для применения к оконечному устройству 100. Модуль 150 мобильной связи может содержать по меньшей мере один фильтр, переключатель, усилитель мощности, малошумящий усилитель (low noise amplifier, LNA) и т.п. Модуль 150 мобильной связи может получить электромагнитные волны через антенну 1, выполнять обработку, такую как фильтрация и усиление на принятой электромагнитной волне, и затем передавать обработанную электромагнитную волну на модемный процессор для демодуляции. Модуль 150 мобильной связи может также усиливать сигнал, модулированный модемным процессором, и преобразовывать его в электромагнитную волну для передачи через антенну 1. В некоторых вариантах осуществления по меньшей мере некоторые из функциональных модулей модуля 150 мобильной связи могут быть обеспечены в процессоре 110. В некоторых вариантах осуществления по меньшей мере некоторые из функциональных модулей модуля 150 мобильной связи и по меньшей мере некоторые из модулей процессора 110 могут обеспечиваться в одном и том же устройстве.The mobile communication unit 150 can provide a wireless communication solution including 2G/3G/4G/5G and the like. for application to terminal device 100. Mobile communication module 150 may include at least one filter, switch, power amplifier, low noise amplifier (LNA), and the like. The mobile communication unit 150 may receive the electromagnetic waves through the antenna 1, perform processing such as filtering and amplification on the received electromagnetic wave, and then transmit the processed electromagnetic wave to the modem processor for demodulation. The mobile communication module 150 may also amplify the signal modulated by the modem processor and convert it to an electromagnetic wave for transmission through the antenna 1. In some embodiments, at least some of the functional modules of the mobile communication module 150 may be provided in the processor 110. In some embodiments, implementation of at least some of the functional modules of the module 150 mobile communication and at least some of the modules of the processor 110 may be provided in the same device.

Модемный процессор может содержать модулятор и демодулятор. Модулятор выполнен с возможностью преобразования основополосного низкочастотного сигнала, который должен передаваться, в среднечастотный или высокочастотный сигнал. Демодулятор выполнен с возможностью демодуляции принятого электромагнитного сигнала в низкочастотный основополосный сигнал. Затем демодулятор передает демодулированный низкочастотный основополосный сигнал на основополосный процессор для обработки. Низкочастотный основополосный сигнал передается прикладному процессору после того, как обработан основополосным процессором. Прикладной процессор выводит звуковой сигнал через аудиоустройство (не ограничивающееся громкоговорителем 170A, головным телефоном 170B и т.п.) или выводит на экран изображение или видео через экран дисплея 194. В некоторых вариантах осуществления модемный процессор может быть отдельным компонентом. В некоторых других вариантах осуществления модемный процессор может быть независимым от процессора 110 и обеспечиваться в том же самом устройстве вместе с модулем 150 мобильной связи 150 или другим функциональным модулем.The modem processor may include a modulator and a demodulator. The modulator is configured to convert the low frequency baseband signal to be transmitted into a mid or high frequency signal. The demodulator is configured to demodulate the received electromagnetic signal into a low frequency baseband signal. The demodulator then passes the demodulated low frequency baseband signal to the baseband processor for processing. The low frequency baseband signal is transmitted to the application processor after being processed by the baseband processor. The application processor outputs audio through an audio device (not limited to speaker 170A, headset 170B, etc.) or displays an image or video through display screen 194. In some embodiments, the modem processor may be a separate component. In some other embodiments, the modem processor may be independent of processor 110 and provided in the same device along with mobile communication module 150 150 or other functional module.

Модуль 160 беспроводной связи может обеспечить решения для беспроводной связи, такие как беспроводная локальная сеть (wireless local area network, WLAN) (например, сеть Wi-Fi (wireless fidelity, Wi-Fi), Bluetooth (bluetooth, BT), глобальная навигационная спутниковая система (global navigation satellite system, GNSS), технологии частотной модуляции (frequency modulation, FM), связи в ближнем поле (около полевой передачи, NFC) и инфракрасная технология (infrared, IR) для применения на оконечном устройстве 100. Модуль 160 радиосвязи может быть одним или более устройствами, интегрированными по меньшей мере с одним процессорным модуль обработки. Модуль 160 беспроводной связи принимает электромагнитный сигнал через антенну 2, выполняет частотную модуляцию и фильтрацию электромагнитного сигнала и посылает обработанный сигнал на процессор 110. Модуль 160 беспроводной связи может также принимать сигнал, который должен передаваться, от процессора 110, выполнять частотную модуляцию и усиление сигнала и преобразовывать его в электромагнитный сигнал для передачи через антенну 2.The wireless communication module 160 can provide wireless communication solutions such as a wireless local area network (WLAN) (e.g., Wi-Fi network (wireless fidelity, Wi-Fi), Bluetooth (bluetooth, BT), global navigation satellite system (global navigation satellite system, GNSS), frequency modulation (frequency modulation, FM), near-field communications (near field transmission, NFC) and infrared technology (infrared, IR) for use in the terminal device 100. The radio module 160 can be one or more devices integrated with at least one processor processing module.The wireless communication module 160 receives the electromagnetic signal through the antenna 2, performs frequency modulation and electromagnetic signal filtering, and sends the processed signal to the processor 110. The wireless communication module 160 may also receive the signal to be transmitted from the processor 110, perform frequency modulation and amplification of the signal and convert it into an electromagnetic signal for transmission through the antenna 2.

В некоторых вариантах осуществления антенна 1 оконечного устройства 100 соединяется с модулем 150 мобильной связи и антенна 2 соединяется с модулем 160 беспроводной связи так, чтобы оконечное устройство 100 могло осуществлять связь с сетью и другим устройством, используя технологию беспроводной связи. Технология беспроводной связи может содержать глобальную систему для мобильной связи (global system for mobile communications, GSM), общую служба пакетной радиосвязи (general packet radio service, GPRS), систему мультидоступа с кодовым разделением каналов (code division multiple access, CDMA), систему широкополосного доступа с кодовым разделением каналов (wideband code division multiple access, WCDMA), систему мультидоступа с временным и кодовым разделением каналов (time-division code division multiple access, TD-SCDMA), систему долгосрочного развития (long term evolution, LTE), BT, GNSS, WLAN, NFC, FM, технологию IR и/или тому подобное. GNSS может содержать систему глобального позиционирования (global positioning system, GPS), глобальную навигационную спутниковую систему (global navigation satellite system, GLONASS), навигационную спутниковую систему Beidou (beidou navigation satellite system, BD), квазизенитную спутниковую систему (quasi-zenith satellite system, QZSS), и/или системы аугментации, основанные на спутниках (satellite based augmentation system, SBAS).In some embodiments, antenna 1 of terminal device 100 is connected to mobile communication module 150 and antenna 2 is connected to wireless communication module 160 so that terminal device 100 can communicate with the network and another device using wireless technology. The wireless technology may include a global system for mobile communications (GSM), a general packet radio service (GPRS), a code division multiple access (CDMA) system, a broadband wideband code division multiple access (WCDMA), time-division code division multiple access (TD-SCDMA), long-term evolution (LTE), BT, GNSS, WLAN, NFC, FM, IR technology and/or the like. GNSS may contain a global positioning system (global positioning system, GPS), a global navigation satellite system (global navigation satellite system, GLONASS), a Beidou navigation satellite system (BD), a quasi-zenith satellite system (quasi-zenith satellite system, QZSS), and/or satellite based augmentation system (SBAS).

Оконечное устройство 100 реализует функцию дисплея, используя GPU, экран 194 дисплея, прикладной процессор и т.п. GPU является микропроцессором обработки изображений и соединяется с экраном 194 дисплея и прикладным процессором. GPU выполнен с возможностью проведения математических и геометрических вычислений для графического рендеринга. Процессор 110 может содержать один или более GPU, которые выполняют программные команды, чтобы формировать или изменять отображаемую информацию.The terminal device 100 implements the display function using a GPU, a display screen 194, an application processor, and the like. The GPU is an image processing microprocessor and is connected to the display screen 194 and the application processor. The GPU is configured to perform mathematical and geometric calculations for graphics rendering. Processor 110 may include one or more GPUs that execute software instructions to generate or modify displayed information.

Экран 194 дисплея выполнен с возможностью отображения изображения, видео и т.п. Экран 194 дисплея содержит панель дисплея. Панель дисплея может быть жидкокристаллическим дисплеем (liquid crystal display, LCD), органическим светодиодным дисплеем (organic light-emitting diode, OLED), активным матричным органическим светодиодным дисплеем или активным матричным органическим светодиодным дисплеем (active-matrix organic light emitting diode, AMOLED), гибким светодиодным дисплеем (flex light-emitting diode, FLED), Miniled, MicroLed, Micro-oLed, квантовым точечным светодиодным дисплеем (quantum dot light emitting diode, QLED) и т.п. В некоторых вариантах осуществления оконечное устройство 100 может содержать один или N экранов 194 дисплеев, где N - положительное целое число, большее 1.The display screen 194 is configured to display an image, video, or the like. The display screen 194 includes a display panel. The display panel can be a liquid crystal display (LCD), an organic light-emitting diode (OLED), an active matrix organic LED display, or an active-matrix organic light emitting diode (AMOLED) display, flexible LED display (flex light-emitting diode, FLED), Miniled, MicroLed, Micro-oLed, quantum dot LED display (quantum dot light emitting diode, QLED), etc. In some embodiments, terminal 100 may comprise one or N display screens 194, where N is a positive integer greater than 1.

Оконечное устройство 100 может реализовывать функцию фотографирования экрана при использовании ISP, камеры 193, видеокодека, GPU, экрана 194 дисплея, прикладного процессора и т.п.Terminal device 100 may implement a screen capture function using an ISP, camera 193, video codec, GPU, display screen 194, application processor, and the like.

ISP выполнен с возможностью обработки данных, возвращенные камерой 193. Например, во время фотографирования, нажимается затвор, свет передается на фотодатчик камеры через линзу. Оптический сигнал преобразуется в электрический сигнал. Фотодатчик камеры передает электрический сигнал на ISP для обработки, чтобы преобразовать сигнал в изображение, видимое невооруженному глазу. ISP может дополнительно оптимизировать шум, яркость и цвет кожи изображения, используя алгоритмы. ISP может дополнительно оптимизировать параметры, такие как выдержка и цветовая температура фотографируемой сцены. В некоторых вариантах осуществления ISP может обеспечиваться в камере 193.The ISP is configured to process the data returned by the camera 193. For example, while photographing, the shutter is pressed, light is transmitted to the camera's photosensor through the lens. The optical signal is converted into an electrical signal. The camera's photosensor sends an electrical signal to the ISP for processing to convert the signal into an image visible to the naked eye. The ISP can further optimize the noise, brightness, and skin tone of an image using algorithms. The ISP can further optimize parameters such as shutter speed and color temperature of the scene being photographed. In some embodiments, the ISP may be provided in the chamber 193.

Камера 193 выполнена с возможностью получения неподвижного изображения или видео. Оптическое изображение формируется для объекта через линзу и проецируется на фотодатчик. Фоточувствительным элементом может быть устройство с зарядовой связью (charge coupled device, CCD) или комплементарный металло-окисный полупроводниковый (complementary metal-oxide-semiconductor, CMOS) фототранзистор. Фотодатчик преобразует оптический сигнал в электрический сигнал и затем передает электрический сигнал на ISP, чтобы преобразовать его в сигнал цифрового изображения. ISP выводит цифровой сигнал изображения на DSP для обработки. DSP преобразует цифровой сигнал изображения в сигнал изображения стандартного формата, такого как RGB или YUV. В некоторых вариантах осуществления оконечное устройство 100 может содержать одну или N камер 193, где N - положительное целое число, большее 1.Camera 193 is configured to capture a still image or video. An optical image is formed for an object through a lens and projected onto a photosensor. The photosensitive element can be a charge coupled device (CCD) or a complementary metal-oxide-semiconductor (CMOS) phototransistor. The photosensor converts the optical signal into an electrical signal and then transmits the electrical signal to the ISP to convert it into a digital image signal. The ISP outputs the digital image signal to the DSP for processing. The DSP converts the digital image signal into a standard format image signal such as RGB or YUV. In some embodiments, terminal 100 may include one or N cameras 193, where N is a positive integer greater than 1.

Цифровой сигнальный процессор выполнен с возможностью обработки цифрового сигнала. В дополнение к обработке цифрового сигнала изображения цифровой сигнальный процессор может также обрабатывать другие цифровые сигналы. Например, когда оконечное устройство 100 выбирает частоту, цифровой сигнальный процессор выполняется с возможностью преобразования Фурье и т.п. на энергии частоты.The digital signal processor is configured to process the digital signal. In addition to processing the digital image signal, the digital signal processor may also process other digital signals. For example, when terminal 100 selects a frequency, the digital signal processor is configured to be Fourier transformed, or the like. on frequency energy.

Видеокодек выполнен с возможностью сжатие или декомпрессии цифрового видео. Оконечное устройство 100 может поддерживать один или более типов видеокодеков, так чтобы оконечное устройство 100 могло воспроизводить или записывать видео во множестве форматов кодирования, таких как форматы группы экспертов по видеоизображению (moving picture experts group, MPEG) MPEG1, MPEG2, MPEG3 и MPEG4.The video codec is configured to compress or decompress digital video. Terminal device 100 may support one or more types of video codecs so that terminal device 100 can play or record video in a variety of encoding formats, such as the moving picture experts group (MPEG) MPEG1, MPEG2, MPEG3, and MPEG4 formats.

NPU является вычислительным процессором нейронной сети (neural-network, NN), который ускоряет процессы ввода информации, используя биологическую структуру нейронной сети, такую как режим передачи между нейронами человеческого мозга, и может также выполнять непрерывное самообучение. С помощью NPU оконечное устройство 100 может реализовывать интеллектуальное познание и другие приложения, такие как распознавание изображений, распознавание лиц, распознавание речи и понимание текста.The NPU is a neural-network (NN) computing processor that speeds up information input processes by using the biological structure of the neural network, such as the transmission mode between human brain neurons, and can also perform continuous self-learning. With the NPU, terminal device 100 can implement intelligent cognition and other applications such as image recognition, face recognition, speech recognition, and text comprehension.

Интерфейс 120 внешней памяти может быть выполнен с возможностью осуществления подключения к карте внешней памяти, такой как микро-SD-карта, чтобы расширить емкость хранения оконечного устройства 100. Карта внешней памяти связывается с процессором 110, используя интерфейс 120 внешней памяти, чтобы реализовать функцию хранения данных, например, сохраняя музыку, видео и другие файлы на карте внешней памяти.The external memory interface 120 may be configured to be connected to an external memory card, such as a micro SD card, to expand the storage capacity of the target device 100. The external memory card communicates with the processor 110 using the external memory interface 120 to realize a storage function. data, such as storing music, videos, and other files on an external memory card.

Внутренняя память 121 может быть выполнена с возможностью хранения исполняемой компьютерной программы. Исполняемая управляющая программа содержит команды. Внутренняя память 121 может область хранения программ и область хранения данных. Область хранения программ может хранить операционную систему, прикладную программу, требующую по меньшей мере одну функцию (например, функцию воспроизведения звука и функцию воспроизведения изображения) и т.п. Область хранения данных может хранить данные (например, аудиоданные и телефонную книгу), создаваемые во время использования оконечного устройства 100. Кроме того, внутренняя память 121 может содержать высокоскоростную оперативную память или может содержать энергонезависимую память, такую, как по меньшей мере одно запоминающее устройство на магнитных дисках, устройство флэш-памяти или универсальное запоминающее устройство флэш-памяти (universal flash storage, UFS). Процессор 110 реализует различные функциональное приложение и обработку данных оконечного устройства 100, выполняя команды, хранящиеся во внутренней памяти 121, и/или команды, хранящиеся в памяти, обеспечиваемой в процессоре.Internal memory 121 may be configured to store an executable computer program. The executable control program contains commands. The internal memory 121 may be a program storage area and a data storage area. The program storage area may store an operating system, an application program requiring at least one function (for example, a sound reproduction function and a picture reproduction function), and the like. The data storage area may store data (for example, audio data and a phone book) created during use of the terminal device 100. In addition, the internal memory 121 may contain high-speed random access memory or may contain non-volatile memory, such as at least one storage device on magnetic disks, a flash memory device, or universal flash storage (UFS). The processor 110 implements various functional application and data processing of the terminal device 100 by executing instructions stored in the internal memory 121 and/or instructions stored in the memory provided in the processor.

Оконечное устройство 100 может реализовать аудиофункцию, такую как воспроизведение музыки или запись с использованием аудиомодуля 170, громкоговорителя 170A, головного телефона 170B, микрофона 170C, разъема 170D наушника, прикладного процессора и т.п.Terminal device 100 may implement an audio function such as music playback or recording using audio module 170, speaker 170A, headset 170B, microphone 170C, earphone jack 170D, application processor, and the like.

Аудиомодуль 170 выполнен с возможностью преобразования информации цифрового аудио в аналоговый аудиосигнал для вывода и также выполнен с возможностью ввода аналогового аудио в цифровой аудиосигнал. Аудиомодуль 170 может быть дополнительно выполнен с возможностью кодирования и декодирования аудиосигнала. В некоторых вариантах осуществления аудиомодуль 170 может обеспечиваться в процессоре 110 или некоторые функциональные модули аудиомодуля 170 могут обеспечиваться в процессоре 110.The audio module 170 is configured to convert digital audio information into an analog audio signal for output, and is also configured to input analog audio into a digital audio signal. The audio module 170 may be further configured to encode and decode the audio signal. In some embodiments, audio module 170 may be provided in processor 110, or some functional modules of audio module 170 may be provided in processor 110.

Громкоговоритель 170A, также называемый «динамиком», выполнен с возможностью преобразованием электрического аудиосигнала в звуковой сигнал. Оконечное устройство 100 может использоваться для прослушивания музыки или ответа на вызов, используя громкоговоритель 170A.The loudspeaker 170A, also referred to as a "speaker", is configured to convert an electrical audio signal into an audio signal. Terminal 100 may be used to listen to music or answer a call using speaker 170A.

Головной телефон 170B, также называемый «приемником», выполнен с возможностью преобразованием электрического аудиосигнала в звуковой сигнал. Когда оконечное устройство 100 используется для ответа на вызов или для воспроизведения речевого сообщения, пользователь может слышать голос, поднося головной телефон 170B близко к уху.Headphone 170B, also referred to as a "receiver", is configured to convert an electrical audio signal into an audio signal. When the terminal device 100 is used to answer a call or to play a voice message, the user can hear the voice by bringing the headset 170B close to the ear.

Микрофон 170C, также называемый «миком» или «майком», выполнен с возможностью преобразования звукового сигнала в электрический сигнал. Делая вызов или посылая речевое сообщение, пользователь может ввести звуковой сигнал в микрофон 170C, говоря вблизи микрофона 170C. Оконечное устройство 100 может быть снабжено по меньшей мере одним микрофоном 170C. В некоторых других вариантах осуществления оконечное устройство 100 может быть снабжено двумя микрофонами 170C, чтобы понизить шум в дополнение к сбору звуковых сигналов. В некоторых других вариантах осуществления оконечное устройство 100 может альтернативно быть снабжено тремя, четырьмя или более микрофонами 170C, чтобы собирать звуковые сигналы, снижать шум, идентифицировать звуковой источник, реализовать направленную запись и т.п.Microphone 170C, also referred to as a "mic" or "mike", is configured to convert an audio signal into an electrical signal. When making a call or sending a voice message, the user may enter an audio signal into the microphone 170C while speaking near the microphone 170C. Terminal 100 may be provided with at least one microphone 170C. In some other embodiments, terminal 100 may be provided with two microphones 170C to reduce noise in addition to collecting audio signals. In some other embodiments, terminal device 100 may alternatively be provided with three, four, or more microphones 170C to collect audio signals, reduce noise, identify an audio source, implement directional recording, and the like.

Разъем 170D наушника выполнен с возможностью подключения проводного наушника. Разъем 170D наушника может быть интерфейсом 130 USB или может быть стандартным интерфейсом 3,5-миллиметровой открытой мобильной оконечной платформы (open mobile terminal platform, OMTP) или стандартным интерфейсом ассоциации сотовая телекоммуникационная отрасли США (cellular telecommunications industry association of the USA, CTIA).The earphone connector 170D is configured to connect a wired earphone. Headphone connector 170D may be a USB interface 130 or may be a standard 3.5 mm open mobile terminal platform (OMTP) interface or a standard cellular telecommunications industry association of the USA (CTIA) interface.

Датчик 180A давления выполнен с возможностью восприятия сигнала давления и может преобразовывать сигнал давления в электрический сигнал. В некоторых вариантах осуществления датчик 180A давления может обеспечиваться на экране 194 дисплея. Существует много типов датчиков 180A давления, таких как резистивный датчик давления, индуктивный датчик давления, и емкостной датчик давления. Емкостной датчик давления может содержать по меньшей мере две параллельные пластины, изготовленные из проводящего материала. Когда к датчику 180А давления прикладывается сила, емкость между электродами изменяется. Оконечное устройство 100 определяет интенсивность давления, основываясь на изменении емкости. Когда на экране 194 дисплея выполняется сенсорная операция, оконечное устройство 100 обнаруживает интенсивность сенсорной операции, используя датчик 180A давления. Оконечное устройство 100 может дополнительно вычислять место касания, основываясь на сигнале обнаружения датчика 180A давления. В некоторых вариантах осуществления сенсорные операции, выполняемые в одном и том же месте касания, но с разной интенсивностью операций касания, могут соответствовать командам различных операций. Например, когда сенсорная операция с интенсивностью сенсорной операции, меньшей, чем первый порог давления, выполняется на иконке приложения службы коротких сообщений, выполняется команда просмотра текстового сообщения SMS. Когда сенсорная операция с интенсивностью сенсорной операции, большей или равной первому порогу давления, выполняется на иконке приложения службы коротких сообщений, выполняется команда создания нового текстового сообщения SMS.The pressure sensor 180A is configured to sense a pressure signal and can convert the pressure signal into an electrical signal. In some embodiments, pressure sensor 180A may be provided on display screen 194. There are many types of pressure sensors 180A such as resistive pressure sensor, inductive pressure sensor, and capacitive pressure sensor. The capacitive pressure sensor may comprise at least two parallel plates made of a conductive material. When a force is applied to the pressure sensor 180A, the capacitance between the electrodes changes. Terminal 100 determines the pressure intensity based on the change in capacitance. When a touch operation is performed on the display screen 194, the terminal device 100 detects the intensity of the touch operation using the pressure sensor 180A. The terminal device 100 may further calculate the location of the touch based on the detection signal of the pressure sensor 180A. In some embodiments, touch operations performed at the same touch site but with different intensity of touch operations may correspond to different operation commands. For example, when a touch operation with a touch operation intensity less than the first pressure threshold is performed on the short message service application icon, the SMS text message viewing command is executed. When a touch operation with a touch operation intensity greater than or equal to the first pressure threshold is performed on the short message service application icon, a command to create a new SMS text message is executed.

Гироскопический датчик 180B может быть выполнен с возможностью определения положения оконечного устройства 100 при движении. В некоторых вариантах осуществления гироскопический датчик 180B может использоваться для определения угловых скоростей оконечного устройства 100 вокруг трех осей (то есть, осей x, y и z). Гироскопический датчик 180B может использоваться для стабилизации изображения. Например, при нажатии затвора гироскопический датчик 180B обнаруживает угол отклонения оконечного устройства 100 и вычисляет, основываясь на значении угла, расстояние, которое на которое нужно скомпенсировать модуль линзы, чтобы линза могла переместиться обратно, чтобы противодействовать колебанию оконечного устройства 100 и реализовать стабилизацию изображения. Гироскопический датчик 180B может дополнительно использоваться для навигации и в сценариях соматосенсорных игр.The gyro sensor 180B may be configured to determine the position of the target device 100 while moving. In some embodiments, gyro sensor 180B may be used to determine the angular velocities of terminal device 100 about three axes (ie, the x, y, and z axes). The gyro sensor 180B can be used for image stabilization. For example, when the shutter is pressed, the gyro sensor 180B detects the deflection angle of the terminal 100 and calculates, based on the angle value, the distance by which the lens module needs to be compensated so that the lens can move back to counteract the oscillation of the terminal 100 and realize image stabilization. The gyro sensor 180B can additionally be used for navigation and somatosensory play scenarios.

Датчик 180С атмосферного давления выполнен с возможностью измерения атмосферного давления. В некоторых вариантах осуществления оконечное устройство 100 вычисляет высоту, основываясь на значении атмосферного давления, измеренном датчиком 180С атмосферного давления, чтобы помочь при позиционировании и навигации.The atmospheric pressure sensor 180C is configured to measure atmospheric pressure. In some embodiments, tag 100 calculates altitude based on the barometric pressure value measured by barometric pressure sensor 180C to assist in positioning and navigation.

Магнитный датчик 180D содержит датчик Холла. Оконечное устройство 100 может использовать магнитный датчик 180D, чтобы обнаружить открывание и закрывание захлопывающейся крышки шкафа. В некоторых вариантах осуществления, когда оконечное устройство 100 является телефоном с захлопывающейся крышкой, оконечное устройство 100 может обнаруживать открывание и закрывание захлопывающейся крышки шкафа, используя магнитный датчик 180D. Дополнительно, признаки, такие как автоматическое разблокирование захлопывающейся крышки, устанавливаются, основываясь на обнаруженном открытом или закрытом состоянии шкафа или захлопывающейся крышки шкафа.The magnetic pickup 180D includes a Hall effect sensor. The terminal device 100 may use the magnetic sensor 180D to detect the opening and closing of a cabinet flap. In some embodiments, when tag 100 is a flip phone, tag 100 can detect the opening and closing of a closet lid using magnetic sensor 180D. Further, features such as automatic release of the flip cover are set based on the detected open or closed state of the cabinet or the flip cover of the cabinet.

Датчик 180E ускорения может обнаруживать величины ускорений оконечного устройства 100 во всех направлениях (обычно по трем осям), может обнаруживать величину и направление силы тяжести, когда оконечное устройство 100 находится в неподвижном состоянии, и может дополнительно быть выполнен с возможностью распознавания положения оконечного устройства для переключения режима ландшафт/портрет, педометра, и т.п.Acceleration sensor 180E can detect acceleration amounts of tag 100 in all directions (typically three axes), can detect the magnitude and direction of gravity when tag 100 is stationary, and can further be configured to sense the tag's position for switching landscape/portrait mode, pedometer, etc.

Датчик 180F расстояния выполнен с возможностью измерения расстояния. Оконечное устройство 100 может измерять расстояние, используя инфракрасное излучение или лазер. В некоторых вариантах осуществления, в сценарии фотографирования оконечное устройство 100 может использовать датчик 180F расстояния для измерения расстояния для быстрой фокусировки.The distance sensor 180F is configured to measure a distance. Terminal 100 may measure distance using infrared or laser. In some embodiments, in a photography scenario, terminal 100 may use distance sensor 180F to measure distance for fast focusing.

Оптический бесконтактный датчик 180G может содержать, например, светодиод (LED) и оптический детектор, такой как фотодиод. Светодиод может быть светодиодом, испускающим инфракрасный свет. Оконечное устройство 100 испускает инфракрасный свет на внешнюю сторону, используя светодиод. Оконечное устройство 100 использует фотодиод для обнаружения инфракрасного света, отраженного ближайшим объектом. Когда обнаруживается достаточный отраженный свет, может быть решено, что объект находится вблизи оконечного устройства 100. Когда обнаруживается недостаточный отраженный свет, оконечное устройство 100 может решить, что около оконечного устройства 100 нет никакого объекта. Оконечное устройство 100 может использовать оптический бесконтактный датчик 180G, чтобы обнаружить, что пользователь держит оконечное устройство 100 около уха для вызова, чтобы автоматически выключить экран для экономии электроэнергии. Оптический бесконтактный датчик 180G может также использоваться для автоматической разблокировки экрана и блокирования в режиме нахождения в чехле и в режиме нахождения в кармане.The optical proximity sensor 180G may include, for example, a light emitting diode (LED) and an optical detector such as a photodiode. The LED may be an infrared emitting LED. Terminal 100 emits infrared light to the outside using an LED. Terminal 100 uses a photodiode to detect infrared light reflected by a nearby object. When sufficient reflected light is detected, the object may be judged to be near terminal 100. When insufficient reflected light is detected, terminal 100 may determine that there is no object near terminal 100. The terminal device 100 can use the 180G optical proximity sensor to detect that the user holds the terminal device 100 to the ear for a call to automatically turn off the screen to save power. The 180G optical proximity sensor can also be used to automatically unlock the screen and lock in case mode and pocket mode.

Датчик 180L освещенности выполнен с возможностью восприятия яркости окружающего света. Оконечное устройство 100 может адаптивно регулировать яркость экрана 194 дисплея, основываясь на обнаруженной яркости окружающего света. Датчик 180L окружающего света может также быть выполнен с возможностью автоматического регулирования баланса белого во время фотографирования. Датчик 180L окружающего света может также действовать совместно с оптическим бесконтактным датчиком 180G, чтобы обнаружить, находится оконечное устройство 100 в кармане, чтобы избежать случайного касания.The light sensor 180L is configured to sense the brightness of ambient light. Terminal device 100 may adaptively adjust the brightness of the display screen 194 based on the detected ambient light brightness. The ambient light sensor 180L may also be configured to automatically adjust the white balance during photography. The ambient light sensor 180L may also work in conjunction with the optical proximity sensor 180G to detect if the terminal 100 is in a pocket to avoid accidental touching.

Датчик 180Н отпечатка пальца выполнен с возможностью получения цифрового отпечатка пальца. Оконечное устройство 100 может реализовать разблокирование по отпечатку пальца, доступ к блокировке приложения, фотографирование с использованием отпечатка пальца, ответ на вызов с использованием отпечатка пальца и т.п. при использовании признака полученного цифрового отпечатка пальца.The fingerprint sensor 180H is configured to receive a digital fingerprint. The terminal device 100 can realize fingerprint unlock, application lock access, fingerprint photography, fingerprint call answering, and the like. when using the sign of the received digital fingerprint.

Датчик 180J температуры выполнен с возможностью обнаружения температуры. В некоторых вариантах осуществления оконечное устройство 100 выполняет принцип обработки температуры, используя температуру, обнаруженную датчиком 180J температуры. Например, когда температура, о которой сообщает датчик 180J температуры, превышает порог, оконечное устройство 100 снижает характеристики процессора, расположенного датчика 180J температуры, чтобы понизить потребление энергии и реализовать тепловую защиту. В некоторых других вариантах осуществления, когда температура ниже другого порога, оконечное устройство 100 нагревает батарею 142, чтобы избежать аварийного завершения работы оконечного устройства 100, вызванного низкой температурой. В некоторых других вариантах осуществления, когда температура ниже еще одного другого порога, оконечное устройство 100 повышает выходное напряжение батареи 142, чтобы избежать аварийного завершения работы, вызванного низкой температурой.The temperature sensor 180J is configured to detect the temperature. In some embodiments, terminal device 100 performs a temperature processing principle using the temperature detected by temperature sensor 180J. For example, when the temperature reported by temperature sensor 180J exceeds a threshold, tag 100 reduces the performance of the processor located temperature sensor 180J to reduce power consumption and implement thermal protection. In some other embodiments, when the temperature is below another threshold, terminal 100 heats battery 142 to avoid terminal device 100 crashing due to low temperature. In some other embodiments, when the temperature is below yet another threshold, terminal 100 raises the output voltage of battery 142 to avoid a low temperature-induced crash.

Сенсорный датчик 180K также упоминается как «сенсорное устройство». Сенсорный датчик 180K может быть расположен на экране 194 дисплея и сенсорный датчик 180K и экран 194 дисплея образуют сенсорный экран, также называемый «сенсорным экраном». Сенсорный датчик 180K выполнен с возможностью обнаружения сенсорной операции, выполняемой на или около сенсорного датчика 180K. Сенсорный датчик может передавать обнаруженную сенсорную операцию прикладному процессору, чтобы определить тип сенсорного события и обеспечить визуальный вывод, связанный с сенсорной операцией, через экран 194 дисплея. В некоторых других вариантах осуществления сенсорный датчик 180K может альтернативно быть расположен на поверхности оконечного устройства 100, то есть, в месте, отличающемся от места на экране 194 дисплея.The 180K touch sensor is also referred to as the "touch device". The touch sensor 180K may be disposed on the display screen 194, and the touch sensor 180K and the display screen 194 form a touch screen, also referred to as a "touch screen". The touch sensor 180K is configured to detect a touch operation performed on or near the touch sensor 180K. The touch sensor may communicate the detected touch operation to an application processor to determine the type of touch event and provide visual output associated with the touch operation via the display screen 194. In some other embodiments, the touch sensor 180K may alternatively be located on the surface of the terminal 100, that is, in a different location from the display screen 194.

Датчик 180M костной проводимости может получать сигнал вибрации. В некоторых вариантах осуществления датчик 180M костной проводимости может получать сигнал вибрации, сформированный, когда человеческий голос вибрирует кость. Датчик 180M костной проводимости может также обнаруживать импульс от человека, чтобы получать импульсный сигнал кровяного давления. В некоторых вариантах осуществления датчик 180M костной проводимости может альтернативно быть обеспечен в наушнике, чтобы сформировать наушник с костной проводимостью. Аудиомодуль 170 может отличить речевой сигнал от сигнала вибрации, полученного датчиком костной проводимости, когда человеческий голос вибрирует кость, чтобы реализовать речевую функцию. Прикладной процессор может отличать информацию о сердечном ритме от импульсного сигнала кровяного давления, полученного датчиком костной проводимости, чтобы реализовать функцию обнаружения сердечного ритма.The bone conduction sensor 180M can receive a vibration signal. In some embodiments, the bone conduction sensor 180M may receive a vibration signal generated when a human voice vibrates the bone. The bone conduction sensor 180M can also detect a pulse from a person to obtain a blood pressure pulse signal. In some embodiments, a bone conduction sensor 180M may alternatively be provided in an earpiece to form a bone conduction earpiece. The audio module 170 can distinguish the speech signal from the vibration signal received by the bone conduction sensor when the human voice vibrates the bone to realize the speech function. The application processor can distinguish the heart rate information from the blood pressure pulse signal received by the bone conduction sensor to realize the heart rate detection function.

Клавиша 190 содержит клавишу включения питания, клавишу громкости и т.п. Клавиша 190 может быть механической клавишей или может быть сенсорной клавишей. Оконечное устройство 100 может принимать ввод от клавиши, чтобы формировать клавишный сигнальный ввод, связанный с настройками пользователя, и функциональное управление оконечного устройства 100.The key 190 includes a power key, a volume key, and the like. The key 190 may be a mechanical key or may be a touch key. Terminal device 100 may receive input from a key to generate a key signal input associated with user settings and functional control of terminal device 100.

Двигатель 191 может формировать вибрационную подсказку. Двигатель 191 может использоваться для вибрационной подсказки о входящем вызове и может также использоваться для вибрационной обратной связи при касании. Например, сенсорные операции, выполняемые в различных приложениях (например, фотографирование и воспроизведение аудио), могут соответствовать различным эффектам вибрационной обратной связи. Двигатель 191 может также соответственно обеспечивать различные эффекты вибрационной обратной связи для сенсорных операций, выполняемых в различных областях экрана 194 дисплея. Различные сценарии приложения (например, напоминание о времени, прием информации, будильник и игры) могут также соответствовать различным эффектам вибрационной обратной связи. Сенсорный эффект вибрационной обратной связи также может быть настроен.Motor 191 may generate a vibration prompt. Motor 191 may be used for vibration prompt of an incoming call and may also be used for vibration feedback on touch. For example, touch operations performed in different applications (such as photography and audio playback) may correspond to different vibration feedback effects. The motor 191 may also respectively provide different vibration feedback effects for touch operations performed in different areas of the display screen 194. Different application scenarios (such as time reminder, receiving information, alarm clock and games) can also correspond to different vibration feedback effects. The touch effect of vibration feedback can also be customized.

Индикатор 192 может быть индикаторной лампочкой и может быть выполнен с возможностью индикации состояния заряда, изменения питания, сообщения, пропущенного вызова, уведомления и т.п. Интерфейс 195 SIM-карты выполнен с возможностью подключения к SIM-карте. SIM-карта может быть вставлена в интерфейс 195 SIM-карты или вытащена из интерфейса 195 SIM-карты, чтобы войти в контакт с помощью или отделиться от оконечного устройства 100. Оконечное устройство 100 может поддерживать 1 или N интерфейсов SIM-карты, где N - положительное целое число, большее 1. Интерфейс 195 SIM-карты может поддерживать нано-SIM-карту, микро-SIM-карту, SIM-карту и т.п. Многочисленные карты могут вставляться в один и тот же интерфейс 195 SIM-карты одновременно, где многочисленные карты могут быть одного и того же типа или различных типов. Интерфейс 195 SIM-карты может также быть совместимым с различными типами SIM-карт. Интерфейс 195 SIM-карты может также быть совместимым с картой внешней памяти. Оконечное устройство 100 взаимодействует с сетью через SIM-карту, чтобы реализовывать функции, такие как ответ на вызов и передача данных. В некоторых вариантах осуществления оконечное устройство 100 принимает eSIM, то есть, встроенную SIM-карту. eSIM-карта может быть встроена в оконечное устройство 100 и не может быть отделена от оконечного устройства 100.The indicator 192 may be an indicator light and may be configured to indicate a state of charge, a power change, a message, a missed call, a notification, and the like. The SIM card interface 195 is configured to be connected to a SIM card. The SIM card can be inserted into the SIM card interface 195 or pulled out of the SIM card interface 195 to contact with or be separated from the terminal device 100. The terminal device 100 may support 1 or N SIM card interfaces, where N is a positive integer greater than 1. The SIM card interface 195 may support a nano SIM card, a micro SIM card, a SIM card, or the like. Multiple cards may be inserted into the same SIM card interface 195 at the same time, where the multiple cards may be of the same type or different types. The SIM card interface 195 may also be compatible with various types of SIM cards. The SIM card interface 195 may also be compatible with an external memory card. Terminal device 100 communicates with the network via a SIM card to implement functions such as call answering and data transmission. In some embodiments, terminal device 100 accepts an eSIM, that is, an embedded SIM card. The eSIM card may be embedded in terminal device 100 and cannot be separated from terminal device 100.

Как показано на фиг. 2, настоящая заявка обеспечивает вторую структурную схему оконечного устройства 100.As shown in FIG. 2, the present application provides a second block diagram of terminal device 100.

Оконечное устройство 100 имеет функцию связи в ближнем поле (Near-field communication, NFC) функция и содержит микросхему 201 NFC, слот 202 SIM-карты (SIM-карта, или eSIM карта находится в слоте карты платы) и прикладной процессор 203. Микросхема NFC связана с различными защитными элементами (safe element, SE), чтобы реализовывать способ в вариантах осуществления. Например, защитный элемент SE1 может быть конфигурирован в SE1 и защитный элемент в SE может также быть связан с прикладным процессором. Защитный элемент SE2 может быть независимым от микросхемы NFC или интегрироваться в SOC, а защитный элемент SE3 может быть конфигурирован на стороне сервера.The terminal device 100 has a near-field communication (NFC) function and includes an NFC chip 201, a SIM card slot 202 (a SIM card or eSIM card is in the card slot of the board), and an application processor 203. NFC chip associated with various security elements (safe element, SE) to implement the method in the embodiments. For example, the security element SE1 may be configured in SE1 and the security element in SE may also be associated with an application processor. The SE2 security element can be independent of the NFC chip or integrated into the SOC, and the SE3 security element can be configured on the server side.

Как показано на фиг. 3, вариант осуществления настоящей заявки обеспечивает экранную проекционную систему, содержащую оконечное устройство 100 и дисплей 200. Оконечное устройство 100 проецирует отображаемый контент (в том числе, такие данные, как рабочий стол, видео и аудио) оконечного устройства 100 на дисплей 200, используя технологию беспроводной проекции. Технология беспроводной проекции может быть технологией Miracast, DLNA, AirPlay, WIDI, WHDI, Wireless HD, технологией по некоторым пользовательским протоколам, таким как Bluetooth, Wi-Fi, ультраширокополосная UWB (Ultra Wide Band) или другими технологиями связи в ближнем поле. После того, как экранная проекция завершается, дисплей 200 может отображать экран оконечного устройства 100, например, домашний экран или воспроизводимое видео.As shown in FIG. 3, an embodiment of the present application provides a screen projection system comprising a terminal device 100 and a display 200. The terminal device 100 projects display content (including data such as desktop, video, and audio) of the terminal device 100 onto the display 200 using technology wireless projection. The wireless projection technology may be Miracast, DLNA, AirPlay, WIDI, WHDI, Wireless HD, technology over some user protocols such as Bluetooth, Wi-Fi, UWB (Ultra Wide Band), or other near field communication technologies. After the screen projection is completed, the display 200 may display a screen of the terminal device 100, such as a home screen or a video being played.

В некоторых вариантах осуществления дисплей 200 может отображать на экране первое окно после того, как экранная проекция завершается. Первое окно используется для отображения экрана оконечного устройства 100 и другие средства управления и т.п. могут отображаться на экране в области вне первого окна.In some embodiments, the display 200 may display the first window on the screen after the screen projection is completed. The first window is used to display the screen of the terminal device 100 and other controls and the like. can be displayed on the screen in an area outside the first window.

В некоторых вариантах осуществления оконечное устройство 100 может также проецировать операцию или действие пользователя на дисплее 200, включая движение мыши или указателя, работы на иконке прикладной программы и т.п. Например, оконечное устройство 100 принимает операцию пользователя по запуску первой прикладной программы и оконечное устройство запускает первую прикладную программу в ответ на первую операцию и отображает первый экран первой прикладной программы. Аналогично, вышеупомянутые этапы и первый экран первой прикладной программы могут также отображаться экране дисплея 200.In some embodiments, terminal device 100 may also project a user operation or action onto display 200, including mouse or pointer movement, operations on an application program icon, and the like. For example, the terminal device 100 receives a user operation to launch the first application program, and the terminal device launches the first application program in response to the first operation and displays the first screen of the first application program. Likewise, the above steps and the first screen of the first application may also be displayed on the display screen 200.

В некоторых вариантах осуществления, после того, как оконечное устройство 100 завершает операцию экранной проекции, дисплей 200 может отображать экран оконечного устройства 100. Дополнительно, оконечное устройство 100 может использоваться в качестве сенсорной панели, чтобы принимать операцию переключения пользователя и управлять работой дисплея 200. Конкретно, после приема операции переключения пользователя на оконечном устройстве 100, дисплей 200 может завершить соответствующее действие. Например, оконечное устройство 100 принимает операцию касания и дисплей 200 запускает первую прикладную программу и т.п.In some embodiments, after the terminal device 100 completes the screen projection operation, the display 200 may display the screen of the terminal device 100. Additionally, the terminal device 100 may be used as a touch panel to receive a user switching operation and control the operation of the display 200. Specifically, , after receiving the user switching operation on the terminal device 100, the display 200 may complete the corresponding action. For example, the terminal device 100 receives a touch operation and the display 200 launches the first application program, and the like.

Дисплей в этой заявке содержит обычные дисплеи с большим экраном, такие как экран дисплея, компьютера и проектора, или может быть оконечным устройством с экраном дисплея, таким как мобильный телефон и планшетный компьютер. Основные продукты с большим экраном, присутствующие в настоящее время на рынке, могут быть классифицированы на четыре категории режима дисплея: светодиодные дисплеи, плазменные дисплеи, жидкокристаллические дисплеи и DLP-дисплеи. Это не ограничивается в вариантах осуществления настоящей заявки.The display in this application comprises conventional large screen displays such as a display screen, a computer screen, and a projector screen, or may be a display screen terminal device such as a mobile phone and a tablet computer. The mainstream large-screen products currently on the market can be classified into four display mode categories: LED displays, plasma displays, liquid crystal displays, and DLP displays. This is not limited to embodiments of the present application.

В целом, как показано на фиг. 4, обеспечивается способ проецирования экран на дисплей 200, используя оконечное устройство 100, и способ конкретно содержит нижеследующие этапы.In general, as shown in FIG. 4, a method is provided for projecting a screen onto a display 200 using the terminal device 100, and the method specifically comprises the following steps.

Этап 401: Оконечное устройство 100 разрешает функцию беспроводной проекции.Step 401: Terminal device 100 enables the wireless projection function.

Конкретно, как показано в фиг. 5, оконечное устройство 100 принимает операцию пользователя по разрешению функции беспроводной проекции, например, касаясь органа управления «wireless projection» (беспроводная проекция) в строке состояния. В некоторых возможных вариантах осуществления функция беспроводной проекции может альтернативно быть разрешена на пользовательском экране настроек.Specifically, as shown in FIG. 5, the terminal device 100 receives a user operation to enable the wireless projection function, for example, by touching the "wireless projection" control in the status bar. In some possible embodiments, the wireless projection function may alternatively be enabled on the custom settings screen.

Как показано на фиг. 6, при приеме операции пользователя по разрешению функции беспроводной проекции, оконечное устройство 100 отображает первый экран. Как показано на фиг. 6, первый экран содержит первое всплывающее окно. Первое всплывающее окно используется, чтобы подсказать пользователю, что функция беспроводной проекции была разрешена. Первое всплывающее окно также содержит опцию просмотра помощи и опцию «отмены». После приема операции пользователя щелчком по опции просмотра помощи, оконечное устройство отображает второй экран. Второй экран содержит информацию подсказки, где подсказка используется, чтобы подсказать пользователю, как настроить беспроводную проекцию и информация подсказки может содержать видео, текст, изображение и т.п. При приеме операции пользователя щелчком по опции «cancel» (отмена), оконечное устройство возвращается к домашнему экрану или прекращает отображение первого всплывающего окна.As shown in FIG. 6, upon receiving the user's operation to enable the wireless projection function, the terminal device 100 displays the first screen. As shown in FIG. 6, the first screen contains the first pop-up window. The first popup window is used to prompt the user that the wireless projection feature has been enabled. The first popup also contains an option to view help and a "cancel" option. After receiving the user's operation by clicking on the help view option, the terminal device displays a second screen. The second screen contains prompt information, where the prompt is used to prompt the user how to set up the wireless projection, and the prompt information may include video, text, image, and the like. When a user operation is received by clicking on the "cancel" option, the terminal device returns to the home screen or stops displaying the first pop-up window.

В некоторых вариантах осуществления первое всплывающее окно или первый экран могут дополнительно отображать список соседних применимых устройств. Следует понимать, что после того, как оконечное устройство принимает операцию пользователя разрешения функции экранной проекции, оконечное устройство начинает сканировать соседние дисплеев, которые могут использоваться для экранной проекции. Сканирование может быть выполняться, используя технологии связи в ближнем поле, такие как Bluetooth или Wi-Fi. Когда сканирование успешно выполняется, идентификатор устройства, такой как название устройства дисплея, обнаруженного сканированием, может отображаться в первом всплывающем окне или на первом экране.In some embodiments, the implementation of the first pop-up window or the first screen may additionally display a list of neighboring applicable devices. It should be understood that after the terminal device receives the screen projection function enable user operation, the terminal device starts scanning neighboring displays that can be used for screen projection. Scanning can be performed using near field communication technologies such as Bluetooth or Wi-Fi. When the scan is successful, a device ID, such as the name of the display device detected by the scan, may be displayed in the first pop-up window or on the first screen.

В некоторых вариантах осуществления, в случае, когда оконечное устройство ранее не разрешило использование Bluetooth или функции Wi-Fi, оконечное устройство разрешает использование Bluetooth или функции Wi-Fi в ответ на операцию пользователя по разрешению функции экранной проекции.In some embodiments, in the case where the tag has not previously enabled Bluetooth or the Wi-Fi feature, the tag allows the use of the Bluetooth or Wi-Fi feature in response to the user's operation to enable the screen projection feature.

Этап 402: Оконечное устройство 100 сканирует соседний дисплей 200.Step 402: Terminal 100 scans adjacent display 200.

После приема операции, разрешающей функцию беспроводной проекции, оконечное устройство 100 начинает сканировать соседний дисплей 200.After receiving the operation enabling the wireless projection function, the terminal device 100 starts scanning the adjacent display 200.

Конкретно, оконечное устройство 100 может выполнить полное сканирование канала Wi-Fi (каналы 2,4G и 5G), чтобы обнаружить множество соседних дисплеев. В некоторых вариантах осуществления после выполнения полного сканирования канала оконечное устройство 100 может дополнительное сканирование только определенный канал, такого как канал 1, канал 6 или канал 11.Specifically, terminal device 100 may perform a full Wi-Fi channel scan (2.4G and 5G channels) to discover a plurality of neighboring displays. In some embodiments, after performing a full channel scan, tag 100 may further scan only a specific channel, such as channel 1, channel 6, or channel 11.

В некоторых вариантах осуществления соседний дисплей 200 альтернативно может быть обнаружен при использовании маломощной технологии BLE Bluetooth.In some embodiments, the adjacent display 200 may alternatively be discovered using Bluetooth low power BLE technology.

В некоторых вариантах осуществления оконечное устройство 100 посылает запрос для запроса сканирования соседнего дисплея 200 по определенному каналу.In some embodiments, terminal device 100 sends a request to request scanning of adjacent display 200 on a specific channel.

Этап 403: Дисплей 200 прослушивает канал.Step 403: The display 200 listens to the channel.

Конкретно, после включения питания дисплей 200 может проводить прослушивание канала Wi-Fi, чтобы обнаружить оконечное устройство 100 или которое должно быть обнаружено.Specifically, after power-on, the display 200 may listen to the Wi-Fi channel to discover the terminal device 100 or to be discovered.

В некоторых вариантах осуществления, когда дисплей 200 инициируется (например, конфигурируется впервые) и дисплей 200 сам по себе разрешает функцию горячей точки Wi-Fi для конфигурации с помощью дистанционного управления 300 или оконечного устройства 100, где конфигурация используется, главным образом, чтобы позволить дисплею соединиться с роутером для работы в сети, дисплей 200 может не прослушивать канал Wi-Fi.In some embodiments, when display 200 is initialized (e.g., configured for the first time) and display 200 itself enables the Wi-Fi hotspot function to be configured by remote control 300 or end device 100, where the configuration is used primarily to enable the display connect to a router for networking, the display 200 may not be listening to the Wi-Fi channel.

В некоторых вариантах осуществления дисплей 200 может альтернативно принимать операцию пользователя по разрешению прослушивания канала Wi-Fi. Например, пользователь открывает экран мастера (например, проекционный экран Miracast или экран совместно используемой прикладной программы Huawei) и дисплей 200 запускает прослушивание канала Wi-Fi в ответ на операцию пользователя по открытию экрана мастера. Прослушивание канала может альтернативно сканироваться для определенного канала, такого как канал 1, канал 6 или канал 11. Сканирование определенного канала является более быстрым чем сканирование во всей полосе. Когда оконечное устройство 100 и дисплей 200 изготовлены одним и тем же производителем, сканирование определенного канала может использоваться для повышения скорости сканирования и эффективности, используя заданную информацию о канале.In some embodiments, the display 200 may alternatively receive a user operation to allow listening on the Wi-Fi channel. For example, the user opens a wizard screen (eg, a Miracast projection screen or a Huawei shared application screen), and the display 200 starts listening to the Wi-Fi channel in response to the user's operation to open the wizard screen. The channel sniff may alternatively be scanned for a specific channel, such as channel 1, channel 6, or channel 11. Scanning a specific channel is faster than scanning the entire band. When terminal device 100 and display 200 are made by the same manufacturer, scanning a specific channel can be used to improve scanning speed and efficiency using the given channel information.

После того, как сканирование успешно выполнено, то есть, оконечное устройство 100 обнаруживает соседнее приемлемое устройство, идентификатор устройства, такой как название устройства дисплея, обнаруженного сканированием, может быть выведен на экран в первом всплывающем окне или на первом экране.After the scan is successful, i.e., the terminal device 100 detects a nearby acceptable device, a device identifier, such as the name of the display device found by the scan, may be displayed in the first pop-up window or on the first screen.

В некоторых вариантах осуществления дисплей может альтернативно инициировать сканирование экранной проекции и оконечное устройство выполняет прослушивание канала. После того, как дисплей завершает сканирование, дисплей может вывести на экран список соседних применимых оконечных устройств.In some embodiments, the display may alternatively initiate a screen projection scan and the terminal listens on the channel. After the display completes the scan, the display may display a list of neighboring applicable terminals.

Этап 404: Дисплей 200 посылает оконечному устройству 100 обратно ответное сообщение.Step 404: Display 200 sends back a response message to tag 100.

В некоторых вариантах осуществления, после того, как посредством прослушивания на определенном канале получен запрос сканирования оконечного устройства 100, дисплей 200 посылает оконечному устройству 100 ответ о сканировании.In some embodiments, after the tag 100 scan request is received by listening on a particular channel, the display 200 sends a scan response to the tag 100.

В некоторых вариантах осуществления ответное сообщение может нести идентификационную информацию дисплея 200, например, такую информацию, такая производитель устройства, название устройства, иконка устройства, идентификатор устройства и МАС-адрес.In some embodiments, the response message may carry identifying information of the display 200, such as device manufacturer, device name, device icon, device ID, and MAC address, for example.

Этап 405: оконечное устройство 100 проводит согласование с дисплеем 200.Step 405: Terminal 100 negotiates with display 200.

Оконечное устройство 100 может отображать идентификационную информацию дисплея 200 на первом экране или в первом всплывающем окне и принимать операцию пользователя на идентификационной информации. Оконечное устройство 100 и дисплей 200 выполняют согласование параметров или устанавливают соединение P2P.The terminal device 100 may display the identification information of the display 200 on the first screen or the first pop-up window and receive a user operation on the identification information. Terminal 100 and display 200 perform parameter negotiation or establish a P2P connection.

Этап 406: Оконечное устройство 100 завершает операцию экранной проекции на дисплее 200.Step 406: Terminal 100 completes the screen projection operation on display 200.

После того, как экранная проекция завершена, дисплей 200 может отобразить экран оконечного устройства 100, например, домашний экран или воспроизводимое видео.After the screen projection is completed, the display 200 may display a screen of the terminal device 100, such as a home screen or a video being played.

В некоторых вариантах осуществления дисплей 200, после того как экранная проекция завершается, может вывести на экран первое окно. Первое окно используется для отображения экрана оконечного устройства 100 и другие средства управления и т.п. могут отображаться в области вне первого окна.In some embodiments, the display 200, after the screen projection is completed, may display the first window. The first window is used to display the screen of the terminal device 100 and other controls and the like. may be displayed in an area outside the first window.

В некоторых вариантах осуществления оконечное устройство 100 может также спроецировать операцию пользователя на дисплей 200. Например, оконечное устройство 100 принимает операцию пользователя по запуску первой прикладной программы и оконечное устройство запускает первую прикладную программу в ответ на первую операцию и отображает первый экран первой прикладной программы. Аналогично, вышеупомянутые шаги и первый экран первой прикладной программы могут также отображаться на дисплее 200.In some embodiments, terminal device 100 may also project a user operation onto display 200. For example, terminal device 100 receives a user operation to launch a first application program, and the terminal device launches the first application program in response to the first operation and displays the first screen of the first application program. Likewise, the above steps and the first screen of the first application may also be displayed on the display 200.

В некоторых вариантах осуществления после того, как оконечное устройство 100 завершает операцию экранной проекции, дисплей 200 может отображать экран оконечного устройства 100. Дополнительно, оконечное устройство 100 может использоваться в качестве сенсорной панели для приема операции переключения, выполняемой пользователем, и управлять работой дисплея 200. Конкретно, после приема операции пользователя по переключению на оконечном устройстве 100, дисплей 200 может завершить соответствующее действие. Например, оконечное устройство 100 принимает операцию касания и дисплей 200 запускает первую прикладную программу и т.п.In some embodiments, after tag 100 completes the screen projection operation, display 200 may display the screen of tag 100. Additionally, tag 100 may be used as a touch panel to receive a switching operation performed by a user and control the operation of display 200. Specifically, after receiving the user's switch operation on the terminal device 100, the display 200 may complete the corresponding action. For example, the terminal device 100 receives a touch operation and the display 200 launches the first application program, and the like.

Как показано на фиг. 6, оконечное устройство 100 отображает список соседних приемлемых дисплеев и список устройств содержит такую информацию, как иконка дисплея 200.As shown in FIG. 6, terminal device 100 displays a list of neighbor acceptable displays, and the device list contains information such as an icon of display 200.

Оконечное устройство 100 принимает операцию пользователя со щелчком по иконке дисплея 200 и в ответ на операцию пользователя оконечное устройство 100 инициирует запрос экранной проекции, чтобы согласовать соответствующий протокол экранной проекции.The terminal device 100 receives the user's operation of clicking the icon of the display 200, and in response to the user's operation, the terminal device 100 initiates a screen projection request to negotiate an appropriate screen projection protocol.

Следует заметить, что предшествующая процедура беспроводной проекции может следовать рабочему процессу Wi-Fi P2P, содержащему следующие этапы: обнаружение устройства, групповая координация, аутентификация и ассоциация, процесс соединения WPS и четыре подтверждения приема.It should be noted that the preceding wireless projection procedure may follow a Wi-Fi P2P workflow containing the following steps: device discovery, group coordination, authentication and association, WPS connection process, and four acknowledgments.

Некоторые из этапов 401-406 могут выполняться в измененном порядке или одновременно.Some of the steps 401-406 may be performed in an altered order or simultaneously.

Обычно, как показано в фиг. 7, вариант осуществления настоящей заявки дополнительно обеспечивает способ проецирования экрана на дисплей 200, используя оконечное устройство 100, и способ конкретно содержит нижеследующие этапы.Typically, as shown in FIG. 7, an embodiment of the present application further provides a method for projecting a screen onto the display 200 using the terminal device 100, and the method specifically comprises the following steps.

Этап 701: Выполняют обнаружение, основываясь на технологии DLNA (Digital Living Network Alliance, сокращенно DLNA).Step 701: Discovery based on DLNA (Digital Living Network Alliance, abbreviated as DLNA) technology is performed.

Оконечное устройство 100 открывает видео, которое должно наблюдаться, и разрешает функцию экранной проекции. В этом варианте осуществления настоящей заявки видеопроекция используется в качестве примера. Как показано на фиг. 8, оконечное устройство 100 открывает экран воспроизведения видеоприложения, где экран воспроизведения имеет первую опцию и первая опция используется для индикации функции экранной проекции, например, касаясь средства управления «wireless projection» (беспроводная проекция); принимает первую операцию пользователя, например, операцию щелчка, и отображает на экране список соседних приемлемых устройств; принимает вторую операцию пользователя, например, выбирая устройство для экранной проекции, и проецирует экран с воспроизведением видео на устройство, выбранное пользователем.The terminal device 100 opens the video to be watched and enables the screen projection function. In this embodiment of the present application, video projection is used as an example. As shown in FIG. 8, the terminal device 100 opens the playback screen of the video application, where the playback screen has the first option and the first option is used to indicate the function of the screen projection, for example, by touching the "wireless projection" control (wireless projection); receives a first operation of the user, such as a click operation, and displays a list of neighboring acceptable devices on the screen; receives a second operation of the user, such as selecting a screen projection device, and projects a video playback screen onto the device selected by the user.

В некоторых вариантах осуществления оконечное устройство 100 отображает первый экран воспроизведения видео, где экран содержит первую опцию. Экран воспроизведения отображает второй экран или первое окно после приема операции пользователя по первому выбору, где второй экран или первое окно содержит многочисленные средства управления, такие как те, которые передают файл, многоадресную передачу, печать, совместное использование на компьютер, для экранной проекции и сенсорной передачи одним касанием. Вторая операция пользователя принимается, например, выбирая операцию экранной проекции, где второй экран, первое окно или третий экран отображают список соседних приемлемых устройств для экранной проекции. Третья операция пользователя принимается и оконечное устройство проецирует экран на устройство, выбранное пользователем.In some embodiments, terminal device 100 displays the first video playback screen, where the screen contains the first option. The playback screen displays a second screen or first window after receiving the user's operation of the first choice, where the second screen or first window contains numerous controls such as those for file transfer, multicast, printing, computer sharing, screen projection, and touch one-touch transfers. The second user operation is received, for example, by selecting a screen projection operation, where the second screen, the first window or the third screen displays a list of neighbor acceptable screen projection devices. The third user operation is received and the terminal device projects the screen onto the device selected by the user.

В ответ на операцию пользователя по разрешению управления беспроводной проекцией, оконечное устройство 100 инициирует широковещательное сканирование беспроводной локальной сети, то есть, оконечное устройство 100 может инициировать, используя локальную сеть, сканирование множества дисплеев в локальной сети. В отличие от экранной проекции, основанной на протоколе Miracast, экранная проекция в этом варианте осуществления использует широковещательную передачу, основанную на протоколе DLNA экранной проекции.In response to the user's operation to enable wireless projection control, the terminal device 100 initiates a wireless LAN broadcast scan, that is, the terminal device 100 can initiate a scan of multiple displays on the local network using the LAN. Unlike the screen projection based on the Miracast protocol, the screen projection in this embodiment uses a broadcast transmission based on the DLNA screen projection protocol.

В некоторых вариантах осуществления изображение, приложение, рабочий стол, документ и т.п. могут также быть спроецированы на экран.In some embodiments, an image, application, desktop, document, or the like. can also be projected onto a screen.

Этап 702: Дисплей 200 посылает обратно ответ DLNA.Step 702: Display 200 sends back a DLNA response.

Когда оконечное устройство 100 инициирует широковещательное сканирование дисплеев в локальной сети, в ответ на широковещательное сканирование дисплей посылает обратно оконечному устройству 100 ответное широковещательное сообщение. Как показано на фиг. 8, когда оконечное устройство 100 принимает от дисплея 200 ответное сообщение (например, HUAWEI DISPLAY), оконечное устройство 100 отображает список приемлемых приемных устройств экранной проекции.When tag 100 initiates a broadcast scan of displays on the local network, the display sends back a broadcast response message to tag 100 in response to the broadcast scan. As shown in FIG. 8, when terminal device 100 receives a response message (eg, HUAWEI DISPLAY) from display 200, terminal device 100 displays a list of acceptable screen projection receivers.

Обычно, дисплей, поддерживающий DLNA, посылает обратно ответ, основываясь на сообщении обнаружения оконечного устройства 100.Typically, a DLNA capable display sends back a response based on the discovery message of terminal 100.

Этап 703: Оконечное устройство 100 отправляет дисплею 200 адрес источника воспроизведения.Step 703: The terminal device 100 sends to the display 200 the address of the playback source.

При отображении на экране списка приемлемых дисплеев в локальной сети оконечное устройство 100 может принять операцию пользователя по выбору, например, выбирая «HUAWEI DISPLAY» В КАЧЕСТВЕ приемного устройства для экранной проекции. В ответ на операцию выбора пользователем, оконечное устройство 100 посылает дисплею 200 адрес источника воспроизведения видео в приложении видео. В некоторых вариантах осуществления адрес источника может посылаться дисплею 200 через направленную широковещательную передачу в локальной сети.When displaying a list of acceptable displays on the local network on the screen, the terminal device 100 can accept the user's operation of choice, for example, selecting "HUAWEI DISPLAY" AS THE RECEIVER for screen projection. In response to the user selection operation, the terminal device 100 sends to the display 200 the video playback source address in the video application. In some embodiments, the source address may be sent to the display 200 via a directed broadcast on the local network.

Этап 704: Дисплей 200 реализует функцию экранной проекции.Step 704: The display 200 implements a screen projection function.

Дисплей 200 получает видеоконтент, основываясь на адресе источника воспроизводимого видео, посылаемого оконечным устройством 100, чтобы реализовать функцию экранной проекции.The display 200 obtains the video content based on the source address of the playback video sent by the terminal device 100 to implement the screen projection function.

Предшествующий способ экранной проекции требует ручной установки пользователем и поэтому является относительно громоздким. Экранная проекция, выполняемая в соответствии со стандартным протоколом, содержит зеркальную экранную проекцию (Miracast) и прикладную экранную проекцию (DLNA). Для пользователей этапов работы множество и они занимают много времени.The previous screen projection method requires manual setting by the user and is therefore relatively cumbersome. Screen projection, performed in accordance with the standard protocol, contains a mirror screen projection (Miracast) and applied screen projection (DLNA). For users, the stages of work are many and they take a lot of time.

Основываясь на этом, как показано в фиг. 9A, вариант осуществления настоящей заявки дополнительно обеспечивает систему, в которой оконечное устройство 100 реализует функцию «экранной проекция в одно касание» на дисплее 200, используя дистанционное управление 300. Система содержит оконечное устройство 100, дисплей 200 и дистанционное управление 300, соответствующее дисплею 200. Дистанционное управление имеет функцию NFC или имеет встроенный тег тега NFC. Дистанционное управление предварительно конфигурируется с помощью параметров дисплея 200, включая такую информацию, как идентификатор устройства (название устройства, МАС-адрес, информация о производителе и т.п.) и параметр экранной проекции.Based on this, as shown in FIG. 9A, an embodiment of the present application further provides a system in which the terminal device 100 implements a one-touch screen projection function on the display 200 using a remote control 300. The system includes the terminal device 100, the display 200, and the remote control 300 corresponding to the display 200. The remote control has an NFC function or has a built-in NFC tag tag. The remote control is pre-configured using the parameters of the display 200, including information such as a device ID (device name, MAC address, manufacturer information, and the like) and a screen projection parameter.

Конкретный способ является следующим.The specific method is as follows.

Этап 901: Оконечное устройство 100 впервые касается дистанционного управления 300.Step 901: The terminal device 100 touches the remote control 300 for the first time.

Конкретно, при касании впервые дистанционного управления 300 оконечное устройство 100 получает контент тега для тега NFC в дистанционном управлении 300. Контент по умолчанию содержит идентификационную информацию дисплея 200, например, название устройства, тип устройства, информацию о МАС-адресе, идентификационный код и информацию о производителе.Specifically, when the remote control 300 is touched for the first time, the terminal device 100 obtains the tag content for the NFC tag in the remote control 300. The default content contains identification information of the display 200, such as device name, device type, MAC address information, identification code, and manufacturer.

В некоторых вариантах осуществления дистанционное управление 300 поставляется вместе с дисплеем 200 и производитель присваивает уникальный идентификационный код тегу для тега NFC дистанционного управления 300.In some embodiments, the remote control 300 is provided with the display 200 and the manufacturer assigns a unique tag identification code to the NFC tag of the remote control 300.

Оконечное устройство 100 определяет, основываясь на том, был ли сохранен идентификационный код тега для тега, является ли касание первым касанием. Касаясь тега для тега, оконечное устройство получает информацию о теге в теге для тега. Если идентификационный код тега для тега был сохранен в оконечном устройстве 100, касание не рассматривается как первое касание. Дополнительно, оконечное устройство 100 записывает информацию о теге в теге для тега.The terminal device 100 determines, based on whether the tag identification code for the tag has been stored, whether the touch is the first touch. By touching the tag for the tag, the end device obtains information about the tag in the tag for the tag. If the tag identification code for the tag has been stored in the terminal device 100, the touch is not considered as the first touch. Additionally, the terminal device 100 records the tag information in the tag for the tag.

В некоторых вариантах осуществления идентификация тега для тега NFC может быть прикреплена к поверхности дистанционного управления 300 для простоты касания пользователем.In some embodiments, a tag identification for an NFC tag may be attached to the remote control surface 300 for ease of touch by the user.

В некоторых вариантах осуществления дистанционное управление 300 может подавать питание на тег для тега NFC, используя батарею, или может иметься отдельная батарея для подачи питания тегу для тега NFC.In some embodiments, the remote control 300 may power the NFC tag using a battery, or there may be a separate battery to power the NFC tag.

В некоторых вариантах осуществления оконечному устройству необходимо разрешение работы функции NFC и функции WLAN.In some embodiments, the terminal device needs to enable the NFC function and the WLAN function.

Этап 902: Считывают информацию тега для тега.Step 902: Read the tag information for the tag.

Когда оконечное устройство 100 приближается к дистанционному управлению 300, оконечное устройство 100 может получать информацию в теге для тега NFC, включая, но не ограничиваясь только этим, название устройства, тип устройства, информацию о МАС-адресе, идентификационный код, информацию о производителе и другую информацию.When the terminal device 100 approaches the remote control 300, the terminal device 100 can obtain tag information for the NFC tag, including, but not limited to, device name, device type, MAC address information, identification code, manufacturer information, and other information.

В некоторых вариантах осуществления оконечное устройство 100 получает идентификационный код тега и информацию о дисплее 200, связанную с тегом.In some embodiments, tag 100 obtains a tag identification code and display 200 information associated with the tag.

В некоторых вариантах осуществления оконечное устройство 100 переключается на считывание контент тега для тега NFC, когда расстояние между оконечным устройством 100 и дистанционным управлением 300 становится меньше порогового, достигается порог для взаимодействия с NFC или мощность сигнала NFC, получаемого оконечным устройством 100, больше порога.In some embodiments, tag 100 switches to reading tag content for an NFC tag when the distance between tag 100 and remote control 300 becomes less than a threshold, a threshold for NFC interaction is reached, or the strength of the NFC signal received by tag 100 is greater than the threshold.

В некоторых вариантах осуществления многочисленные оконечные устройства 100 все могут касаться дистанционного управления 300, так чтобы различные оконечные устройства 100 реализовывали услугу экранной проекции.In some embodiments, multiple terminals 100 may all touch remote control 300 such that different terminals 100 implement a screen projection service.

Этап 903: Инициируют сканирование P2P, когда оконечное устройство 100 распознает, что тип устройства в теге для тега NFC является заданным типом устройства и оконечное устройство 100 не записало тег для тега.Step 903: P2P scanning is initiated when the terminal device 100 recognizes that the device type in the tag for the NFC tag is the specified device type and the terminal device 100 has not recorded a tag for the tag.

Конкретно, во время доставки с завода дистанционное управление 300 поставляется вместе с дисплеем 200 и тег для тега дистанционного управления 300 хранит информацию о дисплее 200, например, тип устройства, различные модели устройства одного и того же типа, название устройства, производитель устройства, информации о МАС-адресе, идентификационный код и другую информацию. В возможном варианте осуществления оконечное устройство 100 может задать тип устройства поддерживаемого дисплея 200, как показано в нижеследующей таблице.Specifically, at the time of shipment from the factory, the remote control 300 is shipped with the display 200, and the tag for the tag of the remote control 300 stores information about the display 200, such as device type, different device models of the same type, device name, device manufacturer, MAC address, identification code and other information. In an exemplary embodiment, terminal device 100 may specify the device type of display 200 supported, as shown in the following table.

No. Идентификация типа устройства или дисплеяDevice or display type identification Тип устройстваDevice type 11 0X110X11 HUAWEI DISPLAYHUAWEI DISPLAY 22 0X100X10 APPLE DISPLAYAPPLE DISPLAY 33 0X11-10X11-1 HUAWEI DISPLAY X65HUAWEI DISPLAY X65

Приведенная выше таблица является только примером типов устройств дисплеев, поддерживаемых оконечным устройством 100. Когда оконечное устройство 100 получает информацию о теге, оконечное устройство 100, основываясь на информации о теге для тега, определяет, что дисплей 200, соответствующий тегу, является дисплеем, поддерживаемым оконечным устройством 100.The above table is only an example of the display device types supported by tag 100. When tag 100 receives information about a tag, tag 100 determines, based on the tag information for the tag, that the display 200 corresponding to the tag is a display supported by the tag. device 100.

В некоторых вариантах осуществления соседний дисплей 200 может альтернативно быть обнаружен, используя маломощную технологию BLE Bluetooth мощностью.In some embodiments, the adjacent display 200 may alternatively be discovered using Bluetooth low power BLE technology.

В некоторых вариантах осуществления оконечное устройство 100 посылает соседнему дисплею 200 запрос сканирования по определенному каналу.In some embodiments, tag 100 sends a scan request to neighboring display 200 on a specific channel.

В некоторых вариантах осуществления оконечное устройство 100 хранит информацию о типе устройства поддерживаемого дисплея 200.In some embodiments, terminal device 100 stores information about the device type of the supported display 200.

Этап 904: оконечное устройство 100 принимает ответ от дисплея 200.Step 904: Terminal 100 receives a response from display 200.

В некоторых вариантах осуществления, конкретно, дисплей 200 может вести прослушивание канала Wi-Fi после включения питания, то есть, в режиме «всегда включено», чтобы обнаружить оконечное устройство 100 или быть обнаруженным.In some embodiments, specifically, the display 200 may listen to the Wi-Fi channel after power-on, ie, in an always-on mode, in order to discover or be discovered by the terminal device 100.

В некоторых вариантах осуществления, функция беспроводной проекции дисплея 200 требует разрешения. Это может быть сделано, используя настройку экрана или физическую кнопку, или на экране проекционного приложения.In some embodiments, the wireless projection function of the display 200 requires permission. This can be done using the screen setting or physical button, or on the screen of a projection application.

В некоторых вариантах осуществления, когда дисплей 200 инициализируется (например, впервые конфигурируется), и дисплей 200 сам разрешает функцию горячей точки Wi-Fi для конфигурации с помощью дистанционного управления 300 или оконечного устройства 100, где конфигурация используется, главным образом, чтобы разрешить дисплею соединиться с роутером для связи в сети, дисплей 200 может не прослушивать канал Wi-Fi.In some embodiments, when display 200 is initialized (e.g., configured for the first time) and display 200 itself enables the Wi-Fi hotspot function to be configured by remote control 300 or end device 100, where the configuration is used primarily to allow the display to connect with a router for network communication, the display 200 may not listen to the Wi-Fi channel.

В некоторых вариантах осуществления дисплей 200 может альтернативно принимать операцию пользователя по разрешению прослушивания канала Wi-Fi. Например, пользователь открывает экран мастера (например, проекционный экран Miracast или экран совместно используемой прикладной программы Huawei) и дисплей 200 начинает прослушивание канала Wi-Fi в ответ на операцию пользователя по открыванию экрана мастера. Прослушивание канала может альтернативно сканироваться для получения определенного канала, такого как канал 1, канал 6 или канал 11. Сканирование определенного канала происходит быстрее, чем сканирование всей полосы. Когда оконечное устройство 100 и дисплей 200 изготавливаются одним и тем же производителем, сканирование определенного канала может использоваться для повышения скорости сканирования и эффективности, используя заданную информацию о канале.In some embodiments, the display 200 may alternatively receive a user operation to allow listening on the Wi-Fi channel. For example, the user opens a wizard screen (eg, a Miracast projection screen or a Huawei shared application screen), and the display 200 starts listening to the Wi-Fi channel in response to the user's operation to open the wizard screen. The channel sniff may alternatively be scanned to obtain a specific channel, such as channel 1, channel 6, or channel 11. Scanning a specific channel is faster than scanning the entire band. When terminal 100 and display 200 are manufactured by the same manufacturer, scanning a particular channel can be used to improve scanning speed and efficiency using the given channel information.

В некоторых вариантах осуществления после того, как запрос сканирования терминального устройства 100 получается посредством прослушивания на определенном канале, дисплей 200 посылает оконечному устройству 100 ответ на сканирование.In some embodiments, after a scan request of terminal device 100 is received by listening on a specific channel, display 200 sends a scan response to terminal device 100.

В некоторых вариантах осуществления область NFC мобильного телефона требует перемещения ближе к сенсорной области NFC дистанционного управления и оставаться в этом состоянии, пока мобильный телефон не даст звуковую подсказку или не начнет вибрировать.In some embodiments, the NFC area of the mobile phone is required to move closer to the NFC touch area of the remote control and remain in that state until the mobile phone gives an audible prompt or vibrates.

Этап 905: Оконечное устройство 100 принимает операцию пользователя по выбору и посылает соединение P2P.Step 905: Terminal 100 receives the user's operation of choice and sends a P2P connection.

Как показано на фиг. 9B, когда оконечное устройство 100 путем сканирования обнаружило соседний дисплей 200, оконечное устройство 100 отображает первое всплывающее окно. Первое всплывающее окно содержит список соседних приемлемых дисплеев. Список устройств содержит названия устройств, иконки соседних устройств и возможности, поддерживаемые устройствами. Например, Honor TV поддерживает проекцию в компьютерном режиме и в режиме мобильного телефона. Например, большой экран Huawei поддерживает проекцию только изображений, видео и музыки. Например, смарт-экран поддерживает проекцию только в режиме мобильного телефона.As shown in FIG. 9B, when the terminal device 100 has detected the adjacent display 200 by scanning, the terminal device 100 displays the first pop-up window. The first popup contains a list of nearby acceptable displays. The device list contains the names of the devices, the icons of neighboring devices, and the features supported by the devices. For example, Honor TV supports projection in computer mode and mobile phone mode. For example, Huawei's large screen only supports projection of images, videos, and music. For example, the smart screen only supports projection in mobile phone mode.

Первое всплывающее окно также содержит опцию «помощи при просмотре» (view help) и опцию «cancel» (отмены). При приеме операции пользователя щелчком по опции «view help» оконечное устройство отображает второй экран, где второй экран содержит информацию подсказки, подсказка используется, чтобы подсказать пользователю, как установить беспроводную проекцию и информация подсказки может содержать видео, текст, изображение и т.п. При приеме операции пользователя щелчком по опции отмены «cancel», оконечное устройство возвращается к домашнему экрану или прекращает отображение первого всплывающего окна.The first popup also contains a "view help" option and a "cancel" option. Upon receiving the user's operation by clicking the "view help" option, the terminal device displays a second screen, where the second screen contains prompt information, the prompt is used to prompt the user how to set the wireless projection, and the prompt information may include video, text, image, and the like. Upon receiving the user's operation by clicking on the "cancel" option, the terminal returns to the home screen or stops displaying the first pop-up window.

В некоторых вариантах осуществления оконечное устройство 100 принимает первую операцию пользователя, например, операцию щелчка по большому экрану Huawei. Оконечное устройство 100 инициирует соединение с дисплеем 200 (большой экран Huawei). Например, оконечное устройство 100 инициирует запрос соединения.In some embodiments, the tag 100 receives the user's first operation, such as a click operation on a Huawei large screen. End device 100 initiates a connection to display 200 (Huawei large screen). For example, terminal 100 initiates a connection request.

Этап 906: Дисплей 200 принимает запрос соединения от оконечного устройства 100.Step 906: Display 200 receives a connection request from terminal 100.

После того, как дисплей 200 принимает запрос соединения от оконечного устройства 100, раскрываются второе всплывающее окно или третий экран. Третий экран или второе всплывающее окно отображают информацию подсказки и информация подсказки используются, чтобы подсказать пользователю, что оконечное устройство 100 нуждается в установлении соединения с дисплеем 200 для экранной проекции. Как показано на фиг. 9C, дисплей 200 отображает второе всплывающее окно, где второе всплывающее окно дополнительно содержит первую опцию (согласие) и вторую опцию (игнорировать). Когда дисплей 200 принимает операцию пользователя с первой опцией, дисплей 200 устанавливает соединение с оконечным устройством 100 для экранной проекции. Когда дисплей 200 принимает операцию пользователя со второй опцией, дисплей 200 игнорирует запрос оконечного устройства 100 и прекращает отображение на экране второго всплывающего окна или третьего экрана.After the display 200 receives the connection request from the terminal device 100, a second pop-up window or a third screen is opened. The third screen or second pop-up window displays prompt information, and the prompt information is used to prompt the user that the terminal device 100 needs to establish a connection with the screen projection display 200. As shown in FIG. 9C, display 200 displays a second popup, where the second popup further contains a first option (consent) and a second option (ignore). When the display 200 receives the user's operation with the first option, the display 200 establishes a connection with the terminal device 100 for screen projection. When the display 200 receives the user's operation with the second option, the display 200 ignores the request from the tag 100 and stops displaying the second pop-up window or the third screen on the screen.

В некоторых вариантах осуществления, дисплей 200 отображает второе всплывающее окно только для начального соединения.In some embodiments, display 200 displays a second pop-up window for the initial connection only.

В некоторых вариантах осуществления после приема запроса соединения от оконечного устройства 100 дисплей 200 может напрямую установить соединение для экранной проекции, не выводя на экран всплывающее окно. Установление соединения без отображения всплывающего окна может иметь место, когда дисплей 200 разделяется на пары для соединения впервые или когда оконечное устройство 100 является устройством, ранее соединявшимся с дисплеем 200.In some embodiments, upon receiving a connection request from terminal device 100, display 200 may directly establish a connection for screen projection without displaying a pop-up window. Establishing a connection without displaying a pop-up window may occur when the display 200 is paired for connection for the first time, or when the terminal device 100 is a device that has previously connected to the display 200.

В некоторых вариантах осуществления, как показано на фиг. 9D, когда дисплей 200 принимает операцию пользователя с первой опцией, дисплей 200 устанавливает с оконечным устройством 100 соединение для экранной проекции. Дисплей 200 может дополнительно отображать третье всплывающее окно. Третье всплывающее окно подсказывает, что оконечное устройство 100 установило с дисплеем 200 соединение для экранной проекции.In some embodiments, as shown in FIG. 9D, when the display 200 receives the user's operation with the first option, the display 200 establishes a screen projection connection with the terminal device 100. The display 200 may further display a third pop-up window. The third pop-up prompts that the terminal device 100 has established a screen projection connection with the display 200.

Этап 907: Оконечное устройство 100 устанавливает соединение с дисплеем 200.Step 907: Terminal 100 establishes a connection with display 200.

Этап 908: Начало экранного проецирования.Step 908: Starting screen projection.

Следует заметить, что вышеупомянутые этапы могут выполняться в измененном порядке или пропускаться.It should be noted that the above steps may be performed in an altered order or skipped.

В некоторых вариантах осуществления, после того, как оконечное устройство 100 устанавливает с дисплеем 200 соединение для экранной проекции, оконечное устройство 100 может принять первую операцию пользователя, например, щелчок по «Display Device Operation» (работа дисплея) в экране настроек или экране прикладной программы. То есть, дисплей 200 может управляться, используя оконечное устройство 100. Другими словами, оконечное устройство 100 служит в качестве сенсорной панели для дисплея 200, что может пониматься как рабочий режим. Конечно, между режимом управления и режимом экранной проекции может выполняться переключение.In some embodiments, after terminal device 100 establishes a screen projection connection with display 200, terminal device 100 may accept a first user operation, such as clicking on "Display Device Operation" in the settings screen or application screen. . That is, the display 200 may be controlled using the terminal device 100. In other words, the terminal device 100 serves as a touch panel for the display 200, which may be understood as an operating mode. Of course, switching between the control mode and the screen projection mode can be performed.

В некоторых вариантах осуществления оконечное устройство 100 локально хранит МАС-адрес P2P дисплея 200 с успешной экранной проекцией и связывает уникальный идентификационный код тега для тега. Как показано в нижеследующей таблице, в оконечном устройстве 100 хранятся следующие соответствия.In some embodiments, tag 100 locally stores the P2P MAC address of the successful screen projection display 200 and associates a unique tag identification code for the tag. As shown in the following table, the following mappings are stored in terminal device 100.

No. Идентификационный код тегаTag identification code Адрес дисплеяDisplay address 11 0X000X00 12:34:D512:34:D5 22 0X010X01 12:34:D612:34:D6

Приведенная выше таблица является только примером соотношения взаимосвязи между тегом для тегов и дисплеями, которое записывается оконечным устройством 100, поскольку что идентификационный код уникален, и адрес дисплея 200 также уникален. Оконечное устройство может определить адрес дисплея, основываясь на информации об идентификационном коде, полученной из тега для тега, чтобы реализовать функцию «экранной проекции одним касанием». В некоторых вариантах осуществления оконечное устройство 100 может дополнительно хранить тип устройства и другую информация, которые соответствуют тегу для тега.The above table is only an example of the relationship between a tag for tags and displays that is recorded by the terminal device 100 because the identification code is unique and the display address 200 is also unique. The terminal device can determine the display address based on the identification code information obtained from the tag for the tag to realize the "one-touch screen projection" function. In some embodiments, tag 100 may additionally store a device type and other information that matches a tag for a tag.

В некоторых вариантах осуществления при получении идентификационной информации дисплея 200, касаясь дистанционного управления 300, оконечное устройство 100 может установить соединение для экранной проекции, непосредственно инициируя запрос соединения. Запрос соединения содержит идентификационную информацию дисплея 200 или идентификационную информацию оконечного устройства 100.In some embodiments, upon receiving the identification information of the display 200 by touching the remote control 300, the terminal device 100 may establish a connection for a screen projection by directly initiating a connection request. The connection request contains the identification information of the display 200 or the identification information of the terminal device 100.

Дополнительно, если оконечное устройство 100 не первый раз касается дистанционного управления 300, настоящая заявка обеспечивает более удобный способ экранной проекции, как показано на фиг. 10.Additionally, if the terminal device 100 is not touching the remote control 300 for the first time, the present application provides a more convenient screen projection method as shown in FIG. 10.

Этап 1001: Оконечное устройство 100 касается дистанционного управления 300.Step 1001: Terminal 100 touches remote control 300.

Этап 1002: Оконечное устройство 100 получает информацию о теге для тега.Step 1002: Terminal 100 obtains tag information for a tag.

В некоторых вариантах осуществления информация о теге содержит, но не ограничиваясь только этим, такую информацию, как тип устройства, различные модели устройства одного и того же типа, название устройства, производитель устройства, информации о МАС-адресе и идентификационный код.In some embodiments, the tag information includes, but is not limited to, information such as device type, different device models of the same type, device name, device manufacturer, MAC address information, and identification code.

В некоторых вариантах осуществления оконечное устройство 100 переключается, чтобы считывать контент тега для тега NFC, когда расстояние между оконечным устройством 100 и дистанционным управлением 300 меньше порогового, когда достигается порог для взаимодействия с NFC или когда мощность сигнала NFC, полученного оконечным устройством 100, больше порога.In some embodiments, tag 100 switches to read tag content for an NFC tag when the distance between tag 100 and remote control 300 is less than a threshold, when a threshold for NFC interaction is reached, or when the strength of the NFC signal received by tag 100 is greater than a threshold. .

Для этапов 1001 и 1002 ссылка может делаться на этапы 901 и 902.For steps 1001 and 1002, reference may be made to steps 901 and 902.

Этап 1003: Оконечное устройство 100 определяет, соответствует ли хранящейся информации информация о дисплее 200, обнаруженном путем сканирования.Step 1003: The terminal device 100 determines if the stored information matches the information on the display 200 detected by the scan.

Оконечное устройство 100 определяет, основываясь на полученной информации о теге для тега, такую информацию, как тип устройства, МАС-адрес или идентификационный код дисплея 200 в паре с дистанционным управлением 300, чтобы определить, является ли дисплей 200 тем дисплеем, на котором оконечное устройство 100 ранее выполнило экранную проекцию.The tag 100 determines, based on the received tag information for the tag, information such as the device type, MAC address, or identification code of the display 200 paired with the remote control 300 to determine whether the display 200 is the one on which the tag 100 previously performed screen projection.

Этап 1004: Когда оконечное устройство 100 определяет, что информация о дисплее 200, обнаруженном путем сканирования, соответствует хранящейся информации, оконечное устройство 100 инициирует соединение P2P с дисплеем 200.Step 1004: When terminal 100 determines that the information about display 200 detected by scanning matches the stored information, terminal 100 initiates a P2P connection with display 200.

В некоторых вариантах осуществления, когда оконечное устройство 100 определяет, что информация о дисплее 200, обнаруженном сканированием, не соответствует хранящейся информации о дисплее, это означает, что текущий дисплей 200 соединяется с оконечное устройство 100 впервые и процесс может быть выполнен процесс для первого соединения, как показано в фиг. 9A.In some embodiments, when tag 100 determines that the scan-detected display 200 information does not match the stored display information, this means that the current display 200 is connecting to tag 100 for the first time and a process can be performed for the first connection. as shown in FIG. 9A.

Этап 1005: Оконечное устройство 100 устанавливает соединение с дисплеем 200 и запускает экранную проекцию.Step 1005: Terminal 100 establishes a connection with display 200 and starts screen projection.

Для представленных выше этапов ссылка может быть сделана на фиг. 9A-9D и соответствующие текстовые описания. По сравнению с первой экранной проекцией, в остальных экранных проекциях оконечное устройство 100 может выполнять парное сканирование, основанное на хранящейся архивной информации. Например, этап 1003 или 1004 может быть пропущен и оконечное устройство 100 напрямую инициирует соединение P2P, основываясь на записанной информации дисплея 200.For the above steps, reference may be made to FIG. 9A-9D and corresponding text descriptions. Compared to the first screen projection, in the remaining screen projections, the terminal device 100 can perform a paired scan based on the stored archive information. For example, step 1003 or 1004 can be skipped and terminal 100 directly initiates a P2P connection based on the recorded information of display 200.

В предшествующем варианте осуществления после того, как оконечное устройство 100 получает информацию о теге дистанционного управления 300, оконечное устройство 100 и дисплей 200 устанавливают процедуру экранной проекции, используя стандартный протокол Miracast.In the foregoing embodiment, after the terminal device 100 receives information about the remote control tag 300, the terminal device 100 and the display 200 establish a screen projection procedure using the standard Miracast protocol.

По сравнению с другими решениями для экранной проекции, этот вариант осуществления настоящей заявки может реализовать «экранную проекцию одним касанием», делая экранную проекцию более удобной и повышающей эффективность услуги экранной проекции.Compared with other screen projection solutions, this embodiment of the present application can realize "one-touch screen projection", making screen projection more convenient and improving the efficiency of the screen projection service.

Вариант осуществления настоящей заявки дополнительно обеспечивает способ экранной проекции, основанный на протоколе DLNA. Как показано на фиг. 11, вариант осуществления этой заявки дополнительно обеспечивает систему, в которой оконечное устройство 100 реализует функцию «экранной проекции одним касанием» на дисплее 200, используя дистанционное управление 300. Система содержит оконечное устройство 100, дисплей 200 и дистанционное управление 300, соответствующее дисплею 200. Дистанционное управление имеет функцию NFC, или имеет встроенный тег для тега NFC. Дистанционное управление предварительно конфигурируется с помощью параметров дисплея, включающих такую информацию, как идентификатор устройства (название устройства, МАС-адрес, уникальный идентификационный код и т.п.) и параметр экранной проекции.An embodiment of the present application further provides a screen projection method based on the DLNA protocol. As shown in FIG. 11, an embodiment of this application further provides a system in which terminal device 100 implements a "one-touch screen projection" function on display 200 using remote control 300. The system comprises terminal device 100, display 200, and remote control 300 corresponding to display 200. control has an NFC function, or has a built-in tag for the NFC tag. The remote control is pre-configured with display parameters including information such as device ID (device name, MAC address, unique identification code, etc.) and screen projection parameter.

Варианты осуществления настоящей заявки обеспечивают новые способы экранной проекции Miracast и DLNA, чтобы предоставить потребителю удобный и модный способ. Экранная проекция одним касанием, содержащая зеркальную экранную проекцию (Miracast) и прикладную экранную проекцию (DLNA), реализуется, используя тег NFC.Embodiments of the present application provide new Miracast and DLNA screen projection methods to provide the consumer with a convenient and fashionable way. One-touch screen projection, comprising mirrored screen projection (Miracast) and applied screen projection (DLNA), is implemented using an NFC tag.

Этап 1101: Оконечное устройство 100 впервые касается дистанционного управления 300.Step 1101: Terminal 100 touches remote control 300 for the first time.

Конкретно, касаясь первый раз дистанционного управления 300, оконечное устройство 100 получает контент тега для тега в дистанционном управлении. Контент по умолчанию содержит идентификатор устройства дисплея 200, например, название устройства, тип устройства, информацию о МАС-адресе и идентификационный код, и тег для тега имеет уникальный идентификационный код.Specifically, touching the remote control 300 for the first time, the terminal device 100 obtains the tag content for the tag in the remote control. The default content contains a device identifier of the display 200, such as device name, device type, MAC address information, and an identification code, and the tag for the tag has a unique identification code.

Оконечное устройство 100, основываясь на том, был ли идентификационный код тега для тега сохранен ранее, определяет, является ли касание первым касанием. Касаясь тега для тега, оконечное устройство получает информацию о теге в теге для тега. Если идентификационный код тега для тега был сохранен ранее в оконечном устройстве 100, касание не рассматривается как первое касание. Дополнительно, оконечное устройство 100 записей информация о теге в теге для тега.The terminal device 100, based on whether the tag identification code for the tag has been previously stored, determines whether the touch is the first touch. By touching the tag for the tag, the end device obtains information about the tag in the tag for the tag. If the tag identification code for the tag has been previously stored in the terminal device 100, the touch is not considered as the first touch. Additionally, the terminal 100 records the tag information in the tag for the tag.

В некоторых вариантах осуществления идентификация тега для тега может наноситься на поверхность дистанционного управления 300 для простоты касания пользователем.In some embodiments, a tag identification for a tag may be applied to the remote control surface 300 for ease of touch by the user.

В некоторых вариантах осуществления оконечное устройство 100 инициируется для считывания контента тега для тега NFC, когда расстояние между оконечным устройством 100 и дистанционным управлением 300 меньше порога, когда порог для взаимодействия с NFC достигается или когда мощность сигнала NFC, полученного оконечным устройством 100, больше порога.In some embodiments, tag 100 is triggered to read tag content for an NFC tag when the distance between tag 100 and remote control 300 is less than a threshold, when a threshold for NFC interaction is reached, or when the strength of the NFC signal received by tag 100 is greater than the threshold.

Этап 1102: Считывают информацию о теге для тега.Step 1102: Read the tag information for the tag.

Этап 1103: Оконечное устройство 100 инициирует широковещательное сканирование DLNA, когда оконечное устройство 100 распознает, что тип устройства в теге является заданным типом устройства и оконечное устройство 100 не записало тег для тега, чтобы обнаружить дисплей 200.Step 1103: Terminal device 100 initiates a DLNA broadcast scan when terminal device 100 recognizes that the device type in the tag is the specified device type and terminal device 100 has not written a tag for the tag to discover display 200.

В некоторых вариантах осуществления, как показано на фиг. 8, после того, как оконечное устройство 100 принимает операцию пользователя по разрешению функции беспроводной проекции, оконечное устройство 100 инициирует широковещательное сообщение DLNA, чтобы сканировать соседний дисплей 200.In some embodiments, as shown in FIG. 8, after the terminal device 100 receives the user's operation to enable the wireless projection function, the terminal device 100 initiates a DLNA broadcast message to scan the adjacent display 200.

Этап 1104: Дисплей 200 посылает оконечному устройству 100 ответное сообщение о сканировании.Step 1104: Display 200 sends tag 100 a scan response message.

После того, как оконечное устройство 100 принимает от дисплея 200 ответное сообщение о сканировании, оконечное устройство 100 отображает информацию о дисплее 200 в списке приемлемых экранных проекций, например, такую информацию, как иконка устройства и название устройства.After terminal device 100 receives a scan response message from display 200, terminal device 100 displays information about display 200 in a list of acceptable screen projections, such as information such as device icon and device name.

Этап 1105: Оконечное устройство 100 инициирует соединение DLNA.Step 1105: Terminal 100 initiates a DLNA connection.

Этап 1106: Оконечное устройство 1106 начинает экранную проекцию DLNA.Step 1106: Terminal 1106 starts a DLNA screen projection.

Вариант осуществления настоящей заявки дополнительно обеспечивает операцию экранной проекции в одно касание.An embodiment of the present application further provides a one-touch screen projection operation.

Этап 1201: Оконечное устройство 100 касается дистанционного управления 300.Step 1201: Terminal 100 touches remote control 300.

Конкретно, оконечное устройство 100 может коснуться тега NFC дистанционного управления 300.Specifically, the terminal device 100 may touch the NFC tag of the remote control 300.

Этап 1202: Оконечное устройство 100 считывает информацию тега для тега.Step 1202: Terminal 100 reads tag information for a tag.

Этап 1203: Оконечное устройство 100 инициирует обнаружение DLNA.Step 1203: Terminal 100 initiates DLNA discovery.

При считывании информации тега для тега оконечное устройство 100 определяет, что дисплей 200 является дисплеем типа, поддерживаемого оконечным устройством, и когда оконечное устройство 100 записало тег, оконечное устройство 100 автоматически инициирует обнаружение DLNA в дисплее, соответствующему тегу для тега в локальной сети.When reading the tag information for a tag, tag 100 determines that display 200 is a display type supported by the tag, and when tag 100 has written the tag, tag 100 automatically initiates DLNA discovery on the display corresponding to the tag for the tag on the local network.

Этап 1204: Дисплей 200 передает обратно ответ DLNA.Step 1204: Display 200 sends back a DLNA response.

Когда оконечное устройство 100 принимает от дисплея 200 ответное сообщение DLNA, оконечное устройство 100 извлекает хранящуюся запись для проверки совпадения, например, выполняя проверку совпадения МАС-адреса.When the terminal device 100 receives the DLNA response message from the display 200, the terminal device 100 retrieves the stored record to check for a match, for example, by performing a MAC address match.

Этап 1205: Оконечное устройство 200 инициирует функцию экранной проекции DLNA.Step 1205: Terminal 200 initiates a DLNA screen projection function.

Конкретно, оконечное устройство 100 может посылать на дисплей 200 адрес источника видео, которое должно проецироваться, и дисплей 200 получает видеоконтент из сети, основываясь на адресе источника, и воспроизводит его.Specifically, the terminal device 100 can send to the display 200 the source address of the video to be projected, and the display 200 receives the video content from the network based on the source address and plays it.

Как показано на фиг. 13, вариант осуществления настоящей заявки дополнительно обеспечивает графический интерфейс пользователя. Когда оконечное устройство 100 касается дистанционного управления 300, в ответ на операцию касания, когда оконечное устройство 100 не разрешило функцию локальной сети WLAN, всплывающее окно раскрывается, чтобы подсказать пользователю, разрешать ли работу WLAN. Оконечное устройство 100 может принять от пользователя операцию отмены или операцию разрешения. Когда принимается операция пользователя по отмене, оконечное устройство 100 закрывает всплывающее окно, не разрешая WLAN функционировать или реализовывать функцию «экранной проекции в одно касание». Когда принимается операция пользователя с разрешением, оконечное устройство 100 автоматически разрешает функцию WLAN и выполняет способ экранный проекции в соответствии с вариантами осуществления настоящей заявки.As shown in FIG. 13, an embodiment of the present application further provides a graphical user interface. When the terminal device 100 touches the remote control 300, in response to the touch operation when the terminal device 100 has not enabled the WLAN local area network function, a pop-up window is opened to prompt the user whether to enable the WLAN operation. The terminal device 100 may receive a cancel operation or an enable operation from the user. When a user's cancel operation is received, the terminal device 100 closes the pop-up window, preventing the WLAN from functioning or implementing the one-touch screen projection function. When a permission user operation is received, the terminal device 100 automatically enables the WLAN function and executes the screen projection method according to the embodiments of the present application.

Как показано на фиг. 14, вариант осуществления этой заявки дополнительно обеспечивает другой графический интерфейс пользователя. Когда оконечное устройство 100 выполняет функцию «экранной проекции одним касанием» в ответ на раскрывающуюся операцию пользователя в строке состояния, подсказка о состоянии экранной проекции текущего оконечного устройства 100 может быть выведена на экран, информация о текущем дисплее для экранной проекции отображается на экране, обеспечивается функция разъединения и два различных режима экранной проекции: компьютерный режим и режим мобильного телефона, также могут быть обеспечены. Конкретно, как показано на фиг. 15, существующая функция экранной проекции должна спроецировать контент, отображаемый на оконечном устройстве 100, на дисплей 200, например, проецируя рабочий стол. Как показано на фиг. 16, когда оконечное устройство принимает операцию, при которой пользователь выбрал режим мобильного телефона, дисплей 200 может выполнить отображение в режиме компьютера и оконечное устройство 100 может функционировать как сенсорная панель, чтобы перемещать или управлять дисплеем 200. В некоторых вариантах осуществления, после того, как оконечное устройство 100 завершает операцию экранной проекции, дисплей 200 может отображать экран оконечного устройства 100. Дополнительно, оконечное устройство 100 может использоваться в качестве сенсорной панели, чтобы принимать операцию пользователя по переключению и управлять работой дисплея 200. Конкретно, после приема операции пользователя по переключению на оконечном устройстве 100, дисплей 200 может завершить соответствующее действие. Например, оконечное устройство 100 принимает щелчок и дисплей 200 запускает первую прикладную программу и т.п.As shown in FIG. 14, an embodiment of this application further provides another graphical user interface. When the terminal device 100 performs the "one-touch screen projection" function in response to the pop-up operation of the user in the status bar, the screen projection state prompt of the current terminal device 100 can be displayed, the current display information for the screen projection is displayed on the screen, the function is provided. disconnection and two different screen projection modes: computer mode and mobile phone mode, can also be provided. Specifically, as shown in FIG. 15, the existing screen projection function is to project the content displayed on the terminal device 100 onto the display 200, for example by projecting a desktop. As shown in FIG. 16, when the terminal device receives an operation in which the user has selected the mobile phone mode, the display 200 may perform a computer mode display, and the terminal device 100 may function as a touch pad to move or control the display 200. In some embodiments, after terminal device 100 completes the screen projection operation, the display 200 may display the screen of the terminal device 100. Further, the terminal device 100 may be used as a touch panel to receive a user's operation to switch and control the operation of the display 200. Specifically, after receiving the user's operation to switch to terminal device 100, the display 200 may complete the corresponding action. For example, terminal device 100 receives a click and display 200 launches the first application program, and so on.

Как показано на фиг. 17, вариант осуществления настоящей заявки дополнительно обеспечивает другой графический интерфейс пользователя. Когда оконечное устройство 100 соединяется с дисплеем, графический интерфейс пользователя может использоваться, чтобы запросить подсказку для пользователя и обеспечить функцию отмены.As shown in FIG. 17, an embodiment of the present application further provides another graphical user interface. When terminal 100 connects to a display, a graphical user interface may be used to prompt the user and provide a cancel function.

Как показано на фиг. 18, вариант осуществления настоящей заявки может дополнительно обеспечивать другой графический интерфейс пользователя. Когда оконечное устройство 100 терпит неудачу при экранной проекции, оконечное устройство 100 отображает поле с подсказкой, чтобы сообщить пользователю причины отказа, например, «Никакой соответствующий смарт-экран не был найден. Пожалуйста, убедитесь, что устройство включено и WLAN разрешена на Вашем телефоне».As shown in FIG. 18, an embodiment of the present application may further provide another graphical user interface. When tag 100 fails in screen projection, tag 100 displays a hint box to inform the user of the reasons for the failure, for example, “No matching smart screen was found. Please make sure the device is turned on and WLAN is enabled on your phone."

В некоторых других вариантах осуществления, когда экранная проекция терпит неудачу, оконечное устройство 100 может альтернативно отображать на экране другое поле с подсказкой, содержащее информацию подсказки. Информация подсказки используется, чтобы сообщить об отказе экранной проекции и предложить попытаться перезапустить смарт-экран или функцию экранной проекции и выполнить повторное соединение, и гарантирует, что функция WLAN мобильного телефона была разрешена. Поле с подсказкой может дополнительно содержать первую опцию. При приеме операции пользователя на первой опции оконечное устройство 100 может прекратить отображение поля подсказки или экрана.In some other embodiments, when the screen projection fails, tag 100 may alternatively display another hint box containing the hint information on the screen. The prompt information is used to report a screen projection failure and prompt you to try to restart the smart screen or screen projection function and reconnect, and ensure that the WLAN function of the mobile phone has been allowed. The hint field may additionally contain the first option. Upon receiving a user operation on the first option, terminal 100 may stop displaying the prompt box or screen.

Как показано в фиг. 19A, вариант осуществления настоящей заявки может дополнительно обеспечивать другой графический интерфейс пользователя. Когда оконечное устройство 100 находит новый список соседних приемлемых дисплеев, оконечное устройство 100 может вывести на экран текущее состояние, например, «Поиск приемлемых устройств. Просим убедиться, что беспроводная проекция разрешена на устройстве с большим экраном», и может дополнительно предоставить возможность, такую опцию, как «отмена» или «смотрите справку».As shown in FIG. 19A, an embodiment of the present application may further provide another graphical user interface. When tag 100 finds a new list of neighbor acceptable displays, tag 100 may display the current status, such as "Searching for Acceptable Devices. Please make sure wireless projection is allowed on a large screen device" and may optionally provide an option such as "cancel" or "see help".

Как показано на фиг. 19B, вариант осуществления настоящей заявки дополнительно обеспечивает графический интерфейс пользователя. Когда оконечное устройство 100 проецирует экран на дисплей 200, оконечное устройство 100 может вывести на экран первую информацию подсказки. Информация используется для подсказки пользователю то «Идет проецирование.... Если Вы должны спроецировать повторно, отключитесь и коснитесь снова». Интерфейс дополнительно содержит вторую информацию подсказки. Вторая информация подсказки используется для подсказки, что проводится подготовка экранной проекции.As shown in FIG. 19B, an embodiment of the present application further provides a graphical user interface. When the terminal device 100 projects a screen onto the display 200, the terminal device 100 may display the first prompt information. The information is used to prompt the user that "Projecting in progress.... If you must re-project, disconnect and tap again." The interface further comprises second prompt information. The second prompt information is used to prompt that screen projection preparation is in progress.

Как показано на фиг. 20, вариант осуществления настоящей заявки обеспечивает процедуру экранной проекции на основе P2P.As shown in FIG. 20, an embodiment of the present application provides a P2P-based screen projection procedure.

S2001: устройство 1 P2P вводит этап сканирования (scan).S2001: The P2P device 1 enters the scan step.

Как устройство 1 P2P, так и устройство 2 P2P, оба на этапе сканирования могут посылать кадр тестового запроса (probe request). Устройство 1 P2P и устройство 2 P2P могут посылать кадры тестового запроса во всех полосах, которые они поддерживают, чтобы искать все окружающие устройства или сетевую информацию. Когда устройство 1 P2P принимает ответ на кадр тестового запроса после передачи кадра тестового запроса по каналу, это означает, что устройство 1 P2P обнаружило приемное устройство и устройство 1 P2P может отобразить пользователю на экране дисплея информацию об устройстве, обнаруженную при сканировании.Both P2P device 1 and P2P device 2 can both send a probe request frame during the scan phase. P2P device 1 and P2P device 2 can send probe request frames in all the bands they support to search for all surrounding devices or network information. When the P2P device 1 receives a response to the probe request frame after transmitting the probe request frame over the channel, it means that the P2P device 1 has detected the receiving device and the P2P device 1 can display the device information found by scanning to the user on the display screen.

Следует также понимать, что после включения питания или после обнаружения, что пользователь щелкнул по приложению Miracast, устройство 2 P2P может альтернативно сначала ввести этап сканирования. В этом варианте осуществления настоящей заявки устройство 2 P2P, являющееся устройством с большим экраном, используется в качестве примера. Устройство 2 P2P после того, как заканчивается этап сканирования, может ввести этап прослушивания. Альтернативно, когда устройство 2 P2P является устройством с большим экраном, этап сканирования может быть пропущен и устройство 2 P2P 2 вводит этап прослушивания для непрерывного прослушивания после включения питания или после того, как пользователь щелкнул по соответствующему приложению P2P. Устройству с большим экраном не требуется проецировать свой собственный экран на другое устройство, а только другое устройство проецирует свой собственный экран на устройство с большим экраном. Поэтому устройству с большим экраном не требуется обнаруживать другие устройства и поэтому оно может не проводить этап сканирования, а проводит только этап прослушивания.It should also be understood that after power-on or after detecting that the user has clicked on the Miracast application, the P2P device 2 may alternatively enter the scanning step first. In this embodiment of the present application, the P2P device 2, which is a large screen device, is used as an example. The P2P device 2, after the scanning step ends, may enter the listening step. Alternatively, when the P2P device 2 is a large screen device, the scanning step can be skipped and the P2P device 2 enters a listening step for continuous listening after the power is turned on or after the user has clicked on the corresponding P2P application. The large screen device does not need to project its own screen onto the other device, only the other device projects its own screen onto the large screen device. Therefore, the large screen device does not need to detect other devices and therefore may not perform the scanning step but only the listening step.

Следует также понимать, что если на этапе сканирования устройство 1 P2P не обнаруживает приемное устройство или устройство 1 P2P находит приемное устройство, но не обнаруживает щелчок пользователя по приемному устройству, после окончания этапа сканирования устройство 1 P2P может ввести этап обнаружения. Этап обнаружения устройства 1 P2P может содержать этап прослушивания (listen) и этап поиска (search).It should also be understood that if the P2P device 1 does not detect the receiver during the scan step, or the P2P device 1 finds the receiver but does not detect a user click on the receiver, after the end of the scan step, the P2P device 1 may enter the discovery step. The P2P device discovery step 1 may comprise a listen step and a search step.

S2002: Устройство 1 P2P вводит этап прослушивания.S2002: The P2P device 1 enters the listening step.

На этапе прослушивания протокол P2P также определяет длительность пребывания устройства на этапе прослушивания и длительность составляет N раз по 100 TU, где N - случайное положительное целое число. Например, N может быть любым целым числом 1, 2 и 3. Причина, по которой N, являющееся случайным положительным целым числом, состоит в том, чтобы предотвратить вхождение устройства 1 P2P и устройства 2 P2P на этап прослушивания одновременно и вхождение на этап поиска одновременно после ожидания в течение одного и того же времени, в течение которого ни одна из сторон не может обработать кадр тестового запроса другой стороны.In the listening phase, the P2P protocol also determines how long the device stays in the listening phase and the duration is N times 100 TUs, where N is a random positive integer. For example, N can be any integer 1, 2, and 3. The reason why N being a random positive integer is to prevent P2P device 1 and P2P device 2 from entering the listening stage at the same time and entering the search stage at the same time. after waiting for the same amount of time, during which neither side can process the other side's probe request frame.

S2003: Устройство 1 P2P 1 вводит этап сканирования, чтобы выполнить сканирование устройства P2P и устройство 2 P2P 2 остается на этапе прослушивания.S2003: The P2P device 1 1 enters the scanning step to perform a scan of the P2P device, and the P2P device 2 2 remains in the listening step.

Например, как показано на фиг. 20, если устройство 1 P2P поддерживает только полосу 2.4, то после вхождения на этап сканирования устройство 1 P2P может отдельно послать кадр тестового запроса только по каналу 1, каналу 6 и каналу 11. Когда устройство 1 P2P передает кадр тестового запроса по каналу 6, поскольку устройство 2 P2P прослушивает канал 6, после того, как устройство 2 P2P принимает кадр тестового запроса по каналу 6, устройство 2 P2P может послать устройству 1 P2P кадр тестового ответа (probe response). После приема кадра тестового ответа устройство 1 P2P может сообщить пользователю информации об устройстве 2 P2P. Когда устройство 1 P2P обнаруживает, что пользователь щелкнул по информации об устройстве 2 P2P, устройство 1 P2P может соединиться с устройством 2 P2P.For example, as shown in FIG. 20, if the P2P device 1 only supports the 2.4 band, after entering the scan stage, the P2P device 1 can separately send a probe request frame on channel 1, channel 6, and channel 11 only. When the P2P device 1 transmits a probe request frame on channel 6, because P2P device 2 listens on channel 6, after P2P device 2 receives a probe request frame on channel 6, P2P device 2 can send a probe response frame to P2P device 1. After receiving the probe response frame, the P2P device 1 may inform the user of the P2P device 2 information. When the P2P device 1 detects that the user has clicked on the P2P device 2 information, the P2P device 1 can connect with the P2P device 2.

Следует понимать, что в этом варианте осуществления настоящей заявки кадр тестового запроса, посланный одной стороной, может быть принят другой стороной, только если два устройства находятся в одной и той же полосе. Дополнительно, кадр тестового запроса, посланный одной стороной, быть принят другой стороной, только когда два устройства находятся в одной и той же самой полосе и номера частотных каналов одинаковы.It should be understood that in this embodiment of the present application, a probe request frame sent by one side can only be received by the other side if the two devices are in the same band. Additionally, a probe request frame sent by one side can only be received by the other side when the two devices are in the same band and the frequency channel numbers are the same.

В некоторых вариантах осуществления для операции по установлению соединения P2P посредством экранной проекции одним касанием в этой заявке, ссылка может быть сделана на предшествующее соединение P2P.In some embodiments, for the one-touch screen projection P2P connection operation in this application, reference may be made to a previous P2P connection.

Как показано на фиг. 21, вариант осуществления этой заявки дополнительно обеспечивает оконечное устройство 100, содержащее модуль экранной проекции, модуль управления экранной проекцией одним касанием, модуль считывания NFC, модуль экранной проекции и базу данных. Конкретные функции описываются в таблице.As shown in FIG. 21, an embodiment of this application further provides a terminal device 100 comprising a screen projection module, a one-touch screen projection control module, an NFC reader module, a screen projection module, and a database. Specific functions are described in the table.

Название модуляModule name ОписаниеDescription Модуль прикладного уровняApplication layer module Приложение верхнего уровня, используемое для поддержки завершения действия всей функции приложения DLNA или MiracastTop-level application used to support the completion of the entire function of the DLNA or Miracast application Управление экранной проекцией одним касаниемScreen projection control with one touch Анализирует контент тега NFC
Обновляет тег NFC и базу данных больших экранов
Переключает (Miracast и DLNA) сценарий распознавания и определяет, поддерживается ли сценарий
Parses the content of an NFC tag
Updates NFC tag and large screen database
Switches (Miracast and DLNA) recognition script and determines if the script is supported
Модуль считывания NFC NFC Reader Считывает тег NFCReads NFC tag Модуль экранной проекцииScreen projection module Обеспечивает функции экранной проекции Miracast и DLNAProvides Miracast and DLNA screen projection functions База данных баз данныхdatabase database Сохраняет подробную информацию (MAC) большого экрана для автоматической экранной проекции, выполняемой не в первый раз, с уникальным значением тега NFC в качестве ключевого значенияStores the detailed information (MAC) of the large screen for non-first-time automatic screen projection with the unique value of the NFC tag as the key value

В некоторых вариантах осуществления предшествующие функциональные модули могут завершить функцию экранную проекции вместе с прикладным процессором, микросхемой NFC и памятью.In some embodiments, prior functional modules may complete the screen projection function along with the application processor, NFC chip, and memory.

Как показано на фиг. 22, вариант осуществления настоящей заявки дополнительно обеспечивает функцию «экранной проекция одним касанием», реализуемой заданный МАС-адрес.As shown in FIG. 22, an embodiment of the present application further provides a one-touch screen projection function implemented by a predetermined MAC address.

Тег NFC размещается внутри дистанционного управления 300, поставляемого вместе с дисплеем 200 (или «устройством с большим экраном»), и МАС-адрес и идентификационная информация устройства с большим экраном заранее записываются в теге. При касании дистанционного управления 300 оконечное устройство 100 может считывать контент тега и после идентификации устройства с большим экраном напрямую инициировать процедуру экранной проекции устройству со считанным МАС-адресом. Конкретные этапы этого приводятся ниже.The NFC tag is placed inside the remote control 300 supplied with the display 200 (or "large screen device"), and the MAC address and identification information of the large screen device are pre-recorded in the tag. By touching the remote control 300, the terminal device 100 can read the content of the tag and, after identifying the large screen device, directly initiate a screen projection procedure to the device with the read MAC address. The specific steps for this are given below.

Этап 2201: Оконечное устройство 100 касается тега NFC.Step 2201: Terminal 100 touches the NFC tag.

Тег NFC содержит МАС-адрес соответствующего дисплея. МАС-адрес может быть МАС-адресом соединения P2P и может формироваться произвольно.The NFC tag contains the MAC address of the corresponding display. The MAC address may be the MAC address of the P2P connection, and may be generated arbitrarily.

Этап 2202: Оконечное устройство 100 получает информацию о теге для тега.Step 2202: Terminal 100 obtains tag information for a tag.

Этап 2203: Инициировать основанное на информации о теге соединение, экранной проекции, основанной на назначенном канале или на МАС-адресе.Step 2203: Initiate a connection based on the tag information, a screen projection based on the assigned channel or MAC address.

Этап 2204: Принимают от дисплея 200 ответное сообщение.Step 2204: A response message is received from the display 200.

Этап 2205: Устанавливают соединение P2P и согласуют протокол Miracast.Step 2205: A P2P connection is established and the Miracast protocol is negotiated.

Как показано на фиг. 23, вариант осуществления настоящей заявки дополнительно обеспечивает функцию «экранной проекция одним касанием», реализуемую с использованием заданного МАС-адреса.As shown in FIG. 23, an embodiment of the present application further provides a one-touch screen projection function implemented using a given MAC address.

Тег NFC размещается внутри дистанционного управления устройства с большим экраном и STA MAC и идентификационная информация устройства с большим экраном предварительно записываются в теге. После того, как мобильный телефон касается дистанционного управления, считывает контент тега и идентифицирует устройство с большим экраном, он напрямую инициирует процедуру экранной проекции устройству со считываемым МАС-адресом. Конкретный способ является следующим.The NFC tag is placed inside the remote control of the large screen device and the STA MAC, and the identification information of the large screen device is pre-recorded in the tag. After the mobile phone touches the remote control, reads the content of the tag, and identifies the large screen device, it directly initiates the screen projection procedure to the device with the read MAC address. The specific method is as follows.

Этап 2301: Оконечное устройство 100 касается тега NFC.Step 2301: Terminal 100 touches the NFC tag.

Тег NFC содержит МАС-адрес соответствующего дисплея. МАС-адрес может быть МАС-адресом соединения P2P и может формироваться произвольным образом.The NFC tag contains the MAC address of the corresponding display. The MAC address may be the MAC address of the P2P connection and may be generated arbitrarily.

Этап 2302: Оконечное устройство 100 принимает информацию о теге для тега.Step 2302: Terminal 100 receives tag information for a tag.

Этап 2303: Оконечное устройство 100 инициирует обнаружение возможностей DLNA.Step 2303: Terminal 100 initiates DLNA capability discovery.

Конкретно, оконечное устройство 100 определяет, что дисплей 200 является дисплеем поддерживаемого типа, основываясь на информации о теге. Кроме того, оконечное устройство 100 в текущий момент выполняет приложение воспроизведения видео и приложение воспроизведения видео обладает возможностями DLNA. Таким образом, приоритетное приложение DLNA инициирует процедуру DLNA.Specifically, the terminal device 100 determines that the display 200 is a supported display type based on the tag information. In addition, the terminal device 100 is currently running a video playback application, and the video playback application has DLNA capabilities. Thus, the DLNA priority application initiates the DLNA procedure.

Этап 2304: Дисплей 200 посылает ответ о возможностях DLNA.Step 2304: The display 200 sends a DLNA capability response.

Этап 2305: Оконечное устройство 100 определяет, что дисплей 200 является записанным устройством и инициирует процедуру DLNA.Step 2305: Terminal 100 determines that display 200 is a recorded device and initiates a DLNA procedure.

Оконечное устройство 100 может определить дисплей 200, основываясь на МАС-адресе STA или на теге NFC. Оконечное устройство 100 отправляет адрес источника видеоконтента дисплею 200 и дисплей 200 получает видеоконтент из сети, основываясь на адресе источника, чтобы реализовать экранную проекцию.The terminal device 100 may determine the display 200 based on the MAC address of the STA or on the NFC tag. The terminal device 100 sends the source address of the video content to the display 200, and the display 200 receives video content from the network based on the source address to realize screen projection.

Вариант осуществления настоящей заявки дополнительно обеспечивает дистанционное управление с помощью функция NFC. Дистанционное управление содержит контроллер и память. Память хранит команду. Когда команда исполняется, дистанционное управление может выполнить способ в вариантах осуществления настоящей заявки.An embodiment of the present application further provides remote control using the NFC function. The remote control contains a controller and a memory. The memory stores the command. When the command is executed, the remote control may execute the method in the embodiments of the present application.

В некоторых вариантах осуществления предшествующий способ может альтернативно выполняться микросхемой NFC. В некоторых вариантах осуществления дистанционное управление хранит информацию связанного с ним дисплея.In some embodiments, the foregoing method may alternatively be performed by an NFC chip. In some embodiments, the implementation of the remote control stores information associated with its display.

Вариант осуществления настоящей заявки дополнительно содержит дисплей. Дисплей содержит память, дисплей и контроллер. Память хранит команду. Когда команда исполняется, дистанционное управление может выполнять способ в вариантах осуществления настоящей заявки.An embodiment of the present application further comprises a display. The display contains a memory, a display, and a controller. The memory stores the command. When the command is executed, the remote control may perform the method in the embodiments of the present application.

Дисплей может дополнительно содержать микросхему Bluetooth или микросхему Wi-Fi.The display may further comprise a Bluetooth chip or a Wi-Fi chip.

Следует понимать, что для краткости описания вариантов осуществления, приведенные здесь, сосредотачиваются на том, чтобы подчеркивать разницу между вариантами осуществления. Поэтому, если в описании явно не заявляется или не следует из контекста, варианты осуществления могут здесь ссылаться друг на друга.It should be understood that for brevity, the descriptions of the embodiments provided herein focus on emphasizing the difference between the embodiments. Therefore, unless the description explicitly states or follows from the context, the embodiments may refer to each other here.

Специалист в данной области техники может быть осведомлен, что этапы и блоки способа, описанные в вариантах осуществления, раскрытых в настоящем описании, могут быть реализованы электронными аппаратными средствами, программным обеспечением или их сочетанием. Чтобы ясно описать возможность взаимозаменяемости между аппаратными средствами и программным обеспечением, вышесказанное обычно описывало этапы и сочетания вариантов осуществления посредством функции. Выполняются ли функции аппаратными средствами или программным обеспечением, зависит от конкретных заявок и конструктивных ограничений технических решений. Специалист в данной области техники может использовать различные способы, чтобы реализовать описанные функции для каждой конкретной заявки, но нельзя считать, что варианты осуществления выходят за пределы объема защиты настоящей заявки.One skilled in the art may be aware that the steps and blocks of the method described in the embodiments disclosed herein may be implemented in electronic hardware, software, or a combination thereof. In order to clearly describe the possibility of interchangeability between hardware and software, the foregoing has generally described steps and combinations of embodiments by function. Whether the functions are performed by hardware or software depends on specific applications and design constraints of the technical solutions. A person skilled in the art can use various methods to implement the described functions for each particular application, but the embodiments should not be considered to be outside the protection scope of the present application.

Специалист в данной области техники может ясно понимать, что для простоты и краткости описания для определенных рабочих процессов системы, устройства и блока, описанных выше, ссылка может быть сделана на соответствующие процессы в предшествующих вариантах осуществления способа. Подробности здесь повторно не описываются.The person skilled in the art can clearly understand that for simplicity and brevity of description for certain operating processes of the system, device and unit described above, reference can be made to the corresponding processes in the previous embodiments of the method. The details are not re-described here.

В нескольких вариантах осуществления, представленных в этой заявке, следует понимать, что раскрытые система, устройство и способ могут быть реализованы другими способами. Например, описанные варианты осуществления устройства являются просто примерами. Например, деление на блоки является просто делением по логическим функциям и при фактической реализации может быть другим делением. Например, множество блоков или компонентов может объединяться или интегрироваться в другую систему или некоторые признаки могут игнорироваться или не могут быть реализованы. Кроме того, отображаемые на экране или обсуждаемые взаимные связи или прямые соединения или связные соединения могут быть реализованы, используя некоторые интерфейсы. Косвенные связи или связные соединения между устройствами или блоками могут быть реализованы в электрической, механической или других формах.In several embodiments presented in this application, it should be understood that the disclosed system, device and method can be implemented in other ways. For example, the device embodiments described are merely examples. For example, division into blocks is simply a division into logical functions and, in actual implementation, may be a different division. For example, a plurality of blocks or components may be combined or integrated into another system, or some features may be ignored or may not be implemented. In addition, screened or discussed interconnections or direct connections or bonded connections can be implemented using some interfaces. Indirect links or interconnected connections between devices or blocks can be implemented in electrical, mechanical or other forms.

Блоки, описанные как отдельные части, могут быть или не быть физически отдельными и части, отображаемые как блоки, могут быть или не быть физическими блоками и могут быть расположены в одном месте или могут быть распределены по множеству сетевых элементов. Некоторые или все блоки могут выбираться в зависимости от реальных требований, чтобы достигнуть целей решений в вариантах осуществления в настоящей заявке.Blocks described as separate parts may or may not be physically separate, and parts displayed as blocks may or may not be physical blocks and may be located in the same location or may be distributed across multiple network elements. Some or all of the blocks may be selected depending on actual requirements in order to achieve the goals of the decisions in the embodiments in this application.

Кроме того, функциональные блоки в вариантах осуществления настоящей заявки могут интегрироваться в один процессор или каждый из блоков может существовать физически в одиночку или два или более блоков могут быть интегрированы в один блок. Интегрированный блок может быть реализован в форме аппаратных средств или может быть реализован в форме функционального блока программного обеспечения.In addition, the functional blocks in the embodiments of the present application may be integrated into a single processor, or each of the blocks may exist physically alone, or two or more blocks may be integrated into one block. The integrated block may be implemented in the form of hardware or may be implemented in the form of a software functional block.

Когда интегрированный блок реализуется в форме функционального блока программного обеспечения и продается или используется в качестве независимого продукта, интегрированный блок может быть сохранен на считываемом компьютером носителе. Основываясь на таком понимании, технические решения настоящей заявки, существенно или частично способствующие развитию предшествующего уровня техники, или все или некоторые из технических решений могут быть реализованы в форме программного продукта. Компьютерный программный продукт хранится на носителе и содержит несколько команд для их передачи компьютерному устройству (которое может быть персональным компьютером, сервером, сетевым устройством и т.п.), чтобы выполнять все или некоторые из этапов способов, описанных в вариантах осуществления настоящей заявки. Вышеупомянутый носитель является любым носителем, который может хранить управляющую программу, таким как карта флэш-памяти с USB-интерфейсом, съемный жесткий диск, постоянное запоминающее устройство (read-only memory, ROM), оперативная память (random access memory, RAM), магнитный диск или оптический диск.When an integrated block is implemented in the form of a software functional block and sold or used as a standalone product, the integrated block may be stored on a computer-readable medium. Based on this understanding, the technical solutions of the present application, substantially or partially contributing to the development of the prior art, or all or some of the technical solutions may be implemented in the form of a software product. The computer program product is stored on a storage medium and contains several instructions for transmitting them to a computing device (which may be a personal computer, a server, a network device, etc.) to perform all or some of the steps of the methods described in the embodiments of the present application. The above media is any media that can store a control program, such as a USB flash memory card, removable hard disk, read-only memory (ROM), random access memory (RAM), magnetic disc or optical disc.

Приведенные выше описания являются просто вариантами осуществления настоящей заявки, но они не предназначены ограничивать объем защиты настоящей заявки. Любой вариант или замена, с готовностью предложенные специалистом в данной области техники, раскрытые в настоящей заявке, должны находиться в пределах объема защиты настоящей заявки. Поэтому объем защиты настоящей заявки должен быть подчинен объему защиты формулы изобретения.The above descriptions are merely embodiments of the present application, but are not intended to limit the protection scope of the present application. Any variation or replacement readily suggested by a person skilled in the art disclosed in this application should be within the protection scope of this application. Therefore, the scope of protection of the present application should be subordinated to the scope of protection of the claims.

Claims (46)

1. Способ экранной проекции, реализуемый в системе экранной проекции, содержащий дистанционное управление, оконечное устройство и дисплей, содержащий этапы, на которых:1. A screen projection method implemented in a screen projection system, comprising a remote control, a terminal device and a display, comprising the steps of: получают, с помощью оконечного устройства, при касании оконечным устройством тега NFC дистанционного управления, контент тега NFC, причем контент тега NFC включает в себя идентификационный код тега NFC;obtaining, by the terminal device, when the terminal device touches the remote control NFC tag, NFC tag content, the NFC tag content including an NFC tag identification code; отображают, с помощью оконечного устройства, когда оконечное устройство не имеет записи тега, первое всплывающее окно, причем запись тега включает в себя идентификационный код, первое всплывающее окно включает в себя список дисплеев, содержащий первую опцию, при этом первая опция включает в себя название устройства для дисплея;display, by the terminal device, when the terminal device does not have a tag entry, the first pop-up window, and the tag entry includes an identification code, the first pop-up window includes a list of displays containing the first option, the first option includes the name of the device for display; принимают, с помощью оконечного устройства, первую операцию пользователя на первой опции;receiving, by the terminal, a first user operation on the first option; устанавливают, с помощью оконечного устройства, в ответ на первую операцию, первое соединение экранной проекции с дисплеем;establish, using the terminal device, in response to the first operation, the first connection of the screen projection with the display; сохраняют, с помощью оконечного устройства, соответствующую взаимосвязь между кодом идентификации и информацией о дисплее;storing, by the terminal device, an appropriate relationship between the identification code and the display information; устанавливают, с помощью оконечного устройства, когда оконечное устройство имеет запись тега, второе соединение экранной проекции с дисплеем, соответствующим коду идентификации, в соответствии с идентификационным кодом.setting, by the terminal device, when the terminal device has a tag record, a second screen projection connection with the display corresponding to the identification code, in accordance with the identification code. 2. Оконечное устройство, содержащее2. Terminal device containing один или более дисплеев,one or more displays одно или более устройств хранения информации, иone or more storage devices, and один или более процессоров; при этом одно или более устройств хранения информации хранит одну или более программ, вызывающих, при исполнении, выполнение оконечным устройством операций, на которых:one or more processors; wherein one or more information storage devices stores one or more programs that, when executed, cause the terminal device to perform operations on which: получают, при касании оконечным устройством тега NFC дистанционного управления, контент первого тега NFC, причем контент первого тега NFC включает в себя идентификационный код первого тега NFC;obtaining, when the terminal device touches the remote control NFC tag, the content of the first NFC tag, the content of the first NFC tag including an identification code of the first NFC tag; отображают, когда оконечное устройство не имеет записи тега, первое всплывающее окно, причем запись тега включает в себя идентификационный код первого тега NFC, причем первое всплывающее окно включает в себя список дисплеев, содержащий первую опцию, при этом первая опция включает в себя название устройства для дисплея;displaying, when the terminal device does not have a tag entry, a first popup, the tag entry including an identification code of the first NFC tag, the first popup including a list of displays containing a first option, the first option including a device name for display; принимают первую операцию пользователя на первой опции;receiving a first user operation on the first option; устанавливают, в ответ на первую операцию, первое соединение экранной проекции с первым дисплеем;establish, in response to the first operation, the first connection of the screen projection with the first display; сохраняют соответствующую взаимосвязь между кодом идентификации первого тега NFC и информацией о первом дисплее;maintaining an appropriate relationship between the identification code of the first NFC tag and the first display information; устанавливают, когда оконечное устройство имеет первую запись тега, второе соединение экранной проекции с соответствующим первым дисплеем, в соответствии с идентификационным кодом первого тега NFC.set, when the terminal device has the first tag entry, the second screen projection connection with the corresponding first display, in accordance with the identification code of the first NFC tag. 3. Оконечное устройство по п. 2, в котором первая запись тега дополнительно содержит соответствие.3. The terminal according to claim 2, wherein the first tag entry further contains a match. 4. Оконечное устройство по п. 2, в котором контент первого тега NFC дополнительно содержит тип первого устройства; причем4. The terminal device according to claim. 2, in which the content of the first NFC tag further contains the type of the first device; and оконечное устройство дополнительно выполнено с возможностью, после получения контента первого тега NFC:the terminal device is further configured to, after receiving the content of the first NFC tag: определения, в соответствии с типом первого устройства, что первый дисплей является дисплеем, соответствующим типу первого устройства.determining, according to the type of the first device, that the first display is a display corresponding to the type of the first device. 5. Оконечное устройство по п. 4, характеризующееся тем, что дополнительно выполнено с возможностью, после получения типа первого устройства и до отображения первого всплывающего окна: сканирования первого дисплея.5. The terminal device according to claim 4, characterized in that it is additionally configured, after receiving the type of the first device and before displaying the first pop-up window: scanning the first display. 6. Оконечное устройство по п. 4, в котором первый список дисплеев содержит только дисплеи, соответствующие типу первого устройства.6. The terminal device according to claim 4, wherein the first list of displays contains only displays corresponding to the type of the first device. 7. Оконечное устройство по п. 2, характеризующееся тем, что7. The terminal device according to claim 2, characterized in that после установки оконечным устройством соединения первой экранной проекции с первым устройством отображения дополнительно выполнено с возможностью:after the terminal device establishes the connection of the first screen projection with the first display device, it is additionally configured to: осуществления синхронного отображения первого интерфейса оконечным устройством и первым дисплеем; аperforming synchronous display of the first interface by the terminal device and the first display; A после установки оконечным устройством соединения второй экранной проекции с первым устройством отображения дополнительно выполнено с возможностью:after the terminal device establishes connection of the second screen projection with the first display device, it is additionally configured to: осуществления синхронного отображения второго интерфейса оконечным устройством и первым дисплеем.performing synchronous display of the second interface by the terminal device and the first display. 8. Оконечное устройство по п. 2, характеризующееся тем, что оконечное устройство выполнено с возможностью сохранения соответствия после получения первой пользовательской операции на первой опции.8. Terminal device according to claim. 2, characterized in that the terminal device is configured to maintain compliance after receiving the first user operation on the first option. 9. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью:9. The terminal device according to claim 2, characterized in that it is configured to: получения, при касании оконечным устройством второго тега NFC второго дистанционного управления, контента второго тега NFC, причем контент второго тега NFC включает в себя идентификационный код второго тега NFC;receiving, when the terminal device touches the second NFC tag of the second remote control, the content of the second NFC tag, and the content of the second NFC tag includes an identification code of the second NFC tag; отображения, когда оконечное устройство не имеет второй записи тега, третьего всплывающего окна, причем вторая запись тега включает в себя идентификационный код второго тега NFC, причем третье всплывающее окно включает в себя список дисплеев, содержащий вторую опцию, при этом вторая опция включает в себя название устройства для второго дисплея;display, when the terminal device does not have a second tag entry, a third popup, the second tag entry includes an identification code of the second NFC tag, the third popup includes a list of displays containing the second option, the second option includes the title devices for the second display; приема третьей операции пользователя на второй опции;receiving a third user operation on the second option; установки, в ответ на третью операцию, третьего соединения экранной проекции со вторым дисплеем;setting, in response to the third operation, the third connection of the screen projection with the second display; сохранения соответствия между идентификационным кодом второго тега NFC и информацией о втором дисплее;maintaining a correspondence between the identification code of the second NFC tag and information about the second display; установки, когда оконечное устройство имеет вторую запись тега, четвертого соединения экранной проекции с соответствующим дисплеем в соответствии с идентификационным кодом второго тега NFC.setting, when the terminal device has the second tag record, the fourth screen projection connection with the corresponding display according to the identification code of the second NFC tag. 10. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью, когда функция Bluetooth и функция WLAN оконечного устройства отключены: включения функции Bluetooth и функции WLAN.10. The terminal device according to claim 2, characterized in that it is configured, when the Bluetooth function and the WLAN function of the terminal device are disabled: to turn on the Bluetooth function and the WLAN function. 11. Оконечное устройство по п. 2, в котором первый список дисплеев получают посредством сканирования в соответствии с технологией Bluetooth или технологией Wi-Fi.11. The terminal device according to claim 2, wherein the first list of displays is obtained by scanning in accordance with Bluetooth technology or Wi-Fi technology. 12. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью, при установке первого соединения экранной проекции или второго соединения экранной проекции с первым дисплеем: обеспечения функции отмены.12. The terminal device according to claim 2, characterized in that it is configured, when establishing the first screen projection connection or the second screen projection connection with the first display: to provide a cancel function. 13. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью, после установки первого соединения экранной проекции или второго соединения экранной проекции с первым дисплеем:13. The terminal device according to claim 2, characterized in that, after establishing the first screen projection connection or the second screen projection connection with the first display: приема третьей операции пользователя для открытия первого приложения;receiving a third user operation to open the first application; синхронного отображения, в ответ на третью пользовательскую операцию, оконечным устройством и первым дисплеем, третьего интерфейса первого приложения.synchronously displaying, in response to the third user operation, the terminal device and the first display, the third interface of the first application. 14. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью, после прерывания экранной проекции между оконечным устройством и первым дисплеем:14. The terminal device according to claim 2, characterized in that it is made with the possibility, after interruption of the screen projection between the terminal device and the first display: отображения пятого всплывающего окна, причем пятое всплывающее окно применяется для предупреждения пользователя о том, что соединение прерывается.displaying a fifth popup window, the fifth popup window being used to alert the user that the connection is being terminated. 15. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью, при касании оконечным устройством первого тега NFC дистанционного управления, отображения информации подсказки того, что экран будет проецирован.15. The terminal device according to claim 2, characterized in that, when the terminal device touches the first remote control NFC tag, display hint information that the screen will be projected. 16. Оконечное устройство по п. 2, характеризующееся тем, что выполнено с возможностью оповещения, при касании оконечным устройством первого тега NFC дистанционного управления, звуковым сигналом или вибрацией.16. The terminal device according to claim 2, characterized in that it is configured to alert when the terminal device touches the first remote control NFC tag, a sound signal or vibration.
RU2022124286A 2020-08-04 Terminal device, method and system for screen projection with one touch using remote control RU2795130C2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910735941.2 2019-08-09
CN202010381287.2 2020-05-08

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
RU2022105688A Division RU2780224C1 (en) 2019-08-09 2020-08-04 Terminal device, method and system for realizing screen projection with one touch using remote control

Publications (2)

Publication Number Publication Date
RU2022124286A RU2022124286A (en) 2022-10-12
RU2795130C2 true RU2795130C2 (en) 2023-04-28

Family

ID=

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU220094U1 (en) * 2023-07-11 2023-08-24 Общество с ограниченной ответственностью "Экстра Синема" Projector

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140141721A1 (en) * 2012-11-21 2014-05-22 Lg Electronics Inc. Method for controlling system including electronic tag, mobile device, and display device, and mobile device and display device of the same
CN104301012A (en) * 2013-07-15 2015-01-21 深圳市同洲电子股份有限公司 Interaction method, terminal and system realized by NFC technique
US20150147961A1 (en) * 2013-07-19 2015-05-28 Google Inc. Content Retrieval via Remote Control
CN105187871A (en) * 2015-09-23 2015-12-23 康佳集团股份有限公司 NFC-based data transmission method for mobile terminal and television terminal and system thereof
US20160080708A1 (en) * 2013-04-26 2016-03-17 Hitachi Maxell, Ltd. Projection-type video display device
US20160182613A1 (en) * 2014-12-18 2016-06-23 Google Inc. Methods, systems, and media for controlling information used to present content on a public display device
CN106502604A (en) * 2016-09-28 2017-03-15 北京小米移动软件有限公司 Throw screen changing method and device
RU2619889C2 (en) * 2011-05-11 2017-05-19 Самсунг Электроникс Ко., Лтд. Method and device for using data shared between various network devices
RU2625952C2 (en) * 2013-03-15 2017-07-19 Интел Корпорейшн Mobile computing device technology, and system and methods of using it

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2619889C2 (en) * 2011-05-11 2017-05-19 Самсунг Электроникс Ко., Лтд. Method and device for using data shared between various network devices
US20140141721A1 (en) * 2012-11-21 2014-05-22 Lg Electronics Inc. Method for controlling system including electronic tag, mobile device, and display device, and mobile device and display device of the same
RU2625952C2 (en) * 2013-03-15 2017-07-19 Интел Корпорейшн Mobile computing device technology, and system and methods of using it
US20160080708A1 (en) * 2013-04-26 2016-03-17 Hitachi Maxell, Ltd. Projection-type video display device
CN104301012A (en) * 2013-07-15 2015-01-21 深圳市同洲电子股份有限公司 Interaction method, terminal and system realized by NFC technique
US20150147961A1 (en) * 2013-07-19 2015-05-28 Google Inc. Content Retrieval via Remote Control
US20160182613A1 (en) * 2014-12-18 2016-06-23 Google Inc. Methods, systems, and media for controlling information used to present content on a public display device
CN105187871A (en) * 2015-09-23 2015-12-23 康佳集团股份有限公司 NFC-based data transmission method for mobile terminal and television terminal and system thereof
CN106502604A (en) * 2016-09-28 2017-03-15 北京小米移动软件有限公司 Throw screen changing method and device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU220094U1 (en) * 2023-07-11 2023-08-24 Общество с ограниченной ответственностью "Экстра Синема" Projector

Similar Documents

Publication Publication Date Title
US11800172B2 (en) Terminal device, method and system for realizing one-touch screen projection through remote control
US11825539B2 (en) Bluetooth connection method and electronic device
WO2020192546A1 (en) Bluetooth transmission power control method and terminal device
US20220039179A1 (en) Bluetooth Connection Method and Device
US20220398057A1 (en) Screen-On Control Method and Electronic Device
US20220303180A1 (en) Network Configuration Information Configuration Method and Device
US20220394794A1 (en) Bluetooth connection method and related apparatus
EP4024907A1 (en) Data processing method, bluetooth module, electronic device, and readable storage medium
WO2021043219A1 (en) Bluetooth reconnection method and related apparatus
US20230129780A1 (en) Wi-Fi Aware Link Establishment Method and System, Electronic Device, and Storage Medium
EP3993460B1 (en) Method, electronic device and system for realizing functions through nfc tag
WO2021175268A1 (en) Method and apparatus for sharing mobile network hotspot, and hotspot sharing device
US20220179827A1 (en) File Sharing Method of Mobile Terminal and Device
EP4207836A1 (en) Communication method and system for bluetooth pairing of multiple devices
US20230125956A1 (en) Wireless Communication System and Method
CN114339709A (en) Wireless communication method and terminal device
EP4250075A1 (en) Content sharing method, electronic device, and storage medium
EP4210363A1 (en) Communicational connection establishment method and system, electronic device, and storage medium
EP3852395B1 (en) File transmission method and electronic device
WO2021027623A1 (en) Device capability discovery method and p2p device
WO2022068670A1 (en) Method for touching to establish wireless connection between devices, electronic device, and chip
RU2795130C2 (en) Terminal device, method and system for screen projection with one touch using remote control
RU2780224C1 (en) Terminal device, method and system for realizing screen projection with one touch using remote control
WO2024001735A1 (en) Network connection method, electronic device, and storage medium
CN116981108B (en) Wireless screen-throwing connection method, mobile terminal and computer readable storage medium