WO2023184161A1 - 一种显示设备的人机交互方法及系统 - Google Patents

一种显示设备的人机交互方法及系统 Download PDF

Info

Publication number
WO2023184161A1
WO2023184161A1 PCT/CN2022/083755 CN2022083755W WO2023184161A1 WO 2023184161 A1 WO2023184161 A1 WO 2023184161A1 CN 2022083755 W CN2022083755 W CN 2022083755W WO 2023184161 A1 WO2023184161 A1 WO 2023184161A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
video stream
processing module
osd
data processing
Prior art date
Application number
PCT/CN2022/083755
Other languages
English (en)
French (fr)
Inventor
刘宪涛
王永辉
孟晨
付波
胡忠
庞笑天
刘佳荣
辛佳佳
孙国胜
Original Assignee
京东方科技集团股份有限公司
北京京东方光电科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 京东方科技集团股份有限公司, 北京京东方光电科技有限公司 filed Critical 京东方科技集团股份有限公司
Priority to CN202280000597.2A priority Critical patent/CN117223279A/zh
Priority to PCT/CN2022/083755 priority patent/WO2023184161A1/zh
Publication of WO2023184161A1 publication Critical patent/WO2023184161A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information

Definitions

  • the present disclosure relates to the technical field of human-computer interaction, and in particular to a human-computer interaction method and system for a display device.
  • transparent display devices have been trial-run in various traffic scenes such as subways.
  • transparent display windows are used to replace the original
  • rich video streaming information is displayed through transparent display windows, creating a smart city with a more technological sense.
  • the present disclosure provides a human-computer interaction method and system for a display device, which is used to provide an interaction mode.
  • the main control module receives the user's interactive instructions and generates OSD data, and the data processing module processes the received video stream and OSD data. Displayed after superimposition.
  • embodiments of the present disclosure provide a human-computer interaction system for a display device, including a data source generation module, a main control module and a data processing module:
  • the data source generation module is used to generate a video stream and send the video stream to the data processing module;
  • the main control module is used to receive interactive instructions sent by the user, generate OSD data according to the interactive instructions, and transmit the OSD data to the data processing module;
  • the data processing module is used to superimpose the received video stream and the OSD data, and output the superimposed video stream to the display end for display in response to the interactive instructions sent by the user.
  • the main control module receives interactive instructions sent by the user, including:
  • the main control module receives interactive instructions sent by the user through keystrokes; and/or,
  • the main control module receives interactive instructions sent by the user through the remote terminal.
  • the main control module receives interactive instructions sent by the user through the remote terminal, including:
  • the main control module receives interactive instructions sent by the user through the remote terminal through the data source generation module, wherein the remote terminal and the data source generation module establish a communication connection through a wireless network.
  • the main control module and the data source generation module establish a communication connection based on an interface standard for serial data communication.
  • the data processing module performs overlay processing on the received video stream and OSD data, including:
  • the data processing module will superimpose the received video stream and the second received OSD data.
  • a data storage module is also included:
  • the data storage module is used to double the frame rate of the video stream generated by the data source generation module by storing one frame and reading two frames of the video stream, and send the video stream with the doubled frame rate to the Described data processing module;
  • the data processing module performs overlay processing on the received video stream with doubled frame rate and the OSD data.
  • the data processing module superimposes the received video stream with the frame rate doubled and the OSD data, including:
  • the data processing module determines the read bit width of the OSD data according to the bit width of the video frame in the video stream after the frame rate is doubled;
  • the data processing module reads the OSD data according to the read bit width, and performs overlay processing in order on the OSD data read each time and the video frames in the video stream after the frame rate is doubled.
  • the data processing module performs overlay processing on the received video stream and OSD data, including:
  • the data processing module uses the video frame received after receiving the OSD data as the starting frame of the overlay process
  • the display duration of OSD data determine the number of frames of the video stream for overlay processing
  • the video stream and the OSD data are superimposed according to the starting frame and the frame number.
  • the main control module is used to transmit the OSD data to the data processing module through an SPI (Serial Peripheral Interface) interface.
  • SPI Serial Peripheral Interface
  • the data processing module performs overlay processing on the received video stream and OSD data, including:
  • the data processing module verifies the received OSD data, and after determining that the verification is successful, superimposes the received video stream and the OSD data.
  • the data processing module outputs the superimposed video stream to the display end for display, including:
  • the data processing module converts the format of the superimposed video stream according to a predefined format
  • the main control module transmits the OSD data to the data processing module, including:
  • the data processing module After the data processing module determines that the received video stream is displayed on the display end according to the preset requirements, it sends an enable signal to the main control module to instruct the main control module to start executing the OSD function;
  • the main control module After receiving the enable signal, the main control module transmits the OSD data to the data processing module.
  • the interactive instructions include update instructions
  • the main control module is also used to receive update instructions sent by users, generate parameters according to the update instructions, and transmit the parameters to the data processing module;
  • the data processing module is used to control the update of data corresponding to the parameters according to the received parameters.
  • the parameters include at least one of OSD parameters and video stream parameters;
  • the OSD parameters include at least one of display duration, display position, and display transparency;
  • the video stream parameters include At least one of image brightness, contrast, saturation, and sharpness.
  • an embodiment of the present disclosure provides a human-computer interaction method for a display device, including:
  • the received video stream and the OSD data are superimposed through the data processing module, and the superimposed video stream is output to the display end for display in response to the interactive instructions sent by the user.
  • receiving interactive instructions sent by the user through the main control module includes:
  • receiving interactive instructions sent by the user through the remote terminal through the main control module includes:
  • the interactive instructions sent by the user through the remote terminal are received, and the interactive instructions are sent to the main control module, wherein the remote terminal and the data source generation module establish communication through a wireless network connected.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the data processing module superimposes the received video stream and the second received OSD data.
  • it also includes:
  • the data storage module is used to double the frame rate of the video stream generated by the data source generation module, and the video stream with the doubled frame rate is sent to the data processing module. , to instruct the data processing module to superimpose the received video stream with the frame rate doubled and the OSD data.
  • the received video stream with doubled frame rate and the OSD data are superimposed through a data processing module, including:
  • the data processing module determines the read bit width of the OSD data according to the bit width of the video frame in the video stream after the frame rate is doubled;
  • the OSD data is read according to the read bit width, and the OSD data read each time and the video frames in the video stream after the frame rate is doubled are sequentially superimposed through the data processing module.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the video frame received after receiving the OSD data is used as the starting frame of the superimposition process
  • the display duration of OSD data determine the number of frames of the video stream for overlay processing
  • the video stream and the OSD data are superposed through the data processing module.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the received OSD data is verified through the data processing module. After it is determined that the verification is successful, the received video stream and the OSD data are superimposed.
  • the data processing module outputs the superimposed video stream to the display terminal for display, including:
  • the data processing module performs format conversion on the superimposed video stream according to a predefined format
  • transmitting the OSD data to the data processing module through the main control module includes:
  • the data processing module is controlled to send an enable signal to the main control module to indicate that the main control module has received the enable signal.
  • the OSD data is transmitted to the data processing module.
  • the interactive instructions include update instructions, and also include:
  • the data processing module controls the updating of data corresponding to the parameters according to the received parameters.
  • the parameters include at least one of OSD parameters and video stream parameters;
  • the OSD parameters include at least one of display duration, display position, and display transparency;
  • the video stream parameters include At least one of image brightness, contrast, saturation, and sharpness.
  • embodiments of the present disclosure also provide a computer storage medium on which a computer program is stored, and when the program is executed by a processor, it is used to implement the steps of the method described in the second aspect.
  • Figure 1 is an architectural schematic diagram of a current OSD menu overlay solution provided by an embodiment of the present disclosure
  • Figure 2 is a schematic diagram of a human-computer interaction system of a display device provided by an embodiment of the present disclosure
  • Figure 3 is an architectural schematic diagram of a data processing module performing overlay processing provided by an embodiment of the present disclosure
  • Figure 4 is an architectural schematic diagram of an OSD overlay solution provided by an embodiment of the present disclosure.
  • Figure 5A is a functional illustration of OSD data overlay provided by an embodiment of the present disclosure.
  • Figure 5B is a functional illustration of OSD data overlay provided by an embodiment of the present disclosure.
  • Figure 6 is an implementation flow chart of OSD data overlay of a human-computer interaction system based on a display device provided by an embodiment of the present disclosure
  • FIG. 7 is an implementation flow chart of a human-computer interaction method for a display device provided by an embodiment of the present disclosure.
  • the term "and/or” describes the association relationship of associated objects, indicating that there can be three relationships, for example, A and/or B, which can mean: A exists alone, A and B exist simultaneously, and B exists alone. these three situations.
  • the character "/” generally indicates that the related objects are in an "or” relationship.
  • Embodiment 1 With the continuous advancement of science and technology, more and more visualization devices are added to daily transportation. At present, transparent display devices have been trial-run in various traffic scenes such as subways. For example, using transparent displays The dazzling windows replace the original car windows and display rich video streaming information through transparent display dazzling windows, creating a smart city with a more technological sense.
  • OSD on-screen display, on-screen menu adjustment method
  • OSD refers to a rectangular menu with information about various adjustment items of the display that pops up on the screen after pressing the main menu button. Through this menu, various working indicators of the display can be adjusted, including color, mode, and geometry. Wait for adjustments. Applying OSD to the transparent display window can realize human-computer interaction through the OSD menu and control the display effect of the transparent display window.
  • the transparent display device has a closed shell outside and is installed on the car body, when controlling the display effect of the transparent display device, it is inconvenient to use buttons or infrared remote control to control the OSD menu. If the button method is used, It is impossible to avoid being operated by non-related personnel to control the display effect, and there are many uncontrollable factors. If infrared remote control is used, due to the closed nature of the transparent display device, it is difficult to ensure the timeliness, effectiveness and accuracy of the infrared remote control, and it cannot be very good. Therefore, the current method of adjusting the display effect of transparent display devices through OSD menus gives customers a poor visual experience and also brings certain difficulties to the maintenance of transparent display devices.
  • an embodiment of the present disclosure provides an architectural schematic diagram of a current OSD menu overlay solution, in which the processing chip receives the video stream data sent by the SOC through the High Definition Multimedia Interface (HDMI), and the OSD overlay function It is implemented by a separate OSD control board.
  • the OSD control board is controlled by buttons and infrared remote control.
  • the processing chip superimposes the received video stream data and the OSD data sent by the OSD control board, and outputs the superimposed video stream to the display. display on the terminal.
  • embodiments of the present disclosure provide a new human-computer interaction OSD overlay architecture, using a main control module such as an MCU main control device as the overall control, which can receive control instructions from the front-end video terminal. , detect the working status of the system, thereby generating the corresponding OSD control menu, interacting with the data processing module to realize the OSD display function of the video end, and the video front-end supports remote wireless network control, and can also control the main control module in real time through the master control system.
  • Relevant display and video adjustments achieve human-computer interaction functions, effectively improving the efficiency of debugging, as well as subsequent operations and maintenance, and realizing real-time human-computer interaction functions.
  • Human-computer interaction can be realized at both short and long distances. It effectively improves the competitiveness of the product and can be used for brightness adjustment, switch control, information display and other functions. It plays an important role in actual debugging and application.
  • an embodiment of the present disclosure provides a human-computer interaction system for a display device, including a data source generation module 200, a main control module 201 and a data processing module 202, wherein:
  • the data source generation module 200 is used to generate a video stream and send the video stream to the data processing module;
  • the data source generation module 200 in this embodiment includes but is not limited to a SOC (System on Chip) module or other chips that can be used to generate data sources. This embodiment does not elaborate on this. limited.
  • SOC System on Chip
  • the main control module 201 is used to receive interactive instructions sent by the user, generate OSD data according to the interactive instructions, and transmit the OSD data to the data processing module;
  • the main control module 201 in this embodiment includes but is not limited to an MCU (Micro Control Unit) module or other control chip, which is not too limited in this embodiment.
  • MCU Micro Control Unit
  • the data processing module 202 is configured to superimpose the received video stream and the OSD data, and output the superimposed video stream to the display end for display in response to the interactive instructions sent by the user.
  • the data processing module 202 in this embodiment includes but is not limited to an FPGA (Field-Programmable Gate Array, Field Programmable Gate Array) module or other programmable chips. This embodiment does not limit this too much. .
  • FPGA Field-Programmable Gate Array, Field Programmable Gate Array
  • the human-computer interaction system in this embodiment can be applied to transparent display devices and other display devices to solve the problems of inconvenient human-computer interaction and difficulty in device maintenance.
  • This embodiment does not make any reference to the specific form of the display device. Too restrictive.
  • the data source generation module 200 is mainly used for the generation and transmission of video sources
  • the main control module 201 is mainly used for the reception and control of interactive instructions
  • the generation and transmission control of OSD data etc.
  • the data processing module 202 is mainly used for It has functions such as video stream analysis, OSD data reception and display, video stream processing, data storage module control, FLASH program loading, and video stream conversion.
  • the main control module 201 and the data processing module 202 are also used to perform interaction of instructions, so as to perform control of the function control menu through interactive instructions, such as performing HDMI hot plugging, etc.
  • the main control module 201 can receive interactive instructions sent by the user in any one or more of the following ways:
  • the main control module 201 receives interactive instructions sent by the user through keystrokes;
  • the main control module 201 receives interactive instructions sent by the user through the remote terminal.
  • the main control module 201 receives interactive instructions sent by the user through buttons and remote terminals respectively.
  • the main control module 201 receives interactive instructions sent by the user through a remote terminal through the data source generation module 200, where the remote terminal and the data source generation module 200 establish a communication connection through a wireless network.
  • remote terminals include but are not limited to portable terminals such as PADs and mobile phone terminals.
  • the user can send interactive instructions to the data source generation module 200 through a remote terminal using a wireless network.
  • the data source generation module 200 forwards the interactive instructions to the main control module 201, and the main control module 201 forwards the interactive instructions to the data processing module 202.
  • the data processing module 202 executes corresponding responses to the video stream and OSD menu.
  • the main control module 201 and the data source generation module 200 in this embodiment establish a communication connection based on the interface standard of serial data communication.
  • the main control module 201 and the data source generation module 200 communicate through the 232 interface.
  • the main control module 201 in this embodiment mainly receives the user's interactive instructions through buttons and remote terminals.
  • the buttons are mainly used to provide users with the function of debugging functions.
  • the remote terminal can realize remote control of display devices such as transparent display devices by the user.
  • Control mainly communicates with the data source generation module 200 through the 232 interface; the main control module 201 mainly receives interactive instructions through buttons or remote terminals and initiates OSD operations.
  • the main control module 201 in this embodiment is used to transmit the OSD data to the data processing module through the SPI interface. It is also used to transmit other data other than OSD data to the data processing module through the SPI interface.
  • this embodiment mainly uses the SPI interface for OSD data transmission, register interaction and other functions. It can also add a check byte at the end of the OSD data to ensure the accuracy of OSD data reception.
  • the data processing module 202 after determining that the received video stream is displayed on the display end according to preset requirements, the data processing module 202 sends an enable signal to the main control module 201 to instruct the main control module 201 Start executing the OSD function; after receiving the enable signal, the main control module 201 transmits the OSD data to the data processing module 202 .
  • the data processing module 202 verifies the received OSD data, and after determining that the verification is successful, superimposes the received video stream and the OSD data.
  • the interactive instructions in this embodiment include update instructions; the main control module 201 is also used to receive the update instructions sent by the user, generate parameters according to the update instructions, and transmit the parameters to the The data processing module 202; the data processing module 202 is used to control the update of data corresponding to the parameters according to the received parameters.
  • the parameters in this embodiment include at least one of OSD parameters and video stream parameters;
  • the OSD parameters include at least one of display duration, display position, and display transparency;
  • the video stream parameters include images At least one of brightness, contrast, saturation, and sharpness.
  • the display duration, display position, and display transparency are used to characterize the display duration, display position, and display transparency of the OSD menu actually displayed on the display end. Through the OSD menu, you can not only control the OSD menu itself, but also control the display of the video stream.
  • the user can send interactive instructions carrying OSD parameters to the main control module 201 to control the display duration, display position, display transparency, etc. of the OSD menu through the data processing module 202.
  • the brightness, contrast, saturation, sharpness, etc. of the image displayed by the video stream can also be controlled through the data processing module 202 by sending interactive instructions carrying video stream parameters to the main control module 201.
  • the interactive instructions also include power on and off instructions
  • the main control module 201 is configured to receive power on and off instructions sent by the user and control the power on and off of the display device, such as a transparent display device.
  • the data processing module 202 if the time difference between the OSD data received twice consecutively by the data processing module 202 in this embodiment is less than a threshold, the data processing module 202 will combine the received video stream with the second The received OSD data is superimposed.
  • the data processing module 202 receives When new OSD data is received, the OSD data that has been superimposed will not be displayed at this time, but the new OSD data and video stream will be superimposed again and displayed.
  • this embodiment uses a data storage module to double the frame rate of the video stream.
  • it can be determined based on the frame rate of the video frame that the back-end monitor can display.
  • the frame rate of the received video stream is doubled.
  • the data storage module includes but is not limited to a DDR (double rate synchronous dynamic random access memory) module, or other memory with storage function, which is not too limited in this embodiment.
  • DDR double rate synchronous dynamic random access memory
  • the data storage module is used to double the frame rate of the video stream generated by the data source generation module by storing one frame and reading two frames of the video stream. After doubling the frame rate The video stream is sent to the data processing module 202; the data processing module 202 superimposes the received video stream with the frame rate doubled and the OSD data.
  • the data processing module 202 determines the read bit width of the OSD data according to the bit width of the video frame in the video stream after the frame rate is doubled; the data processing module 202 determines the read bit width of the OSD data according to the The read bit width reads the OSD data, and the OSD data read each time and the video frames in the video stream after the frame rate is doubled are sequentially superimposed.
  • the data processing module 202 in this embodiment performs overlay processing through the following steps:
  • Step 1) The data processing module uses the video frame received after receiving the OSD data as the starting frame of the overlay process
  • Step 2) Determine the number of frames of the video stream for overlay processing based on the display duration of the OSD data
  • the overlay duration is determined based on the display duration of the OSD data, and the video frames that need to be overlaid with the OSD data are determined from the video stream based on the overlay duration.
  • the overlay duration is used to characterize the number of video frames that need to be used in the overlay process.
  • Step 3) Perform superposition processing on the video stream and the OSD data according to the starting frame and the frame number.
  • the OSD data and each video frame are sequentially superimposed according to the number of frames and the order of each video frame, ensuring the synchronization of the OSD menu and video stream display, and improving the user experience.
  • Usage experience provides a human-computer interaction experience with real-time feedback from the user's perspective.
  • the data processing module 202 in this embodiment performs format conversion on the overlay-processed video stream according to a predefined format, and outputs the format-converted video stream to the display terminal for display.
  • the data processing module 202 converts the superimposed video stream into V-BY1 (v-by-one, a signal standard specially developed for high-definition digital image signal transmission) format and then outputs it to the display terminal for display. .
  • V-BY1 v-by-one, a signal standard specially developed for high-definition digital image signal transmission
  • this embodiment also provides an architectural schematic diagram of a data processing module performing overlay processing.
  • the data processing module 202 includes an SPI transceiver module, a register control module, an OSD data control module, a data storage module such as RAM (Random Access Memory), and an overlay module;
  • the user sends operation instructions to the main control module 201 through the key/remote control module; the main control module 201 initiates the OSD operation after receiving the interactive instructions sent by the key/remote control module.
  • the main control module 201 and the SPI transceiver module in the data processing module establish a communication connection through the SPI interface, perform the transmission of OSD data, the interaction of registers, the processing of adding check bytes at the end of OSD data, etc.
  • the OSD data control module is mainly responsible for storing interactively controlled OSD data, video stream data or other control data (such as power on and off control) into the data storage module inside the data processing module, and at the same time storing the register data into the register control module.
  • the data storage module is mainly responsible for OSD data access operations.
  • the register control module is mainly responsible for updating OSD parameters and video stream parameters, and jointly controls with the overlay module to realize the parameter control function.
  • the video stream output module is mainly used to convert the corresponding OSD functions of the video stream to ensure synchronous control of the OSD menu function and the video stream function.
  • the overlay module is mainly responsible for the overlay operation of video streams and OSD data, such as overlay position, overlay time, display transparency and other functions.
  • this embodiment also provides an architectural schematic diagram of an OSD overlay solution, including a data source generation module 200, a main control module 201, a data processing module 202, a data storage module 203, and a multimedia control module.
  • Module 204 such as FLASH (Adobe Flash, multimedia software platform) module. in:
  • the data source generation module 200 is mainly responsible for the generation and transmission of video sources.
  • the main control module 201 is mainly responsible for the reception and control of interactive commands, the generation and transmission control of OSD menus, etc.
  • the main functions of the data processing module 202 include video stream analysis and OSD data reception. With OSD menu display, video stream processing, data storage module control, FLASH program loading, V-BY1 signal conversion and other functions.
  • the data processing module 202 parses the video stream sent by the data source generation module 200 through the HDMI interface.
  • the parsed video stream is 1080P-60Hz, RGB888.
  • the parsed video stream is stored in the data storage module 203 , and adopts the method of saving one frame and reading two frames to double the frame rate.
  • the doubled video stream undergoes image transformation. If there is no OSD data that needs to be superimposed, the transformed video stream will be in V-BY1 format. Convert and output to the display for display.
  • overlay processing is required, the image-converted video stream and the OSD data sent by the main control module 201 are overlaid, and the overlay-processed video stream is converted into V-BY1 format and output to the display end for display.
  • this embodiment provides a functional illustration of OSD data overlay.
  • the OSD menu displayed in the figure can provide users with multiple control methods for controlling the display device. It can mainly control the display device. Control the display of the OSD menu and the display of the video stream. For example, you can control the transparency, display duration, display position, etc. of the OSD menu display. You can also control various functions such as brightness, contrast, and sharpness of the video stream display. Users can adjust various options in the OSD menu and various options in the video stream menu through buttons or remote terminal control to control various functions such as brightness, contrast, and sharpness of the video stream display.
  • the OSD data superimposed can be a video stream or an image.
  • the display will display the real-time video stream at the same time. It will not be affected by the user's adjustment.
  • the OSD menu interrupts the playback and display of the video stream. If it is an image, then after the overlay process, the user adjusts the parameters in the OSD menu while the display terminal displays the image at the same time.
  • this embodiment can adjust the display transparency of the OSD menu through different The transparent display method allows users to simultaneously see the displayed video stream while adjusting the OSD menu.
  • this embodiment provides an OSD data overlay implementation process for a human-computer interaction system based on a display device, in which the main control module is an MCU module and the data source generation module is an SOC.
  • the module and the data processing module are FPGA modules and the data storage module is a DDR module.
  • the implementation process of OSD data overlay provided in this embodiment is explained as follows. The specific implementation steps are as follows:
  • Step 600 After the entire board is powered on, the MCU module starts and controls the FPGA module to power on.
  • Step 601. After the FPGA module is started, configure the HDMI parsing chip to parse the HDMI video stream sent by the SOC module, start the DDR module synchronously, use the DDR module to double the frame rate of the video stream, and convert it into a V-BY1 format video stream. output.
  • Step 602 After determining that the received video stream is displayed on the display end according to preset requirements, the FPGA module sends an enable signal to the MCU module to instruct the MCU module to start executing the OSD function;
  • Step 603 After receiving the enable signal, the MCU module begins to configure the register and transmit OSD data to the FPGA module.
  • Step 604 The FPGA module stores each received byte of OSD data into the RAM, starts verification synchronously, and after completing the transmission of all OSD data, compares the verification bytes to determine the correctness of the OSD data transmission.
  • Step 605 After the OSD data is verified to be correct, the OSD data and the video stream are superimposed.
  • the queue of the new video frame is counted, and then the OSD data in the RAM is read synchronously with reference to the coordinate information of the OSD data stored in the register module. Since the DDR module has a certain influence on the frame rate of the video stream Doubled, and the DDR read data bit width is 96bit (4pixel), so in order to ensure synchronous superposition, 4bits of OSD data are read each time and superimposed with one video frame.
  • the FPGA module uses the video frame received after receiving the OSD data as the starting frame of the overlay process; according to the display duration of the OSD data, determines the number of frames of the video stream for overlay processing; according to the The starting frame and the frame number are used to superimpose the video stream and the OSD data.
  • the video stream will be output normally and wait for the next overlay operation. If new OSD data is input during the overlay operation, the new OSD data needs to be received in time, the new OSD data and video stream will be overlaid, and the start of the overlay will be recalculated based on the display duration of the new OSD data. Frames and number of frames.
  • Embodiment 2 Based on the same inventive concept, the embodiment of the present disclosure also provides a human-computer interaction method for a display device, because this method is the method applied by the system in the embodiment of the present disclosure, and the principle of this method to solve the problem is It is similar to this system, so the implementation of this method can be referred to the implementation of the system, and repeated details will not be repeated.
  • the method includes:
  • Step 700 Generate a video stream through the data source generation module, and send the video stream to the data processing module;
  • Step 701 Receive interactive instructions sent by the user through the main control module, generate OSD data according to the interactive instructions, and transmit the OSD data to the data processing module;
  • Step 702 Superimpose the received video stream and the OSD data through the data processing module, and output the superimposed video stream to the display terminal for display in response to the interactive instruction sent by the user.
  • receiving interactive instructions sent by the user through the main control module includes:
  • the main control module receives interactive instructions sent by the user through the remote terminal, including:
  • the interactive instructions sent by the user through the remote terminal are received, and the interactive instructions are sent to the main control module, wherein the remote terminal and the data source generation module establish communication through a wireless network connected.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the data processing module superimposes the received video stream and the second received OSD data.
  • it also includes:
  • the data storage module is used to double the frame rate of the video stream generated by the data source generation module, and the video stream with the doubled frame rate is sent to the data processing module. , to instruct the data processing module to superimpose the received video stream with the frame rate doubled and the OSD data.
  • the received video stream with doubled frame rate and the OSD data are superimposed through a data processing module, including:
  • the data processing module determines the read bit width of the OSD data according to the bit width of the video frame in the video stream after the frame rate is doubled;
  • the data processing module reads the OSD data according to the read bit width, and the OSD data read each time and the video frames in the video stream after the frame rate is doubled are sequentially superimposed.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the data processing module uses the video frame received after receiving the OSD data as the starting frame of the overlay process
  • the display duration of OSD data determine the number of frames of the video stream for overlay processing
  • the video stream and the OSD data are superimposed according to the starting frame and the frame number.
  • the received video stream and the OSD data are superposed through a data processing module, including:
  • the received OSD data is verified through the data processing module. After it is determined that the verification is successful, the received video stream and the OSD data are superimposed.
  • the data processing module outputs the superimposed video stream to the display for display, including:
  • the data processing module performs format conversion on the superimposed video stream according to a predefined format
  • transmitting the OSD data to the data processing module through the main control module includes:
  • the data processing module is controlled to send an enable signal to the main control module to indicate that the main control module has received the enable signal.
  • the OSD data is transmitted to the data processing module.
  • the interactive instructions include update instructions, and also include:
  • the data processing module controls the updating of data corresponding to the parameters according to the received parameters.
  • the parameters include at least one of OSD parameters and video stream parameters; the OSD parameters include at least one of display duration, display position, and display transparency; the video stream parameters include image brightness, At least one of contrast, saturation, and sharpness.
  • embodiments of the present disclosure also provide a computer storage medium on which a computer program is stored.
  • the program is executed by a processor, the following steps are implemented:
  • the received video stream and the OSD data are superimposed through the data processing module, and the superimposed video stream is output to the display end for display in response to the interactive instructions sent by the user.
  • embodiments of the present disclosure may be provided as methods, systems, or computer program products. Accordingly, the present disclosure may take the form of an entirely hardware embodiment, an entirely software embodiment, or an embodiment that combines software and hardware aspects. Furthermore, the present disclosure may take the form of a computer program product embodied on one or more computer-usable storage media (including, but not limited to, magnetic disk storage, optical storage, and the like) embodying computer-usable program code therein.
  • a computer-usable storage media including, but not limited to, magnetic disk storage, optical storage, and the like
  • These computer program instructions may also be stored in a computer-readable memory that causes a computer or other programmable data processing device to operate in a particular manner, such that the instructions stored in the computer-readable memory produce an article of manufacture including the instructed device, the instructions
  • the equipment implements the functions specified in a process or processes in the flow diagram and/or in a block or blocks in the block diagram.
  • These computer program instructions may also be loaded onto a computer or other programmable data processing device, causing a series of operating steps to be performed on the computer or other programmable device to produce computer-implemented processing, thereby executing on the computer or other programmable device.
  • Instructions provide steps for implementing the functions specified in a process or processes of a flowchart diagram and/or a block or blocks of a block diagram.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种显示设备的人机交互方法及系统，用于提供一种新的交互方式，通过主控模块接收用户的交互指令并生成OSD数据，通过数据处理模块将接收的视频流和OSD数据进行叠加后显示。人机交互系统包括数据源生成模块、主控模块和数据处理模块：数据源生成模块，用于生成视频流，将视频流发送给数据处理模块；主控模块，用于接收用户发送的交互指令，根据交互指令生成OSD数据，并将OSD数据传输给数据处理模块；数据处理模块，用于将接收到的视频流和OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。

Description

一种显示设备的人机交互方法及系统 技术领域
本公开涉及人机交互技术领域，特别涉及一种显示设备的人机交互方法及系统。
背景技术
随着科技的不断进步，越来越多的可视化设备被添加进日常出行的交通工具中，目前，透明显示设备已经陆续试运行在多种交通场景如地铁中，例如利用透明显示炫窗替代原有的车窗，并通过透明显示炫窗显示丰富的视频流信息，打造一个更具科技感的智慧城市。
由于目前的可视化设备在人机交互方面存在难点，因此如何解决人机交互困难以及更加方便的进行显示设备的日常维护，已经成为亟需解决的技术问题。
发明内容
本公开提供一种显示设备的人机交互方法及系统，用于提供一种交互方式，通过主控模块接收用户的交互指令并生成OSD数据，通过数据处理模块将接收的视频流和OSD数据进行叠加后显示。
第一方面，本公开实施例提供的一种显示设备的人机交互系统，包括数据源生成模块、主控模块和数据处理模块：
所述数据源生成模块，用于生成视频流，将所述视频流发送给所述数据处理模块；
所述主控模块，用于接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
所述数据处理模块，用于将接收到的所述视频流和所述OSD数据进行叠 加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
作为一种可选的实施方式，所述主控模块接收用户发送的交互指令，包括：
所述主控模块接收用户通过按键发送的交互指令；和/或，
所述主控模块接收用户通过远程终端发送的交互指令。
作为一种可选的实施方式，所述主控模块接收用户通过远程终端发送的交互指令，包括：
所述主控模块通过所述数据源生成模块，接收用户通过远程终端发送的交互指令，其中所述远程终端和所述数据源生成模块是通过无线网络建立通信连接的。
作为一种可选的实施方式，所述主控模块和所述数据源生成模块基于串行数据通信的接口标准建立通信连接。
作为一种可选的实施方式，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
若所述数据处理模块连续两次接收到的OSD数据的时间差值小于阈值，则所述数据处理模块将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。
作为一种可选的实施方式，还包括数据存储模块：
所述数据存储模块，用于通过存储一帧读取两帧视频流的方式，对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块；
所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理，包括：
所述数据处理模块根据所述帧率翻倍后的视频流中视频帧的比特位宽， 确定所述OSD数据的读取位宽；
所述数据处理模块根据所述读取位宽读取OSD数据，将每次读取的OSD数据和所述帧率翻倍后的视频流中的视频帧按次序进行叠加处理。
作为一种可选的实施方式，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
所述数据处理模块将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
根据所述起始帧和所述帧数，对所述视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，所述主控模块，用于将所述OSD数据，通过SPI(Serial Peripheral Interface，串行外设接口)接口传输给所述数据处理模块。
作为一种可选的实施方式，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
所述数据处理模块对接收的所述OSD数据进行校验，确定校验成功后，将接收到的所述视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，所述数据处理模块将叠加处理后的视频流输出到显示端进行显示，包括：
所述数据处理模块根据预定义的格式，对叠加处理后的视频流进行格式转换；
将格式转换后的视频流输出到显示端进行显示。
作为一种可选的实施方式，所述主控模块将所述OSD数据传输给所述数据处理模块，包括：
所述数据处理模块在确定接收的所述视频流在显示端按预设要求显示后，向所述主控模块发送使能信号，以指示所述主控模块开始执行OSD功能；
所述主控模块在接收到所述使能信号后，将所述OSD数据传输给所述数 据处理模块。
作为一种可选的实施方式，所述交互指令包括更新指令；
所述主控模块，还用于接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块；
所述数据处理模块，用于根据接收的参数控制所述参数对应的数据的更新。
作为一种可选的实施方式，所述参数包括OSD参数和视频流参数中的至少一种；所述OSD参数包括显示时长、显示位置、显示透明度中的至少一种；所述视频流参数包括图像亮度、对比度、饱和度、锐度中的至少一种。
第二方面，本公开实施例提供的一种显示设备的人机交互方法，包括：
通过数据源生成模块生成视频流，将所述视频流发送给数据处理模块；
通过主控模块接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
作为一种可选的实施方式，通过主控模块接收用户发送的交互指令，包括：
通过主控模块接收用户通过按键发送的交互指令；和/或，
通过主控模块接收用户通过远程终端发送的交互指令。
作为一种可选的实施方式，通过主控模块接收用户通过远程终端发送的交互指令，包括：
通过所述数据源生成模块，接收用户通过远程终端发送的交互指令，并将所述交互指令发送给所述主控模块，其中所述远程终端和所述数据源生成模块是通过无线网络建立通信连接的。
作为一种可选的实施方式，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
若连续两次接收到的OSD数据的时间差值小于阈值，则通过所述数据处理模块将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。
作为一种可选的实施方式，还包括：
通过存储一帧读取两帧视频流的方式，利用数据存储模块对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块，以指示所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，通过数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理，包括：
通过数据处理模块根据所述帧率翻倍后的视频流中视频帧的比特位宽，确定所述OSD数据的读取位宽；
根据所述读取位宽读取OSD数据，通过数据处理模块将每次读取的OSD数据和所述帧率翻倍后的视频流中的视频帧按次序进行叠加处理。
作为一种可选的实施方式，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
根据所述起始帧和所述帧数，通过所述数据处理模块对所述视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
通过所述数据处理模块对接收的所述OSD数据进行校验，确定校验成功后，将接收到的所述视频流和所述OSD数据进行叠加处理。
作为一种可选的实施方式，通过数据处理模块将叠加处理后的视频流输出到显示端进行显示，包括：
通过所述数据处理模块根据预定义的格式，对叠加处理后的视频流进行格式转换；
将格式转换后的视频流输出到显示端进行显示。
作为一种可选的实施方式，通过所述主控模块将所述OSD数据传输给所述数据处理模块，包括：
在确定接收的所述视频流在显示端按预设要求显示后，控制所述数据处理模块向所述主控模块发送使能信号，以指示所述主控模块在接收到所述使能信号后，将所述OSD数据传输给所述数据处理模块。
作为一种可选的实施方式，所述交互指令包括更新指令，还包括：
通过所述主控模块接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块；
通过所述数据处理模块根据接收的参数控制所述参数对应的数据的更新。
作为一种可选的实施方式，所述参数包括OSD参数和视频流参数中的至少一种；所述OSD参数包括显示时长、显示位置、显示透明度中的至少一种；所述视频流参数包括图像亮度、对比度、饱和度、锐度中的至少一种。
第三方面，本公开实施例还提供计算机存储介质，其上存储有计算机程序，该程序被处理器执行时用于实现上述第二方面所述方法的步骤。
本公开的这些方面或其他方面在以下的实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种目前OSD菜单的叠加方案的架构示意图；
图2为本公开实施例提供的一种显示设备的人机交互系统示意图；
图3为本公开实施例提供的一种数据处理模块进行叠加处理的架构示意图；
图4为本公开实施例提供的一种OSD叠加方案的架构示意图；
图5A为本公开实施例提供的一种OSD数据叠加的功能图例；
图5B为本公开实施例提供的一种OSD数据叠加的功能图例；
图6为本公开实施例提供的一种基于显示设备的人机交互系统的OSD数据叠加的实施流程图；
图7为本公开实施例提供的一种显示设备的人机交互方法实施流程图。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开作进一步地详细描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本公开保护的范围。
本公开实施例中术语“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本公开实施例描述的应用场景是为了更加清楚的说明本公开实施例的技术方案，并不构成对于本公开实施例提供的技术方案的限定，本领域普通技术人员可知，随着新应用场景的出现，本公开实施例提供的技术方案对于类似的技术问题，同样适用。其中，在本公开的描述中，除非另有说明，“多个”的含义是两个或两个以上。
实施例1、随着科技的不断进步，越来越多的可视化设备被添加进日常出行的交通工具中，目前，透明显示设备已经陆续试运行在多种交通场景如地铁中，例如利用透明显示炫窗替代原有的车窗，并通过透明显示炫窗显示丰富的视频流信息，打造一个更具科技感的智慧城市。OSD(on-screen display，屏幕菜单式调节方式)是指按主菜单键后屏幕弹出的显示器各项调节项目信息的矩形菜单，可通过该菜单对显示器各项工作指标包括色彩、模式、几何形状等进行调整。将OSD应用于透明显示炫窗，可以通过OSD菜单，实现 人机交互，控制透明显示炫窗的显示效果。目前，由于透明显示设备外部设有封闭壳体，并安装在车体上，在对透明显示设备的显示效果进行控制时，不便于使用按键或者红外遥控的方式控制OSD菜单，如果使用按键方式，无法避免被非相关人员操作而控制显示效果，不可控因素较多，如果使用红外遥控的方式，由于透明显示设备的封闭性，难以保证红外遥控的及时性、有效性和准确性，无法很好的控制透明显示设备的显示效果，因此，目前通过OSD菜单调节透明显示设备的显示效果的方法，给客户的视觉体验较差，给透明显示设备的维护也带来了一定的困难。
如图1所示，本公开实施例提供一种目前OSD菜单的叠加方案的架构示意图，其中，处理芯片接收SOC通过高清多媒体接口(High Definition Multimedia Interface，HDMI)发送的视频流数据，OSD叠加功能由一个单独的OSD控制板来实现，OSD控制板受按键和红外遥控的控制，处理芯片将接收的视频流数据和OSD控制板发送的OSD数据进行叠加，将叠加处理后的视频流输出到显示端进行显示。但是目前的架构在实际的调测过程中，由于整个系统(包括OSD控制板)密封在车体内，所以按键和红外的控制很难实现，导致OSD叠加控制功能无法实现，无法通过OSD菜单实现相关的显示和视频调节，影响用户和透明显示设备的人机交互体验，不便于后续的操作和维护。
针对目前对透明显示设备进行调测的困难，本公开实施例提供了一种新的人机交互OSD叠加架构，采用主控模块如MCU主控器件作为总控，可以接收前级视频端的控制指令，检测系统的工作状态，从而产生相应的OSD控制菜单，与数据处理模块交互实现视频端的OSD显示功能，而且视频前级支持远程无线网络控制，也可以通过总控系统实时控制主控模块，实现相关的显示和视频调节，达到人机交互的功能，有效的提升了调试的效率，以及后续的操作与维护，实现了实时的人机交互功能，近距离和远距离都可以实现人机交互，有效提高了产品的竞争力，可以用于亮度调节、开关机控制，信息显示等功能，在实际调试和应用中具有很重要的作用。
如图2所示，本公开实施例提供的一种显示设备的人机交互系统，包括数据源生成模块200、主控模块201和数据处理模块202，其中：
所述数据源生成模块200，用于生成视频流，将所述视频流发送给所述数据处理模块；
在一些实施例中，本实施例中的数据源生成模块200包括但不限于SOC(System on Chip，系统级芯片)模块、或其他可用于生成数据源的芯片，本实施例对此不作过多限定。
所述主控模块201，用于接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
在一些实施例中，本实施例中的主控模块201包括但不限于MCU(Micro Control Unit，微控制单元)模块，或者其他控制芯片，本实施例对此不作过多限定。
所述数据处理模块202，用于将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
在一些实施例中，本实施例中的数据处理模块202包括但不限于FPGA(Field－Programmable Gate Array，现场可编程门阵列)模块、或者其他可编程芯片，本实施例对此不作过多限定。
需要说明的是，本实施例中的人机交互系统可以应用于透明显示设备及其他显示设备，用于解决人机交互不方便，设备维护困难的问题，本实施例对显示设备的具体形式不作过多限定。
在一些实施例中，数据源生成模块200主要用于视频源的产生与传输，主控模块201主要用于交互指令的接收与控制，OSD数据的产生与传输控制等，数据处理模块202主要用于视频流解析、OSD数据的接收与显示、视频流处理，数据存储模块的控制、FLASH程序加载、视频流转换等功能。
在一些实施例中，主控模块201和数据处理模块202还用于执行指令的交互，从而通过交互指令的方式，执行功能控制菜单的控制，例如执行HDMI 的热插拔等。
在一些实施例中，主控模块201可以通过如下任一或任多种方式接收用户发送的交互指令：
1)主控模块201接收用户通过按键发送的交互指令；
2)主控模块201接收用户通过远程终端发送的交互指令。
3)主控模块201接收用户通过按键和远程终端分别发送的交互指令。
在一些实施例中，主控模块201通过数据源生成模块200，接收用户通过远程终端发送的交互指令，其中所述远程终端和所述数据源生成模块200是通过无线网络建立通信连接的，可选的，远程终端包括但不限于PAD、手机终端等便携式终端。
实施中，用户可以通过远程终端使用无线网络向数据源生成模块200发送交互指令，数据源生成模块200将交互指令转发给主控模块201，主控模块201将交互指令转发给数据处理模块202，数据处理模块202接收到交互指令后，对视频流、OSD菜单执行对应的响应。
在一些实施例中，本实施例中的主控模块201和数据源生成模块200基于串行数据通信的接口标准建立通信连接。可选的，主控模块201和数据源生成模块200通过232接口进行通信。
实施中，本实施例中的主控模块201主要通过按键、远程终端接收用户的交互指令，按键主要用于提供用户执行功能调试的作用，远程终端能够实现用户对显示设备如透明显示设备的远程控制，主要通过232接口和数据源生成模块200进行通信；主控模块201主要通过按键或远程终端接收交互指令，发起OSD操作。
在一些实施例中，本实施例中的主控模块201，用于将所述OSD数据，通过SPI接口传输给所述数据处理模块。还用于将除OSD数据以外的其他数据，通过SPI接口传输给所述数据处理模块。实施中，本实施例主要采用SPI接口进行OSD数据的传输，寄存器的交互等功能，还可以在OSD数据尾端加校验字节，保证OSD数据接收的准确性。
在一些实施例中，所述数据处理模块202在确定接收的所述视频流在显示端按预设要求显示后，向所述主控模块201发送使能信号，以指示所述主控模块201开始执行OSD功能；所述主控模块201在接收到所述使能信号后，将所述OSD数据传输给所述数据处理模块202。
在一些实施例中，所述数据处理模块202对接收的所述OSD数据进行校验，确定校验成功后，将接收到的所述视频流和所述OSD数据进行叠加处理。
在一些实施例中，本实施例中的交互指令包括更新指令；所述主控模块201，还用于接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块202；所述数据处理模块202，用于根据接收的参数控制所述参数对应的数据的更新。
在一些实施例中，本实施例中参数包括OSD参数和视频流参数中的至少一种；所述OSD参数包括显示时长、显示位置、显示透明度中的至少一种；所述视频流参数包括图像亮度、对比度、饱和度、锐度中的至少一种。其中，显示时长、显示位置、显示透明度用于表征实际在显示端显示的OSD菜单的显示时长、显示位置、显示透明度。通过OSD菜单不仅可以对OSD菜单本身进行控制，还可以对视频流的显示进行控制。
实施中，用户可以通过向主控模块201发送携带OSD参数的交互指令，从而通过数据处理模块202控制OSD菜单的显示时长、显示位置、显示透明度等。还可以通过向主控模块201发送携带视频流参数的交互指令，从而通过数据处理模块202控制视频流显示的图像亮度、对比度、饱和度、锐度等。
在一些实施例中，所述交互指令还包括开关机指令，所述主控模块201，用于接收用户发送的开关机指令，控制显示设备如透明显示设备的开机和关机。
在一些实施例中，若本实施例中的数据处理模块202连续两次接收到的OSD数据的时间差值小于阈值，则所述数据处理模块202将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。实施中，为了避免用户快速切换OSD菜单中的不同功能控制项时，OSD菜单显示响应较慢的问题，本实 施例如果在OSD数据和视频流进行叠加处理的操作期间，数据处理模块202又接收到新的OSD数据，则此时将不对已经叠加处理的OSD数据进行显示，而是重新对新的OSD数据和视频流进行叠加处理，并进行显示。
在一些实施例中，为了降低传输带宽，节约带宽资源，本实施例采用数据存储模块对视频流进行帧率翻倍，实施中，可以基于后端显示器能够显示的视频帧的帧率确定是否对接收的视频流的帧率进行翻倍处理。
在一些实施例中，所述数据存储模块包括但不限于DDR(双倍速率同步动态随机存储器)模块，或者其他具备存储功能的存储器，本实施例对此不作过多限定。
在一些实施例中，所述数据存储模块，用于通过存储一帧读取两帧视频流的方式，对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块202；所述数据处理模块202将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
在一些实施中，所述数据处理模块202根据所述帧率翻倍后的视频流中视频帧的比特位宽，确定所述OSD数据的读取位宽；所述数据处理模块202根据所述读取位宽读取OSD数据，将每次读取的OSD数据和所述帧率翻倍后的视频流中的视频帧按次序进行叠加处理。
在一些实施例中，本实施例中的数据处理模块202通过如下步骤进行叠加处理：
步骤1)所述数据处理模块将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
步骤2)根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
实施中，为了保证OSD数据的显示和视频流的显示保持同步，根据OSD数据的显示时长确定叠加时长，根据叠加时长从视频流中确定需要和OSD数据进行叠加处理的视频帧。其中，叠加时长用于表征叠加过程中需要用到的视频帧的帧数，叠加完成后OSD菜单会在显示端同视频流同步显示OSD数据的显示时长。
步骤3)根据所述起始帧和所述帧数，对所述视频流和所述OSD数据进行叠加处理。
实施中，从起始帧开始，按照所述帧数以及各个视频帧的先后次序，依次将OSD数据和各个视频帧进行叠加处理，保证了OSD菜单和视频流显示的同步性，提高了用户的使用体验，从用户角度提供一种实时反馈的人机交互体验。
在一些实施例中，本实施例中的数据处理模块202根据预定义的格式，对叠加处理后的视频流进行格式转换；将格式转换后的视频流输出到显示端进行显示。
实施中，数据处理模块202将叠加处理后的视频流转换为V-BY1(v-by-one，是一种专门面向高清数字图像信号传输而开发的信号标准)格式后输出到显示端进行显示。
在一些实施例中，如图3所示，本实施例还提供一种数据处理模块进行叠加处理的架构示意图。其中，数据处理模块202包括SPI收发模块、寄存器控制模块、OSD数据控制模块、数据存储模块如RAM(Random Access Memory，随机存取存储器)、叠加模块；
用户通过按键/远程控制模块给主控模块201发送操作指令；主控模块201在接收按键/远程控制模块发送的交互指令后，发起OSD操作。主控模块201和数据处理模块中的SPI收发模块通过SPI接口建立通信连接，执行OSD数据的传输，寄存器的交互、OSD数据尾端添加校验字节的处理等。
OSD数据控制模块主要负责将交互控制的OSD数据、视频流数据或其他控制数据(如开关机控制)存储到数据处理模块内部的数据存储模块中，同时将寄存器的数据存储到寄存器控制模块。数据存储模块主要负责OSD数据的存取操作。寄存器控制模块主要负责OSD参数、视频流参数的更新，同叠加模块联合控制实现参数控制功能。
视频流输出模块主要是对视频流进行相应OSD功能的转换实现，保证OSD菜单功能与视频流功能同步控制。叠加模块主要负责视频流与OSD数据 的叠加操作，例如叠加的位置、叠加时间、显示透明度等功能。
在一些实施例中，如图4所示，本实施例还提供一种OSD叠加方案的架构示意图，包括数据源生成模块200、主控模块201、数据处理模块202、数据存储模块203、多媒体控制模块204，如FLASH(Adobe Flash，多媒体软件平台)模块。其中：
数据源生成模块200主要负责视频源的产生与传输，主控模块201主要负责交互命令的接收与控制，OSD菜单的产生与传输控制等，数据处理模块202主要功能包括视频流解析、OSD数据接收与OSD菜单显示、视频流处理，数据存储模块的控制、FLASH程序加载、V-BY1信号转换等功能。
实施中，数据处理模块202解析数据源生成模块200通过HDMI接口发送的视频流，例如解析到的视频流是1080P-60Hz，RGB888，经过图像处理后，将解析的视频流存储到数据存储模块203，并采用存一帧读两帧的方式，实现帧率翻倍，翻倍后的视频流进行图像变换，如果没有OSD数据需要进行叠加处理，则将图像变换后的视频流进行V-BY1格式转换，输出到显示端进行显示。如果需要进行叠加处理，则将图像变换后的视频流和主控模块201发送的OSD数据进行叠加处理，将叠加处理后的视频流进行V-BY1格式转换，输出到显示端进行显示。
在一些实施例中，如图5A、图5B所示，本实施例提供一种OSD数据叠加的功能图例，图中显示的OSD菜单可以给用户提供控制显示设备的多种控制方法，主要可以对OSD菜单的显示和视频流的显示进行控制，例如可以控制OSD菜单显示的透明度、显示时长、显示位置等。还可以控制视频流显示的亮度、对比度、锐度等各种功能。用户可以通过按键或远程终端操控的方式，调节OSD菜单中的各个选项，以及调节视频流菜单中的各个选项，控制视频流显示的亮度、对比度、锐度等各种功能。其中，OSD数据叠加的可以是视频流也可以是图像，如果是视频流，那么叠加处理后，用户在调节OSD菜单中参数的同时，显示端同时显示实时的视频流，并不会因为用户调节OSD菜单而中断视频流的播放显示，如果是图像，那么叠加处理后，用户在调节 OSD菜单中参数的同时，显示端同时显示图像，并且，本实施例可以调节OSD菜单的显示透明度，通过不同透明度的显示方式，使得用户在调节OSD菜单的同时还可以同步看到显示的视频流。
在一些实施例中，如图6所示，本实施例提供一种基于显示设备的人机交互系统的OSD数据叠加的实施流程，其中，以主控模块是MCU模块、数据源生成模块是SOC模块、数据处理模块是FPGA模块、数据存储模块是DDR模块为例，对本实施例提供的OSD数据叠加的实施流程进行如下说明，具体的实施步骤如下所示：
步骤600、整板上电后，MCU模块启动，控制FPGA模块上电。
步骤601、FPGA模块启动后，配置HDMI解析芯片，解析SOC模块发送的HDMI的视频流，同步启动DDR模块，利用DDR模块对视频流的帧率翻倍后，转换成V-BY1格式的视频流输出。
步骤602、FPGA模块在确定接收的所述视频流在显示端按预设要求显示后，向所述MCU模块发送使能信号，以指示所述MCU模块开始执行OSD功能；
如果确定接收的所述视频流在显示端没有按预设要求显示，例如视频流不正常，则需要重新返回步骤601执行配置或查看其他问题。
步骤603、MCU模块在接收到使能信号后，开始配置寄存器并向FPGA模块传输OSD数据。
步骤604、FPGA模块将接收的每个字节的OSD数据存储到RAM中，同步启动校验，在完成全部OSD数据的传输后，比对校验字节，以确定OSD数据传输的正确性。
步骤605、OSD数据校验正确后，进行OSD数据与视频流的叠加处理。
实施中，在OSD数据校验正确后计数新的一帧视频帧的行列，然后参照寄存器模块存储的OSD数据的坐标信息，同步读取RAM中的OSD数据，由于DDR模块对视频流的帧率翻倍，且DDR读取数据位宽96bit(4pixel)，所 以为保证同步叠加，每次读取4bit的OSD数据，和一帧视频帧进行叠加处理。
实施中，所述FPGA模块将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；根据OSD数据的显示时长，确定叠加处理的视频流的帧数；根据所述起始帧和所述帧数，对所述视频流和所述OSD数据进行叠加处理。
如果显示时长后未接收到新的OSD数据，则正常输出视频流，等待下次叠加操作。如果在叠加操作期间，又有新的OSD数据输入，则需要及时接收新的OSD数据，并对新的OSD数据和视频流进行叠加，并根据新的OSD数据的显示时长重新计算叠加的起始帧和帧数。
实施例2、基于相同的发明构思，本公开实施例还提供了一种显示设备的人机交互方法，由于该方法即是本公开实施例中的系统应用的方法，并且该方法解决问题的原理与该系统相似，因此该方法的实施可以参见系统的实施，重复之处不再赘述。
如图7所示，该方法包括：
步骤700、通过数据源生成模块生成视频流，将所述视频流发送给数据处理模块；
步骤701、通过主控模块接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
步骤702、通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
在一些实施例中，通过主控模块接收用户发送的交互指令，包括：
通过主控模块接收用户通过按键发送的交互指令；和/或，
通过主控模块接收用户通过远程终端发送的交互指令。
在一些实施例中，通过主控模块接收用户通过远程终端发送的交互指令，包括：
通过所述数据源生成模块，接收用户通过远程终端发送的交互指令，并将所述交互指令发送给所述主控模块，其中所述远程终端和所述数据源生成模块是通过无线网络建立通信连接的。
在一些实施例中，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
若连续两次接收到的OSD数据的时间差值小于阈值，则通过所述数据处理模块将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。
在一些实施例中，还包括：
通过存储一帧读取两帧视频流的方式，利用数据存储模块对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块，以指示所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
在一些实施例中，通过数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理，包括：
通过数据处理模块根据所述帧率翻倍后的视频流中视频帧的比特位宽，确定所述OSD数据的读取位宽；
通过数据处理模块根据所述读取位宽读取OSD数据，将每次读取的OSD数据和所述帧率翻倍后的视频流中的视频帧按次序进行叠加处理。
在一些实施例中，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
通过所述数据处理模块将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
根据所述起始帧和所述帧数，对所述视频流和所述OSD数据进行叠加处理。
在一些实施例中，通过数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
通过所述数据处理模块对接收的所述OSD数据进行校验，确定校验成功后，将接收到的所述视频流和所述OSD数据进行叠加处理。
在一些实施例中，通过数据处理模块将叠加处理后的视频流输出到显示端进行显示，包括：
通过所述数据处理模块根据预定义的格式，对叠加处理后的视频流进行格式转换；
将格式转换后的视频流输出到显示端进行显示。
在一些实施例中，通过所述主控模块将所述OSD数据传输给所述数据处理模块，包括：
在确定接收的所述视频流在显示端按预设要求显示后，控制所述数据处理模块向所述主控模块发送使能信号，以指示所述主控模块在接收到所述使能信号后，将所述OSD数据传输给所述数据处理模块。
在一些实施例中，所述交互指令包括更新指令，还包括：
通过所述主控模块接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块；
通过所述数据处理模块根据接收的参数控制所述参数对应的数据的更新。
在一些实施例中，所述参数包括OSD参数和视频流参数中的至少一种；所述OSD参数包括显示时长、显示位置、显示透明度中的至少一种；所述视频流参数包括图像亮度、对比度、饱和度、锐度中的至少一种。
基于相同的发明构思，本公开实施例还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如下步骤：
通过数据源生成模块生成视频流，将所述视频流发送给数据处理模块；
通过主控模块接收用户发送的交互指令，根据所述交互指令生成OSD数据，将所述OSD数据传输给所述数据处理模块；
通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交 互指令。
本领域内的技术人员应明白，本公开的实施例可提供为方法、系统、或计算机程序产品。因此，本公开可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本公开可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本公开是参照根据本公开实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的设备。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令设备的制造品，该指令设备实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本公开进行各种改动和变型而不脱离本公开的精神和范围。这样，倘若本公开的这些修改和变型属于本公开权利要求及其等同技术的范围之内，则本公开也意图包含这些改动和变型在内。

Claims (23)

  1. 一种显示设备的人机交互系统，其中，包括数据源生成模块、主控模块和数据处理模块：
    所述数据源生成模块，用于生成视频流，将所述视频流发送给所述数据处理模块；
    所述主控模块，用于接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
    所述数据处理模块，用于将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
  2. 根据权利要求1所述的系统，其中，所述主控模块接收用户发送的交互指令，包括：
    所述主控模块接收用户通过按键发送的交互指令；和/或，
    所述主控模块接收用户通过远程终端发送的交互指令。
  3. 根据权利要求2所述的系统，其中，所述主控模块接收用户通过远程终端发送的交互指令，包括：
    所述主控模块通过所述数据源生成模块，接收用户通过远程终端发送的交互指令，其中所述远程终端和所述数据源生成模块是通过无线网络建立通信连接的。
  4. 根据权利要求1或3所述的系统，其中，所述主控模块和所述数据源生成模块基于串行数据通信的接口标准建立通信连接。
  5. 根据权利要求1所述的系统，其中，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
    若所述数据处理模块连续两次接收到的OSD数据的时间差值小于阈值，则所述数据处理模块将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。
  6. 根据权利要求1所述的系统，其中，还包括数据存储模块：
    所述数据存储模块，用于通过存储一帧读取两帧视频流的方式，对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块；
    所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
  7. 根据权利要求6所述的系统，其中，所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理，包括：
    所述数据处理模块根据所述帧率翻倍后的视频流中视频帧的比特位宽，确定所述OSD数据的读取位宽；
    所述数据处理模块根据所述读取位宽读取OSD数据，将每次读取的OSD数据和所述帧率翻倍后的视频流中的视频帧按次序进行叠加处理。
  8. 根据权利要求1、5～7任一所述的系统，其中，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
    所述数据处理模块将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
    根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
    根据所述起始帧和所述帧数，对所述视频流和所述OSD数据进行叠加处理。
  9. 根据权利要求1所述的系统，其中，所述主控模块，用于将所述OSD数据通过SPI接口传输给所述数据处理模块。
  10. 根据权利要求1所述的系统，其中，所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
    所述数据处理模块对接收的所述OSD数据进行校验，确定校验成功后，将接收到的所述视频流和所述OSD数据进行叠加处理。
  11. 根据权利要求1所述的系统，其中，所述数据处理模块将叠加处理后的视频流输出到显示端进行显示，包括：
    所述数据处理模块根据预定义的格式，对叠加处理后的视频流进行格式转换；
    将格式转换后的视频流输出到显示端进行显示。
  12. 根据权利要求1所述的系统，其中，所述主控模块将所述OSD数据传输给所述数据处理模块，包括：
    所述数据处理模块在确定接收的所述视频流在显示端按预设要求显示后，向所述主控模块发送使能信号，以指示所述主控模块开始执行OSD功能；
    所述主控模块在接收到所述使能信号后，将所述OSD数据传输给所述数据处理模块。
  13. 根据权利要求1～3、5～7、9～12任一所述的系统，其中，所述交互指令包括更新指令；
    所述主控模块，还用于接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块；
    所述数据处理模块，用于根据接收的参数控制所述参数对应的数据的更新。
  14. 根据权利要求13所述的系统，其中，所述参数包括OSD参数和视频流参数中的至少一种；所述OSD参数包括显示时长、显示位置、显示透明度中的至少一种；所述视频流参数包括图像亮度、对比度、饱和度、锐度中的至少一种。
  15. 一种显示设备的人机交互系统的方法，其中，应用于权利要求1～14任一所述的系统，该方法包括：
    通过数据源生成模块生成视频流，将所述视频流发送给数据处理模块；
    通过主控模块接收用户发送的交互指令，根据所述交互指令生成OSD数据，并将所述OSD数据传输给所述数据处理模块；
    通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，将叠加处理后的视频流输出到显示端进行显示，以响应用户发送的交互指令。
  16. 根据权利要求15所述的方法，其中，所述通过主控模块接收用户发送的交互指令，包括：
    通过主控模块接收用户通过按键发送的交互指令；和/或，
    通过主控模块接收用户通过远程终端发送的交互指令。
  17. 根据权利要求16所述的方法，其中，所述通过主控模块接收用户通过远程终端发送的交互指令，包括：
    通过所述数据源生成模块，接收用户通过远程终端发送的交互指令，并将所述交互指令发送给所述主控模块，其中所述远程终端和所述数据源生成模块是通过无线网络建立通信连接的。
  18. 根据权利要求15所述的方法，其中，所述通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
    若连续两次接收到的OSD数据的时间差值小于阈值，则通过所述数据处理模块将接收到的所述视频流和第二次接收到的OSD数据进行叠加处理。
  19. 根据权利要求15所述的方法，其中，还包括：
    通过存储一帧读取两帧视频流的方式，通过数据存储模块对所述数据源生成模块生成的视频流进行帧率翻倍，将帧率翻倍后的视频流发送给所述数据处理模块，以指示所述数据处理模块将接收到的所述帧率翻倍后的视频流和所述OSD数据进行叠加处理。
  20. 根据权利要求15～19任一所述的方法，其中，所述通过所述数据处理模块将接收到的所述视频流和所述OSD数据进行叠加处理，包括：
    将在接收所述OSD数据后，接收到的视频帧，作为叠加处理的起始帧；
    根据OSD数据的显示时长，确定叠加处理的视频流的帧数；
    根据所述起始帧和所述帧数，通过所述数据处理模块对所述视频流和所述OSD数据进行叠加处理。
  21. 根据权利要求15所述的方法，其中，所述通过主控模块将所述OSD数据传输给所述数据处理模块，包括：
    在确定接收的所述视频流在显示端按预设要求显示后，控制所述数据处 理模块向所述主控模块发送使能信号，以指示所述主控模块在接收到所述使能信号后，将所述OSD数据传输给所述数据处理模块。
  22. 根据权利要求15～19、21任一所述的方法，其中，所述交互指令包括更新指令；还包括：
    通过所述主控模块接收用户发送的更新指令，根据所述更新指令生成参数，并将所述参数传输给所述数据处理模块；
    通过所述数据处理模块根据接收的参数控制所述参数对应的数据的更新。
  23. 一种计算机存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如权利要求15～22任一所述方法的步骤。
PCT/CN2022/083755 2022-03-29 2022-03-29 一种显示设备的人机交互方法及系统 WO2023184161A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202280000597.2A CN117223279A (zh) 2022-03-29 2022-03-29 一种显示设备的人机交互方法及系统
PCT/CN2022/083755 WO2023184161A1 (zh) 2022-03-29 2022-03-29 一种显示设备的人机交互方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2022/083755 WO2023184161A1 (zh) 2022-03-29 2022-03-29 一种显示设备的人机交互方法及系统

Publications (1)

Publication Number Publication Date
WO2023184161A1 true WO2023184161A1 (zh) 2023-10-05

Family

ID=88198405

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2022/083755 WO2023184161A1 (zh) 2022-03-29 2022-03-29 一种显示设备的人机交互方法及系统

Country Status (2)

Country Link
CN (1) CN117223279A (zh)
WO (1) WO2023184161A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103561219A (zh) * 2007-07-25 2014-02-05 晶像股份有限公司 与远程视频源设备相关联的屏幕显示
CN105898395A (zh) * 2015-06-30 2016-08-24 乐视致新电子科技（天津）有限公司 一种网络视频播放方法、装置及系统
CN105898614A (zh) * 2015-08-21 2016-08-24 乐视致新电子科技（天津）有限公司 一种设置屏幕菜单的透明度的方法、装置和芯片
CN108924621A (zh) * 2018-07-12 2018-11-30 深圳创维－Rgb电子有限公司 显示方法、装置以及电视机、存储介质
CN113014838A (zh) * 2021-03-03 2021-06-22 北京工业大学 一种基于fpga的多格式高速数字视频融合系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103561219A (zh) * 2007-07-25 2014-02-05 晶像股份有限公司 与远程视频源设备相关联的屏幕显示
CN105898395A (zh) * 2015-06-30 2016-08-24 乐视致新电子科技（天津）有限公司 一种网络视频播放方法、装置及系统
CN105898614A (zh) * 2015-08-21 2016-08-24 乐视致新电子科技（天津）有限公司 一种设置屏幕菜单的透明度的方法、装置和芯片
CN108924621A (zh) * 2018-07-12 2018-11-30 深圳创维－Rgb电子有限公司 显示方法、装置以及电视机、存储介质
CN113014838A (zh) * 2021-03-03 2021-06-22 北京工业大学 一种基于fpga的多格式高速数字视频融合系统

Also Published As

Publication number Publication date
CN117223279A (zh) 2023-12-12

Similar Documents

Publication Publication Date Title
US20220014709A1 (en) Display And Image Processing Method
US10511803B2 (en) Video signal transmission method and device
WO2017148294A1 (zh) 基于移动终端的设备控制方法、装置和移动终端
EP3751862A1 (en) Display method and device, television set, and storage medium
WO2017032082A1 (zh) 设置屏幕菜单的透明度的方法、装置以及音视频播放设备
US20150163450A1 (en) Video display system, source device, sink device, and video display method
US20130187832A1 (en) Display apparatus and method for controlling the same
JP4343967B2 (ja) 通信装置、及びその制御方法
CN102098544B (zh) 一种电视墙的图像显示方法
CN106303691B (zh) 视频帧发送系统以及视频帧发送方法
WO2023142390A1 (zh) 投屏方法、装置、设备及计算机可读存储介质
TW202002664A (zh) 視頻處理方法及其裝置
WO2023184161A1 (zh) 一种显示设备的人机交互方法及系统
CN104978031B (zh) 头戴显示器和头戴显示器的视频控制方法
CN1983216A (zh) 一种无线显示系统以及无线数据传输装置
WO2023116090A1 (zh) 视频同步播放方法及装置、存储介质、电子设备
CN108769566A (zh) 一种用于会议大屏幕的截图方法及设备
WO2017032115A1 (zh) 音视频播放设备和音视频播放方法
CN112752045A (zh) 一种显示设备和显示方法
CN105872737A (zh) 媒体播放的控制方法及媒体源设备、媒体播放设备及系统
CN215379106U (zh) 一种会议内容显示系统
CN102479493B (zh) 一种lcd转换器及基于lcd转换器的数据显示方法
WO2023160100A1 (zh) 显示设备、外接设备、音频播放及音效处理方法
US11900007B2 (en) Display apparatus
EP4386737A1 (en) Display device and operation method thereof

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 202280000597.2

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22934017

Country of ref document: EP

Kind code of ref document: A1