CN114240754A - 投屏处理方法、装置、电子设备及计算机可读存储介质 - Google Patents

投屏处理方法、装置、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN114240754A
CN114240754A CN202111564786.6A CN202111564786A CN114240754A CN 114240754 A CN114240754 A CN 114240754A CN 202111564786 A CN202111564786 A CN 202111564786A CN 114240754 A CN114240754 A CN 114240754A
Authority
CN
China
Prior art keywords
screen projection
coordinate value
display unit
target
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111564786.6A
Other languages
English (en)
Inventor
王小路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Eswin Computing Technology Co Ltd
Haining Eswin IC Design Co Ltd
Original Assignee
Beijing Eswin Computing Technology Co Ltd
Haining Eswin IC Design Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Eswin Computing Technology Co Ltd, Haining Eswin IC Design Co Ltd filed Critical Beijing Eswin Computing Technology Co Ltd
Priority to CN202111564786.6A priority Critical patent/CN114240754A/zh
Publication of CN114240754A publication Critical patent/CN114240754A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4092—Image resolution transcoding, e.g. by using client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例提供了一种投屏处理方法、装置、电子设备及计算机可读存储介质，涉及计算机领域。通过获取目标显示单元在投屏接收端的第一坐标值，确定目标显示单元位于投屏接收端的第一显示界面中的目标区域；根据目标区域与投屏图像之间的缩放系数，确定目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将第二坐标值发送给投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理。

Description

投屏处理方法、装置、电子设备及计算机可读存储介质
技术领域
本申请涉及投屏处理技术领域，具体而言，本申请涉及一种投屏处理方法、装置、电子设备及计算机可读存储介质。
背景技术
随着互联网技术的发展，投屏技术的应用愈加广泛。投屏技术通过在投屏发送端与投屏接收端之间建立通信连接(例如，无线网络连接)，然后根据传输协议，在投屏发送端与投屏接收端之间传输数据。例如，在实际应用场景中，可以在投屏发送端与投屏接收端之间传输视频数据，以将视频在较大显示界面的投屏接收端中播放，从而提升用户观看体验。
在相关技术中，投屏技术较多地应用于一对一场景中，即投屏发送端与投屏接收端之间一对一投屏；而在多对一场景中，即多个投屏发送端与一个投屏接收端的投屏场景中，如何实现在投屏接收端与投屏发送端的坐标转换的问题尚未解决，例如确定投屏接收端上的某个像素点在投屏发送端界面中的坐标，进而，在确定投屏发送端界面中的坐标后，可以根据该坐标执行对应的控制处理。
发明内容
本申请的目的旨在至少能解决上述的技术缺陷之一，特别是坐标转换问题尚未解决的技术缺陷。
根据本申请的一个方面，提供了一种投屏处理方法，该方法包括：
获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；
根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；
将所述第二坐标值发送给所述投屏发送端。
可选的，所述获取目标显示单元在投屏接收端的第一坐标值之前，所述方法还包括：
接收第一操作，其中，所述第一操作包括在所述第一显示界面中接收的操作；
确定所述第一操作对应的所述目标显示单元。
可选的，所述确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域，包括：
获取第一区域的区域坐标范围；其中，所述第一显示界面中包括至少两个第一区域；
根据所述第一坐标值以及每个所述第一区域的区域坐标范围，确定所述目标区域。
可选的，在所述确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值之前，所述方法还包括：
根据所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据，确定所述缩放系数。
可选的，所述根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值，包括：
获取第三坐标值，所述第三坐标值包括所述目标显示单元在所述目标区域中的坐标值；
根据所述第三坐标值及所述缩放系数，确定所述第二坐标值。
可选的，所述获取第三坐标值，包括：
根据所述目标区域在所述第一显示界面中的位置，对所述第一坐标值进行坐标偏移，得到所述第三坐标值。
可选的，所述方法还包括：
若接收到对所述目标区域进行缩放的目标操作，和/或指示所述投屏图像的分辨率数据发生变化的第一消息，
根据变化后的所述目标区域的区域尺寸数据和/或变化后的所述投屏图像的分辨率数据，重新确定所述缩放系数。
可选的，所述区域尺寸数据包括所述目标区域的宽度和/或高度；
所述分辨率数据包括所述投屏图像所属媒体文件的分辨率的宽度和/或高度。
根据本申请的另一个方面，提供了一种投屏处理装置，该装置包括：
获取模块，用于获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；
确定模块，用于根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；
发送模块，用于将所述第二坐标值发送给所述投屏发送端。
根据本申请的另一个方面，提供了一种电子设备，该电子设备包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于：执行本申请第一方面任一项所述的投屏处理方法。
例如，本申请的第三方面，提供了一种计算设备，包括：处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信；
存储器用于存放至少一可执行指令，可执行指令使处理器执行如本申请的第一方面所示的投屏处理方法对应的操作。
根据本申请的再一个方面，提供了一种计算机可读存储介质，所述计算机程序被处理器执行时实现本申请第一方面任一项所述的投屏处理方法。
例如，本申请实施例的第四方面，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现本申请第一方面所示的投屏处理方法。
根据本申请的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述第一方面的各种可选实现方式中提供的方法。
本申请提供的技术方案带来的有益效果是：
本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种投屏处理方法的流程示意图之一；
图2为本申请实施例提供的一种投屏处理方法的应用场景示意图之一；
图3为本申请实施例提供的一种投屏处理方法的应用场景示意图之二；
图4为本申请实施例提供的一种投屏处理方法的流程示意图之二；
图5为本申请实施例提供的一种投屏处理方法的应用场景示意图之三；
图6为本申请实施例提供的一种投屏处理方法的流程示意图之三；
图7为本申请实施例提供的一种投屏处理方法的流程示意图之四；
图8为本申请实施例提供的一种投屏处理方法的应用场景示意图之四；
图9为本申请实施例提供的一种投屏处理装置的结构示意图；
图10为本申请实施例提供的一种投屏处理的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
本申请提供的投屏处理方法、装置、电子设备和计算机可读存储介质，旨在解决现有技术的如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
本申请实施例提供了一种可能的实现方式，如图1所示，提供了一种数据处理方法的流程图，该方案可以由任一电子设备执行，可选的，可以在服务器端或终端设备执行，为描述方便，下面以终端作为执行主体对本申请实施例提供的方法进行说明。
本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
如图1中所示，该方法可以包括以下步骤：
S101：获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域。
具体的，本申请实施例的投屏处理方法可以应用于投屏场景；具体而言，该方法可以应用于投屏的接收端。例如，用户为获得较好的观看体验或者向其他用户分享显示内容，可以将原本显示在显示界面较小的显示内容发送到显示界面较大的显示终端进行投屏，以达到放大显示的效果。例如，结合图2所示，用户可以将在手机终端侧播放的视频投屏到显示界面较大的显示器或者播放器终端上，其中，显示器或者播放器可以包括电视机、平板电脑等等。
在上述投屏场景中，可以将发送显示内容的终端作为投屏发送端，将接收显示内容并对显示内容进行显示的终端作为投屏接收端。其中，显示内容可以包括投屏的媒体文件，投屏的媒体文件中的图像可以称为投屏图像，例如，投屏的媒体文件可以包括图像文件或者视频文件，当投屏的媒体文件为视频文件时，投屏图像可以包括视频流中的任一帧图像。
在实际场景中，由于投屏接收端的显示界面的尺寸数据(为方便描述，后续将投屏接收端的显示界面称为第一显示界面)与投屏图像的分辨率之间通常存在差异；因此，当投屏图像被投屏至第一显示界面时，投屏图像中任一显示单元在第一显示界面中的坐标值，与该显示单元在投屏发送端的原显示界面(为方便描述，后续将投屏发送端的显示界面称为第二显示界面)中的坐标值是不同的。其中，显示单元可以包括投屏图像中的最小显示粒度，例如，显示单元可以包括像素点等等。在这种情况下，当获取到目标显示单元在第一显示界面中的第一坐标值时，可以通过本申请实施例的投屏处理方法，确定该目标显示单元在投屏发送端的第二显示界面中的第二坐标值。
其中，目标显示单元可以包括投屏图像中的任意一个或者多个显示单元。例如，在实际场景中，若在第一显示界面上接收到用户触发的触控操作，可以将触控操作对应的显示单元作为目标显示单元；如，用户在第一显示界面中，点击投屏图像中的按钮控件，其中点击的按钮控件对应的显示单元可以作为目标显示单元。
目标显示单元在投屏接收端的第一坐标值包括目标显示单元在第一显示界面中的坐标值，即目标显示单元在第一显示界面对应的坐标系下的坐标值。
在获取目标显示单元在投屏接收端的第一坐标值时，可以先为第一显示界面建立坐标系；例如，可以以第一显示界面的任意一个顶点为原点，分别以第一显示界面的宽度方向和高度方向为x坐标轴和y坐标轴建立坐标系，然后确定目标显示单元在该坐标系下的第一坐标值。
在获取目标显示单元在投屏接收端的第一坐标值之后，可以确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域。
具体的，在本申请实施例中，第一显示界面可以包括多个子区域，为方便描述，可以将第一显示界面包含的子区域称为第一区域。其中，每个第一区域在第一显示界面中以分屏的形式显示；例如，第一显示界面分两屏显示(即包括两个第一区域)或分三屏显示(即包括三个第一区域)等等。其中，目标区域包括目标显示单元所位于的第一区域。
确定目标区域时，可以先确定每个第一区域在第一显示界面中的区域坐标范围。然后，根据目标显示单元的第一坐标值以及各个第一区域的区域坐标范围，确定目标显示单元所属的目标区域；例如，可以将第一坐标值依次与每个第一区域的区域坐标范围进行比较，确定第一坐标值所落入的区域坐标范围，即为目标区域。
S102：根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值。
具体的，由于目标区域的尺寸数据与投屏图像的分辨率数据之间通常存在差异，例如，目标区域的宽度及高度，与投屏图像的分辨率的宽度及高度之间存在的差异，因此，当投屏图像被投屏至目标区域时，目标区域中任一显示单元在第一显示界面中的坐标值，与该显示单元在第二显示界面中的坐标值是不同的。
而缩放系数指示了前述差异，因此，可以根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值。
具体的，缩放系数包括所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据之间的缩放系数；例如，所述目标区域的区域尺寸数据可以包括所述目标区域的宽度和/或高度；所述分辨率数据包括所述投屏图像所属媒体文件的分辨率的宽度和/或高度。可选地，缩放系数可以包括目标区域的宽度与投屏图像所属媒体文件的分辨率的宽度之间的第一缩放系数，以及所述目标区域的高度与投屏图像所属媒体文件的分辨率的高度之间的第二缩放系数。
S103：将所述第二坐标值发送给所述投屏发送端。
具体的，在实际场景中，若目标显示单元为第一显示界面中所接收到的第一操作的显示单元，在确定所述第二坐标值后，可以将所述第二坐标值发送给所述投屏发送端，以使投屏发送端根据所述第二坐标值，执行在所述目标显示单元处触发的第一操作对应的相应处理，即投屏反控制。
作为示例一，结合图3所示，手机端作为投屏发送端，向投屏接收端的大屏播放器投屏播放目标视频；其中，投屏图像可以包括所投放的目标视频中的每一帧视频帧图像。用户在通过大屏播放器观看视频时，若需要暂停播放视频，则可以通过在大屏播放器的第一显示界面中，触发第一操作来暂停播放目标视频；第一操作例如点击视频帧图像中的暂停按钮等控件；其中，暂停按钮控件对应的显示单元即为目标显示单元，例如，目标显示单元可以包括暂停按钮控件对应的像素点，该像素内显示暂停按钮控件。
进一步的，可以获取目标显示单元在大屏播放器的第一显示界面中的第一坐标值，并确定所述目标显示单元位于第一显示界面中的目标区域；例如，目标区域可以为第一显示界面中的一个分屏显示区域。如图3所示的场景中，目标区域为第一显示界面中分屏显示的左侧区域。
然后，根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在手机端的第二显示界面中的第二坐标值，并将第二坐标值发送给手机端；使手机端根据第二坐标值确定第二坐标值处对应的按钮控件，以及该按钮控件对应的第一操作，进而执行第一操作对应的暂停播放的处理，这样，实现了在投屏接收端的反控制。
可以理解的是，本申请实施例中，目标显示单元对应的第一坐标值可以包括一个坐标点的坐标值，也可以包括多个坐标点的坐标值，即可以是一段坐标范围。
本申请实施例中，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，从而实现了反向确定显示单元在投屏发送端的第二显示界面中的第二坐标值，进而投屏发送端可以根据第二坐标值执行相应的处理，即实现了在投屏接收端的反向控制。
在本申请的一个实施例中，所述获取目标显示单元在投屏接收端的第一坐标值之前，所述方法还包括：
接收第一操作，其中，所述第一操作包括在所述第一显示界面中接收的操作；
确定所述第一操作对应的所述目标显示单元。
具体的，第一操作可以包括在所述第一显示界面中接收到的操作。其中，第一操作可以包括用户在所述第一显示界面触发的操作，例如，用户在投屏图像中的点击操作、滑动操作等等。结合示例一，用户在通过大屏播放器观看视频时，若需要暂停播放视频，则可以在第一显示界面中，点击视频帧图像中的暂停按钮等控件来暂停播放。其中，暂停按钮控件对应的显示单元即为目标显示单元，例如，目标显示单元可以包括用于显示暂停按钮控件的像素点。
可以理解的是，当用户触发第一操作后，在投屏图像中触发第一操作的位置的显示单元即为目标显示单元。
在本申请的一个实施例中，所述确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域，包括：
获取第一区域的区域坐标范围；其中，所述第一显示界面中包括至少两个第一区域；
根据所述第一坐标值以及每个所述第一区域的区域坐标范围，确定所述目标区域。
在本申请实施例中，第一显示界面可以包括至少两个第一区域，其中，第一区域可以包括第一显示界面中分屏显示的各个子区域。例如，第一显示界面可以包括分屏显示的两个第一区域、三个第一区域或者四个第一区域等等。可以理解的是，每个分屏显示的第一区域可以包括分屏显示的窗口区域。
在确定目标区域时，可以先获取第一区域的区域坐标范围，需要说明的是，第一区域的区域坐标范围为在第一显示界面对应的坐标系中的坐标范围。例如，在为第一显示界面建立坐标系时，可以以第一显示界面的任意一个顶点为原点，可选的，本申请实施例中，以第一显示界面的左上角的顶点为原点(0，0)，分别以第一显示界面的宽度方向和高度方向为x坐标轴和y坐标轴建立坐标系。
以第n个第一区域的区域坐标范围为例，该第一区域的左上角的顶点的坐标在第一显示界面的坐标系下的坐标可以表示为(xn，yn)，该第一区域的宽度和高度可以分别表示为wn、hn。
在确定每个第一区域的区域坐标范围之后，可以判断所述第一坐标值所在的目标区域。具体而言，可以依次将第一坐标值与每个第一区域的区域坐标范围进行比较，例如，当存在n个第一区域时，可以遍历每个第一区域，分别判断第一坐标值是否在该第一区域的区域坐标范围内。可选的，假设第一坐标值为(x’，y’)，判断条件可以为(xn<＝x’)^(x’<(xn+wn))^(yn<＝y’)^(y’<(yn+hn))，当第一坐标值满足判断条件时，则可以确定该第一区域为第一坐标值所在的目标区域。
在本申请的一个实施例中，在所述确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值之前，所述方法还包括：
根据所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据，确定所述缩放系数。
具体的，本申请实施例中，所述区域尺寸数据可以包括所述目标区域的宽度和/或高度；所述分辨率数据可以包括所述投屏图像所属媒体文件的分辨率的宽度和/或高度。
可选的，可以以第n个第一区域作为目标区域为例，目标区域的宽度和高度可以表示为wn和hn；所述投屏图像所属媒体文件的分辨率的宽度和高度可以分别表示为w’n和h’n，那么，根据目标区域的宽度以及所述投屏图像所属媒体文件的分辨率的宽度确定的对应于x轴方向的缩放系数为scalexn＝w’n/wn；根据目标区域的高度以及所述投屏图像所属媒体文件的分辨率的高度确定的对应于y轴方向的缩放系数为scaleyn＝h’n/hn。
在本申请的一个实施例中，所述根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值，包括：
获取第三坐标值，所述第三坐标值包括所述目标显示单元在所述目标区域中的坐标值；
根据所述第三坐标值及所述缩放系数，确定所述第二坐标值。
本申请实施例中，所述缩放系数为根据所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据确定，也就是说，所述缩放系数为所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据之间的缩放系数。可以理解的是，在确定所述第二坐标时，需通过所述目标显示单元在所述目标区域中的坐标值与所述缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值。
在本申请的一个实施例中，所述获取第三坐标值，包括：
根据所述目标区域在所述第一显示界面中的位置，对所述第一坐标值进行坐标偏移，得到所述第三坐标值。
由于本申请实施例中，第一坐标值为目标显示单元在第一显示界面的坐标系下坐标值，因此，在获取目标显示单元在所述目标区域中的坐标值，即第三坐标值时，可以根据所述目标区域在所述第一显示界面中的位置，对所述第一坐标值进行坐标偏移，得到所述第三坐标值。
例如，以第n个第一区域作为目标区域为例，目标区域的左上角的顶点的坐标在第一显示界面的坐标系下的坐标可以表示为(xn，yn)。由于第一显示界面以左上角的顶点为原点(0，0)，可以理解的是，目标区域的左上角的顶点与第一显示界面的左上角的顶点的相对位置关系为：将第一显示界面的原点分别延x轴及y轴移动xn、yn后即为目标区域的左上角的顶点。
以目标显示单元的第一坐标值为(x’，y’)为例，其在目标区域坐标系下的第三坐标值可以为对所述第一坐标值进行坐标偏移后得到，即(x’–xn，y’-yn)。
然后，根据所述第三坐标值及所述缩放系数，确定所述第二坐标。例如，当目标区域的宽度以及所述投屏图像所属媒体文件的分辨率的宽度确定的对应于x轴方向的缩放系数为scalexn＝w’n/wn；目标区域的高度以及所述投屏图像所属媒体文件的分辨率的高度确定的对应于y轴方向的缩放系数为scaleyn＝h’n/hn时，第二坐标值(x”n，y”n)可以为x”n＝(x’-xn)*scalexn，y”n＝(y’-yn)*scaleyn。
综上，结合图4，对本申请的整体流程进行说明：当获取到目标显示单元的第一坐标值(x’，y’)后，可以确定该第一坐标值位于哪个第一区域内，即确定目标区域；然后根据该目标区域在第一显示界面中的位置，对(x’，y’)进行坐标偏移，得到第三坐标值；进而根据第三坐标值以及缩放系数确定第二坐标值(x”n，y”n)。
在本申请的一个实施例中，所述方法还包括：
若接收到对所述目标区域进行缩放的目标操作，和/或指示所述投屏图像的分辨率数据发生变化的第一消息，
根据变化后的所述目标区域的区域尺寸数据和/或变化后的所述投屏图像的分辨率数据，重新确定所述缩放系数。
结合图5和6所示，若目标区域被缩放时，例如，接收到遥控器触发的窗口(即目标区域)缩放的操作，相应的，目标区域的宽度和高度将发生变化，在这种情况下，可以重新获取目标区域的宽度和高度，根据变化后的所述目标区域的区域尺寸数据，即目标区域的宽度和/或高度，可以重新确定所述缩放系数。
另外，结合图7所示，当投屏图像的分辨率数据发生变化时，即投屏图像的分辨率的宽度和/或高度发生变化时，可以重新获取投屏图像的分辨率数据，根据变化后的所述投屏图像的分辨率数据重新确定所述缩放系数。
此外，结合图8所示，若目标区域发生移动时，目标区域的位置发生变化，相应的，可以根据所述目标区域在所述第一显示界面中的位置关系，重新确定所述第三坐标值。
本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
本申请实施例提供了一种投屏处理装置，如图9所示，该投屏处理装置90可以包括：获取模块901、确定模块902以及发送模块903，其中，
获取模块901，用于获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；
确定模块902，用于根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；
发送模块903，用于将所述第二坐标值发送给所述投屏发送端。
在本申请的一个实施例中，该装置还包括目标显示单元确定模块，用于在所述获取目标显示单元在投屏接收端的第一坐标值之前，接收第一操作，其中，所述第一操作包括在所述第一显示界面中接收的操作；
确定所述第一操作对应的所述目标显示单元。
在本申请的一个实施例中，确定模块902具体用于：
获取第一区域的区域坐标范围；其中，所述第一显示界面中包括至少两个第一区域；
根据所述第一坐标值以及每个所述第一区域的区域坐标范围，确定所述目标区域。
在本申请的一个实施例中，该装置还包括缩放系数确定模块，用于在所述确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值之前，所述方法还包括：
根据所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据，确定所述缩放系数。
在本申请的一个实施例中，确定模块902具体用于：
获取第三坐标值，所述第三坐标值包括所述目标显示单元在所述目标区域中的坐标值；
根据所述第三坐标值及所述缩放系数，确定所述第二坐标值。
在本申请的一个实施例中，确定模块902具体用于：
根据所述目标区域在所述第一显示界面中的位置，对所述第一坐标值进行坐标偏移，得到所述第三坐标值。
在本申请的一个实施例中，该装置还包括重新确定模块，用于若接收到对所述目标区域进行缩放的目标操作，和/或指示所述投屏图像的分辨率数据发生变化的第一消息，
根据变化后的所述目标区域的区域尺寸数据和/或变化后的所述投屏图像的分辨率数据，重新确定所述缩放系数。
在本申请的一个实施例中，所述区域尺寸数据包括所述目标区域的宽度和/或高度；
所述分辨率数据包括所述投屏图像所属媒体文件的分辨率的宽度和/或高度。
本实施例的投屏处理装置可执行本申请上述实施例所示的投屏处理方法，其实现原理相类似，此处不再赘述。
本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
本申请实施例中提供了一种电子设备，该电子设备包括：存储器和处理器；至少一个程序，存储于存储器中，用于被处理器执行时，与现有技术相比可实现：本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
在一个可选实施例中提供了一种电子设备，如图10所示，图10所示的电子设备4000包括：处理器4001和存储器4003。其中，处理器4001和存储器4003相连，如通过总线4002相连。可选地，电子设备4000还可以包括收发器4004，收发器4004可以用于该电子设备与其他电子设备之间的数据交互，如数据的发送和/或数据的接收等。需要说明的是，实际应用中收发器4004不限于一个，该电子设备4000的结构并不构成对本申请实施例的限定。
处理器4001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器4001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线4002可包括一通路，在上述组件之间传送信息。总线4002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线4002可以分为地址总线、数据总线、控制总线等。为便于表示，图10中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器4003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
存储器4003用于存储执行本申请方案的应用程序代码(计算机程序)，并由处理器4001来控制执行。处理器4001用于执行存储器4003中存储的应用程序代码，以实现前述方法实施例所示的内容。
其中，电子设备包括但不限于：移动电话、笔记本电脑、多媒体播放器、台式计算机等。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当其在计算机上运行时，使得计算机可以执行前述方法实施例中相应内容。
本申请实施例可应用于投屏处理领域，通过获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；将所述第二坐标值发送给所述投屏发送端，实现了根据不同区域中的显示单元在投屏接收端的第一显示界面中的第一坐标值以及缩放关系，反向确定该显示单元在投屏发送端的第二显示界面中的第二坐标值，并将第二坐标发送给投屏发送端，以使投屏发送端根据第二坐标值执行相应的处理，例如，根据第二坐标值处的显示单元对应的控件以及针对该控件的触发操作，执行与触发操作对应的处理。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种投屏处理方法，其特征在于，包括：
获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；
根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；
将所述第二坐标值发送给所述投屏发送端。
2.根据权利要求1所述的投屏处理方法，其特征在于，所述获取目标显示单元在投屏接收端的第一坐标值之前，所述方法还包括：
接收第一操作，其中，所述第一操作包括在所述第一显示界面中接收的操作；
确定所述第一操作对应的所述目标显示单元。
3.根据权利要求1所述的投屏处理方法，其特征在于，所述确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域，包括：
获取第一区域的区域坐标范围；其中，所述第一显示界面中包括至少两个第一区域；
根据所述第一坐标值以及每个所述第一区域的区域坐标范围，确定所述目标区域。
4.根据权利要求1所述的投屏处理方法，其特征在于，在所述确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值之前，所述方法还包括：
根据所述目标区域的区域尺寸数据与所述投屏图像的分辨率数据，确定所述缩放系数。
5.根据权利要求1所述的投屏处理方法，其特征在于，所述根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值，包括：
获取第三坐标值，所述第三坐标值包括所述目标显示单元在所述目标区域中的坐标值；
根据所述第三坐标值及所述缩放系数，确定所述第二坐标值。
6.根据权利要求5所述的投屏处理方法，其特征在于，所述获取第三坐标值，包括：
根据所述目标区域在所述第一显示界面中的位置，对所述第一坐标值进行坐标偏移，得到所述第三坐标值。
7.根据权利要求4所述的投屏处理方法，其特征在于，所述方法还包括：
若接收到对所述目标区域进行缩放的目标操作，和/或指示所述投屏图像的分辨率数据发生变化的第一消息，
根据变化后的所述目标区域的区域尺寸数据和/或变化后的所述投屏图像的分辨率数据，重新确定所述缩放系数。
8.一种投屏处理装置，其特征在于，包括：
获取模块，用于获取目标显示单元在投屏接收端的第一坐标值，确定所述目标显示单元位于所述投屏接收端的第一显示界面中的目标区域；
确定模块，用于根据所述目标区域与投屏图像之间的缩放系数，确定所述目标显示单元在投屏发送端的第二显示界面中的第二坐标值；
发送模块，用于将所述第二坐标值发送给所述投屏发送端。
9.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于：执行根据权利要求1至7任一项所述的投屏处理方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任一项所述的投屏处理方法。
CN202111564786.6A 2021-12-20 2021-12-20 投屏处理方法、装置、电子设备及计算机可读存储介质 Pending CN114240754A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111564786.6A CN114240754A (zh) 2021-12-20 2021-12-20 投屏处理方法、装置、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111564786.6A CN114240754A (zh) 2021-12-20 2021-12-20 投屏处理方法、装置、电子设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN114240754A true CN114240754A (zh) 2022-03-25

Family

ID=80759549

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111564786.6A Pending CN114240754A (zh) 2021-12-20 2021-12-20 投屏处理方法、装置、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN114240754A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114911404A (zh) * 2022-04-29 2022-08-16 深圳开鸿数字产业发展有限公司 界面控制方法、控制系统、电子设备及存储介质
CN116610274A (zh) * 2023-05-09 2023-08-18 北京元心君盛科技有限公司 跨设备投屏方法、装置、电子设备及可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114911404A (zh) * 2022-04-29 2022-08-16 深圳开鸿数字产业发展有限公司 界面控制方法、控制系统、电子设备及存储介质
CN116610274A (zh) * 2023-05-09 2023-08-18 北京元心君盛科技有限公司 跨设备投屏方法、装置、电子设备及可读存储介质
CN116610274B (zh) * 2023-05-09 2023-11-24 北京元心君盛科技有限公司 跨设备投屏方法、装置、电子设备及可读存储介质

Similar Documents

Publication Publication Date Title
WO2021175055A1 (zh) 视频处理方法及相关装置
WO2022166927A1 (zh) 基于远程桌面的光标显示方法、装置、介质及电子设备
EP3913924B1 (en) 360-degree panoramic video playing method, apparatus, and system
CN114240754A (zh) 投屏处理方法、装置、电子设备及计算机可读存储介质
CN110139040B (zh) 云台摄像机定位的方法、装置、云台摄像机、设备及介质
JP7518168B2 (ja) ビデオにオブジェクトを表示する方法、装置、電子機器、及びコンピュータ読み取り可能な記憶媒体
CN110856005B (zh) 直播流显示方法、装置、电子设备及可读存储介质
CN112291590A (zh) 视频处理方法及设备
WO2023160617A9 (zh) 视频插帧处理方法、视频插帧处理装置和可读存储介质
CN110519645B (zh) 视频内容的播放方法、装置、电子设备及计算机可读介质
WO2021027596A1 (zh) 图像特效处理方法、装置、电子设备和计算机可读存储介质
CN109121000A (zh) 一种视频处理方法及客户端
US20230316529A1 (en) Image processing method and apparatus, device and storage medium
US8823820B2 (en) Methods and apparatuses for capturing an image
WO2020093862A1 (zh) 一种vr视频处理的方法及相关装置
CN110928509A (zh) 显示控制方法、显示控制装置、存储介质、通信终端
CN110597432B (zh) 界面控制方法、装置、计算机可读介质及电子设备
CN113730923A (zh) 基于游戏直播的主播输入操作分享与显示方法、及设备
CN111784811A (zh) 一种图像处理方法、装置，电子设备及存储介质
CN115390779B (zh) 内容控制方法、装置、存储介质及电子设备
CN116546229A (zh) 一种互动方法、装置、电子设备、计算机可读介质
CN114647468B (zh) 投屏图像显示方法、装置、电子设备及存储介质
CN110769129B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
WO2022061723A1 (zh) 一种图像处理方法、设备、终端及存储介质
CN111885417B (zh) Vr视频播放方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Applicant after: Haining yisiwei IC Design Co.,Ltd.

Applicant after: Beijing ESWIN Computing Technology Co.,Ltd.

Address before: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Applicant before: Haining yisiwei IC Design Co.,Ltd.

Applicant before: Beijing yisiwei Computing Technology Co.,Ltd.

CB02 Change of applicant information
CB02 Change of applicant information

Country or region after: China

Address after: 314499 Building 1, Juanhu Science and Technology Innovation Park, No. 500 Shuiyueting East Road, Xiashi Street, Haining City, Jiaxing City, Zhejiang Province (self declared)

Applicant after: Haining Yisiwei Computing Technology Co.,Ltd.

Applicant after: Beijing ESWIN Computing Technology Co.,Ltd.

Address before: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Applicant before: Haining yisiwei IC Design Co.,Ltd.

Country or region before: China

Applicant before: Beijing ESWIN Computing Technology Co.,Ltd.