CN116095374A - 图像处理方法、装置、设备及计算机可读存储介质 - Google Patents

图像处理方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN116095374A
CN116095374A CN202111308203.3A CN202111308203A CN116095374A CN 116095374 A CN116095374 A CN 116095374A CN 202111308203 A CN202111308203 A CN 202111308203A CN 116095374 A CN116095374 A CN 116095374A
Authority
CN
China
Prior art keywords
screen
image
screen capturing
mobile terminal
television
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111308203.3A
Other languages
English (en)
Inventor
黄思军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202111308203.3A priority Critical patent/CN116095374A/zh
Publication of CN116095374A publication Critical patent/CN116095374A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请提供了一种图像处理方法、装置、设备及计算机可读存储介质;方法包括:响应于基于遥控设备实施的截屏触发操作,对所述电视设备显示的画面进行截屏处理,显示截屏图像,以及向移动终端发送所述截屏图像;其中,所述截屏图像用于与所述移动终端的拍摄图像进行合成。通过本申请,能够实现电视设备的基于截屏的图像处理和互动,增强用户体验感。

Description

图像处理方法、装置、设备及计算机可读存储介质
技术领域
本申请涉及互联网领域中的图像处理技术,尤其涉及一种图像处理方法、装置、设备及计算机可读存储介质。
背景技术
随着图像处理技术的广泛应用,截屏技术得到了广泛的发展。在移动终端中,相关技术可以通过触发相应的快捷键或快捷键组合、手势动作等方式截取智能移动终端中当前显示的画面。而在电视设备中,相关技术无法高效实现基于截屏的图像处理功能,从而造成电视设备的用户互动性不佳,严重影响用户体验感。
发明内容
本申请实施例提供一种图像处理方法、装置、设备、计算机可读存储介质及计算机程序产品,能够实现电视设备的基于截屏的图像处理和互动,增强用户体验感。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种图像处理方法,包括:
响应于基于遥控设备实施的截屏触发操作,对所述电视设备显示的画面进行截屏处理,显示截屏图像,以及
向所述移动终端发送所述截屏图像;其中,所述截屏图像用于与所述移动终端的拍摄图像进行合成。
本申请实施例提供一种图像处理装置,应用于电视设备,包括:
截屏模块,用于响应于基于遥控设备实施的截屏触发操作,对所述电视设备显示的画面进行截屏处理,显示截屏图像;
发送模块,用于向所述移动终端发送所述截屏图像;其中,所述截屏图像用于与所述移动终端的拍摄图像进行合成。
本申请实施例提供一种电视设备,所述电视设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的图像处理方法。
本申请实施例提供一种移动终端,所述移动终端包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的图像处理方法。
本申请实施例提供一种计算机可读存储介质,存储有可执行指令,用于引起处理器执行时,实现本申请实施例提供的图像处理方法。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行本申请实施例上述的图像处理方法。
本申请实施例具有以下有益效果:
通过遥控设备对电视设备所显示的画面进行截屏处理,并将截屏图像显示在电视设备中的同时,将截屏图像发送至移动终端中与移动终端的拍摄图像进行合成。如此,实现了在电视设备中实现截屏功能,并将电视设备的截屏图像与移动终端中的画面进行合成,从而能够实现电视设备的基于截屏的图像处理和互动,增强用户体验感。
附图说明
图1A-图1B是本申请实施例提供的图像处理系统架构的结构示意图;
图2A-图2B是本申请实施例提供的图像处理装置的结构示意图;
图3A-图3D是本申请实施例提供的图像处理方法的流程示意图;
图4A-图4L是本申请实施例提供的图像处理方法的界面示意图;
图5A-图5F是本申请实施例提供的图像处理方法的原理示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
在以下的描述中,所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
1)遥控设备(Telecontrol equipment):又称无线电遥控设备,遥控设备通常由发射电路和接收电路两大部分构成,遥控设备中的发射电路通过向被遥控设备发射指令信号的方式实现对被遥控设备的控制,遥控设备和被遥控设备之间通常采用无线连接的方式进行通信,例如,常见的遥控设备有电视遥控器、空调遥控器,常见的被遥控设备有电视机、空调等等。
2)截屏(Screen shot):是一种截取图片或文字的途径,也是一种计算机运用技术,通过截屏技术可以从网上截取下载自己感兴趣的文章图片供自己使用观看,可以帮助人们更好的去理解使用知识。是一种人人都能使用并且学会方法。而且可以通过一些软件实现截屏功能。
3)电视设备:例如智能电视(Smart TV),是具有全开放式平台,搭载了操作系统,用户在欣赏普通电视内容的同时,可自行安装和卸载各类应用软件,持续对功能进行扩充和升级的新电视产品。电视设备能够不断给用户带来有别于,使用有线数字电视接收机(机顶盒)的、丰富的个性化体验。
4)图形码:常见的图形码有二维码(2-dimensional bar code)、条形码(barcode)等等。二维码是用某种特定的几何图形按一定规律在平面(二维方向上)分布的黑白相间的图形记录数据符号信息的;在代码编制上巧妙地利用构成计算机内部逻辑基础的“0”、“1”比特流的概念,使用若干个与二进制相对应的几何形体来表示文字数值信息,通过图象输入设备或光电扫描设备自动识读以实现信息自动处理;其具有条码技术的一些共性:每种码制有其特定的字符集;每个字符占有一定的宽度;具有一定的校验功能等。同时还具有对不同行的信息自动识别功能、及处理图形旋转变化点。条形码是将宽度不等的多个黑条和空白,按照一定的编码规则排列,用以表达一组信息的图形标识符。
5)局域网(Local Area Network):是在一个局部的地理范围内(如一个学校、工厂和机关内,将各种计算机、外部设备和数据库等互相联接起来组成的计算机通信网),简称LAN。其可以通过数据通信网或专用数据电路,与远方的局域网、数据库或处理中心相连接,构成一个大范围的信息处理系统。
随着图像处理技术的广泛应用,截屏技术得到了广泛的发展。在移动终端中,相关技术可以通过触发相应的快捷键或快捷键组合、手势动作等方式截取智能移动终端中当前显示的画面。而在电视设备中,相关技术通常无法实现截屏功能,且无法将电视设备端当前所显示的画面截屏并发送至移动终端中。
而且在移动终端中,相关技术所能实现的截屏功能相对比较单一,如果想要把拍摄后的画面和截屏图像整合到一起,往往需要借助于第三方的图像处理软件进行整合,手动的去完成图像的整合过程,操作过程相对较为复杂,如此,严重影响了用户体验度。
相关技术中的截屏方法所能实现的功能相对比较单一,且无法实现电视设备的截屏图像与移动终端中的画面进行合成,从而造成电视设备的用户互动性不佳,严重影响用户体验感。
本申请实施例提供一种图像处理方法、装置、设备、计算机可读存储介质及计算机程序产品,能够实现电视设备的基于截屏的图像处理和互动,增强用户体验感,下面说明本申请实施例提供的电视设备和移动终端的示例性应用,本申请实施例提供的电视设备可以实施为智能电视,智能显示器,平板电脑,车载电视设备等,本申请实施例提供的移动终端可以实施为移动智能手机、移动穿戴设备、平板电脑以及笔记本电脑等。下面,将说明电视设备和移动终端实施为终端时示例性应用。
在一些实施例中,参见图1A,图1A是本申请实施例提供的图像处理系统100的架构示意图,图像处理系统100包括:移动终端500、电视设备600、遥控设备501、服务器800和网络400,移动终端500、电视设备600可以通过网络400连接服务器800,网络400可以是广域网或者局域网,又或者是二者的组合。
作为示例,参见图1A,移动终端500和电视设备600上运行具有投射功能的客户端(简称投射客户端,例如投射视频或图像的客户端),当需要将移动终端500上的多媒体内容投射到电视设备600上进行播放时,电视设备600将从移动终端500获取移动终端500的身份信息、以及移动终端500待投射的多媒体内容的标识。遥控设备501可以通过远程遥控电视设备600中所显示的内容(例如,遥控设备501遥控电视设备600切换所播放的节目)。移动终端500和遥控设备501在图像处理系统100是不同的终端设备。
在另一些实施例中,参见图1B,图1B是本申请实施例提供的图像处理系统200的架构示意图,移动终端500、电视设备600通过网络400连接服务器800,网络400可以是广域网或者局域网,又或者是二者的组合。
作为示例,参见图1B,电视设备600上运行有TV版的APP(例如,视频APP、电子相册APP、即时通信客户端等),当电视设备独立显示画面时,电视设备的显示画面可以是视频画面或者是任意APP的显示画面。移动终端500可以遥控电视设备600所显示的内容(例如,切换所播放的节目,切换所运行的APP)。在图像处理系统200中,移动终端500可以实现远程遥控电视设备600的功能。
在一些实施例中,服务器800可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。移动终端500和遥控设备501可以是智能手机、平板电脑、笔记本电脑、智能音箱、智能手表、车载终端等,但并不局限于此。移动终端500以及服务器800可以通过有线或无线通信方式进行直接或间接地连接,本申请实施例中不做限制。
在一些实施例中,参见图2A,图2A是本申请实施例提供的移动终端500的结构示意图,图2A所示的移动终端500包括:至少一个处理器410、存储器450、至少一个网络接口420和用户接口430。移动终端500中的各个组件通过总线系统440耦合在一起。可理解,总线系统440用于实现这些组件之间的连接通信。总线系统440除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图2A中将各种总线都标为总线系统440。
处理器410可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
用户接口430包括使得能够呈现媒体内容的一个或多个输出装置431,包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口430还包括一个或多个输入装置432,包括有助于用户输入的用户接口部件,比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。
存储器450可以是可移除的,不可移除的或其组合。示例性的硬件设备包括固态存储器,硬盘驱动器,光盘驱动器等。存储器450可选地包括在物理位置上远离处理器410的一个或多个存储设备。
存储器450包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器450旨在包括任意适合类型的存储器。
在一些实施例中,存储器450能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统451,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块452,用于经由一个或多个(有线或无线)网络接口420到达其他电子设备,示例性的网络接口420包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
呈现模块453,用于经由一个或多个与用户接口430相关联的输出装置431(例如,显示屏、扬声器等)使得能够呈现信息(例如,用于操作外围设备和显示内容和信息的用户接口);
输入处理模块454,用于对一个或多个来自一个或多个输入装置432之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。
在一些实施例中,本申请实施例提供的图像处理装置可以采用软件方式实现,图2A示出了存储在存储器450中的图像处理装置455,其可以是程序和插件等形式的软件,包括以下软件模块:截屏模块4551和发送模块4552,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分。将在下文中说明各个模块的功能。
在一些实施例中,参见图2B,图2B是本申请实施例提供的电视设备600的结构示意图,图2B所示的电视设备600包括:至少一个处理器610、存储器650、至少一个网络接口620和用户接口630。电视设备600中的各个组件通过总线系统640耦合在一起。可理解,总线系统640用于实现这些组件之间的连接通信。总线系统640除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图2B中将各种总线都标为总线系统640。
处理器610可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
用户接口630包括使得能够呈现媒体内容的一个或多个输出装置631,包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口630还包括一个或多个输入装置632,包括有助于用户输入的用户接口部件,比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。
存储器650可以是可移除的,不可移除的或其组合。示例性的硬件设备包括固态存储器,硬盘驱动器,光盘驱动器等。存储器650可选地包括在物理位置上远离处理器610的一个或多个存储设备。
存储器650包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器650旨在包括任意适合类型的存储器。
在一些实施例中,存储器650能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统651,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块652,用于经由一个或多个(有线或无线)网络接口620到达其他电子设备,示例性的网络接口620包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
呈现模块653,用于经由一个或多个与用户接口630相关联的输出装置631(例如,显示屏、扬声器等)使得能够呈现信息(例如,用于操作外围设备和显示内容和信息的用户接口);
输入处理模块654,用于对一个或多个来自一个或多个输入装置632之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。
在一些实施例中,本申请实施例提供的图像处理装置可以采用软件方式实现,图2B示出了存储在存储器650中的图像处理装置655,其可以是程序和插件等形式的软件,包括以下软件模块:接收模块6551、显示模块6552、生成模块6553,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分。将在下文中说明各个模块的功能。
在另一些实施例中,本申请实施例提供的图像处理装置可以采用硬件方式实现,作为示例,本申请实施例提供的图像处理装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本申请实施例提供的图像处理方法,例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,Application Specific IntegratedCircuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,Complex Programmable Logic Device)、现场可编程门阵列(FPGA,Field-Programmable Gate Array)或其他电子元件。
在一些实施例中,移动终端或电视设备可以通过运行计算机程序来实现本申请实施例提供的图像处理方法。举例来说,计算机程序可以是操作系统中的原生程序或软件模块;可以是本地(Native)应用程序(APP,Application),即需要在操作系统中安装才能运行的程序,如直播APP或者即时通信APP;也可以是小程序,即只需要下载到浏览器环境中就可以运行的程序;还可以是能够嵌入至任意APP中的小程序。总而言之,上述计算机程序可以是任意形式的应用程序、模块或插件。
将结合本申请实施例提供的电视设备的示例性应用和实施,说明本申请实施例提供的图像处理方法。
参见图3A,图3A是本申请实施例提供的图像处理方法的流程示意图,将结合图3A示出的步骤101至步骤103进行说明。
在步骤101中,电视设备响应于基于遥控设备实施的截屏触发操作,对电视设备显示的画面进行截屏处理。
在一些实施例中,遥控设备又称无线电遥控设备,遥控设备通常由发射电路和接收电路两大部分构成,遥控设备中的发射电路通过向被遥控设备发射指令信号的方式实现对被遥控设备的控制,遥控设备和被遥控设备之间通常采用无线连接的方式进行通信。在本申请实施例中,被遥控设备为电视设备,即通过遥控设备实现对电视设备的远程控制。
在一些实施例中,遥控设备是专用的遥控器;或者,移动终端与遥控设备是同一设备,移动终端用于通过发射无线信号来遥控电视设备;或者,遥控设备是区别于移动终端的其他移动终端,其他移动终端基于无线控制信号(例如,红外信号、蓝牙信号、超声波信号)控制电视设备。
在一些实施例中,截屏触发操作可以是针对遥控设备中的至少一个按键的按压操作,截屏触发操作也可以是针对遥控设备的体感操作(例如,通过遥控设备中的体感设备检测用户手势,比如,体感设备检测用户手势为向上挥动),截屏触发操作也可以是针对遥控设备中相应的截屏按钮的触控操作、声控操作等等。
作为示例,参见图4A,图4A是本申请实施例提供的图像处理方法的界面示意图。通过遥控设备控制电视设备所显示的内容610,电视设备响应于基于遥控设备实施的截屏触发操作,对电视设备显示的画面进行截屏处理,得到截屏图像601。
如此,通过遥控设备完成了对电视设备中所显示的画面进行截屏处理,可以使得用户在通过电视设备观看视频时,随时可以根据自身需要,截取视频画面,满足了用户对于电视设备截屏的个性化需求。
在步骤102中,电视设备显示截屏图像。
作为示例,参见图4E,图4E是本申请实施例提供的图像处理方法的界面示意图,可以在电视设备的显示界面中显示截屏图像601。
在步骤103中,电视设备向移动终端发送截屏图像;其中,截屏图像用于与移动终端的拍摄图像进行合成。
作为示例,电视设备向移动终端发送截屏图像,从而移动终端在接收到截屏图像后,进一步将接收到的截屏图像与移动终端的拍摄图像进行合成,得到最终的合成图像。
在一些实施例中,参见图3B,图3B是本申请实施例提供的图像处理方法的流程示意图;如图3B所示,在上述步骤101之前,即电视设备在响应于基于遥控设备实施的截屏触发操作之前,电视设备可以通过步骤104显示图形码。
在步骤104中,当满足自动连接条件时,电视设备显示图形码,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
在一些实施例中,自动连接条件包括以下至少之一:电视设备开机,电视设备从睡眠模式被唤醒,电视设备播放感兴趣的节目,电视设备播放曾经被截屏的节目。
作为示例,电视设备可以在接收到基于遥控设备实施的截屏触发操作之前,当满足自动连接条件时,显示图形码,其中,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
作为示例,电视设备可以在接收到基于遥控设备实施的截屏触发操作之后,在响应于基于遥控设备实施的截屏触发操作之前,显示图形码,其中,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
作为示例,当电视设备处于开机状态或电视设备从睡眠模式被唤醒时,表明电视设备此时可以正常运行,并执行相应的功能(例如,播放功能,接收信号功能),此时,在电视设备的显示界面显示相应的图形码,供移动终端扫描后,与移动终端建立连接。
作为示例,当电视设备正在播放用户感兴趣的节目时,表明用户需要截屏的可能性较大(可以理解的是,用户对感兴趣的节目中的某一帧画面进行截屏,以获取感兴趣的视频画面),此时,在电视设备的显示界面显示相应的图形码,以满足用户可能需要的截屏需求,用户在需要进行截屏时,即可通过移动终端扫描电视设备显示界面的图形码,与移动终端建立连接。
在一些实施例中,感兴趣的节目可以是电视设备根据用户的历史使用习惯或历史行为画像所确定的。感兴趣的节目也可以是用户根据自身兴趣订阅的节目(即订阅的节目可以在每次节目(节目集数)更新时,向用户推送相应的提示消息,或者将订阅的节目在节目列表中置顶,便于用户查看)。感兴趣的节目也可以是播放期数超出期数阈值的节目(例如,A节目的播放期数为10集,B节目的播放期数为15集,期数阈值为12集,那么,B节目则是感兴趣的节目)。感兴趣的节目也可以是播放时长超出时长阈值的节目(例如,A节目的播放时长为102分钟,B节目的播放时长为150分钟,时长阈值为120分钟,那么,B节目则是感兴趣的节目)。感兴趣的节目也可以是被分享的节目(例如,A节目曾经被用户通过移动终端或电视设备分享给其亲朋好友,而B节目没有被用户通过移动终端或电视设备分享给其亲朋好友,那么,A节目则是感兴趣的节目)。
作为示例,当电视设备正在播放曾经被截屏的节目时,同样表明用户需要截屏的可能性较大(可以理解的是,用户对曾经被截屏的节目中的某一帧画面进行截屏,以获取感兴趣的视频画面),此时,在电视设备的显示界面显示相应的图形码,以满足用户可能需要的截屏需求,用户在需要进行截屏时,即可通过移动终端扫描电视设备显示界面中所显示的图形码,与移动终端建立连接。
在一些实施例中,电视设备可以记录每一次被截屏的节目,生成历史截屏节目列表,当电视设备正在播放节目时,将当前播放的节目与历史截屏节目列表中的节目进行匹配,当历史截屏节目列表中存在于当前播放的节目相同的节目时,将当前播放的节目确定为曾经被截屏的节目。
作为示例,参见图4A,图4A是本申请实施例提供的图像处理方法的界面示意图。当满足自动连接条件时,在电视设备的显示界面中所显示图形码602,图形码602用于供移动终端扫描后建立与电视设备之间的通信连接。
如此,在满足连接条件时,显示用于供移动终端扫描后建立与电视设备之间的通信连接的图形码,从而有效避免了在电视设备的人机交互界面中始终显示图形码影响用户的观看体验。
在一些实施例中,图形码用于供移动终端扫描识别出电视设备在局域网中的地址和端口,根据地址和端口在局域网中建立与电视设备之间的通信连接。
作为示例,参见图4A,移动终端扫描显示在电视设备的显示界面中的图形码602,从而移动终端可以识别出电视设备在无线局域网中的地址和端口,进而根据电视设备在局域网中的地址和端口在局域网中建立与电视设备之间的通信连接。例如,电视设备和移动终端之间的通信连接方式可以是套接字连接。套接字(Socket),就是对网络中不同主机上的应用进程之间进行双向通信的端点的抽象。一个套接字就是网络上进程通信的一端,提供了应用层进程利用网络协议交换数据的机制。从所处的地位来讲,套接字上联应用进程,下联网络协议栈,是应用程序通过网络协议进行通信的接口,是应用程序与网络协议根进行交互的接口。
在一些实施例中,在上述步骤101中电视设备接收到基于遥控设备实施的截屏触发操作之前,或者在上述步骤104中电视设备显示图形码的同时。电视设备基于设备发现服务广播或(在电视设备所参与的组中)组播连接信息,连接信息包括电视设备在局域网中的地址和端口;其中,连接信息用于供移动终端解析出地址和端口,基于地址和端口在局域网中建立与电视设备之间的通信连接。
作为示例,参见图5A,图5A是本申请实施例提供的图像处理方法的原理示意图。电视设备600基于设备发现服务(mDNS服务)采用广播或组播的方式发送连接信息至服务器800。移动终端500基于设备发现协议(搜索mDNS)从服务器800中获取连接信息,并基于设备发现协议对获取到的连接信息进行解析,从而解析出连接信息中包括的电视设备在局域网中的地址和端口。从而移动终端500基于地址和端口在局域网中建立与电视设备600之间的通信连接,如图5A所示,移动终端500与电视设备600之间通过建立连接完成私有协议交互。
其中,设备发现协议又称多播DNS协议(Multicast DNS,mDNS),mDNS协议主要实现了在没有传统DNS服务器的情况下使局域网内的主机实现相互发现和通信,使用的端口为5353,遵从DNS协议,使用现有的DNS信息结构、名语法和资源记录类型。并且没有指定新的操作代码或响应代码。设备发现服务是为设备发现协议提供服务的。
在一些实施例中,电视设备基于设备发现服务广播连接信息,或者在电视设备所参与的组中组播连接信息,其中,广播是指采用多点投递的方式进行数据传输,组播(Multicast)又称多播,组播技术的初衷是在IP网络中,以“尽力而为”的形式发送信息到某个目标组,这个目标组称为组播组,这样在有源主机向多点目标主机发送信息需求时,源主机只发送一份数据,数据的目的地址是组播组地址,这样,凡是属于该组的成员,都可以接收到一份源主机发送的数据的拷贝,在组播方式下,只有真正信息需要的成员会收到信息,其他主机不会收到信息。
在一些实施例中,在上述步骤101中电视设备响应于基于遥控设备实施的截屏触发操作之前,可以通过以下方式确定截屏触发操作:从服务器获取截屏功能的灵敏度配置信息;其中,灵敏度配置信息包括截屏触发操作针对至少一个按键的按压次数和按压间隔时间;接收遥控设备发送的无线控制信号;其中,无线控制信号是遥控设备响应于针对至少一个按键的按压操作而发送的,且包括按压操作的按压次数和按压间隔时间;当按压操作的按压次数与配置信息包括的按压次数相同,且按压操作的按压间隔时间与配置信息包括的按压间隔时间相同时,确定按压操作为截屏触发操作。
作为示例,参见图5A,电视设备600从服务器800获取截屏功能的灵敏度配置信息,其中,截屏配置信息包括截屏触发操作针对至少一个按键的按压次数和按压间隔时间,例如,可以是针对遥控设备中的至少一个按键按压一次或连续的多次,也可以是顺序或同时按压2个或以上的按键。
作为示例,电视设备接收遥控设备发送的无线控制信号,例如,无线控制信号可以是红外信号、超声波信号等。遥控设备响应于针对至少一个按键的按压操作,发送无线控制信号至电视设备。电视设备在接收到无线控制信号后,判断无线控制信号中包括的按压操作的按压次数和按压间隔时间分别与配置信息中的按压次数和按压间隔时间是否相同,若按压次数和按压间隔时间均相同,则确定针对遥控设备的至少一个按键的按压操作为截屏触发操作。
如此,通过获取灵敏度配置信息,进而根据灵敏度配置信息判断针对遥控设备的至少一个按键的按压操作是否为截屏触发操作,从而有效避免了遥控设备发送的按压操作被误识别为截屏触发操作,有效提升了截屏触发操作的准确度。
在一些实施例中,在上述步骤101中对电视设备显示的画面进行截屏处理可以通过以下方式实现:调用电视设备的操作系统的第一截屏接口来对电视设备显示的画面进行截屏处理;其中,第一截屏接口是操作系统开放给外部应用的接口;当第一截屏接口调用失败时,对电视设备的操作系统的第二截屏接口进行反射处理,调用反射处理后的第二截屏接口来对电视设备显示的画面进行截屏处理;其中,第二截屏接口是电视设备的操作系统未开放给外部应用调用的接口。
作为示例,参见图5B,图5B是本申请实施例提供的图像处理方法的原理示意图。调用电视设备的操作系统的第一截屏接口来对电视设备显示的画面进行截屏处理,当第一截屏接口调用失败时,且当调用次数超过重试次数阈值时,对电视设备的操作系统的第二截屏接口进行反射处理,调用反射处理后的第二截屏接口来对电视设备显示的画面进行截屏处理,并将截屏处理得到的截屏图像进行保存。当第一截屏接口调用失败时,且当调用次数没有超过重试次数阈值时,继续调用电视设备的操作系统的第一截屏接口来对电视设备显示的画面进行截屏处理(即,重试)。当第一截屏接口调用成功时,将截屏处理得到的截屏图像进行保存。当反射处理后的第二截屏接口调用失败时,在电视设备显示的画面中提示截屏出错信息,以提示用户截屏出错。
在一些实施例中,反射处理是在运行状态中,对于任意一个类,都能够知道这个类的所有属性和方法的处理过程;对于任意一个对象,都能够调用它的任意一个方法和属性。这种动态获取的信息以及动态调用对象的处理方式称为反射处理。
如此,通过调用电视设备的操作系统开放给外部应用的接口和未开放给外部应用调用的接口对电视设备显示的画面进行截屏处理,从而为截屏处理的正常进行提供了双重保障,确保截屏处理能够正常进行。
在一些实施例中,在上述步骤101中对电视设备显示的画面进行截屏处理可以通过以下方式实现:电视设备根据截屏触发操作的操作时间点,对电视设备在操作时间点显示的画面进行截屏处理;其中,画面的被截屏区域是画面的全部区域,或者是被截屏操作设定的部分区域。
作为示例,参见图4F至图4G,图4F至图4G是本申请实施例提供的图像处理方法的界面示意图。根据截屏触发操作的操作时间点,对电视设备在操作时间点显示的画面进行截屏处理,例如,参见图4F和图4G,截屏触发操作的操作时间点是21:52:15,对电视设备在操作时间点21:52:15显示的画面进行截屏处理。而且,画面的被截屏区域可以是画面的全部区域601,画面的被截屏区域可以是画面的部分区域610。参见图4F,当画面的被截屏区域是画面的全部区域601时,被截屏区域中显示有“第10期:冠军…”;参见图4G,当画面的被截屏区域是画面的部分区域610时,被截屏区域中没有显示有“第10期:冠军…”。
如此,通过根据截屏触发操作的操作时间点,对电视设备在操作时间点显示的画面进行截屏处理,从而确保了操作时间点与被截屏的画面的显示时间保持一致,确保了被截屏的画面就是用户需要截屏的画面,从而有效避免了由于操作时延导致的截屏图像不准确的情况。
在一些实施例中,在上述步骤101中对电视设备显示的画面进行截屏处理可以通过以下方式实现:根据截屏触发操作的操作时间点确定截屏时间窗口,其中,截屏时间窗口以操作时间点为起点、中点或终点;对电视设备在截屏时间窗口内显示的多个画面进行截屏处理,对应得到多个截屏图像。
在一些实施例中,截屏时间窗口以操作时间点为起点,则处于截屏时间窗口中的截屏图像可以是电视设备中待显示的画面,即电视设备中即将显示的画面。截屏时间窗口以操作时间点为中点,则处于截屏时间窗口中的截屏图像可以是电视设备中待显示的画面和以往(历史)显示的画面。截屏时间窗口以操作时间点为终点,则处于截屏时间窗口中的截屏图像可以是电视设备中以往(历史)显示的画面。
作为示例,参见图4H,图4H是本申请实施例提供的图像处理方法的界面示意图。截屏时间窗口以操作时间点为终点,则处于截屏时间窗口中的截屏图像可以是电视设备中以往(历史)显示的画面。根据截屏触发操作的操作时间点确定以操作时间点为终点的截屏时间窗口,对电视设备在截屏时间窗口内显示的多个画面进行截屏处理,对应得到多个截屏图像611。
作为示例,当截屏时间窗口以操作时间点为起点,则处于截屏时间窗口中的截屏图像可以是电视设备中待显示的一系列画面,从而可以对电视设备中待显示的一系列画面进行多次截屏处理,得到多个截屏图像。
在一些实施例中,可以在电视设备的显示画面中显示操作时间点为起点、中点和终点的功能选项卡,响应于针对起点、中点和终点的功能选项卡中的至少一个功能选项的选择操作,设置相应的截屏时间窗口。
如此,通过截屏时间窗口的设置,可以对电视设备中显示的画面进行连续的多次截屏处理,得到多个截屏图像,从而有效避免了遗漏截屏图像的情况,有效提升了截屏处理的效果。
在另一些实施例中,在上述电视设备得到多个截屏图像之后,可以将得到的多个截屏图像全部发送到移动终端中。
在另一些实施例中,在上述电视设备得到多个截屏图像之后,还可以通过以下方式确定发送给移动终端的截屏图像:响应于针对多个截屏图像的选择操作,将多个截屏图像中被选择的截屏图像标记为将向移动终端发送的截屏图像。
如此,通过截屏时间窗口的设置,可以对电视设备中显示的画面进行连续的多次截屏处理,得到多个截屏图像,进而针对多个截屏图像进行选择,确定用户自身需要的截屏图像,并将选择后的截屏图像发送至移动终端,从而有效避免了遗漏截屏图像的情况。
在一些实施例中,上述多个截屏图像是截屏时间窗口内显示的全部画面中的满足筛选条件的画面,筛选条件包括以下至少之一:截屏图像中的前景与背景的显示比例大于显示比例阈值;截屏图像的前景中的对象的数量大于数量阈值;截屏图像的前景中的对象的姿态角度处于设定的角度区间。
作为示例,当N个(其中,N为大于3的正整数)截屏画面中N-3个截屏画面满足截屏图像中的前景与背景的显示比例大于显示比例阈值,则多个截屏画面为此N-3个满足筛选条件的截屏画面。例如,截屏图像中的前景与背景的显示比例为1/3,显示比例阈值为1,则截屏图像中的前景与背景的显示比例小于显示比例阈值,可以理解的是,当显示比例为1时,则说明截屏图像中的前景与背景的显示占比相同。
作为示例,当截屏图像的前景中的对象的数量为10时,数量阈值为8时,则截屏图像的前景中的对象的数量大于数量阈值,此时说明截屏画面中的信息量相对较大,即画面较为丰富,此时,将截屏图像的前景中的对象的数量大于数量阈值的截屏图像确定为多个截屏图像,从而实现了通过图像信息量的维度实现了对截屏图像的筛选。
作为示例,姿态角度可以是在三维空间的右手笛卡尔坐标系下的俯仰角、偏航角、翻滚角中的至少之一。通过确定截屏图像的前景中的对象的姿态角度,从而判断截屏图像的前景中的对象的姿态角度是否处于设定的角度区间,实现对截屏图像的筛选。
在一些实施例中,在上述步骤101中对电视设备显示的画面进行截屏处理可以通过以下方式实现:根据截屏触发操作的操作时间点确定截屏时间窗口,其中,截屏时间窗口以操作时间点为起点、中点或终点;对电视设备在截屏时间窗口内显示的多个画面进行截屏处理,并将对应得到多个截屏图像拼接为一个完整的截屏图像;其中,完整的截屏图像用于被发送到移动终端。
作为示例,当截屏时间窗口以操作时间点为起点,则处于截屏时间窗口中的截屏图像可以是电视设备中待显示的一系列画面,从而可以对电视设备中待显示的一系列画面进行多次截屏处理,得到多个截屏图像,并将多个截屏图像拼接为一个完整的截屏图像,并将拼接后的完整图像发送至移动终端进行后续处理。
如此,通过对将多个截屏图像拼接为一个完整的截屏图像,从而便于全面完整的展示多个截屏图像,有效提升了用户体验。
在一些实施例中,在通过上述步骤104电视设备显示图形码之前,还可以通过以下方式显示相关内容:显示以下候选的功能项:单一截屏功能,合成功能,取消功能;响应于针对合成功能的选择操作,显示图形码。
作为示例,参见图4B至图4D,图4B至图4D是本申请实施例提供的图像处理方法的界面示意图。在电视设备的人机交互界面中,显示以下候选的功能项:单一截屏功能(仅截屏)、合成功能(合成)和取消功能。用户可以通过遥控设备中的相应控件点击显示在电视设备的人机交互界面中的候选的功能选项。参见图4B,当点击功能选项合成功能(合成)时,响应于针对合成功能的选择操作,在电视设备的人机交互界面中显示图形码602。参见图4C,当点击功能项单一截屏功能(仅截屏)时,响应于针对单一截屏功能(仅截屏)的选择操作,在电视设备的人机交互界面中显示相应的截屏图像601。
如此,通过在电视设备的人机交互界面中显示候选的功能项,可以更好的满足不同用户的需求,用户可以根据自身需求选择相应的功能选项,从而显著提高了用户体验感。
在一些实施例中,上述响应于针对单一截屏功能的选择操作的同时,还可以执行以下处理:响应于针对单一截屏功能的选择操作,执行以下操作至少之一:在电视设备中保存截屏图像;将截屏图像发送到服务器保存;将截屏图像发送到移动终端保存;响应于针对取消功能的选择操作,停止显示截屏图像。
作为示例,参见图4C,当点击功能项单一截屏功能(仅截屏)时,响应于针对单一截屏功能(仅截屏)的选择操作,在电视设备的人机交互界面中显示相应的截屏图像601,并在电视设备中保存截屏图像601,并将截屏图像分别发送到服务器和移动终端中进行保存。参见图4D,当点击功能项取消时,响应于针对取消功能的选择操作,在电视设备的人机交互界面中停止显示截屏图像601以及候选的功能项,并删除截屏图像。
在一些实施例中,电视设备将截屏图像发送到移动终端中,可以是预先将电视设备和移动终端建立通信连接,也可以是在选择保存功能后显示图形码,供移动终端扫描以建立通信连接。将截屏图像发送到服务器中进行保存,服务器可以将截屏图像保存至电视设备的登录账号的网盘中。
如此,通过将截屏图像分别发送到服务器和移动终端中进行保存,可以便于服务器和移动终端对截屏图像进行下一步的处理。
在一些实施例中,在上述步骤102中电视设备显示截屏图像的同时,显示图形码;其中,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
作为示例,参加图4E,当显示截屏图像601时,可以在截屏图像的上方浮动显示图形码602(例如,可以在截屏图像的上方以浮窗的形式显示图形码)。当取消显示截屏图像601时,可以同步取消显示图形码602或继续显示图形码602;或者,当移动终端和电视设备之间建立通信连接时,取消显示图形码602。
在一些实施例中,当移动终端和电视设备之间建立了通信连接之后,可以始终保持移动终端和电视设备之间的通信连接(即建立连接后不断开连接),也可以在移动终端和电视设备建立通信连接之后的预设等待时长内保持通信连接,当连接时长达到预设等待时长时,则释放(断开)移动终端和电视设备之间的通信连接。
在一些实施例中,在上述步骤103中,电视设备向移动终端发送截屏图像可以通过以下方式实现:将截屏图像拆分为多个数据分片,通过通信连接依次向移动终端发送多个数据分片,并显示多个数据分片的传输速度;其中,多个数据分片用于供移动终端组装得到截屏图像。
作为示例,截屏图像中包括多个数据(例如,像素点数据),从而可以将截屏图像拆分为多个数据分片,每个数据分片包括截屏图像的部分像素点数据。通过通信连接依次向移动终端发送多个数据分片,从而完成整个截屏图像的像素点数据的发送,同时在电视设备的显示界面显示多个数据分片的传输速度(例如,可以通过进度条的方式显示多个数据分片的传输速度)。然后,移动终端在接收到数据分片后,对数据分片进行组装,重现截屏图像。
如此,通过数据分片的方式将截屏图像发送至移动终端,从而可以在电视设备的显示界面实时显示传输速度,便于用户实时掌握传输情况,有效增强了用户体验。
在一些实施例中,在上述步骤103中,电视设备向移动终端发送截屏图像之前,可以向移动终端发送合成指令;其中,合成指令用于触发移动终端显示合成界面。
作为示例,通过电视设备向移动终端发送合成指令,移动终端在接收到合成指令之后,在移动终端的人机交互界面显示合成界面。
如此,通过遥控设备对电视设备所显示的画面进行截屏处理,并将截屏图像显示在电视设备中的同时,将截屏图像发送至移动终端中与移动终端的拍摄图像进行合成。如此,实现了在电视设备中实现截屏功能,并将电视设备的截屏图像与移动终端中的画面进行合成,从而能够显著提高电视设备的用户互动性,增强用户体验感。
将结合本申请实施例提供的移动终端的示例性应用和实施,说明本申请实施例提供的图像处理方法。
参见图3C,图3C是本申请实施例提供的图像处理方法的流程示意图,将结合图3C示出的步骤201至步骤203进行说明。
在步骤201中,移动终端接收电视设备发送的截屏图像;其中,截屏图像是对电视设备显示的画面进行截屏处理得到的。
作为示例,电视设备对其显示的画面进行截屏处理,得到截屏图像,并向移动终端发送截屏图像,移动终端接收电视设备发送的截屏图像。
在步骤202中,移动终端在图像合成界面中显示截屏图像和移动终端的拍摄预览画面。
作为示例,参见图4I,图4I是本申请实施例提供的图像处理方法的界面示意图。移动终端在图像合成界面503中显示接收到的截屏图像501和移动终端的拍摄预览画面502。
在一些实施例中,上述步骤202中在图像合成界面中显示截屏图像和移动终端的拍摄预览画面,可以通过以下方式实现:执行以下操作之一:移动终端在图像合成界面不同的区域中分别显示截屏图像和移动终端的拍摄预览画面;将拍摄预览画面中的背景进行透明化处理,将截屏图像叠加到透明化处理后的拍摄预览画面上;将截屏图像叠加到应用了设定透明度的拍摄预览画面上。
作为示例,参见图4J,图4J是本申请实施例提供的图像处理方法的界面示意图。在图像合成界面503不同的区域中分别显示截屏图像501和移动终端的拍摄预览画面502(参见图4J左图)。将拍摄预览画面502中的背景进行透明化处理,将截屏图像501叠加到透明化处理后的拍摄预览画面502上(参见图4J右图)。将截屏图像501叠加到应用了设定透明度的拍摄预览画面502上(参见图4J右图)。
如此,通过将拍摄预览画面中的背景进行透明化处理后,再将截屏图像叠加到透明化处理后的拍摄预览画面上,从而有效增强了截屏图像和拍摄预览画面的融合程度,使得截屏图像和拍摄预览画面能够更加贴合的融合在一起。
在步骤203中,移动终端响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成,在合成界面中显示合成图像。
作为示例,参见图4K,图4K是本申请实施例提供的图像处理方法的界面示意图。移动终端响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成,在合成界面503中显示合成图像504。
如此,通过在移动终端的合成界面中将移动终端的拍摄图像和截屏图像进行合成并显示,使得用户可以通过在移动终端的合成界面中完成对电视设备的截屏图像的合成显示,从而能够显著提高电视设备的用户互动性,增强用户体验感。
在一些实施例中,在接收到拍摄触发操作之前,还可以周期性刷新移动终端的拍摄预览画面。
作为示例,在接收到拍摄触发操作之前,以1秒为周期,刷新移动终端的拍摄预览画面,从而可以在接收到拍摄触发操作之前,对拍摄预览画面内容进行实时采集。
在一些实施例中,接收电视设备发送的合成指令;根据合成指令,转入执行在图像合成界面中显示截屏图像和移动终端的拍摄预览画面的步骤。
作为示例,移动终端接收电视设备发送的合成指令,移动终端根据合成指令,转入执行上述步骤202,在图像合成界面中显示截屏图像和移动终端的拍摄预览画面。
在一些实施例中,上述步骤203中基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成可以通过以下方式实现:将截屏图像和拍摄图像按照宽度方向或高度方向进行拼接;或者将拍摄图像中的前景叠加到截屏图像上。
作为示例,将截屏图像和拍摄图像按照截屏图像的宽度方向和拍摄图像的宽度方向进行拼接,拼接后得到的合成图像可以是截屏图像显示在合成界面的顶部,拍摄图像显示在截屏图像的底部;或者,拼接后得到的合成图像可以是截屏图像显示在合成界面的底部,拍摄图像显示在截屏图像的顶部。将截屏图像和拍摄图像按照截屏图像的高度方向和拍摄图像的高度方向进行拼接,拼接后得到的合成图像可以是截屏图像显示在合成界面的左部,拍摄图像显示在截屏图像的右部;或者,拼接后得到的合成图像可以是截屏图像显示在合成界面的右部,拍摄图像显示在截屏图像的左部。
作为示例,参见图4L,图4L本申请实施例提供的图像处理方法的界面示意图,将拍摄图像中的前景505(即图4L中仅显示人物头部画面的人脸图像)叠加到截屏图像501上(即图4L中显示人物上半身画面的人脸图像)。
在一些实施例中,上述将拍摄图像中的前景叠加到截屏图像上可以通过以下方式实现:识别出拍摄图像中的前景,将拍摄图像中的前景之外的部分作为拍摄图像中的背景,并将拍摄图像中的背景包括的每个像素的颜色值修改为透明的颜色值;其中,前景包括至少一个对象;将截屏图像叠加到修改后的拍摄图像上。
作为示例,前景通常包括至少一个对象,对象通常可以是拍摄过程中的人和物。在一幅拍摄图像中,拍摄图像的前景通常比拍摄图像的背景的信息量更加丰富,因此,可以在识别出拍摄图像中的前景后,将信息量相对较少的拍摄图像中的背景的像素颜色值修改为透明的颜色值,从而将拍摄图像的背景画面取消显示后(背景画面完全透明),再将截屏图像叠加到修改后的拍摄图像上,从而使得拍摄图像的前景和截屏图像取得更好的合成效果,有效避免了拍摄图像的背景对合成图像的干扰。
将结合本申请实施例提供的移动终端、电视设备和遥控设备的示例性应用和实施,说明本申请实施例提供的图像处理方法。
参见图3D,图3D是本申请实施例提供的图像处理方法的流程示意图,将结合图3D示出的步骤301至步骤310进行说明。
在步骤301中,当满足自动连接条件时,显示图形码,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
作为示例,电视设备判断是否满足连接条件,当满足自动连接条件时,在电视设备中显示图形码,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
在步骤302中,移动终端扫描图形码,建立与电视设备之间的通信连接。
作为示例,移动终端扫描显示在电视设备中的图形码,移动终端建立与电视设备之间的通信连接。
在步骤303中,遥控设备响应于针对至少一个按键的按压操作,生成无线控制信号。
作为示例,遥控设备响应于针对至少一个按键的按压操作,生成无线控制信号。
在步骤304中,遥控设备向电视设备发送无线控制信号;无线控制信号包括按压操作的按压次数和按压间隔时间。
作为示例,遥控设备向电视设备发送无线控制信号;无线控制信号包括按压操作的按压次数和按压间隔时间。
在步骤305中,当按压操作的按压次数与配置信息包括的按压次数相同,且按压操作的按压间隔时间与配置信息包括的按压间隔时间相同时,确定按压操作为截屏触发操作。
作为示例,电视设备判断按压操作的按压次数与配置信息包括的按压次数是否相同,并判断按压操作的按压间隔时间与配置信息包括的按压间隔时间是否相同,当按压操作的按压次数与配置信息包括的按压次数相同,且按压操作的按压间隔时间与配置信息包括的按压间隔时间相同时,电视设备确定按压操作为截屏触发操作。
在步骤306中,电视设备响应于基于遥控设备实施的截屏触发操作,对电视设备显示的画面进行截屏处理。
作为示例,电视设备响应于基于遥控设备实施的截屏触发操作,对电视设备显示的画面进行截屏处理。
在步骤307中,电视设备显示截屏图像。
作为示例,在电视设备的显示画面中显示截屏图像。
在步骤308中,电视设备向移动终端发送截屏图像。
作为示例,电视设备向移动终端发送截屏图像。
在步骤309中,移动终端在图像合成界面中显示截屏图像和移动终端的拍摄预览画面。
作为示例,移动终端在接收到电视设备发送的截屏图像之后,移动终端在在图像合成界面中显示截屏图像和移动终端的拍摄预览画面。
在步骤310中,移动终端响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成,在合成界面中显示合成图像。
作为示例,移动终端响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成,在合成界面中显示合成图像。
下面,将说明本申请实施例在一个实际的应用场景中的示例性应用。
在本申请实施例中,可以为用户提供一种与电视(即上文所述的电视设备)精彩画面进行合影的娱乐功能,当用户看到电视设备上展现的精彩画面时,可以快速按下遥控设备中的截屏快捷键,在截屏结束后,会在手机(即上文所述的移动终端)上自动显示视频APP的合影界面,并且将截屏画面传输到手机中,截屏画面传输结束后,会打开手机的前置摄像头,可以很方便的将自己的身影,与屏幕上精彩画面结合在一起,形成一张合影,并且保存在手机里。保存下来的图片还可以分享到社交平台,进一步增加了趣味性和娱乐性。
相关技术中的截屏技术方案,在手机,可以通过手机的快捷键(多个按键组合)、手势动作、状态栏的截屏按钮,触发截屏的功能,截图路径短,且方便。在电视(即上文所述的电视设备),当前大部分的电视设备,均不会配置截屏的功能,而且,截屏的图片也是保存在TV设备上的相册中,无法分享到手机。手机的截屏功能比较单一,如果要想把人物和截屏后的图片整合到一起,还需要借助第三方的图片处理软件,手动的去完成图像整合,过程较为繁杂。
本申请实施例,通过为用户提供与电视精彩画面合影的功能,本申请实施例解决了现有技术方案存在的三大问题:电视无截屏功能、截屏后的图片只能保存在本地,无法传输到手机、手机的图片无法方便快捷的与用户合影。本申请实施例还能进一步提升电视的娱乐性,并且与手机产生无缝联动,让电视的画面能够及时的通过手机分享出去。
在一些实施例中,用户打开电视设备,首次使用合影功能时,会弹出功能使用引导界面,在该界面中会显示图像处理的使用方法,其中,截屏的方式为:快速连续按两下遥控器中的方向下键。当需要进行合影时,手机的视频APP就要先与电视的视频APP建立局域网连接,其中,建立连接的方法是:在电视的显示界面会展示一个连接二维码,连接二维码中携带有电视的IP地址和服务端口,手机扫描电视展示的连接二维码,手机扫描后,手机可以从连接二维码中的获取电视的IP地址和服务端口,手机通过IP地址和端口连接至电视。在响应于截屏操作后,会优先判断用户的设置情况,如果是设置了仅截屏,则在截屏后展示三秒的截屏画面,随后退出截屏画面;如果是设置了合影,且电视没有与手机建立连接,则会展示出二维码,并且提示用户进行连接,此时,如果用户按下遥控设备的返回键,则放弃合影,只保存截屏的画面,如果用户选择进行合影,就打开手机的视频APP,扫描电视展示出来的二维码,与电视视频APP建立连接,连接建立后,电视视频APP就会通过连接通道,在手机显示视频APP中的合影界面,在手机完成合影的操作。
在一些实施例中,在应用设置中可以开关合影的功能,还可以设置仅截屏,或者合影(截屏后在手机与截屏画面合影)。
在一些实施例中,参见图5A,图5A是本申请实施例提供的图像处理方法的原理示意图,联动服务会在电视建立一个mDNS的设备发现服务和WebSocket服务器,主要职责是提供设备发现服务,以及手机与电视的连接通道,和数据传输通道。
在一些实施例中,参见图5A,手机500视频APP使用mDNS发现协议,可以搜索出局域网内开启了mDNS服务的电视600,电视600的mDNS服务会向局域网内所有的主机组播一个信息,信息中携带电视600的IP地址,和联动服务的端口,手机500可以通过mDNS协议返回的数据包,解析出电视的IP地址和联动服务端口,与电视600建立连接。
在一些实施例中,参见图5F,图5F是本申请实施例提供的图像处理方法的原理示意图,手机与电视的连接,除了借助设备发现,还可以通过连接二维码,解决了由于发现不了局域网内的设备,无法与电视建立连接的问题,连接二维码会携带电视的IP地址和联动服务的端口,在手机的视频APP扫描了连接二维码后,会解析出连接二维码中的IP地址和联动服务端口,并且与电视建立连接。通过刷新二维码,提取出二维码中的IP地址和联动服务的端口,将IP地址和联动服务的端口传入生成二维码。
在一些实施例中,参见图5C,图5C是本申请实施例提供的图像处理方法的原理示意图,电视截屏的触发主要由遥控器(即上文所述的遥控设备)按键触发,默认触发方式是连续点击两次方向下键,两次的间隔需小于等于250毫秒,由于电视设备品牌比较多,不同电视设备品牌都有其特色的功能,这些功能有可能和本申请实施例的截屏触发方式发生冲突,所以触发的按键值需要做到后台可配,时间间隔和连续点击的次数也需要能够支持后台可配,这样就能灵活的避免冲突的问题,并且可以随时调节时间间隔和次数,以此控制灵敏度。参见图5C,图5C中主要分为两条处理支路,第一条支路为:初始化mDNS服务、包装mDNS协议、向其他主机广播;第二条支路为:初始化WebSocket、绑定服务端口、注册协议解析器。
在一些实施例中,参见图5D,图5D是本申请实施例提供的图像处理方法的原理示意图。首先,打开APP;然后初始化全局配置,拉取后台配置,保存后台配置,并读取配置。进行截屏管理初始化,读取截屏按键配置,按键时间监听,响应按键时间,最终截屏。
在一些实施例中,参见图5B,截屏的实现,本申请实施例采用系统提供的截屏接口(即上文所述的第一截屏接口),这样可以兼容性更高,更稳定,如果遇到截屏失败,会进行重试,如果重试失败,则会尝试调用更底层的接口(即上文所述的第二截屏接口)。
在一些实施例中,参见图5E,图5E是本申请实施例提供的图像处理方法的原理示意图,在截屏结束后,会通过连接通道,由电视发起合影指令,手机的视频APP在接收到合影指令后,打开合影界面,接着回复电视合影界面已打开(即图5E中回复指令),且告知电视,手机的视频APP已可以接收截屏画面数据,电视在收到回复后,发起截屏画面数据传输指令,由于截屏画面数据较大,需要分片传输,电视会将画面数据拆分为1024字节的数据包,依次传输到手机,手机视频APP接收到画面数据后,进行组装,当接收到结束数据包时,就代表所有数据包已传输完毕,这时就会将画面数据编码成完整的图片对象,展示在合影的界面上。手机在接收数据的过程中,为了提升用户体验,手机界面上会有数据传输的动态效果,并且会有传输进度展示。
在一些实施例中,手机的合影会使用到摄像头,在合影界面,打开摄像头,界面上会展示出摄像头所拍摄的影像,并且将截屏画面合成到影像背景中。在手机接收完电视传输过来的图片后,图片会展示在合影界面,当作背景,与此同时,需要调用系统的摄像头接口,从摄像头中读取影像数据,在读取到完整一帧的数据后,对该数据进行人物识别,图像数据的排列可以认为是一个二维数组,这个二位数组里每个坐标都代表一个像素点,对应的值是RGB值,识别出人物后,人物的数据会对应二位数组的具体的坐标,那么非人物的坐标本申请实施例会将其填充为透明的RGB值,这样就能形成一张只有人物的图片,图片非人物的部分都是透明的,可以叠放在背景之上,从而达到合影的效果,在用户还未进行最后拍照前,本申请实施例会每间隔一秒更新一张人物图片,这样也能达到人物表情,或者动作变化的效果。
本申请实施例可以在手机截取电视的屏幕画面,并且很方便的将自己添加到截取的画面中,用户可以将合成后的图片分享到朋友圈,增加了趣味性和娱乐性,提升用户体验,也为用户提供了一键分享电视精彩画面的途径。
下面继续说明本申请实施例提供的图像处理装置455的实施为软件模块的示例性结构,在一些实施例中,如图2A所示,存储在存储器450的图像处理装置455中的软件模块可以包括:截屏模块,用于响应于基于遥控设备实施的截屏触发操作,对电视设备显示的画面进行截屏处理,显示截屏图像;发送模块,用于向移动终端发送截屏图像;其中,截屏图像用于与移动终端的拍摄图像进行合成。
在本申请实施例中,上述图像处理装置还包括:第一显示模块,用于当满足自动连接条件时,显示图形码,图形码用于供移动终端扫描后建立与电视设备之间的通信连接;其中,自动连接条件包括以下至少之一:电视设备开机,电视设备从睡眠模式被唤醒,电视设备播放感兴趣的节目,电视设备播放曾经被截屏的节目。
在本申请实施例中,当显示截屏图像时,上述图像处理装置还包括:第二显示模块,用于显示图形码;其中,图形码用于供移动终端扫描后建立与电视设备之间的通信连接。
在本申请实施例中,上述图像处理装置还包括:第三显示模块,用于显示以下候选的功能项:单一截屏功能,合成功能,取消功能;响应于针对合影功能的选择操作,显示图形码。
在本申请实施例中,上述图像处理装置还包括:保存模块,用于响应于针对单一截屏功能的选择操作,执行以下操作至少之一:在电视设备中保存截屏图像;将截屏图像发送到服务器保存;将截屏图像发送到移动终端保存。停止显示模块,用于响应于针对取消功能的选择操作,停止显示截屏图像。
在本申请实施例中,上述图像处理装置还包括:连接模块,用于在接收到基于遥控设备实施的截屏触发操作之前,或者在显示图形码时,电视设备基于设备发现服务广播或组播连接信息,连接信息包括电视设备在局域网中的地址和端口;其中,连接信息用于供移动终端解析出地址和端口,基于地址和端口在局域网中建立与电视设备之间的通信连接。
在本申请实施例中,上述图像处理装置还包括:获取模块,用于从服务器获取截屏功能的灵敏度配置信息;其中,灵敏度配置信息包括截屏触发操作针对至少一个按键的按压次数和按压间隔时间;接收遥控设备发送的无线控制信号;其中,无线控制信号是遥控设备响应于针对至少一个按键的按压操作而发送的,且包括按压操作的按压次数和按压间隔时间。确定模块,用于当按压操作的按压次数与配置信息包括的按压次数相同,且按压操作的按压间隔时间与配置信息包括的按压间隔时间相同时,确定按压操作为截屏触发操作。
在本申请实施例中,上述截屏模块,还用于调用电视设备的操作系统的第一截屏接口来对电视设备显示的画面进行截屏处理;其中,第一截屏接口是操作系统开放给外部应用的接口;当第一截屏接口调用失败时,对电视设备的操作系统的第二截屏接口进行反射处理,调用反射处理后的第二截屏接口来对电视设备显示的画面进行截屏处理;其中,第二截屏接口是电视设备的操作系统未开放给外部应用调用的接口。
在本申请实施例中,上述截屏模块,还用于根据截屏触发操作的操作时间点,对电视设备在操作时间点显示的画面进行截屏处理;其中,画面的被截屏区域是画面的全部区域,或者是被截屏操作设定的部分区域。
在本申请实施例中,上述截屏模块,还用于根据截屏触发操作的操作时间点确定截屏时间窗口,其中,截屏时间窗口以操作时间点为起点、中点或终点;对电视设备在截屏时间窗口内显示的多个画面进行截屏处理,对应得到多个截屏图像。图像处理装置还包括:标记模块,用于响应于针对多个截屏图像的选择操作,将多个截屏图像中被选择的截屏图像标记为将向移动终端发送的截屏图像。
在本申请实施例中,上述截屏模块,还用于根据截屏触发操作的操作时间点确定截屏时间窗口,其中,截屏时间窗口以操作时间点为起点、中点或终点;对电视设备在截屏时间窗口内显示的多个画面进行截屏处理,并将对应得到多个截屏图像拼接为一个完整的截屏图像;其中,完整的截屏图像用于被发送到移动终端。
在本申请实施例中,上述发送模块,还用于将截屏图像拆分为多个数据分片,通过通信连接依次向移动终端发送多个数据分片,并显示多个数据分片的传输速度;其中,多个数据分片用于供移动终端组装得到截屏图像。
在本申请实施例中,图像处理装置还包括:指令发送模块,用于向移动终端发送合成指令;其中,合成指令用于触发移动终端显示合成界面。
下面继续说明本申请实施例提供的图像处理装置655的实施为软件模块的示例性结构,在一些实施例中,如图2B所示,存储在存储器650的图像处理装置655中的软件模块可以包括:接收模块,用于接收电视设备发送的截屏图像;其中,截屏图像是对电视设备显示的画面进行截屏处理得到的;显示模块,用于在图像合成界面中显示截屏图像和移动终端的拍摄预览画面;生成模块,用于响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与截屏图像进行合成,在合成界面中显示合成图像。
在本申请实施例中,上述显示模块,还用于执行以下操作之一:在图像合成界面不同的区域中分别显示截屏图像和移动终端的拍摄预览画面;将拍摄预览画面中的背景进行透明化处理,将截屏图像叠加到透明化处理后的拍摄预览画面上;将截屏图像叠加到应用了设定透明度的拍摄预览画面上。
在本申请实施例中,上述图像处理装置还包括:刷新模块,用于周期性刷新移动终端的拍摄预览画面。
在本申请实施例中,上述图像处理装置还包括:指令接收模块,用于接收电视设备发送的合成指令;跳转模块,用于根据合成指令,转入执行在图像合成界面中显示截屏图像和移动终端的拍摄预览画面的步骤。
在本申请实施例中,上述生成模块,还用于将截屏图像和拍摄图像按照宽度方向或高度方向进行拼接;或者将拍摄图像中的前景叠加到截屏图像上。生成模块,还用于识别出拍摄图像中的前景,将拍摄图像中的前景之外的部分作为拍摄图像中的背景,并将拍摄图像中的背景包括的每个像素的颜色值修改为透明的颜色值;其中,前景包括至少一个对象;将截屏图像叠加到修改后的拍摄图像上。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行本申请实施例上述的图像处理方法。
本申请实施例提供一种存储有可执行指令的计算机可读存储介质,其中存储有可执行指令,当可执行指令被处理器执行时,将引起处理器执行本申请实施例提供的图像处理方法,例如,如图3A示出的图像处理方法。
本申请实施例提供一种电视设备,包括:存储器,用于存储可执行指令;处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的图像处理方法。
本申请实施例提供一种移动终端,包括:存储器,用于存储可执行指令;处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的图像处理方法。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(HTML,Hyper TextMarkup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个电子设备上执行,或者在位于一个地点的多个电子设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个电子设备上执行。上文所描述的电子设备可以是上文所描述的移动终端或电视设备。
综上所述,通过本申请实施例具有以下有益效果:
(1)通过遥控设备对电视设备所显示的画面进行截屏处理,并将截屏图像显示在电视设备中的同时,将截屏图像发送至移动终端中与移动终端的拍摄图像进行合成。如此,实现了在电视设备中实现截屏功能,并将电视设备的截屏图像与移动终端中的画面进行合成,从而能够显著提高电视设备的截屏功能的处理效果和互动体验。
(2)通过在电视设备的人机交互界面中显示候选的功能项,可以更好的满足不同用户的需求,用户可以根据自身需求选择相应的功能选项,从而显著提高了用户体验感。
(3)在满足连接条件时,显示用于供移动终端扫描后建立与电视设备之间的通信连接的图形码,从而有效避免了在电视设备的人机交互界面中始终显示图形码影响用户的观看体验。
(4)通过遥控设备完成了对电视设备中所显示的画面进行截屏处理,可以使得用户在通过电视设备观看视频时,随时可以根据自身需要,截取视频画面,满足了用户对于电视设备截屏的个性化需求。
(5)通过将截屏图像分别发送到服务器和移动终端中进行保存,可以便于服务器和移动终端对截屏图像进行下一步的处理。
(6)通过获取灵敏度配置信息,进而根据灵敏度配置信息判断针对遥控设备的至少一个按键的按压操作是否为截屏触发操作,从而有效避免了遥控设备发送的按压操作被误识别为截屏触发操作,有效提升了截屏触发操作的准确度。
(7)通过调用电视设备的操作系统开放给外部应用的接口和未开放给外部应用调用的接口对电视设备显示的画面进行截屏处理,从而为截屏处理的正常进行提供了双重保障,确保截屏处理能够正常进行。
(8)通过根据截屏触发操作的操作时间点,对电视设备在操作时间点显示的画面进行截屏处理,从而确保了操作时间点与被截屏的画面的显示时间保持一致,确保了被截屏的画面就是用户需要截屏的画面,从而有效避免了由于操作时延导致的截屏图像不准确的情况。
(9)通过截屏时间窗口的设置,可以对电视设备中显示的画面进行连续的多次截屏处理,得到多个截屏图像,从而有效避免了遗漏截屏图像的情况,有效提升了截屏处理的效果。
(10)通过截屏时间窗口的设置,可以对电视设备中显示的画面进行连续的多次截屏处理,得到多个截屏图像,进而针对多个截屏图像进行选择,确定用户自身需要的截屏图像,并将选择后的截屏图像发送至移动终端,从而有效避免了遗漏有效截屏图像的情况。
(11)通过对将多个截屏图像拼接为一个完整的截屏图像,从而便于全面完整的展示多个截屏图像,有效提升了用户体验。
(12)通过数据分片的方式将截屏图像发送至移动终端,从而可以在电视设备的显示界面实时显示传输速度,便于用户实时掌握传输情况,有效增强了用户体验。
(13)通过在移动终端的合成界面中将移动终端的拍摄图像和截屏图像进行合成并显示,使得用户可以通过在移动终端的合成界面中完成对电视设备的截屏图像的合成显示,从而能够显著提高电视设备的用户互动性,增强用户体验感。
(14)通过将拍摄预览画面中的背景进行透明化处理后,再将截屏图像叠加到透明化处理后的拍摄预览画面上,从而有效增强了截屏图像和拍摄预览画面的融合程度,使得截屏图像和拍摄预览画面能够更加贴合的融合在一起。
以上所述,仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本申请的保护范围之内。

Claims (25)

1.一种图像处理方法,其特征在于,应用于电视设备,所述方法包括:
响应于基于遥控设备实施的截屏触发操作,对所述电视设备显示的画面进行截屏处理,显示截屏图像,以及
向移动终端发送所述截屏图像;其中,所述截屏图像用于与所述移动终端的拍摄图像进行合成。
2.根据权利要求1所述的方法,其特征在于,在响应于基于所述遥控设备实施的截屏触发操作之前,所述方法还包括:
当满足自动连接条件时,显示图形码,所述图形码用于供所述移动终端扫描后建立与所述电视设备之间的通信连接;其中,所述自动连接条件包括以下至少之一:所述电视设备开机,所述电视设备从睡眠模式被唤醒,所述电视设备播放感兴趣的节目,所述电视设备播放曾经被截屏的节目。
3.根据权利要求1所述的方法,其特征在于,当显示所述截屏图像时,所述方法还包括:
显示图形码;其中,所述图形码用于供所述移动终端扫描后建立与所述电视设备之间的通信连接。
4.根据权利要求3所述的方法,其特征在于,在显示图形码之前,所述方法还包括:
显示以下候选的功能项:单一截屏功能,合成功能,取消功能;
响应于针对所述合成功能的选择操作,显示图形码;
响应于针对所述单一截屏功能的选择操作,执行以下操作至少之一:在所述电视设备中保存所述截屏图像;将所述截屏图像发送到服务器保存;将所述截屏图像发送到所述移动终端保存;
响应于针对所述取消功能的选择操作,停止显示所述截屏图像。
5.根据权利要求2或3所述的方法,其特征在于,
所述图形码用于供所述移动终端扫描识别出所述电视设备在局域网中的地址和端口,根据所述地址和端口在所述局域网中建立与所述电视设备之间的通信连接。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在接收到基于所述遥控设备实施的截屏触发操作之前,或者当在显示图形码时,所述电视设备基于设备发现服务广播或组播连接信息,所述连接信息包括所述电视设备在所述局域网中的地址和端口;
其中,所述连接信息用于供所述移动终端解析出所述地址和端口,基于所述地址和端口在所述局域网中建立与所述电视设备之间的通信连接。
7.根据权利要求1所述的方法,其特征在于,在响应于基于遥控设备实施的截屏触发操作之前,所述方法还包括:
从服务器获取截屏功能的灵敏度配置信息;其中,所述灵敏度配置信息包括所述截屏触发操作针对至少一个按键的按压次数和按压间隔时间;
接收所述遥控设备发送的无线控制信号;其中,所述无线控制信号是所述遥控设备响应于针对所述至少一个按键的按压操作而发送的,且包括所述按压操作的按压次数和按压间隔时间;
当所述按压操作的按压次数与所述配置信息包括的按压次数相同,且所述按压操作的按压间隔时间与所述配置信息包括的按压间隔时间相同时,确定所述按压操作为所述截屏触发操作。
8.根据权利要求1所述的方法,其特征在于,所述对所述电视设备显示的画面进行截屏处理,包括:
调用所述电视设备的操作系统的第一截屏接口来对所述电视设备显示的画面进行截屏处理;其中,所述第一截屏接口是所述操作系统开放给外部应用的接口;
当所述第一截屏接口调用失败时,对所述电视设备的操作系统的第二截屏接口进行反射处理,调用反射处理后的所述第二截屏接口来对所述电视设备显示的画面进行截屏处理;其中,所述第二截屏接口是所述电视设备的操作系统未开放给外部应用调用的接口。
9.根据权利要求1所述的方法,其特征在于,所述对所述电视设备显示的画面进行截屏处理,包括:
根据所述截屏触发操作的操作时间点,对所述电视设备在所述操作时间点显示的画面进行截屏处理;
其中,所述画面的被截屏区域是所述画面的全部区域,或者是被所述截屏操作设定的部分区域。
10.根据权利要求1所述的方法,其特征在于,所述对所述电视设备显示的画面进行截屏处理,包括:
根据所述截屏触发操作的操作时间点确定截屏时间窗口,其中,所述截屏时间窗口以所述操作时间点为起点、中点或终点;
对所述电视设备在所述截屏时间窗口内显示的多个画面进行截屏处理,对应得到多个截屏图像;
所述方法还包括:
响应于针对所述多个截屏图像的选择操作,将所述多个截屏图像中被选择的截屏图像标记为将向所述移动终端发送的截屏图像。
11.根据权利要求10所述的方法,其特征在于,
所述多个截屏图像是所述截屏时间窗口内显示的全部画面中的满足筛选条件的画面,所述筛选条件包括以下至少之一:
所述截屏图像中的前景与背景的显示比例大于显示比例阈值;
所述截屏图像的前景中的对象的数量大于数量阈值;
所述截屏图像的前景中的对象的姿态角度处于设定的角度区间。
12.根据权利要求1所述的方法,其特征在于,所述对所述电视设备显示的画面进行截屏处理,包括:
根据所述截屏触发操作的操作时间点确定截屏时间窗口,其中,所述截屏时间窗口以所述操作时间点为起点、中点或终点;
对所述电视设备在所述截屏时间窗口内显示的多个画面进行截屏处理,并将对应得到多个截屏图像拼接为一个完整的截屏图像;其中,所述完整的截屏图像用于被发送到所述移动终端。
13.根据权利要求1所述的方法,其特征在于,所述向所述移动终端发送所述截屏图像,包括:
将所述截屏图像拆分为多个数据分片,通过所述通信连接依次向所述移动终端发送所述多个数据分片,并显示所述多个数据分片的传输速度;其中,所述多个数据分片用于供所述移动终端组装得到所述截屏图像。
14.根据权利要求1所述的方法,其特征在于,在向所述移动终端发送所述截屏图像之前,所述方法还包括:
向所述移动终端发送合成指令;其中,所述合成指令用于触发所述移动终端显示所述合成界面。
15.一种图像处理方法,其特征在于,应用于移动终端,所述方法包括:
接收电视设备发送的截屏图像;其中,所述截屏图像是对所述电视设备显示的画面进行截屏处理得到的;
在图像合成界面中显示所述截屏图像和所述移动终端的拍摄预览画面;
响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与所述截屏图像进行合成,在所述合成界面中显示合成图像。
16.根据权利要求15所述的方法,其特征在于,所述在图像合成界面中显示所述截屏图像和所述移动终端的拍摄预览画面,包括如下操作至少一项:
在所述图像合成界面不同的区域中分别显示所述截屏图像和所述移动终端的拍摄预览画面;
将所述拍摄预览画面中的背景进行透明化处理,将所述截屏图像叠加到透明化处理后的所述拍摄预览画面上;
将所述截屏图像叠加到应用了设定透明度的所述拍摄预览画面上。
17.根据权利要求15所述的方法,其特征在于,在响应于所述拍摄触发操作之前,所述方法还包括:
周期性刷新所述移动终端的拍摄预览画面。
18.根据权利要求15所述的方法,其特征在于,
接收所述电视设备发送的合成指令;
根据所述合成指令,转入执行所述在图像合成界面中显示所述截屏图像和所述移动终端的拍摄预览画面的步骤。
19.根据权利要求15所述的方法,其特征在于,所述基于当前的拍摄预览画面生成的拍摄图像与所述截屏图像进行合成,包括:
将所述截屏图像和所述拍摄图像按照宽度方向或高度方向进行拼接;或者
将所述拍摄图像中的前景叠加到所述截屏图像上;
所述将所述拍摄图像中的前景叠加到所述截屏图像上,包括:
识别出所述拍摄图像中的前景,将所述拍摄图像中的前景之外的部分作为所述拍摄图像中的背景,并将所述拍摄图像中的背景包括的每个像素的颜色值修改为透明的颜色值;其中,所述前景包括至少一个对象;
将所述截屏图像叠加到修改后的所述拍摄图像上。
20.一种图像处理装置,其特征在于,应用于电视设备,所述装置包括:
截屏模块,用于响应于基于遥控设备实施的截屏触发操作,对所述电视设备显示的画面进行截屏处理,显示截屏图像;
发送模块,用于向所述移动终端发送所述截屏图像;其中,所述截屏图像用于与所述移动终端的拍摄图像进行合成。
21.一种图像处理装置,其特征在于,应用于移动终端,所述装置包括:
接收模块,用于接收电视设备发送的截屏图像;其中,所述截屏图像是对所述电视设备显示的画面进行截屏处理得到的;
显示模块,用于在图像合成界面中显示所述截屏图像和所述移动终端的拍摄预览画面;
生成模块,用于响应于拍摄触发操作,将基于当前的拍摄预览画面生成的拍摄图像与所述截屏图像进行合成,在所述合成界面中显示合成图像。
22.一种电视设备,其特征在于,所述电视设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现权利要求1至14任一项所述的图像处理方法。
23.一种移动终端,其特征在于,所述移动终端包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现权利要求15至19任一项所述的图像处理方法。
24.一种计算机可读存储介质,存储有可执行指令或者计算机程序,其特征在于,所述可执行指令被处理器执行时实现权利要求1至19任一项所述的图像处理方法。
25.一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时实现权利要求1至19任一项所述的图像处理方法。
CN202111308203.3A 2021-11-05 2021-11-05 图像处理方法、装置、设备及计算机可读存储介质 Pending CN116095374A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111308203.3A CN116095374A (zh) 2021-11-05 2021-11-05 图像处理方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111308203.3A CN116095374A (zh) 2021-11-05 2021-11-05 图像处理方法、装置、设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN116095374A true CN116095374A (zh) 2023-05-09

Family

ID=86197827

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111308203.3A Pending CN116095374A (zh) 2021-11-05 2021-11-05 图像处理方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN116095374A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117640627A (zh) * 2024-01-25 2024-03-01 微网优联科技(成都)有限公司 通过云电脑实现的协同工作方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117640627A (zh) * 2024-01-25 2024-03-01 微网优联科技(成都)有限公司 通过云电脑实现的协同工作方法及系统
CN117640627B (zh) * 2024-01-25 2024-04-09 微网优联科技(成都)有限公司 通过云电脑实现的协同工作方法及系统

Similar Documents

Publication Publication Date Title
EP4130963A1 (en) Object dragging method and device
CN113497945B (zh) 基于云手机的直播和配置方法以及相关装置和系统
US11425466B2 (en) Data transmission method and device
US20220329895A1 (en) Method for displaying view history and display apparatus
WO2020248627A1 (zh) 一种视频通话方法和显示设备
CN114286165B (zh) 一种显示设备、移动终端、投屏数据传输方法及系统
CN112399264B (zh) 一种放映厅业务管理方法及应用
CN116366796A (zh) 一种视频通话方法和显示设备
CN111917768B (zh) 虚拟场景的处理方法、装置及计算机可读存储介质
CN111901695A (zh) 视频内容截取方法、装置和设备及计算机存储介质
WO2017113855A1 (zh) 应用程序交互的方法和终端
CN113784200A (zh) 通信终端、显示设备及投屏连接方法
WO2022105344A1 (zh) 一种投影画面校正方法、终端设备及显示设备
CN116095374A (zh) 图像处理方法、装置、设备及计算机可读存储介质
CN113630656B (zh) 显示设备、终端设备及通信连接方法
CN114302221B (zh) 一种虚拟现实设备及投屏媒资播放方法
CN113489938B (zh) 虚拟会议控制方法、智能设备及终端设备
CN111405367B (zh) 基于多网络切换场景系统部件网络共享的方法及显示设备
CN113661715B (zh) 放映厅业务管理方法、互动方法、显示设备及移动终端
CN112399225B (zh) 放映厅业务管理方法及显示设备
CN116614659A (zh) 一种投屏方法、显示设备及智能设备
US11980812B2 (en) Cloud gaming by streaming video data on playback device
CN115514998B (zh) 显示设备和网络媒资切换方法
CN118283336A (zh) 一种显示设备及媒资数据播放方法
CN118828034A (zh) 虚拟场景的直播方法、装置、设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40086456

Country of ref document: HK