CN103546716A - 提供图像的系统及方法 - Google Patents

提供图像的系统及方法 Download PDF

Info

Publication number
CN103546716A
CN103546716A CN201310299684.5A CN201310299684A CN103546716A CN 103546716 A CN103546716 A CN 103546716A CN 201310299684 A CN201310299684 A CN 201310299684A CN 103546716 A CN103546716 A CN 103546716A
Authority
CN
China
Prior art keywords
video image
equipment
image
external equipment
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310299684.5A
Other languages
English (en)
Inventor
金容台
全惠暎
郑渊建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020130081194A external-priority patent/KR102091137B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103546716A publication Critical patent/CN103546716A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224Touch pad or touch panel provided on the remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供了提供图像的系统及方法。该图像提供方法包括:向外部设备发送从原始分辨率的原始视频图像转换的第一分辨率的第一视频图像;从外部设备接收有关第一分辨率的第一视频数据的感兴趣区域的区域信息;基于区域信息确定原始分辨率的原始视频图像与感兴趣区域相对应的区域,其中所确定的区域小于原始分辨率的原始视频图像;将原始分辨率的原始视频图像的一部分转换成第一分辨率的第二视频图像,其中该部分对应于所确定的区域;以及将第二视频图像发送给外部设备。

Description

提供图像的系统及方法
交叉引用相关专利申请
本申请要求2012年7月17日向韩国知识产权局提交的韩国专利申请第10-2012-0077919号、和2013年7月10日向韩国知识产权局提交的韩国专利申请第10-2013-0081194的利益,在此通过引用将它们的公开内容全部并入本文中。
技术领域
示范性实施例涉及将包括与通过使用一个设备捕获的图像的一部分相对应的对象的图像提供给另一个设备的系统及方法。
背景技术
最近,在具有多媒体功能的设备之间发送和接收图像的技术正得到积极使用。尤其,由于提供了移动通信基础设施和通常使用像智能电话、移动电话、和个人数字助理(PDA)设备那样的设备,这些设备提供了除语音电话功能之外的各种服务。
另外,通过使用这些设备执行的视频通话使处在两个不同地点的用户也可以面对面地打视频电话,即使他们可能彼此远离,因此视频电话的使用正在迅速增加。
一般说来,发送方的设备为视频通话获取用户的视频图像,按照预定视频编码格式编码获取的图像,并将编码的视频图像作为编码视频数据发送给相对设备。
另外,接收方的设备通过移动通信网络接收编码视频数据,并将其解码和显示在内置在接收方的设备中的显示器,例如,液晶显示器(LCD)上。于是,接收方的用户可以实时地通过观看通过使用发送方的设备捕获的图像来打视频电话。
但是,包括在设备中的显示设备具有各种分辨率,并且由于在设备之间传输的数据的流化分辨率随通信方法而不同,所以需要将通过使用发送方的设备捕获的视频图像的一部分有效地提供给接收方的设备的技术。此外,当打视频电话时,还需要有效地选择和放大通过使用发送方的设备捕获的图像的一部分并将该部分提供给用户的技术。
发明内容
示范性实施例涉及设备可以跟踪包括在正捕获的图像中的对象,并将包括所跟踪对象的图像的一部分发送给另一个设备的、提供图像的系统及方法。
按照一个示范性实施例的一个方面,提供了一种图像提供方法,其包括:向外部设备发送从原始分辨率的原始视频图像转换的第一分辨率的第一视频图像;从外部设备接收有关显示在外部设备的屏幕上的第一分辨率的第一视频数据的感兴趣区域的区域信息;基于区域信息确定原始分辨率的原始视频图像与感兴趣区域相对应的区域,其中所确定的区域小于原始分辨率的原始视频图像;将原始分辨率的原始视频图像的一部分转换成第一分辨率的第二视频图像,其中该部分对应于所确定的区域;以及将第二视频图像发送给外部设备。
该感兴趣区域可以包括显示在第一视频图像中的对象,该区域信息可以由外部设备生成。
当触摸外部设备的屏幕时,可以选择该感兴趣区域以包括与屏幕的触摸点相对应的对象。
当触摸外部设备的屏幕时,可以选择围绕屏幕的触摸点的、包括事先设定范围的感兴趣区域。
在区域信息的接收中,当触摸外部设备的屏幕时,可以从外部设备接收屏幕的触摸点的坐标信息。
当触摸外部设备的屏幕时,可以在外部设备的屏幕上显示用于选择感兴趣区域的用户界面。
第一视频图像和第二视频图像可以是与外部设备视频通话的视频图像,在将第一视频图像发送给外部设备中,可以基于捕获的视频图像将第一视频图像发送给外部设备,并且捕获的视频图像的分辨率可以大于视频通话的流化分辨率。
可以根据用于与外部设备通信的通信方法的类型确定感兴趣区域的范围。
可以根据用于与外部设备通信的通信方法的类型确定第一分辨率。
该图像提供方法可以进一步包括根据用于与外部设备通信的通信方法的调整来调整第一分辨率。
该图像提供方法可以进一步包括根据用于与外部设备通信的通信方法的调整来调整所确定的区域。
在将第一视频图像发送给外部设备中,可以基于捕获的视频图像将第一视频图像和第二视频图像发送给外部设备,其中该方法进一步包括当包括在感兴趣区域中的对象从捕获的视频图像中消失时调整所确定的区域。
该图像提供方法可以进一步包括,当从捕获的视频图像中消失的对象重新出现在捕获的视频图像中时,向外部设备提供仅包括重新出现的对象的部分的第二视频图像。
可以将通知发送第二视频图像的通知信息插入第二视频图像中。
可以将通知信息插入与第二视频图像的事先设定帧相对应的分组的首标中。
该分组可以是实时传输协议(RTP)分组,并且RTP分组的RTP标记字段值可以是1。
该分组可以是RTP分组,可以将通知信息插入RTP分组的首标扩展字段中。
该通知信息可以包括指示第一视频图像与第二视频图像相对应的部分的区域信息。
该感兴趣区域可以是基于显示第一视频图像的外部设备的屏幕上的、用户输入指定的区域。
按照另一个示范性实施例的一个方面,提供了一种通过使用设备的图像接收方法,包括:从外部设备接收第一视频图像;向外部设备提供有关包括在所接收第一视频图像中的对象的信息;以及从外部设备接收仅包括第一视频图像的一部分的第二视频图像,其中该部分包括该对象,其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率,以及第一视频图像包括该对象的该部分由外部设备基于提供的区域信息来确定。
该图像接收方法可以进一步包括:基于用户输入选择与包括在所接收第一视频图像中的该对象有关的感兴趣区域;以及生成有关所选择感兴趣区域的区域信息。
在感兴趣区域的选择中,当触摸显示第一视频图像的设备的屏幕时,可以选择感兴趣区域以包括被包括在所接收第一视频图像中的对象,其中该对象包括屏幕的触摸点。
在感兴趣区域的选择中,当触摸显示第一视频图像的设备的屏幕时,可以选择围绕屏幕的触摸点的事先设定范围的区域。
在区域信息的提供中,当触摸显示第一视频图像的设备的屏幕时,可以向外部设备提供屏幕的触摸点的坐标信息。
该图像接收方法可以进一步包括,当触摸显示第一视频图像的设备的屏幕时,显示用于选择感兴趣区域的用户界面。
第一视频图像和第二视频图像可以是与外部设备视频通话的视频图像,并且第一视频图像和第二视频图像可以由外部设备基于由外部设备捕获的视频图像来提供,捕获的视频图像的分辨率可以大于视频通话的流化分辨率。
可以由外部设备根据用于与外部设备通信的通信方法的类型确定感兴趣区域的范围。
可以由外部设备根据用于与外部设备通信的通信方法的类型确定第一视频图像和第二视频图像中的至少一个的分辨率。
可以由外部设备根据用于与外部设备通信的通信方法的调整来调整第一视频图像和第二视频图像中的至少一个的分辨率。
可以通过使用外部设备根据用于与外部设备通信的通信方法的调整来调整该部分。
可以由外部设备基于通过使用外部设备捕获的视频图像来提供第一视频图像和第二视频图像,并且当出现在所捕获图像中的对象从捕获的视频图像中消失时,可以调整第一视频图像的该部分,其中该图像接收方法进一步包括:从外部设备接收仅包括所调整部分的第二视频图像。
该图像接收方法进一步包括,当从捕获的视频图像中消失的对象重新出现在捕获的视频图像中时,从外部设备接收仅包括包含重新出现的对象的部分的第二视频图像。
根据另一个示范性实施例的一个方面,提供了一种设备,包括:配置成存储至少一个程序的存储器;以及配置成通过执行所述至少一个程序向外部设备提供所捕获图像的处理器,其中所述至少一个程序包括进行如下的命令:将第一视频图像发送给外部设备;从外部设备接收与包括在第一视频图像中对象相对应的区域信息;以及基于区域信息提供仅包括第一视频图像包括该对象的部分的第二视频图像,并且其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率。
该区域信息可以是有关外部设备选择的感兴趣区域的信息,并且该区域信息由外部设备生成。
当触摸显示第一视频图像的外部设备的屏幕时,可以选择包括包含屏幕的触摸点的对象的感兴趣区域。
当触摸显示第一视频图像的外部设备的屏幕时,可以选择围绕屏幕的触摸点的事先设定范围的感兴趣区域。
在区域信息的接收中,当触摸显示第一视频图像的外部设备的屏幕时,可以从外部设备接收外部设备的触摸点的坐标信息。
当触摸外部设备的屏幕时,可以在外部设备的屏幕上显示用于选择感兴趣区域的用户界面。
第一视频图像和第二视频图像可以是与外部设备视频通话的视频图像,并且在将第一视频图像发送给外部设备的发送中,可以基于捕获的视频图像将第一视频图像发送给外部设备,并且捕获的视频图像的分辨率可以大于视频通话的流化分辨率。
可以由外部设备根据用于与外部设备通信的通信方法的类型确定感兴趣区域的范围。
可以根据用于与外部设备通信的通信方法的类型确定第一视频图像和第二视频图像中的至少一个的分辨率。
该设备可以进一步包括运行根据用于与外部设备通信的通信方法的调整来调整第一视频图像和第二视频图像中的至少一个的分辨率的命令。
该设备可以进一步包括运行如下的命令:根据用于与外部设备通信的通信方法的调整来调整该部分;以及向外部设备提供所调整部分的第二视频图像。
在将第一视频图像发送给外部设备的发送中,可以基于捕获的视频图像将第一视频图像和第二视频图像发送给外部设备,其中该设备进一步包括运行如下的命令:当该对象从捕获的视频图像中消失时调整该部分;以及向外部设备提供所调整部分的第二视频图像。
该设备可以进一步包括运行如下的命令:当从捕获的视频图像中消失的对象重新出现在捕获的视频图像中时,向外部设备提供仅包括重新出现的对象的部分的第二视频图像。
根据另一个示范性实施例的一个方面,提供了一种设备,包括:配置成存储至少一个程序的存储器;以及配置成通过运行所述至少一个程序向外部设备提供所捕获图像的处理器,其中所述至少一个程序包括进行如下的命令:从外部设备接收第一视频图像;向外部设备提供有关包括在所接收的第一视频图像中的对象的区域信息;以及从外部设备接收仅包括第一视频图像的一部分的第二视频图像,其中第一视频图像的该部分包括该对象,其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率,以及其中包括该对象的第一视频图像的该部分基于提供的区域信息来确定。
根据另一个示范性实施例的一个方面,提供了一种图像提供方法,包括:向外部设备发送含有多个第一帧的第一视频图像;从外部设备接收与包括在第一视频图像中的对象有关的区域信息;基于区域信息选择多个第一帧当中包括该对象的第一帧;以及向外部设备发送包括仅包括所选第一帧的一部分的多个第二帧的第二视频图像。
按照另一个示范性实施例的一个方面,提供了一种图像提供方法,包括:向外部设备发送具有多个第一帧的第一视频图像;从外部设备接收与包括在第一视频图像中的对象有关的区域信息;基于区域信息从多个第一帧中选择包括该对象的部分;以及向外部设备发送包括仅包括所选部分的多个第二帧的第二视频图像。
根据另一个示范性实施例的一个方面,提供了一种图像提供方法,包括:向外部设备发送与应用程序的运行屏幕相对应的第一分辨率的第一图像;从外部设备接收有关显示在外部设备的屏幕上的第一图像的感兴趣区域的区域信息;基于区域信息,确定与感兴趣区域相对应的第一图像的部分,其中该部分小于第一图像;基于确定的部分将第一图像转换成第二图像;以及以第一分辨率向外部设备发送第二图像。
根据另一个示范性实施例的一个方面,提供了一种图像提供方法,包括:向外部设备发送第一视频图像;从外部设备接收有关第一视频图像的区域的区域信息;基于区域信息生成第二视频图像;以及向外部设备发送第二视频图像。
第二视频图像的分辨率可以大于第一视频图像的该区域的分辨率。
第二视频图像可以包括显示在第一视频图像的该区域中的对象。
第二视频图像可以包括围绕第一视频图像的该区域的事先设定范围的视频。
按照另一个示范性实施例的一个方面,提供了一种通过使用设备的图像接收方法,包括:从外部设备接收第一视频图像;向外部设备提供有关第一视频图像的区域的区域信息;以及从外部设备接收仅包括与该区域信息相对应的第一视频图像的部分的第二视频图像。
第二视频图像的分辨率可以大于第一视频图像的该区域的分辨率。
第一视频图像的该部分可以是围绕第一视频图像的该区域的事先设定范围的区域。
该区域信息可以包括第一视频图像的该区域的坐标信息。
该方法可以进一步包括显示选择第一视频图像的该区域的用户界面。
附图说明
通过参考附图详细描述示范性实施例,上面以及其他特征和优点更变得更加显而易见,在附图中:
图1是根据一个示范性实施例的图像提供系统的示意图;
图2A和2B例示了根据一个示范性实施例的、显示在第二设备上、包括与通过使用第一设备捕获的图像的一部分相对应的对象的图像;
图3是例示根据一个示范性实施例,向第二设备提供包括与通过使用第一设备捕获的视频图像的一部分相对应的对象的视频图像的方法的流程图;
图4是例示根据一个示范性实施例,通过使用第二设备生成有关感兴趣区域的区域信息的方法的流程图;
图5是例示根据一个示范性实施例,当调整第一设备与第二设备之间的通信方法时,调整通过第一设备选择的感兴趣区域和向第二设备提供有关所调整区域的视频图像的方法的流程图;
图6是例示根据一个示范性实施例,当调整第一设备与第二设备之间的通信方法时,由第一设备向第二设备提供具有调整后图像质量的视频图像的方法的流程图;
图7是例示根据另一个示范性实施例,向第二设备提供包括与通过使用第一设备捕获的视频图像的一部分相对应的对象的视频图像的方法的流程图;
图8A和8B例示了根据一个示范性实施例,通过使用第二设备将第一视频图像的一部分确定为感兴趣区域,以便使包括由用户触摸的触摸点的对象包括在所确定部分中的例子;
图9A和9B例示了根据一个示范性实施例,通过使用第二设备将从用户的触摸点开始事先设定范围内的部分确定为感兴趣区域的例子;
图10A和10B例示了根据一个示范性实施例,经由用于确定第一视频图像的一部分的用户界面,通过使用第二设备将第一视频图像的一部分确定为感兴趣区域的例子;
图11A和11B例示了根据一个示范性实施例,当调整第一设备与第二设备之间的通信方法时,使用第二设备以调整后分辨率从第一设备100接收视频图像的例子;
图12A和12B例示了根据一个示范性实施例,当调整第一设备与第二设备之间的通信方法时,使用第二设备从第一设备100接收具有调整后图像质量的视频图像的例子;
图13A和13B例示了根据一个示范性实施例,当调整第一设备与第二设备之间的通信方法时,使用第二设备从第一设备100接收具有调整部分的视频图像的例子;
图14是例示按照一个示范性实施例的第一设备的框图;
图15是例示根据一个示范性实施例的第二设备的框图;
图16是例示根据另一个示范性实施例的设备的框图;
图17A到17C例示了根据一个示范性实施例放大显示在第二设备的屏幕上的第一视频图像的一部分的例子;
图18A到18C例示了根据一个示范性实施例以逐步方式放大显示在第二设备的屏幕上的视频图像的一部分的例子;
图19A到19C例示了根据一个示范性实施例,在第二设备上显示包括第一视频图像的放大部分的预览图像,和在第二设备上显示第一设备提供的第二视频图像的例子;
图20例示了根据一个示范性实施例的实时传输协议(RTP)分组首标的例子;
图21是例示根据一个示范性实施例通过使用第一设备生成第四视频图像的方法的流程图;
图22是例示根据一个示范性实施例,由正在与第一设备打视频电话的第二设备接收作为第一视频图像的放大部分的第二视频图像的方法的流程图;
图23是例示根据一个示范性实施例,由正在与第一设备打视频电话的第二设备放大第一视频图像的一部分并显示它的方法的流程图;
图24A到24C例示了根据一个示范性实施例,与第一视频图像一起显示在第二设备的屏幕上的第一视频图像的放大部分。
具体实施方式
现在引用例示示范性实施例的附图以便达到对示范性实施例的充分理解。在下文中,将参考附图详细描述示范性实施例。附图中的相同标号表示相同元件。在本说明书中,当组成元件与另一个组成元件“接触”或“连接”时,该组成元组不仅直接地而且通过介于其间的至少一个其他组成元件通电地与其他组成元件接触或连接。此外,当一个部件可以“包括”某个组成元件时,除非另有规定,不应该理解为排除其他组合元件,而应该理解为进一步包括其他组成元件。
当像“至少一个”那样的表述置于元素列表之前时,修饰整个元素列表,而不是修饰该列表的个别元素。
图1是根据一个示范性实施例的图像提供系统的示意图。
参照图1,第一设备100和第二设备200能够相互打视频电话,并且第一设备100可以向第二设备200提供通过使用第一设备100捕获的视频图像。此外,第二设备200可以向第一设备100提供使用第二设备200捕获的视频图像。
在下文中,为了便于描述起见,将描述根据当前示范性实施例的图像提供系统中第一设备100向第二设备200提供视频图像的实施例。此外,将通过使用第一设备100捕获的视频图像描述成第一设备100提供给第二设备200的内容,但该内容不局限于此,并且第一设备100可以提供给第二设备200的内容的例子包括视频图像、摄影图像、捕获图像、和应用程序运行图像。
第一设备100可以基于通过使用第一设备100捕获的视频图像向第二设备200提供第一视频图像,并从第二设备200接收有关包括在第一视频图像中的对象的区域信息。此外,第一设备100可以基于接收的区域信息跟踪包括在第一视频图像中的预定对象,并向第二设备200提供仅包括包含所跟踪对象的第一视频图像的部分的第二视频图像。
当通过使用第一设备100捕获的视频图像的分辨率大于在第一设备100与第二设备200之间传输的视频图像的流化分辨率时,第一设备100可以向第二设备200提供有关捕获的视频图像的一部分的第二视频图像。
第一设备100和第二设备200都是能够向另一个设备发送视频图像、图像等的设备,第一设备100和第二设备200的例子包括智能电话、移动电话、个人数字助理(PDA)、膝上型电脑、媒体播放器、全球定位系统(GPS)设备、其他移动计算设备、和其他非移动计算设备。但是,第一设备100和第二设备200不局限于此。
至少三个设备可以同时相互打视频电话。例如,第一设备100、第二设备200和第三设备(未示出)可以一起打视频电话。在这种情况下,第一设备100可以向第二设备200和第三设备(未示出)提供第一视频图像。此外,当第二设备200选择第一视频图像的一部分时,第一设备100可以向第二设备200和第三设备(未示出)提供与所选部分有关的视频图像。如果第二设备200和第三设备(未示出)分别选择第一视频图像的一部分,则第一设备100可以向第二设备200提供有关第二设备200选择的部分的视频图像,并且向第三设备(未示出)提供有关第三设备(未示出)选择的部分的另一视频图像。
第一设备100可以向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像。在这种情况下,第二设备200可以选择所接收的第三视频图像的一部分,并且从第一设备100接收有关所选择部分的第四视频图像。
图2A和2B例示了根据一个示范性实施例、显示在第二设备200上、包括与通过使用第一设备100捕获的图像的一部分相对应的对象的图像。详细地说,图2A例示了根据一个示范性实施例的第一视频图像;而图2B例示了根据一个示范性实施例的第二视频图像。
第一设备100可以基于当前捕获的视频图像向第二设备200提供第一视频图像,并且可以检验包括在第一视频图像中的对象22。此外,第一设备100可以向第二设备200提供仅包括包含所检验对象22的第一视频图像的部分的第二视频图像。
第一设备100可以检验包括在正在捕获的视频图像中的预定部分20中的对象22,但不局限于此。第一设备100还可以检验提供给第二设备200的第一视频图像中的对象22。
图3是例示根据一个示范性实施例,向第二设备200提供包括与通过使用第一设备100捕获的视频图像的一部分相对应的对象的视频图像的方法的流程图。
在操作S300中,第一设备100向第二设备200提供第一视频图像。第一设备100可以基于正在捕获的视频图像向第二设备200提供第一视频图像。第一设备100可以不作任何附加处理地向第二设备200提供正在捕获的视频图像作为第一视频图像。此外,第一设备100可以处理正在捕获的视频图像,并向第二设备200提供经过处理的视频图像作为第一视频图像。在这种情况下,第一设备可以调整正在捕获的视频图形的分辨率或格式。例如,当正在捕获的视频图像的分辨率大于允许不间断流化在第一设备100与第二设备200之间传输的数据的流化分辨率时,第一设备100将正在捕获的视频图像的分辨率调整成与流化分辨率相同,并向第二设备200提供具有调整后分辨率的第一视频图像。此外,第一视频图像可以具有多个第一帧。
第一设备100可以以第一分辨率向第二设备200发送具有原始分辨率的第一视频图像。第一设备100可以将第一视频图像的原始分辨率调整成第一分辨率,并且第一设备100可以向第二设备200发送具有第一分辨率的第一视频图像。在这种情况下,第一设备100可以事先获取有关包括在第二设备200中的显示器的分辨率的信息并存储它,并且基于包括在第二设备200中的显示器的分辨率确定第一分辨率。
第一设备100可以向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像。第一设备100可以以第三分辨率向第二设备200提供第三视频图像。
在操作S310中,第二设备200显示接收的第一视频图像。第二设备200可以将接收的第一视频图像显示在第二设备200的屏幕上。第二设备200可以将第一分辨率的第一视频图像显示在第二设备200的屏幕上。
同时,当第二设备200接收了与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像时,第二设备200可以显示接收的第三视频图像。第二设备200可以显示第三分辨率的第三视频图像。
在操作S320中,第二设备200生成有关包括在第一视频图像中的对象的区域信息。第二设备200可以基于用户输入选择第一视频图像的一部分作为感兴趣区域,并且可以生成有关所选感兴趣区域的区域信息。此外,第二设备200可以选择包括在第一视频图像中的预定对象,并生成有关所选对象的区域信息。
第二设备200可以接收用户有关第一视频图像的触摸输入,并基于触摸输入的位置选择感兴趣区域。详细地说,当用户触摸第一视频图像中的预定点时,第二设备200识别包括触摸位置的对象,并选择包括所识别对象的区域。例如,当在第一视频图像的触摸位置上触摸脸部时,第二设备200可以识别作为包括在触摸位置中的对象的脸部。此外,第二设备200可以选择包括所识别脸部的区域作为感兴趣区域。
当用户触摸第一视频图像上的预定点时,第二设备200可以选择从触摸点开始事先设定范围的区域作为感兴趣区域。例如,第二设备200可以选择围绕触摸点的预定长方形区域作为感兴趣区域。
第二设备200可以将用户界面显示在屏幕上使用户可以选择第一视频图像的一部分作为感兴趣区域。例如,第二设备200可以在第一视频图像的一部分上显示长方形,并向用户提供界面以便用户可以通过触摸和拖拉长方形的框架来调整长方形的尺寸。
虽然第二设备200基于用户输入选择第一视频图像的一部分作为感兴趣区域,但示范性实施例不局限于此。第二设备200可以没有任何附加用户输入地识别包括在第一视频图像中的脸部,并选择包括脸部的预定区域作为感兴趣区域。
第一视频图像中的感兴趣区域的尺寸可以基于在第一设备100与第二设备200之间传输的数据的流化分辨率来确定。第一视频图像中的感兴趣表面区域的上限可以基于在第一设备100与第二设备200之间传输的数据的流化分辨率来确定。
第二设备200可以生成所选感兴趣区域的坐标信息。第二设备200可以生成整个第一视频图像的坐标当中指示所选感兴趣区域的位置的坐标值。此外,第二设备200可以生成指示整个第一视频图像当中触摸输入点的位置的坐标值。
第二设备200可以生成有关包括在第一视频图像中的多个第一帧的每一个的感兴趣区域的区域信息。
当向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像时,第二设备200可以选择第三视频图像的一部分,并生成有关所选部分的区域信息。
在操作S330中,第二设备200向第一设备100提供有关感兴趣区域的所生成区域信息。第二设备200可以向第一设备100提供所选感兴趣区域的坐标值。此外,第二设备200可以向第一设备100提供用户输入的触摸输入点的坐标值。
在操作S340中,第一设备100识别与区域信息有关的对象。在操作S340中,第一设备100可以基于接收的区域信息识别第一视频图像中的对象。例如,当与所接收区域信息相对应的、包括在第一视频图像中的对象是脸部时,第一设备100可以从第一视频图像中识别脸部。此外,可以从包括在第一视频图像中的多个第一帧的每一个中识别与所接收区域信息有关的对象。
第一设备100可以基于接收的区域信息从正在捕获的视频图像中识别对象。接收的区域信息是有关第一视频图像的一部分的区域信息,因此,第一设备100可以从正在捕获的视频图像中检验与第一视频图像与所接收区域信息相对应的该部分相对应的部分。此外,第一设备100可以从正在捕获的视频图像中识别包括在相应部分中的对象。
第一设备100可以通过使用从第一视频图像中识别的对象来识别包括在正在捕获的视频图像中的对象。第一设备100可以从正在捕获的视频图像中识别与从第一视频图像中识别的对象的图像相似的对象。对象是否相似可以以各种方式确定。例如,第一设备100可以通过比较对象的尺寸、颜色和形式中的至少一个来确定对象是否相似。可替代地,第一设备100可以将各种对象的部分相互比较来确定对象是否相似。
如果第一设备100从第二设备200接收到与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像的一部分的区域信息,则第一设备100可以基于接收的区域信息从第三视频图像中识别对象。
在操作S350中,第一设备100跟踪识别的对象。第一设备100可以跟踪从第一视频图像中识别的对象。此外,第一设备100可以跟踪从通过使用第一设备100捕获的视频图像中识别的对象。通过使用第一设备100捕获的视频图像包括当前正在通过使用第一设备100捕获的视频图像。识别的对象可以在视频图像内移动或旋转,并且第一设备100可以基于对象的形式和颜色跟踪视频图像内的对象。跟踪所识别的对象意味着,在对象移动的情况下,检验正在移动的对象在视频图像内的位置并且检验包括该对象的区域,但检验不局限于此。
在操作S350中,第一设备100可以从第一视频图像的多个第一帧当中选择包括所识别对象的帧。此外,第一设备100可以从第一视频图像的多个第一帧当中识别包括所识别对象的部分。
当第一设备100从第二设备200接收到与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像的一部分的区域信息时,第一设备100可以跟踪第三视频图像中的对象。
在操作S360中,第一设备100向第二设备200提供仅包括包含所识别对象的部分的第二视频图像。第一设备100可以从捕获的视频图像中切出包括所识别对象的部分,并将切出部分作为第二视频图像提供给第二设备200。
详细地说,第一设备100基于接收的区域信息,在具有原始分辨率的第一视频图像的屏幕中确定与感兴趣区域相对应的区域。此外,第一设备100可以将第一视频图像转换成第二视频图像,以便只有确定的区域包括在第二视频图像中。此外,第一设备100可以以第一分辨率向第二设备200提供第二视频图像。第一分辨率的第一视频图像可以从原始分辨率的第一视频图像转换而来。例如,当第一视频图像的原始分辨率是1000×1000,而第二图像的第一分辨率是100×100时,第一设备100可以将第一视频图像与所确定区域相对应的部分转换成具有100×100分辨率的第二视频图像,并以100×100分辨率向第二设备200发送第二视频图像。
第一设备100可以区分第一视频图像的多个第一帧当中包括所识别对象的部分,并向外部设备提供包括仅包括多个第一帧的部分的多个第二帧的第二视频图像。
当第一设备100从第一视频图像的多个第一帧当中选择包括所识别对象的部分时,第一设备100可以向外部设备提供具有仅包括所选帧的一部分的多个第二帧的第二视频图像。在这种情况下,这个部分可以是感兴趣区域。此外,第一设备100可以基于每个所选帧切出与感兴趣区域相对应的部分,从而为每个所选帧生成第二帧。
另外,第一设备100可以基于第一设备100与第二设备200之间的通信方法确定与第二视频图像相对应的区域的尺寸。
第二视频图像可以包括每一个仅包括在操作S350中选择的帧的一部分的多个第二帧,但不局限于此。此外,第二视频图像可以包括仅包括操作S350中的区分部分的多个第二帧,但不局限于此。
第一设备100可以基于第一设备100与第二设备200之间的通信方法确定第二视频图像的图像质量或分辨率。例如,当包括所识别对象的帧的一部分的分辨率小于在第一设备100与第二设备200之间传输的数据的流化分辨率时,第一设备100可以提高包括所识别对象的部分的分辨率或图像质量。另外,例如,当包括所识别对象的帧的部分的分辨率小于在第一设备100与第二设备200之间传输的数据的流化分辨率时,第一设备100可以提高包括所识别对象的帧的部分的分辨率或图像质量。
第一设备100与第二设备200之间的通信方法的例子非限制性地包括第三代(3G)通信、第四代(4G)通信、和无线保真(Wi-Fi)通信。
当调整第一设备100与第二设备200之间的通信方法时,第一设备100可以调整与第二视频图像相对应的感兴趣区域的尺寸或第二视频图像的图像质量。当第一设备100和第二设备200中的至少一个进行切换时,可以调整第一设备100与第二设备200之间的通信方法。
另外,当所识别对象从捕获的视频图像中消失时,即,当未捕获到所识别对象时,第一设备100可以调整与第二视频图像相对应的区域。例如,当所识别对象从捕获的视频图像中消失时,第一设备100可以向第二设备200提供整个所捕获视频图像。此外,在这种情况下,第一设备100可以基于附加用户输入向第二设备200提供整个所捕获视频图像。
另外,当消失的对象再次重新出现在捕获的图像中时,也就是说,当再次捕获到消失的对象时,可以向第二设备200提供所捕获图像的整个区域当中包括所出现对象的部分的视频图像。
当第一设备100接收到有关与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像的一部分的区域信息时,第一设备100可以向第二设备200提供仅包括包含所识别对象的部分的第四视频图像。在这种情况下,第一设备100可以以第三分辨率向第二设备200提供第四视频图像。
当第一设备100接收到有关与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像的一部分的区域信息时,第一设备100可以不识别或跟踪包括在第三视频图像中的对象。在这种情况下,第一设备100可以基于接收的区域信息切出第三视频图像的一部分,并将切出部分转换成第四视频图像并将第四视频图像提供给第二设备200。
在操作S370中,第二设备200显示接收的第二视频图像。第二设备200的用户可以检验有关包括在所选部分中的对象的详细视频图像。此外,第二设备200可以显示所接收第二视频图像的静止屏幕。
同时,第二设备200可以将第一视频图像和第二视频图像一起显示在第二设备200的屏幕上。在这种情况下,第二设备200在操作S360中不仅可以接收第二视频图像而且可以接收第一视频图像。此外,第二设备200可以通过将第二视频图像叠加在第一视频图像上显示第一视频图像和第二视频图像。第二设备200可以将第二视频图像叠加在第一视频图像未显示第一设备100的用户的部分上。另外,第二设备200可以调整显示第一视频图像的部分的尺寸和显示第二视频图像的部分的尺寸。但是,示范性实施例不局限于此,并且第二设备200可以不叠加第一视频图像和第二视频图像地将第一视频图像和第二视频图像显示在第二设备200的屏幕上。
虽然上面已经描述了从第一设备100接收第二视频图像并且显示第一和第二视频图像两者的第二设备200,但可替代地,第二设备200可以选择第一视频图像的一部分,从第一视频图像中提取所选部分的放大图像,并将提取的放大图像与第一视频图像一起显示在第二设备200的屏幕上。
图4是例示根据一个示范性实施例,通过使用第二设备200生成有关感兴趣区域的区域信息的方法的流程图。
在操作S322中,第二设备200接收选择第一视频图像的一部分的用户输入。第二设备200可以接收用于选择第一视频图像的一部分的用户的触摸输入。例如,第二设备200可以接收触摸第一视频图像的预定点的用户输入或触摸和拖拉第一视频图像的预定点的用户输入。
此外,第二设备200可以经由显示在屏幕上的预定用户界面接收用户的触摸输入。例如,第二设备200可以在第一视频图像的一部分上显示长方形,并提供用户界面以便用户可以触摸和拖拉长方形的框架来调整长方形的尺寸。此外,第二设备200可以经由提供的用户界面接收用户的触摸输入。
在操作S324中,第二设备200检验对于第一设备100的通信方法。第二设备200可以检验对于第一设备100的通信方法的类型和带宽。此外,第二设备200可以检验在第一设备100与第二设备200之间传输的数据的流化分辨率。第一设备100与第二设备200之间的通信方法的例子非限制地包括3G通信、4G通信、和Wi-Fi通信。
在操作S326中,第二设备200基于接收的用户输入和检验的通信方法选择第一视频图像的一部分作为感兴趣区域。第二设备200可以基于第一视频图像中触摸输入点的位置选择第一视频图像的一部分。详细地说,当用户触摸第一视频图像中的预定点时,第二设备200识别包括触摸点的对象,并选择第一视频图像包括所识别对象的部分。例如,当在第一视频图像中触摸脸部的显示图像时,第二设备200可以识别作为包括触摸点的对象的脸部。此外,第二设备200可以选择包括所识别脸部的部分作为感兴趣区域。
另外,当用户触摸第一视频图像中的预定点时,第二设备200可以选择从触摸点开始事先设定范围的区域作为感兴趣区域。例如,第二设备200可以选择相对于触摸点具有预定尺寸的长方形区域作为感兴趣区域。
第二设备200可以根据用户经由用户界面的触摸输入来调整所选感兴趣区域。
在第一视频图像中选择的感兴趣区域的尺寸可以根据第一设备100与第二设备200之间的通信方法来确定。例如,在第一视频图像中选择的感兴趣区域的尺寸可以基于通信方法的类型和带宽中的至少一个来确定。此外,在另一个例子中,在第一视频图像中选择的感兴趣区域的尺寸可以基于在第一设备100与第二设备200之间传输的数据的流化分辨率的程度来确定。在第一视频图像中选择的感兴趣区域的尺寸的上限可以根据第一设备100与第二设备200之间的通信方法来确定。
虽然根据上面参照图4的描述,第二设备200基于用户输入选择第一视频图像的一部分,但示范性实施例不局限于此。第二设备200可以没有附加用户输入地识别包括在第一视频图像中的脸部,以及选择包括脸部的预定区域作为感兴趣区域。此外,在这种情况下,所选感兴趣区域的尺寸可以根据第一设备100与第二设备200之间的通信方法来确定。
图5是例示基于一个示范性实施例,当调整第一设备100与第二设备200之间的通信方法时,调整通过使用第一设备100选择的感兴趣区域并向第二设备200提供有关所调整区域的视频图像的方法的流程图。
在操作S500中,第一设备100确定是否调整第一设备100与第二设备200之间的通信方法。详细地说,第一设备100可以检验是否调整对于第二设备200的通信方法的类型或带宽。此外,第二设备200可以检验是否调整在第一设备100与第二设备200之间传输的数据的流化分辨率。
第一设备100与第二设备200之间的通信方法的例子非限制地包括3G通信、4G通信、和Wi-Fi通信。另外,当第一设备100和第二设备200中的至少一个进行切换时,可以调整第一设备100与第二设备200之间的通信方法。
作为操作S500的确定结果,当调整通信方法时,在操作S510中,第一设备100调整与正在发送给第二设备200的第二视频图像相对应的区域。随着第一设备100与第二设备200之间的通信方法得到调整,第一设备100可以调整第一视频图像与第二视频图像相对应的部分的尺寸。
例如,当将第一设备100与第二设备200之间的通信方法从3G通信调整成Wi-Fi通信时,可以选择比第一视频图像与第二视频图像相对应的部分大的、要从第一设备100发送的第一视频图像的一部分。当第一设备100与第二设备200之间的通信方法之间的通信方法是3G通信并且第一设备100发送了第一视频图像的脸部,然后将第一设备100与第二设备200之间的通信方法调整成Wi-Fi通信时,第一设备100可以选择第一视频图像的一部分,以便除了脸部之外进一步包括第一视频图像的背景部分。另外,例如,当将第一设备100与第二设备200之间的通信方法从4G通信调整成Wi-Fi通信时,可以选择比与第二视频图像相对应的部分小的区域。
此外,例如,当调整在第一设备100与第二设备200之间传输的数据的流化分辨率时,可以调整与第二视频图像相对应的部分的尺寸。
与通信方法的类型和带宽中的至少一个相对应的区域的尺寸可以事先设定并存储在第一设备100中。此外,与在第一设备100与第二设备200之间传输的数据的流化分辨率相对应的区域的尺寸也可以事先设定并存储在第一设备100中。
在操作S520中,第一设备100向第二设备200提供调整区域的视频图像。例如,当将第一设备100与第二设备200之间的通信方法从3G通信调整成Wi-Fi通信时,第一设备100可以向第二设备200提供有关比第一视频图像与第二视频图像相对应的部分大的第一视频图像的一部分的视频图像。此外,例如,当在第一设备100与第二设备200之间传输的数据的流化分辨率降低时,第一设备100可以向第二设备200提供有关比第一视频图像与第二视频图像相对应的部分小的第一视频图像的一部分的视频图像。
图6是例示根据一个示范性实施例,当调整第一设备100与第二设备200之间的通信方法时,通过使用第一设备100向第二设备200提供具有调整后图像质量的视频图像的方法的流程图。
在操作S600中,第一设备100确定是否调整对于第二设备200的通信方法。详细地说,第一设备100可以检验是否调整对于第二设备200的通信的类型或带宽。此外,第二设备200可以检验是否调整在第一设备100与第二设备200之间传输的数据的流化分辨率。
作为操作S600的结果,当确定调整通信方法时,在操作S610中,第一设备100调整正在发送给第二设备200的第二视频图像的图像质量。随着第一设备100与第二设备200之间的通信方法得到调整,第一设备100可以将第二视频图像的图像质量调整成高图像质量或低图像质量。
例如,当将第一设备100与第二设备200之间的通信方法从3G通信调整成Wi-Fi通信时,可以将第二视频图像的图像质量调整成比在3G通信中高的图像质量。另外,例如,当将第一设备100与第二设备200之间的通信方法从4G通信调整成3G通信时,可以将第二视频图像的图像质量调整成比在4G通信中低的图像质量。
在另一个例子中,当调整在第一设备100与第二设备200之间传输的数据的流化分辨率时,可以调整第二视频图像的图像质量。
与通信方法的类型和带宽中的至少一个相对应的图像质量可以事先设定并存储在第一设备100中。此外,与在第一设备100与第二设备200之间传输的数据的流化分辨率相对应的图像质量也可以事先设定并存储在第一设备100中。
在操作S620中,第一设备100向第二设备200提供调整后图像质量的视频图像。第一设备100可以向第二设备200提供具有作为调整后图像质量的适当图像质量的视频图像。
图7是例示根据另一个示范性实施例,向第二设备200提供包括与通过使用第一设备100正在捕获的视频图像的一部分相对应的对象的视频图像的方法的流程图。参照图7,第一设备100可以从第二设备200接收第一视频图像的预定点的坐标信息,并通过使用接收的坐标信息选择第一视频图像的一部分作为感兴趣区域。
在操作S700中,第一设备100可以向第二设备200提供第一视频图像。第一设备100可以基于捕获的视频图像向第二设备200提供第一视频图像。第一设备100可以不作处理地向第二设备200提供捕获的视频图像作为第一视频图像。此外,第一设备100可以处理捕获的视频图像,并向第二设备200提供经过处理的视频图像作为第一视频图像。在这种情况下,第一设备100可以调整所捕获视频图像的分辨率,或将所捕获视频图像转换成预定格式。例如,如果所捕获视频图像的分辨率大于在第一设备100与第二设备200之间的数据的流化分辨率,则第一设备100可以将所捕获视频图像的分辨率调整成与数据的流化分辨率相同,并且可以以调整后分辨率向第二设备200提供所捕获视频图像作为第一视频图像。
在操作S700中,第一设备100可以以第一分辨率向外部设备发送具有原始分辨率的第一视频图像。第一设备100可以将具有原始分辨率的第一视频图像转换成第一分辨率的第一视频图像,并向第二设备200发送具有第一分辨率的第一视频图像。在这种情况下,第一设备100可以事先获取有关包括在第二设备200中的显示器的分辨率的信息并存储它,并且可以基于包括在第二设备200中的显示器的分辨率确定第一分辨率。
在操作S710中,第二设备200显示接收的第一视频图像。第二设备200可以将接收的第一视频图像显示在第二设备200的屏幕上。例如,第二设备200可以将第一分辨率的第一视频图像显示在屏幕上。
在操作S720中,第二设备200接收有关显示在屏幕上的第一视频图像的用户的触摸输入。第二设备200可以接收选择显示在屏幕上的第一视频图像的预定点的用户的触摸输入。此外,第二设备200可以生成触摸点的坐标信息。
在操作S730中,第二设备200向第一设备100提供触摸点的坐标信息。
在操作S740中,第一设备100基于接收的坐标信息,确定要提供给第二设备200的第一视频图像的一部分作为感兴趣区域。第一设备100可以基于触摸点的位置选择该部分。详细地说,第一设备100可以识别包括触摸点的对象,并选择包括所识别对象的区域。例如,当在第一视频图像中触摸脸部时,第一设备100可以识别脸部作为包括触摸点的对象。此外,第一设备100可以选择包括所识别脸部的部分作为感兴趣区域。
此外,第一设备100可以选择围绕触摸点事先设定范围的区域作为感兴趣区域。例如,第一设备100可以选择围绕触摸点的具有预定尺寸的长方形区域作为感兴趣区域。
在操作S750中,第一设备100识别包括在所确定部分中的对象。例如,当第一设备100选择从触摸点开始事先设定范围的区域作为感兴趣区域时,第一设备100可以从第一视频图像中识别包括在所选部分中的对象。
第一设备100可以基于确定的感兴趣区域从捕获的视频图像中识别对象。确定的感兴趣区域是第一视频图像的一部分,因此第一设备100可以从当前正在捕获的视频图像中检验与第一视频图像的感兴趣区域匹配的区域。此外,第一设备100可以从当前正在捕获的视频图像中识别包括在匹配区域中的对象。
第一设备100可以通过使用从第一视频图像中识别的对象来识别包括在当前正在捕获的视频图像中的对象。第一设备100可以通过使用来自第一视频图像的所识别对象来识别包括在正在捕获的视频图像中的对象。第一设备100可以基于匹配/识别阈值来识别与从第一视频图像中识别的对象的图像相似的对象。
在操作S760中,第一设备100跟踪识别的对象。第一设备100可以跟踪从第一视频图像中识别的对象。此外,第一设备100可以跟踪从捕获的视频图像中识别的对象。
在操作S770中,第一设备100向第二设备200提供包括所跟踪对象的第二视频图像。第一设备100可以从捕获的视频图像中切出包括所识别对象的部分,并将切出部分作为第二视频图像提供给第二设备200。
详细地说,第一设备100可以基于接收的区域信息,确定与感兴趣区域相对应、具有原始分辨率的第一视频图像的屏幕的部分。此外,第一设备100可以将第一视频图像转换成第二视频图像,以便只有确定的区域包括在第二视频图像中。此外,第一设备100可以以第一分辨率向第二设备200提供第二视频图像。第一分辨率的第一视频图像可以从原始分辨率的第一视频图像转换而来。例如,当第一视频图像的原始分辨率是1000×1000,而第二图像的第一分辨率是100×100时,第一设备100可以将第一视频图像的所确定部分转换成第二视频图像,并以100×100分辨率向第二设备200发送第二视频图像。
第一设备100可以根据第一设备100与第二设备200之间的通信方法确定与第二视频图像相对应的部分的尺寸。此外,第一设备100可以根据第一设备100与第二设备200之间的通信确定第二视频图像的图像质量。第一设备100与第二设备200之间的通信方法的例子非限制地包括3G通信、4G通信、和Wi-Fi通信。
随着第一设备100与第二设备200之间的通信方法得到调整,第一设备100可以调整与第二视频图像相对应的区域的尺寸或调整与第二视频图像相对应的区域的图像质量。当第一设备100和第二设备200中的至少一个执行切换时,可以调整第一设备100与第二设备200之间的通信方法。
在操作S780中,第二设备200显示接收的视频图像。第二设备200的用户可以检验包括在所选部分中的对象的详细视频图像。
同时,第二设备200可以将第一视频图像和第二视频图像一起显示在第二设备200的屏幕上。在这种情况下,在操作S770中,第二设备200不仅可以接收第二视频图像而且可以接收第一视频图像。此外,第二设备200可以通过将第二视频图像叠加在第一视频图像上来显示第一视频图像和第二视频图像。第二设备200可以将第二视频图像叠加在第一视频图像未显示第一设备100的用户的部分上。另外,第二设备200可以调整显示第一视频图像的部分的尺寸和显示第二视频图像的部分的尺寸。但是,示范性实施例不局限于此,并且第二设备200可以不叠加第一视频图像和第二视频图像地将第一视频图像和第二视频图像显示在第二设备200的屏幕上。
图8A和8B例示了根据一个示范性实施例,通过使用第二设备200将第一视频图像的一部分确定为感兴趣区域,以便使包括由用户触摸的点的对象包括在所确定部分中的例子。
参照图8A和8B,当用户在显示在第二设备200的屏幕上的第一视频图像上触摸预定点80时,第二设备200可以确定包括包含触摸点80的脸部82的区域84作为第一视频图像的一部分。
详细地说,当用户在显示在屏幕上的第一视频图像上触摸预定点80时,第二设备200可以识别包括触摸点的脸部82。此外,第二设备200可以选择包括脸部82的区域84。在这种情况下,可以基于第一设备100与第二设备200之间的通信方法确定区域84的尺寸。
例如,当用户触摸显示在第二设备200的屏幕上的预定菜单时,在第二设备200的屏幕上显示预定方框,并且用户可以移动显示的方框或调整方框的尺寸以选择感兴趣区域。在这种情况下,也可以在第二设备200的屏幕上显示移动方框或调整方框的尺寸的用户界面。
图9A和9B例示了根据一个示范性实施例,通过使用第二设备200将从用户的触摸点开始事先设定范围内的部分确定为感兴趣区域的例子。
参照图9A和9B,当用户在显示在第二设备200的屏幕上的第一视频图像上触摸预定点90时,可以将围绕触摸点90具有预定尺寸的长方形区域92确定为第一视频图像的一部分。在这种情况下,可以基于第一设备100与第二设备200之间的通信方法确定区域92的尺寸。
可替代地,第二设备200可以基于用户的反向挤压(unpinching)输入确定感兴趣区域。当用户通过使用,例如,他或她的拇指和食指的反向挤压输入放大第二视频图像的预定部分,并保持触摸拇指和食指达预定时段或更长时,第二设备200可以将通过非收缩输入放大的部分确定为感兴趣区域。此外,第二设备200可以向第一设备100提交对与所确定感兴趣区域相对应的第二视频图像的请求。
图10A和10B例示了根据一个示范性实施例,经由确定第一视频图像的部分的用户界面,通过使用第二设备200将第一视频图像的一部分确定为感兴趣区域的例子。
参照图10A和10B,第二设备200可以将用于选择第一视频图像的一部分的引导线10显示在屏幕上。此外,第二设备200可以基于用户触摸引导线10的一部分和拖拉它来调整引导线10的尺寸。此外,第二设备200可以将包括在调整后引导线10中的部分确定为第一视频图像的感兴趣区域。在这种情况下,可以基于第一设备100与第二设备200之间的通信方法确定包括在引导线10中的部分的尺寸的上限。
图11A和11B例示了根据一个示范性实施例,当调整第一设备100与第二设备200之间的通信方法时,使用第二设备200以调整后分辨率从第一设备100接收视频图像的例子。图11A例示了调整通信方法之前显示在第二设备200上的视频图像,而图11B例示了调整通信方法之后显示在第二设备200上的视频图像。
随着用在第一设备100与第二设备200之间的通信方法得到调整,可以降低在第一设备100与第二设备200之间传输的数据的流化分辨率。在这种情况下,第二设备200可以从第一设备100接收具有比调整通信方法之前接收的视频图像更低分辨率的视频图像。此外,第二设备200可以以比调整通信方法之前接收的视频图像小的尺寸显示调整通信方法之后接收的视频图像。
图12A和12B例示了根据一个示范性实施例,当调整第一设备100与第二设备200之间的通信方法时,使用第二设备200从第一设备100接收具有调整后图像质量的视频图像的例子。图12A例示了调整通信方法之前显示在第二设备200上的视频图像,而图12B例示了调整通信方法之后显示在第二设备200上的视频图像。
随着用在第一设备100与第二设备200之间的通信方法得到调整,可以降低在第一设备100与第二设备200之间传输的数据的流化分辨率。在这种情况下,第二设备200可以从第一设备100接收具有比调整通信方法之前接收的视频图像更低图像质量的视频图像。此外,第二设备200可以以与调整通信方法之前接收的视频图像相同的尺寸显示调整通信方法之后接收的视频图像。
图13A和13B例示了根据一个示范性实施例,当调整第一设备100与第二设备200之间的通信方法时,使用第二设备200从第一设备100接收具有调整部分的视频图像的例子。图13A例示了调整通信方法之前显示在第二设备200上的视频图像,而图13B例示了调整通信方法之后显示在第二设备200上的视频图像。
随着用在第一设备100与第二设备200之间的通信方法得到调整,可以提高在第一设备100与第二设备200之间传输的数据的流化分辨率。在这种情况下,第二设备200可以从第一设备100接收具有比调整通信方法之前从第一设备100接收的视频图像更宽区域的视频图像。
图14是例示根据一个示范性实施例的第一设备100的框图。
如图14所例示,第一设备100包括图像获取单元110(例如,图像获取器等)、图像提供单元120(例如,图像提供器等)、对象识别单元130(例如,对象识别器等)、对象跟踪单元140(例如,对象跟踪器等)、网络检验单元150(例如,网络检验器等)、帧缓冲器190、数据库(DB)160、收发单元170(例如,收发器等)、和控制单元180(例如,控制器、处理器等)。
图像获取单元110获取要提供给第二设备200的图像。图像获取单元110可以获取通过使用包括在第一设备100中的拍摄装置或图像传感器捕获的视频图像,但不局限于此。图像获取单元110可以获取像图片或所捕获图像那样的内容。
当向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像时,图像获取单元110可以从帧缓冲器190中获取与应用程序的运行屏幕相对应的第三视频图像。但是,示范性实施例不局限于此,图像获取单元110可以从后面将描述的帧缓冲器190中提取与应用程序的运行屏幕相对应的图像,并通过处理提取的图像生成第三视频图像。
图像提供单元120将获取的图像提供给第二设备200。图像提供单元120可以处理获取的图像并将其提供给第二设备200,但不局限于此。图像提供单元120可以不作任何附加处理地将获取的图像提供给第二设备200。
图像提供单元120可以基于通过使用第一设备100捕获的视频图像将第一视频图像和第二视频图像提供给第二设备200。图像提供单元120还可以将未处理的捕获视频图像提供给第二设备200作为第一视频图像。此外,图像提供单元120可以处理捕获的视频图像并将经过处理的视频图像提供给第二设备200作为第一视频图像。在这种情况下,图像提供单元120可以调整所捕获视频图像的分辨率或图像质量或转换所捕获视频图像的格式。
图像提供单元120可以以第一分辨率向第二设备200发送具有原始分辨率的第一视频图像。第一分辨率的第一视频图像可以从原始分辨率的第一视频图像转换而来。在这种情况下,第一设备100可以事先获取有关包括在第二设备200中的显示器的分辨率并存储它,并且可以基于包括在第二设备200中的显示器的分辨率确定第一分辨率。
图像提供单元120可以向第二设备200提供包括通过使用后面将描述的对象跟踪单元140跟踪的对象的第二视频图像。第二视频图像可以仅包含包括所跟踪对象的部分。此外,当调整第一设备100与第二设备200之间的通信方法时,图像提供单元120可以调整第二视频图像的分辨率或图像质量,并将调整后的视频图像提供给第二设备200。此外,当调整第一设备100与第二设备200之间的通信方法时,图像提供单元120可以调整与第二视频图像相对应的部分的尺寸,并将所调整部分的视频图像提供给第二设备200。
同时,图像提供单元120可以向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像。此外,当第二设备200选择从第一设备100接收的第三视频图像的一部分并请求所选部分的视频图像时,第一设备100可以向第二设备200提供与所选部分相对应的第四视频图像。在这种情况下,第四视频图像可以是通过从第三视频图像中切出所选部分获得的图像。
对象识别单元130从获取的图像中识别对象。对象识别单元130可以从第二设备200中接收第一视频图像的部分的区域信息,并从捕获的视频图像或第一视频图像中识别对象。
对象跟踪单元140从所获取的图像中跟踪对象。对象跟踪单元140可以从第一视频图像或捕获的视频图像中跟踪识别的对象。
网络检验单元150检验第一设备100与第二设备200之间的通信方法。网络检验单元150可以检验第一设备100与第二设备200之间的通信方法的类型或带宽。此外,网络检验单元150可以检验在第一设备100与第二设备200之间传输的数据的流化分辨率。
帧缓冲器190存储与在第一设备100中运行的应用程序的运行屏幕相对应的图像。
DB160存储当第一设备100向第二设备200提供视频图像的预定部分的图像时需要的各种类型的信息。
收发单元170向第二设备200发送或从第二设备200接收第一设备100向第二设备200提供第一视频图像的预定部分的图像时需要的各种信息。
控制单元180控制图像获取单元110、图像提供单元120、对象识别单元130、对象跟踪单元140、网络检验单元150、帧缓冲器190、DB160、和收发单元170,以便第一设备100可以向第二设备200提供视频图像的预定部分的图像。
图15是例示根据一个示范性实施例的第二设备200的框图。
如图15所例示,第二设备200包括图像接收单元210(例如,图像接收器等)、用户输入单元220(例如,用户输入器等)、网络检验单元230(例如,网络检验器等)、区域信息生成单元240(例如,区域信息生成器等)、区域信息提供单元250(例如,区域信息提供器等)、显示单元260(例如,显示器等)、DB270、收发单元280、和控制单元290。
图像接收单元210接收来自第一设备100的图像。图像接收单元210可以从第一设备100接收第一视频图像和第二视频图像。此外,当调整通信方法时,图像接收单元210可以接收在调整分辨率上或具有调整图像质量的视频图像,但示范性实施例不局限于此。
当提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像时,图像接收单元210可以从第一设备100接收第三视频图像。
用户输入单元220接收选择第一视频图像的一部分的用户输入。例如,图像接收单元220可以接收触摸第一视频图像的预定点的用户输入或用于触摸或拖拉第一视频图像的预定点的用户输入。此外,用户输入单元220可以经由显示在第二设备200的屏幕上的预定用户界面接收用户的触摸输入。同时,当提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像时,用户输入单元200接收用于选择第三视频图像的一部分的用户输入。
网络检验单元230检验第一设备100与第二设备200之间的通信方法。网络检验单元230可以检验第一设备100与第二设备200之间的通信方法的类型和带宽。此外,网络检验单元230可以检验在第一设备100与第二设备200之间传输的数据的流化分辨率。
区域信息生成单元240基于用户输入和检验的通信方法选择第一视频图像的一部分。区域信息生成单元240可以生成与包括在第一视频图像中的对象有关的区域信息。区域信息生成单元240可以基于第一视频图像中触摸输入点的位置来选择第一视频图像的一部分。详细地说,当用户触摸第一视频图像中的预定点时,区域信息生成单元20可以识别包括触摸点的对象并选择包括所识别对象的区域。
此外,当用户触摸第一视频图像中的预定点时,区域信息生成单元240可以选择围绕触摸点事先设定范围的区域作为第一视频图像的一部分。此外,区域信息生成单元240可以根据用户经由用户界面的触摸输入来调整所选部分。此外,可以根据第一设备100与第二设备200之间的通信方法确定第一视频图像的所选部分的尺寸。
区域信息提供单元250将生成的区域信息提供给第一设备100。
区域信息提供单元250可以向第一设备100提供所选部分的坐标值。此外,区域信息提供单元250可以向第一设备100提供由用户输入的触摸输入点的坐标值。
显示单元260将从第一设备100接收的图像显示在屏幕上。显示单元260可以将从第一设备100接收的视频图像显示在屏幕上。
DB270存储各种类型的信息,以便第二设备200可以接收从第一设备100接收的第一视频图像的一部分的视频图像。
收发单元280可以向第一设备100发送或从第一设备100接收各种类型的信息,以便第二设备200可以接收从第一设备100接收的第一视频图像的一部分的视频图像。
控制单元290控制图像接收单元210、用户输入单元220、网络检验单元230、区域信息生成单元240、区域信息提供单元250、显示单元260、DB270、收发单元280,和控制单元290,以便第二设备200可以接收从第一设备100接收的第一视频图像的一部分的视频图像。
图16是根据另一个示范性实施例的设备的框图。例示在图16中的设备可以是根据示范性实施例的第一设备100或第二设备200。
移动通信单元1001(例如,移动通信器等)执行对于基站的通话建立或经由像3G或4G那样的蜂窝式网络的数据通信。子通信单元1002执行像蓝牙或近场通信(NFC)那样的短程通信的功能。广播单元(例如,广播接收器等)1003接收数字多媒体广播(DMB)信号。
摄像机单元1004包括透镜和光学设备以便捕获图片或视频图像。
传感器单元1005可以包括,例如,感测设备的运动的重力传感器、感测光线的亮度的照度传感器、感测人员的接近的接近传感器、和感测人员的运动的运动传感器。
全球定位系统(GPS)接收单元1006接收来自人造卫星的GPS信号。可以使用GPS信号向用户提供各种服务。
输入/输出单元1010提供对于外部设备或人员的界面,并且可以包括,例如,按钮1011、麦克风1012、扬声器1013、振动电机1014、连接器1015或小键盘1016。
触摸屏1018接收用户的触摸输入。这里,触摸输入可以通过拖拉手势或轻击手势来输入。触摸屏控制器1017将经由触摸屏1018输入的触摸输入发送给控制单元1050。供电单元1019与电池或外部电源连接,以便供应设备所需的电力。
控制单元1050显示被显示在设备上的内容的一部分并通过运行存储在存储器1060中的程序修改它。控制单元可以向帧缓冲器1020写入和/或从帧缓冲器1020读取数据。
存储在存储器1060中的程序可以根据功能分类成多个模块,例如,分类成移动通信模块1061、Wi-Fi模块1062、蓝牙模块1063、DMB模块1064、摄像机模块1065、传感器模块1066、GPS模块1067、视频图像重放模块1068、音频重放模块1069、电力模块1070、触摸屏模块1071、用户界面(UI)模块1072、或应用模块1073。本领域的一个普通技术人员可以从模块的名称中直观地推测各自模块的功能。
在下文中,将详细描述应用模块1073。
首先,当例示在图16中的设备是第一设备100时,应用模块1073可以通过使用包括在第一设备100中的模块向第二设备200提供基于所捕获视频图像的第一视频图像,并接收有关第一视频图像的一部分的区域信息。此外,应用模块1073可以通过使用包括在第一设备100中的模块识别与该部分相对应的对象并跟踪它,并且向第二设备200提供包括所跟踪对象的第二视频图像。此外,应用模块1073可以通过使用包括在第一设备100中的模块检验对于第二设备200的通信方法,并且,当调整通信方法时,应用模块1073可以向第二设备200提供与第二视频图像相比分辨率或图像质量得到调整的视频图像。
此外,当图16的设备是第二设备200时,应用模块1073可以通过使用包括在第二设备200中的模块接收第一视频图像,并选择第一视频图像的一部分。在这种情况下,可以基于第一设备100与第二设备200之间的通信方法确定所选部分的尺寸。此外,应用模块1073可以通过使用包括在第二设备200中的模块生成有关所选部分的区域信息并将其提供给第一设备100。此外,应用模块1073可以通过使用包括在第二设备200中的模块显示从第二设备200接收的第二视频图像。
图17A到17C例示了根据一个示范性实施例放大显示在第二设备200的屏幕上的第一视频图像的一部分的例子。
如图17A到17C所例示,第二设备200可以基于用户的触摸输入和拖拉输入放大第一视频图像的一部分。在这种情况下,第二设备200可以基于第一视频图像的原始分辨率确定放大第一视频图像的程度。详细地说,如图17A所例示,当用户触摸第一视频图像的屏幕的多个部分并在其上作出拖拉动作时,可以如图17B所例示放大第一视频图像的一部分。此外,第二设备200可以考虑到第一视频图像的原始分辨率和第二设备200的屏幕尺寸确定放大第一视频图像的程度。于是,如图17C所例示,即使当用户继续触摸和拖拉时,第一视频图像也不会放大得比如图17B所例示的放大程度更大。
此外,第二设备200可以事先从第一设备100接收有关第一视频图像的原始分辨率的信息并存储它,以便确定扩大第一视频图像的程度,但示范性实施例不局限于此。
图18A到18C例示了基于一个示范性实施例以逐步方式放大显示在第二设备200的屏幕上的视频图像的一部分的例子。
如图18A所例示,可以选择视频图像的一部分并且可以第一次放大所选部分,然后,可以选择并第二次放大视频图像的放大部分的一部分。
图19A到19C例示了根据一个示范性实施例,在第二设备200上显示包括第一视频图像的放大部分的预览图像,以及在第二设备200上显示从第一设备100提供的第二视频图像的例子。这里,第一设备100和第二设备200可以相互打视频电话。
如图19A所例示,用户可以选择显示在第二设备200的屏幕上的第一视频图像的一部分10作为感兴趣区域。第二设备200可以从第一设备100接收具有第一分辨率的第一视频图像,并且将接收的第一视频图像显示在第二设备200的屏幕上。
接着,如图19B所例示,可以将示出所选感兴趣区域的放大的预览图像显示在第二设备200上,并且可以将确定是否放大第一视频图像的一部分并提供它的菜单12显示在第二设备200上。此外,可以将在第二设备200中放大第一视频图像的哪个部分显示在第一设备100的预定区域14上。
当用户在菜单12上选择“ALLOW(允许)”时,第一设备100可以如图19C所例示向第二设备200提供所选感兴趣区域的第二视频图像,并且第二设备200可以显示接收的第二视频图像。在这种情况下,第一设备100可以向第二设备200提供具有第一分辨率的所选感兴趣区域的第二视频图像。
同时,当向第二设备200提供第二视频图像时,第一设备100可以将通知信息插入第二视频图像中,以便通知第二设备200第二视频图像是所选感兴趣区域的放大图像。详细地说,第一设备100可以使第一视频图像和第二视频图像流到第二设备200,并且当第一设备100停止发送第一视频图像但发送第二视频图像时,将通知信息插入第二视频图像中。例如,当第一设备100停止发送第一视频图像以便发送第二视频图像时,第一设备100可以在流化水平上将预定参数值插入预定分组中,以便通知第二设备200提供了第二视频图像。此外,可以将通知信息插入例示在图20中的实时传输协议(RTP)分组首标中。图20例示了根据一个示范性实施例的RTP分组首标的例子。
第一设备100提供给第二设备200的第二视频图像的每个帧可以包括多个RTP分组。此外,第一设备100可以将通知信息插入与第二视频图像的每个帧相对应的多个RTP分组的预定分组中。例如,第一设备100可以将通知信息插入插入与第二视频图像的每个帧相对应的多个RTP分组的首标中的RTP标记字段90的位速率是1的RTP分组中。
此外,第一设备100可以将通知信息插入第二视频图像的多个帧当中的预定帧中。例如,第一设备100可以将通知信息插入从第二视频图像的第一帧开始的预定数目帧中。但是,示范性实施例不局限于此。
此外,第一设备100可以将通知信息插入RTP分组首标的首标扩展字段92中。通知信息可以具有预定位速率。此外,通知信息可以包括预定区域信息。该区域信息可以是指示通过使用第一设备100切出第一视频图像的哪个部分以生成第二视频图像的信息。例如,该区域信息可以是指示原始视频图像的整个屏幕当中与显示第二视频图像的屏幕相对应的部分的位置的值。此外,该区域信息可以具有预定坐标值。
图21是例示根据一个示范性实施例通过使用第一设备100生成第四视频图像的方法的流程图。第一设备100可以向第二设备200提供与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像,从第二设备200接收有关第三视频图像的一部分的区域信息,并向第二设备200提供生成的第四视频图像。
在操作S2100中,第一设备100从第一设备100中的帧缓冲器中获取第三视频图像。帧缓冲器可以存储与在第一设备100中运行的应用程序的运行屏幕相对应的第三视频图像。
在操作S2200中,第一设备100可以基于从第二设备200接收的区域信息切出第三视频图像的一部分。此外,第一设备100可以在操作S2300中编码第三视频图像的切出部分的一部分,并在操作S2400中将其分组化。
图22是例示基于一个示范性实施例,由正在与第一设备100打视频电话的第二设备200接收作为第一视频图像的放大部分的第二视频图像的方法的流程图。
在操作S2205中,为视频通话而连接第一设备100和第二设备200。
在操作S2210中,第一设备100向第二设备200提供第一视频图像。第一设备100可以捕获第一设备100的用户,并且为视频通话生成第一视频图像。此外,第一设备100可以将生成的第一视频图像发送给第二设备200。
在操作S2220中,第二设备200将从第一设备100接收的第一视频图像显示在第二设备200的屏幕上。
在操作S2230中,第二设备200选择第一视频图像要放大的部分。第二设备200可以从第一视频图像中选择,例如,第一设备100的用户的嘴部或第一设备100的用户拿着的书本的封面。在这种情况下,第二设备200可以基于用户的触摸输入选择一部分,但示范性实施例不局限于此。要放大的部分可以在视频通话期间事先设定,并且第二设备200可以从第一设备100的用户的图像中选择事先设定部分。
例如,第二设备200可以跟踪第一设备100的用户的脸部图像当中用户的嘴部,以选择用户的嘴部作为一部分。详细地说,第二设备200可以从第一设备100的用户的图像中检测脸部识别信息,并且可以基于检测的脸部识别信息跟踪和选择第一设备100的用户的脸部的嘴部。检测脸部识别信息的方法的例子包括基于特征的方法、基于外表的方法、和混合方法。在基于特征的方法中,可以将脸部或脸部特征成分(例如,眼睛、鼻子、嘴巴、或下巴)的几何信息用于基于这些成分的尺寸和形状、这些成分之间的相关性、或基于这些因素的组合的信息来识别脸部。基于特征的方法可以包括,例如,纯几何方法、基于动态链接架构的方法、或基于隐马尔可夫模型的方法。此外,根据基于外表的方法,通过使用从一组学习图像中学习的模型识别脸部。基于外表的方法的例子包括使用通过分析主要成分生成的特征脸的方法、使用线性判别分析的方法、使用神经网络的方法、和使用支持向量机的方法。另外,混合方法使用基于特征的方法和基于外表的方法两者。混合方法的例子包括基于线性特征分析的方法、基于形状归一化的方法、和基于成分的方法。但是,根据当前示范性实施例检测脸部识别信息的方法不局限于上述的三种方法,其他各种方法也可以用在检测脸部识别信息中。
在操作S2240中,第二设备200向第一设备100发送所选部分的坐标信息。
在操作S2250中,第一设备100显示第一视频图像由第二设备200选择的部分。第一设备100可以通过,例如,虚线显示第一视频图像由第二设备200选择的部分。此外,第一设备100可以仅将第一视频图像由第二设备200选择的部分显示在第一设备100的屏幕上。
在操作S2260中,第一设备100确定向第二设备200提供与所选部分有关的第二视频图像。第一设备100可以显示用户界面,并基于经由用户界面输入的用户输入,向第二设备200提供对于由第二设备200选择的部分有关的第二视频图像。
在操作S2270中,第一设备100捕获与所选部分相对应的部分。第一设备100可以捕获,例如,第一设备100的用户的嘴部或第一设备100的用户拿着的书本的封面。
在操作S2280中,第一设备100向第二设备200提供第二视频图像。第一设备100可以通过捕获与所选部分相对应的部分生成第二视频图像,并将生成的第二视频图像提供给第二设备200。
在操作S2290中,第二设备200显示第二视频图像。
同时,第二设备200可以将第一视频图像和第二视频图像两者都显示在第二设备200的屏幕上。在这种情况下,在操作S2280中,第二设备200不仅可以接收第二视频图像而且可以接收第一视频图像。另外,第二设备200可以通过将第二视频图像叠加在第一视频图像上来显示第一视频图像和第二视频图像。第二设备200可以将第二视频图像叠加在第一视频图像未显示第一设备100的用户的部分上。另外,第二设备200可以调整显示第一视频图像的部分的尺寸和显示第二视频图像的部分的尺寸。但是,示范性实施例不局限于此,第二设备200可以不叠加第一视频图像和第二视频图像地将第一视频图像和第二视频图像显示在第二设备200的屏幕上。
图23是例示根据一个示范性实施例,由正在与第一设备100打视频电话的第二设备200放大第一视频图像的一部分并显示它的方法的流程图。
在操作S2305中,为视频通话而连接第一设备100和第二设备200。
在操作S2310中,第一设备100向第二设备200提供第一视频图像。第一设备100可以捕获第一设备100的用户,并且可以为视频通话生成第一视频图像。此外,第一设备100可以将生成的第一视频图像发送给第二设备200。
在操作S2320中,第二设备200将从第一设备100接收的第一视频图像显示在第二设备200的屏幕上。
在操作S2330中,第二设备200选择第一视频图像要放大的部分。第二设备200可以从第一视频图像中选择,第一设备100的用户的嘴部或第一设备100的用户拿着的书本的封面。
在这种情况下,第二设备200可以基于用户的触摸输入选择一部分,但示范性实施例不局限于此。要放大的部分可以在视频通话期间事先设定,并且第二设备200可以从第一设备100的用户的图像中选择事先设定部分。例如,第二设备200可以通过跟踪第一设备100的用户的脸部图像的用户的嘴部来选择用户的嘴部作为一部分。
在操作S2340中,第二设备200仅将第一视频图像在操作S2330中选择的部分显示在第二设备200的屏幕上。第二设备200可以通过图像处理放大第一视频图像的所选部分,并且可以将放大部分显示在第二设备200的屏幕上。例如,当第一视频图像的分辨率是200×200,以及所选部分的分辨率是50×50时,第一设备100可以将所选部分的分辨率放大成200×200。
同时,第二设备200可以将放大图像叠加在第一视频图像上。第二设备200可以将放大图像叠加在第一视频图像未显示第一设备100的用户的部分上。另外,第二设备200可以调整显示第一视频图像的部分的尺寸和显示第二视频图像的部分的尺寸。但是,示范性实施例不局限于此,第二设备200可以不叠加第一视频图像和第二视频图像地将第一视频图像和第二视频图像显示在第二设备200的屏幕上。
图24A到24C例示了根据一个示范性实施例,与第一视频图像一起显示在第二设备200的屏幕上的第一视频图像42的放大部分。
参照图24A,可以选择显示在第二设备200的屏幕上的第一设备100的用户的脸部的嘴部40。嘴部40可以由第二设备200的用户来选择。但是,示范性实施例不局限于此,第二设备200可以根据事先设定标准跟踪和选择第一视频图像42中的嘴部40。
参照图24B,可以将所选嘴部40的放大图像44叠加在第一视频图像42上。在这种情况下,第二设备200可以确定第一视频图像未显示第一设备100的用户的部分,并将第二视频图像叠加在未显示用户的部分上。
另外,参照图24C,可以不将所选嘴部40的放大图像44叠加在第一视频图像42上,而是可以将所选嘴部40的放大图像44和第一视频图像分别显示在分离窗口上。
一个示范性实施例也可以以包括像计算机执行的程序模块那样,计算机可执行的命令的记录媒体的形式实现。计算机可读记录媒体可以是计算机可访问的任意可用媒体,以及可以是易失性、非易失性、可分开、和不可分开媒体的任何一种。此外,计算机可读记录媒体的例子可以包括计算机存储媒体和通信媒体。计算机存储媒体的例子包括存储有关计算机可读命令、数据结构、程序模块、或其他数据的信息的通过任意方法或技术实现的易失性、非易失性、可分开、和不可分开媒体。通信媒体可以包括计算机可读命令、数据结构、程序模块、像载波那样的调制数据信号的其他数据、或其他传输机制,并且可以是任意信息传输媒体。
虽然已经针对其实施例具体显示和描述了示范性实施例,但本领域的普通技术人员应该明白,可以不偏离如所附权利要求书限定的本发明构思的精神和范围地作出形式和细节上的各种改变。示范性实施例应该只从描述的意义上来考虑而不是为了限制的目的。例如,描述成单种类型的每个元件可以是分布式的,类似地,可以组合描述成分布式的元件。
示范性实施例的范围不是由详细描述来限定而是由所附权利要求书来限定,在该范围内的所有差异都应该理解为包括在本发明构思中。

Claims (32)

1.一种图像提供方法,包含:
向外部设备发送从原始分辨率的原始视频图像转换的第一分辨率的第一视频图像;
从外部设备接收有关第一分辨率的第一视频数据的感兴趣区域的区域信息;
基于区域信息确定原始分辨率的原始视频图像与感兴趣区域相对应的区域,其中所确定的区域小于原始分辨率的原始视频图像;
将原始分辨率的原始视频图像的一部分转换成第一分辨率的第二视频图像,其中该部分对应于所确定的区域;以及
将第二视频图像发送给外部设备。
2.如权利要求1所述的图像提供方法,其中该感兴趣区域包括显示在第一视频图像中的对象,并且该区域信息由外部设备生成。
3.如权利要求2所述的图像提供方法,其中当触摸外部设备的屏幕时,选择该感兴趣区域以包括与屏幕的触摸点相对应的对象。
4.如权利要求2所述的图像提供方法,其中当触摸外部设备的屏幕时,选择围绕屏幕的触摸点包括事先设定范围的感兴趣区域。
5.如权利要求1所述的图像提供方法,其中接收区域信息包含接收外部设备的屏幕的触摸点的坐标信息。
6.如权利要求1所述的图像提供方法,其中当触摸外部设备的屏幕时,在外部设备的屏幕上显示选择感兴趣区域的用户界面。
7.如权利要求1所述的图像提供方法,其中第一视频图像和第二视频图像是与外部设备视频通话的视频图像,
其中在将第一视频图像发送给外部设备的过程中,基于由摄像机捕获的视频图像将第一视频图像发送给外部设备,以及
其中由摄像机捕获的视频图像的分辨率大于视频通话的流化分辨率。
8.如权利要求1所述的图像提供方法,其中根据用于与外部设备通信的通信方法的类型确定感兴趣区域的范围。
9.如权利要求1所述的图像提供方法,其中根据用于与外部设备通信的通信方法的类型确定第一分辨率。
10.如权利要求1所述的图像提供方法,进一步包含根据用于与外部设备通信的通信方法的调整来调整第一分辨率。
11.如权利要求1所述的图像提供方法,进一步包含根据用于与外部设备通信的通信方法的调整来调整所确定的区域。
12.如权利要求1所述的图像提供方法,其中在将第一视频图像发送给外部设备的过程中,基于由摄像机捕获的视频图像将第一视频图像和第二视频图像发送给外部设备,以及
其中该方法进一步包含当包括在感兴趣区域中的对象从捕获的视频图像中消失时调整所确定的区域。
13.如权利要求12所述的图像提供方法,进一步包含,当从捕获的视频图像中消失的对象重新出现在捕获的视频图像中时,向外部设备提供仅包括重新出现的对象的部分的第二视频图像。
14.如权利要求1所述的图像提供方法,其中将通知正在发送第二视频图像的通知信息插入第二视频图像中。
15.如权利要求14所述的图像提供方法,其中将通知信息插入与第二视频图像的事先设定帧相对应的分组的首标中。
16.如权利要求15所述的图像提供方法,其中该分组是实时传输协议(RTP)分组,并且RTP分组的RTP标记字段值是1。
17.如权利要求15所述的图像提供方法,其中该分组是RTP分组,以及将通知信息插入RTP分组的首标扩展字段中。
18.如权利要求14所述的图像提供方法,其中该通知信息包括指示第一视频图像与第二视频图像相对应的部分的区域信息。
19.如权利要求1所述的图像提供方法,其中该感兴趣区域是基于显示第一视频图像的外部设备的屏幕上的用户输入指定的区域。
20.一种通过使用设备的图像接收方法,包含:
从外部设备接收第一视频图像;
向外部设备提供有关包括在所接收的第一视频图像中的对象的区域信息;以及
从外部设备接收仅包括第一视频图像的一部分的第二视频图像,其中该部分包括该对象,
其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率,以及
第一视频图像的该部分包括基于所提供的区域信息的对象。
21.如权利要求20所述的图像接收方法,进一步包含:
基于用户输入选择与包括在所接收的第一视频图像中的该对象有关的感兴趣区域;以及
生成有关所选感兴趣区域的区域信息。
22.如权利要求21所述的图像接收方法,其中在感兴趣区域的选择过程中,当触摸显示第一视频图像的设备的屏幕时,选择感兴趣区域以包括被包括在所接收第一视频图像中的对象,其中该对象包括屏幕的触摸点。
23.如权利要求21所述的图像接收方法,其中在感兴趣区域的选择过程中,当触摸显示第一视频图像的设备的屏幕时,选择围绕屏幕的触摸点事先设定范围的区域。
24.如权利要求20所述的图像接收方法,其中在区域信息的提供过程中,当触摸显示第一视频图像的设备的屏幕时,向外部设备提供屏幕的触摸点的坐标信息。
25.如权利要求20所述的图像接收方法,进一步包含,当触摸显示第一视频图像的设备的屏幕时,显示选择感兴趣区域的用户界面。
26.如权利要求20所述的图像接收方法,其中由外部设备基于通过使用外部设备捕获的视频图像来提供第一视频图像和第二视频图像,
其中当出现在所捕获的视频图像中的对象从捕获的视频图像中消失时,调整第一视频图像的该部分,以及
其中该图像接收方法进一步包含:
从外部设备接收仅包括所调整部分的第二视频图像。
27.如权利要求26所述的图像接收方法,进一步包含,当从捕获的视频图像中消失的对象重新出现在捕获的视频图像中时,从外部设备接收仅包括包含重新出现的对象的部分的第二视频图像。
28.一种图像提供设备,包含:
配置成存储至少一个程序的存储器;以及
配置成通过运行至少一个程序向外部设备提供所捕获的视频图像的处理器,
其中所述至少一个程序包括进行如下的命令:将第一视频图像发送给外部设备;从外部设备接收与包括在第一视频图像中的对象相对应的区域信息;以及基于区域信息提供仅包括包含第一视频图像的该对象的部分的第二视频图像,以及
其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率。
29.一种设备,包含:
配置成存储至少一个程序的存储器;以及
配置成通过运行所述至少一个程序向外部设备提供视频图像的处理器,
其中所述至少一个程序包括进行如下的命令:从外部设备接收第一视频图像;向外部设备提供有关包括在所接收的第一视频图像中的对象的区域信息;以及从外部设备接收仅包括第一视频图像的一部分的第二视频图像,
其中第一视频图像的该部分包括该对象,
其中第二视频图像的分辨率大于第一视频图像的该部分的分辨率,以及
其中包括该对象的第一视频图像的该部分基于提供的区域信息来确定。
30.一种图像提供方法,其包含:
向外部设备发送具有多个第一帧的第一视频图像;
从外部设备接收与包括在第一视频图像中的对象相对应的区域信息;
基于区域信息从多个第一帧当中选择包括该对象的第一帧;以及
向外部设备发送包括多个第二帧的第二视频图像,该第二帧仅包括所选第一帧的一部分。
31.一种图像提供方法,包含:
向外部设备发送具有多个第一帧的第一视频图像;
从外部设备接收与包括在第一视频图像中的对象相对应的区域信息;
基于区域信息从所述多个第一帧当中选择包括该对象的部分;以及
向外部设备发送包括多个第二帧的第二视频图像,该第二帧仅包括所选部分。
32.一种图像提供方法,包含:
向外部设备发送与应用程序的运行屏幕相对应的第一分辨率的第一图像;
从外部设备接收有关第一图像的感兴趣区域的区域信息;
基于区域信息,确定第一图像与感兴趣区域相对应的部分,其中该部分小于第一图像;
将第一图像的所确定部分转换成第一分辨率的第二图像;以及
向外部设备发送第二图像。
CN201310299684.5A 2012-07-17 2013-07-17 提供图像的系统及方法 Pending CN103546716A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2012-0077919 2012-07-17
KR20120077919 2012-07-17
KR1020130081194A KR102091137B1 (ko) 2012-07-17 2013-07-10 영상 제공 시스템 및 방법
KR10-2013-0081194 2013-07-10

Publications (1)

Publication Number Publication Date
CN103546716A true CN103546716A (zh) 2014-01-29

Family

ID=48874795

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310299684.5A Pending CN103546716A (zh) 2012-07-17 2013-07-17 提供图像的系统及方法

Country Status (4)

Country Link
US (3) US9204090B2 (zh)
EP (1) EP2688295B1 (zh)
CN (1) CN103546716A (zh)
WO (1) WO2014014238A1 (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281427A (zh) * 2014-03-10 2015-01-14 深圳深讯和科技有限公司 交互应用中的视频数据处理方法和系统
CN104410822A (zh) * 2014-11-24 2015-03-11 深圳市华宝电子科技有限公司 视频监控方法和车载视频监控设备
CN105005441A (zh) * 2015-06-18 2015-10-28 美国掌赢信息科技有限公司 一种即时视频的显示方法和电子设备
CN105049943A (zh) * 2014-04-29 2015-11-11 索尼公司 用于呈现多媒体内容的方法和设备
WO2016115958A1 (zh) * 2015-01-22 2016-07-28 掌赢信息科技(上海)有限公司 应用程序界面中的即时视频加载方法、系统和电子设备
CN106406651A (zh) * 2015-08-03 2017-02-15 北京鸿合智能系统股份有限公司 动态放大显示视频的方法及装置
CN106534972A (zh) * 2016-12-12 2017-03-22 广东威创视讯科技股份有限公司 一种无损缩放显示局部视频的方法及装置
CN107018386A (zh) * 2017-06-08 2017-08-04 柳州智视科技有限公司 一种视频流多分辨率观测系统
CN107135193A (zh) * 2016-02-26 2017-09-05 Lg电子株式会社 无线装置
WO2017219442A1 (zh) * 2016-06-24 2017-12-28 中兴通讯股份有限公司 一种图像预览方法和装置
CN107547913A (zh) * 2016-06-27 2018-01-05 阿里巴巴集团控股有限公司 视频数据播放和处理方法、客户端及设备
CN109741249A (zh) * 2018-12-29 2019-05-10 联想(北京)有限公司 一种数据处理方法及装置
US10582376B2 (en) 2015-07-24 2020-03-03 Sony Corporation Information processing apparatus, information processing method, and source apparatus
CN111105523A (zh) * 2020-01-08 2020-05-05 深圳市亮彩瀚达科技有限公司 可用于行车记录仪的可移动式回放画面系统及方法
CN111385607A (zh) * 2018-12-29 2020-07-07 浙江宇视科技有限公司 分辨率的确定方法、装置、存储介质、客户端及服务器
CN112218026A (zh) * 2020-08-25 2021-01-12 北京中联合超高清协同技术中心有限公司 一种超高清图像转换装置
CN112969099A (zh) * 2021-02-07 2021-06-15 海信集团控股股份有限公司 摄像装置、第一显示设备、第二显示设备及视频交互方法
CN113475091A (zh) * 2019-02-22 2021-10-01 三星电子株式会社 显示设备及其图像显示方法
CN113852757A (zh) * 2021-09-03 2021-12-28 维沃移动通信(杭州)有限公司 视频处理方法、装置、设备和存储介质
CN114302223A (zh) * 2019-05-24 2022-04-08 米利雅得广告公开股份有限公司 将视觉对象合并到视频材料中

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5662267B2 (ja) * 2011-07-04 2015-01-28 株式会社ソニー・コンピュータエンタテインメント 画像表示システム、情報処理装置、サーバ、および画像処理方法
WO2014014238A1 (en) * 2012-07-17 2014-01-23 Samsung Electronics Co., Ltd. System and method for providing image
US20150181168A1 (en) * 2013-12-20 2015-06-25 DDD IP Ventures, Ltd. Interactive quality improvement for video conferencing
EP2961182A1 (en) * 2014-06-27 2015-12-30 Alcatel Lucent Method, system and device for navigating in ultra high resolution video content by a client device
CN104079863B (zh) * 2014-06-27 2018-04-27 联想(北京)有限公司 一种信息处理方法及电子设备
US9858470B2 (en) 2014-07-18 2018-01-02 Htc Corporation Method for performing a face tracking function and an electric device having the same
TWI545508B (zh) * 2014-07-18 2016-08-11 宏達國際電子股份有限公司 用於執行臉部追蹤功能的方法及其電子裝置
CN105049947A (zh) * 2015-06-19 2015-11-11 美国掌赢信息科技有限公司 一种即时视频的传输方法和电子设备
KR102343331B1 (ko) * 2015-07-07 2021-12-24 삼성전자주식회사 통신 시스템에서 비디오 서비스를 제공하는 방법 및 장치
KR20170042431A (ko) * 2015-10-08 2017-04-19 삼성전자주식회사 디스플레이 모양에 따라 영상 데이터를 불균일하게 인코딩/디코딩하도록 구성되는 전자 장치
US10366144B2 (en) 2016-04-01 2019-07-30 Ebay Inc. Analyzing and linking a set of images by identifying objects in each image to determine a primary image and a secondary image
KR102623181B1 (ko) * 2016-10-05 2024-01-11 엘지전자 주식회사 무선 디바이스 및 무선 시스템
US20180152751A1 (en) * 2016-11-28 2018-05-31 Rickie Taylor System and Method for Enhanced Media Presentation
JP2018109924A (ja) * 2017-01-06 2018-07-12 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9973732B1 (en) * 2017-07-27 2018-05-15 Amazon Technologies, Inc. Device selection for video based communications
CN111034184B (zh) 2017-08-29 2022-09-02 连株式会社 提高视频质量的视频通话方法及计算机可读记录介质
CN107483826B (zh) * 2017-09-11 2018-10-23 广州酷狗计算机科技有限公司 生成视频文件的方法和装置
US10795979B2 (en) 2017-09-27 2020-10-06 International Business Machines Corporation Establishing personal identity and user behavior based on identity patterns
US10776467B2 (en) 2017-09-27 2020-09-15 International Business Machines Corporation Establishing personal identity using real time contextual data
US10839003B2 (en) 2017-09-27 2020-11-17 International Business Machines Corporation Passively managed loyalty program using customer images and behaviors
US10803297B2 (en) * 2017-09-27 2020-10-13 International Business Machines Corporation Determining quality of images for user identification
US10565432B2 (en) 2017-11-29 2020-02-18 International Business Machines Corporation Establishing personal identity based on multiple sub-optimal images
US11232816B2 (en) * 2018-05-25 2022-01-25 Sukyung Kim Multi-window viewing system including editor for reaction video and method for producing reaction video by using same
CN108921874B (zh) * 2018-07-04 2020-12-29 百度在线网络技术(北京)有限公司 人体跟踪处理方法、装置及系统
US10958955B1 (en) * 2018-09-13 2021-03-23 Amazon Technologies, Inc. System for generating modified video output
US11039173B2 (en) * 2019-04-22 2021-06-15 Arlo Technologies, Inc. Method of communicating video from a first electronic device to a second electronic device via a network, and a system having a camera and a mobile electronic device for performing the method
KR20210119644A (ko) 2020-03-25 2021-10-06 삼성전자주식회사 비디오 호 제어 방법 및 그 전자 장치
JP7402784B2 (ja) * 2020-11-13 2023-12-21 本田技研工業株式会社 遠隔表示システム、ロボット、及び表示端末
EP4250282A1 (en) 2021-06-07 2023-09-27 Samsung Electronics Co., Ltd. Display device and control method thereof

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102025965A (zh) * 2010-12-07 2011-04-20 华为终端有限公司 视频通话方法及可视电话
CN102065267A (zh) * 2009-11-11 2011-05-18 Lg电子株式会社 在视频会议系统中共享数据的方法和装置
CN102106145A (zh) * 2008-07-30 2011-06-22 三星电子株式会社 用于显示再现图像的放大的目标区域的装置和方法
CN102215372A (zh) * 2010-04-07 2011-10-12 苹果公司 视频会议中的远程控制操作
CN102263928A (zh) * 2011-07-26 2011-11-30 中兴通讯股份有限公司 放大可视电话图像的方法、终端及可视电话系统
CN102377977A (zh) * 2010-08-20 2012-03-14 中国移动通信有限公司 一种视频通话过程中对视频的处理方法、装置及系统

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5267331A (en) * 1990-07-26 1993-11-30 Ronald Siwoff Digitally enhanced imager for the visually impaired
US5359675A (en) * 1990-07-26 1994-10-25 Ronald Siwoff Video spectacles
JPH0638219A (ja) * 1992-07-20 1994-02-10 Olympus Optical Co Ltd 映像表示装置
US6388638B2 (en) * 1994-10-28 2002-05-14 Canon Kabushiki Kaisha Display apparatus and its control method
WO1999040725A1 (en) * 1998-02-10 1999-08-12 Nihon Computer Co., Ltd. High-resolution high-value-added video transfer method by using pseudo natural image, high-resolution high-value-added video processor, high-resolution high-value-added video processing method, high-resolution high-value-added transfer system, and storage medium
JPH11234580A (ja) * 1998-02-19 1999-08-27 Sony Corp テレビ放送受信装置
US6178204B1 (en) 1998-03-30 2001-01-23 Intel Corporation Adaptive control of video encoder's bit allocation based on user-selected region-of-interest indication feedback from video decoder
US5914747A (en) * 1998-06-17 1999-06-22 Dialogic Corporation Automatic control of video conference membership
US8290034B2 (en) 1998-12-21 2012-10-16 Zin Stai Pte. In, Llc Video transmission and display including bit-wise sub-sampling video compression
US20020093531A1 (en) * 2001-01-17 2002-07-18 John Barile Adaptive display for video conferences
US6956616B2 (en) * 2001-04-05 2005-10-18 Verseye, Inc. Apparatus for facilitating viewing by human eye
US7333071B2 (en) * 2001-05-11 2008-02-19 Xerox Corporation Methods of using mixed resolution displays
JP2002369164A (ja) 2001-06-06 2002-12-20 Nikon Corp 電子画像装置および電子画像システム
JP2003309828A (ja) * 2002-04-17 2003-10-31 Sumitomo Electric Ind Ltd モニタ像の表示位置修正方法、端末装置、取り付け治具及び双方向対話型システム
US7460148B1 (en) * 2003-02-19 2008-12-02 Rockwell Collins, Inc. Near real-time dissemination of surveillance video
EP1627524A4 (en) * 2003-03-20 2009-05-27 Ge Security Inc SYSTEMS AND METHODS FOR PROCESSING IMAGES OF MULTIPLE RESOLUTIONS
US6967569B2 (en) * 2003-10-27 2005-11-22 Ford Global Technologies Llc Active night vision with adaptive imaging
SE526226C2 (sv) 2003-12-19 2005-08-02 Ericsson Telefon Ab L M Bildbehandling
US7548259B2 (en) * 2004-08-12 2009-06-16 Microsoft Corporation System and method for producing a higher resolution still image from video information
US9329827B2 (en) * 2004-12-29 2016-05-03 Funmobility, Inc. Cropping of images for display on variably sized display devices
US8019175B2 (en) * 2005-03-09 2011-09-13 Qualcomm Incorporated Region-of-interest processing for video telephony
US7760908B2 (en) * 2005-03-31 2010-07-20 Honeywell International Inc. Event packaged video sequence
JP4697942B2 (ja) * 2005-05-16 2011-06-08 大日本印刷株式会社 撮影情報管理システム
US7859574B1 (en) * 2005-07-19 2010-12-28 Maxim Integrated Products, Inc. Integrated camera image signal processor and video encoder
US8026945B2 (en) * 2005-07-22 2011-09-27 Cernium Corporation Directed attention digital video recordation
JP3115546U (ja) 2005-08-05 2005-11-10 東芝テリー株式会社 表示装置
TWI275308B (en) 2005-08-15 2007-03-01 Compal Electronics Inc Method and apparatus for adjusting output images
US8208758B2 (en) * 2005-10-05 2012-06-26 Qualcomm Incorporated Video sensor-based automatic region-of-interest detection
US20070243887A1 (en) * 2005-11-01 2007-10-18 Fonemine, Inc. Platform for telephone-optimized data and voice services
US7746391B2 (en) 2006-03-30 2010-06-29 Jai Pulnix, Inc. Resolution proportional digital zoom
US8766983B2 (en) * 2006-05-07 2014-07-01 Sony Computer Entertainment Inc. Methods and systems for processing an interchange of real time effects during video communication
US8315466B2 (en) * 2006-12-22 2012-11-20 Qualcomm Incorporated Decoder-side region of interest video processing
JP5162928B2 (ja) * 2007-03-12 2013-03-13 ソニー株式会社 画像処理装置、画像処理方法、画像処理システム
EP2131583A1 (en) * 2007-03-29 2009-12-09 Sharp Kabushiki Kaisha Video transmitter, video receiver, video recorder, video reproducer, and video display
US8289371B2 (en) * 2007-05-21 2012-10-16 Polycom, Inc. Smart cropping of video images in a videoconferencing session
US8984389B2 (en) * 2007-06-04 2015-03-17 Lg Electronics Inc. Mobile terminal for setting bookmarking area and control method thereof
WO2009001683A1 (ja) * 2007-06-28 2008-12-31 Sharp Kabushiki Kaisha 表示装置及び表示方法
KR101373333B1 (ko) * 2007-07-11 2014-03-10 엘지전자 주식회사 터치인식을 통한 영상촬영 기능을 구비한 휴대 단말기 및그 촬영방법
US8331451B2 (en) * 2007-07-18 2012-12-11 Samsung Electronics Co., Ltd. Method and apparatus for enhancing resolution of video image
KR101513616B1 (ko) * 2007-07-31 2015-04-20 엘지전자 주식회사 이동 단말기 및 그 영상정보 관리방법
US8825200B2 (en) * 2007-11-07 2014-09-02 Siemens Industry, Inc. Method and system for tracking of items
KR101427264B1 (ko) * 2007-12-17 2014-08-06 엘지전자 주식회사 휴대 단말기
KR101464572B1 (ko) * 2008-03-20 2014-11-24 인스티튜트 퓌어 룬트퐁크테크닉 게엠베하 작은 스크린 크기들에 대해 비디오 이미지들을 적응시키는 방법
JP2009239480A (ja) 2008-03-26 2009-10-15 Toshiba Corp 映像受信クライアント、映像配信サーバ、受信アルゴリズム切替制御方法及びプログラム
KR101437991B1 (ko) * 2008-06-09 2014-09-05 엘지전자 주식회사 휴대 단말기
JP2010002700A (ja) 2008-06-20 2010-01-07 Sharp Corp 表示装置及びその製造方法
JP4444354B2 (ja) * 2008-08-04 2010-03-31 株式会社東芝 画像処理装置、および画像処理方法
KR101056168B1 (ko) * 2008-11-25 2011-08-11 크라제비전(주) 카메라 모듈 및 이를 구비한 휴대형 단말기
JP4427599B1 (ja) * 2008-11-28 2010-03-10 株式会社東芝 画像処理装置、受信装置および表示装置
KR101534505B1 (ko) * 2008-11-28 2015-07-09 엘지전자 주식회사 이동 단말기
US20100149301A1 (en) 2008-12-15 2010-06-17 Microsoft Corporation Video Conferencing Subscription Using Multiple Bit Rate Streams
KR101077029B1 (ko) 2009-03-23 2011-10-26 주식회사 코아로직 비디오 데이터 전송 장치 및 방법
KR101590189B1 (ko) * 2009-05-21 2016-01-29 엘지전자 주식회사 이동 통신 단말기에서의 메뉴 제어 방법 및 이를 적용한 이동 통신 단말기
KR101612785B1 (ko) * 2009-06-01 2016-04-26 엘지전자 주식회사 차량 내비게이션 방법 및 그 장치
PT3336598T (pt) * 2009-06-16 2022-02-15 Leonard Pool Sistema de inspecção vídeo intrinsecamente seguro
JP5089658B2 (ja) 2009-07-16 2012-12-05 株式会社Gnzo 送信装置及び送信方法
US8549571B2 (en) * 2009-09-15 2013-10-01 Envysion, Inc. Video streaming method and system
KR101611350B1 (ko) * 2009-09-28 2016-04-12 삼성전자주식회사 채널 조정 방법 및 장치
KR20110040468A (ko) * 2009-10-14 2011-04-20 삼성전자주식회사 휴대 단말기의 카메라 운용 방법 및 장치
KR101171377B1 (ko) * 2009-12-15 2012-08-10 주식회사 케이티 멀티미디어 메시지로 전송된 사진 및 동영상의 원본 파일을 제공하는 방법
JP5679655B2 (ja) * 2009-12-24 2015-03-04 レノボ・イノベーションズ・リミテッド(香港) 携帯端末装置及びその表示制御方法
US9185335B2 (en) 2009-12-28 2015-11-10 Thomson Licensing Method and device for reception of video contents and services broadcast with prior transmission of data
JP5914884B2 (ja) * 2010-02-10 2016-05-11 パナソニックIpマネジメント株式会社 デジタルビデオ信号出力装置および表示装置、デジタルビデオ信号出力方法および受信方法
KR20110116116A (ko) * 2010-03-30 2011-10-25 현민호 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기
US8917632B2 (en) 2010-04-07 2014-12-23 Apple Inc. Different rate controller configurations for different cameras of a mobile device
KR101655812B1 (ko) * 2010-05-06 2016-09-08 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
JP2011239149A (ja) * 2010-05-10 2011-11-24 Sony Corp 制御装置、カメラシステム及びプログラム
EP2576315B1 (fr) 2010-05-19 2018-09-26 Siemens S.A.S. Securisation d'une transmission video a distance destinee au controle a distance d'un vehicule
KR20120010764A (ko) * 2010-07-27 2012-02-06 엘지전자 주식회사 이동 단말기 및 3차원 영상 제어 방법
KR101753031B1 (ko) * 2010-11-15 2017-06-30 엘지전자 주식회사 이동 단말기 및 이것의 메타데이터 설정 방법
TW201225654A (en) 2010-12-13 2012-06-16 Sonix Technology Co Ltd Image accessing apparatus and image data transmission method thereof
US8786660B2 (en) * 2010-12-20 2014-07-22 Raycomm Technologies, Inc. Video call method and system thereof
US9615062B2 (en) * 2010-12-30 2017-04-04 Pelco, Inc. Multi-resolution image display
JP5784353B2 (ja) * 2011-04-25 2015-09-24 オリンパス株式会社 画像表示装置
JP5629642B2 (ja) * 2011-05-19 2014-11-26 株式会社ソニー・コンピュータエンタテインメント 動画像撮影装置、情報処理システム、情報処理装置、および画像データ処理方法
US8881218B2 (en) * 2011-09-09 2014-11-04 Dell Products L.P. Video transmission with enhanced area
US9058520B2 (en) * 2011-09-22 2015-06-16 Siemens Corporation Systems and methods for hands free inspection
US20130106988A1 (en) * 2011-10-28 2013-05-02 Joseph Davis Compositing of videoconferencing streams
US8789095B2 (en) * 2012-05-15 2014-07-22 At&T Intellectual Property I, Lp Apparatus and method for providing media content
WO2014014238A1 (en) * 2012-07-17 2014-01-23 Samsung Electronics Co., Ltd. System and method for providing image

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102106145A (zh) * 2008-07-30 2011-06-22 三星电子株式会社 用于显示再现图像的放大的目标区域的装置和方法
CN102065267A (zh) * 2009-11-11 2011-05-18 Lg电子株式会社 在视频会议系统中共享数据的方法和装置
CN102215372A (zh) * 2010-04-07 2011-10-12 苹果公司 视频会议中的远程控制操作
CN102377977A (zh) * 2010-08-20 2012-03-14 中国移动通信有限公司 一种视频通话过程中对视频的处理方法、装置及系统
CN102025965A (zh) * 2010-12-07 2011-04-20 华为终端有限公司 视频通话方法及可视电话
CN102263928A (zh) * 2011-07-26 2011-11-30 中兴通讯股份有限公司 放大可视电话图像的方法、终端及可视电话系统

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281427A (zh) * 2014-03-10 2015-01-14 深圳深讯和科技有限公司 交互应用中的视频数据处理方法和系统
CN105049943A (zh) * 2014-04-29 2015-11-11 索尼公司 用于呈现多媒体内容的方法和设备
CN105049943B (zh) * 2014-04-29 2019-06-07 索尼公司 用于呈现多媒体内容的方法和设备
CN104410822A (zh) * 2014-11-24 2015-03-11 深圳市华宝电子科技有限公司 视频监控方法和车载视频监控设备
WO2016115958A1 (zh) * 2015-01-22 2016-07-28 掌赢信息科技(上海)有限公司 应用程序界面中的即时视频加载方法、系统和电子设备
CN105005441A (zh) * 2015-06-18 2015-10-28 美国掌赢信息科技有限公司 一种即时视频的显示方法和电子设备
US10582376B2 (en) 2015-07-24 2020-03-03 Sony Corporation Information processing apparatus, information processing method, and source apparatus
CN106406651A (zh) * 2015-08-03 2017-02-15 北京鸿合智能系统股份有限公司 动态放大显示视频的方法及装置
CN106406651B (zh) * 2015-08-03 2020-05-22 北京鸿合智能系统有限公司 动态放大显示视频的方法及装置
CN107135193B (zh) * 2016-02-26 2020-03-03 Lg电子株式会社 无线装置
CN107135193A (zh) * 2016-02-26 2017-09-05 Lg电子株式会社 无线装置
WO2017219442A1 (zh) * 2016-06-24 2017-12-28 中兴通讯股份有限公司 一种图像预览方法和装置
CN107547913B (zh) * 2016-06-27 2021-06-18 阿里巴巴集团控股有限公司 视频数据播放和处理方法、客户端及设备
CN107547913A (zh) * 2016-06-27 2018-01-05 阿里巴巴集团控股有限公司 视频数据播放和处理方法、客户端及设备
CN106534972A (zh) * 2016-12-12 2017-03-22 广东威创视讯科技股份有限公司 一种无损缩放显示局部视频的方法及装置
CN107018386A (zh) * 2017-06-08 2017-08-04 柳州智视科技有限公司 一种视频流多分辨率观测系统
CN109741249A (zh) * 2018-12-29 2019-05-10 联想(北京)有限公司 一种数据处理方法及装置
CN111385607A (zh) * 2018-12-29 2020-07-07 浙江宇视科技有限公司 分辨率的确定方法、装置、存储介质、客户端及服务器
US11238567B2 (en) 2018-12-29 2022-02-01 Lenovo (Beijing) Co., Ltd. Data processing method and device for managing discreet display
CN113475091A (zh) * 2019-02-22 2021-10-01 三星电子株式会社 显示设备及其图像显示方法
CN113475091B (zh) * 2019-02-22 2023-08-25 三星电子株式会社 显示设备及其图像显示方法
CN114302223A (zh) * 2019-05-24 2022-04-08 米利雅得广告公开股份有限公司 将视觉对象合并到视频材料中
CN111105523A (zh) * 2020-01-08 2020-05-05 深圳市亮彩瀚达科技有限公司 可用于行车记录仪的可移动式回放画面系统及方法
CN112218026A (zh) * 2020-08-25 2021-01-12 北京中联合超高清协同技术中心有限公司 一种超高清图像转换装置
CN112218026B (zh) * 2020-08-25 2023-08-29 北京中联合超高清协同技术中心有限公司 一种超高清图像转换装置
CN112969099A (zh) * 2021-02-07 2021-06-15 海信集团控股股份有限公司 摄像装置、第一显示设备、第二显示设备及视频交互方法
CN113852757A (zh) * 2021-09-03 2021-12-28 维沃移动通信(杭州)有限公司 视频处理方法、装置、设备和存储介质

Also Published As

Publication number Publication date
US20160065893A1 (en) 2016-03-03
EP2688295B1 (en) 2019-06-12
WO2014014238A1 (en) 2014-01-23
EP2688295A3 (en) 2014-03-19
US9204090B2 (en) 2015-12-01
US20140022329A1 (en) 2014-01-23
US20170223311A1 (en) 2017-08-03
EP2688295A2 (en) 2014-01-22
US10075673B2 (en) 2018-09-11
US9654728B2 (en) 2017-05-16

Similar Documents

Publication Publication Date Title
CN103546716A (zh) 提供图像的系统及方法
KR101938667B1 (ko) 휴대 전자장치 및 그 제어 방법
US10318028B2 (en) Control device and storage medium
RU2653305C2 (ru) Система и способ предоставления изображения
KR102384054B1 (ko) 이동 단말기 및 그 제어 방법
KR102311688B1 (ko) 이동단말기 및 그 제어방법
KR102339178B1 (ko) 이동단말기 및 그 제어방법
US10296281B2 (en) Handheld multi vantage point player
CN102164234A (zh) 具有拍摄功能的设备
KR102446694B1 (ko) 전자 기기 및 그 제어방법
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
KR20170010485A (ko) 단말 장치 및 단말 장치의 제어 방법
KR20160127606A (ko) 이동 단말기 및 그 제어 방법
KR20180131908A (ko) 이동 단말기 및 그것의 동작방법
US10013949B2 (en) Terminal device
KR20180016805A (ko) 디스플레이 장치 및 그의 동작 방법
KR20180096408A (ko) 전자 펜 및 그 제어 방법
WO2020238913A1 (zh) 视频录制方法及终端
KR20170025231A (ko) 이동단말기 및 그 제어방법
CN110662113B (zh) 视频播放方法、装置和计算机可读存储介质
KR102446769B1 (ko) 전자 장치 및 그 제어 방법
KR20170071290A (ko) 이동 단말기
CN115734016A (zh) 评论信息的显示方法、装置、计算机设备及存储介质
KR20170087247A (ko) 이동 단말기
KR20170073901A (ko) 이동 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140129