CN102164234A - 具有拍摄功能的设备 - Google Patents

具有拍摄功能的设备 Download PDF

Info

Publication number
CN102164234A
CN102164234A CN2011100042388A CN201110004238A CN102164234A CN 102164234 A CN102164234 A CN 102164234A CN 2011100042388 A CN2011100042388 A CN 2011100042388A CN 201110004238 A CN201110004238 A CN 201110004238A CN 102164234 A CN102164234 A CN 102164234A
Authority
CN
China
Prior art keywords
picture frame
characteristic
image
output unit
image output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011100042388A
Other languages
English (en)
Other versions
CN102164234B (zh
Inventor
廉亨植
金南明
金善景
朴成焕
边光皞
申丁燮
吴相均
李振揆
李晓瑛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pan Thai Co ltd
Original Assignee
Pantech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pantech Co Ltd filed Critical Pantech Co Ltd
Publication of CN102164234A publication Critical patent/CN102164234A/zh
Application granted granted Critical
Publication of CN102164234B publication Critical patent/CN102164234B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及一种具有拍摄功能的设备。一种终端包括图像输入单元、图像输出单元以及控制器，在启用了预览模式的情况下，控制器将图像输入单元产生的图像帧实时发送给图像输出单元。如果选择了在图像输出单元的屏幕上显示的图像中的对象，则控制器识别该选定对象，检测其中存在与所识别出的对象相匹配的对象的图像帧，处理所检测到的图像帧，并且将经过处理的图像帧发送给图像输出单元，使得可以在记录所拍摄的图像之前编辑图像。

Description

具有拍摄功能的设备
技术领域
本公开涉及具有拍摄功能的终端。
背景技术
总体上，具有拍摄功能的终端在拍摄模式启用的情况下在预览屏幕上显示图像。如果启用了拍摄模式，具有拍摄功能的终端启用预览模式并在预览屏幕上实时地显示图像，即，屏幕显示对应于图像传感器通过摄像机的镜头检测到的图像的经过处理的数据。
在启用了预览模式的状态下，用户可以启用静止图像拍摄模式并捕获和记录在预览模式中显示在屏幕上的图像。此外，用户可以启用运动图像拍摄模式以捕获和记录从启用运动图像拍摄模式的时间点到停用运动图像拍摄模式的时间点为止的运动图像，从而与屏幕上显示的图像一起记录周围的声音。
具有这种拍摄功能的终端除了具有拍摄功能外，还具有记录功能、数据存储功能、存储数据获取功能、与外部设备(如个人计算机(PC))的数据通信的功能。近来，已经增加了诸如电话通话功能、音乐和/或运动图像等的多媒体文件播放功能、广播接收/发送功能以及用于远程控制电子设备(如电视机)的功能的各种功能中的至少一种。例如，具有拍摄功能的终端可以包括数字摄像机、便携式多媒体播放器(PMP)、移动电话、个人数字助理(PDA)、智能电话、MPEG层3播放器(MP3P)等。
但是，在具有拍摄功能的现有终端中，使用单独的图像编辑软件工具仅能读取并编辑已记录的图像。
此外，在具有拍摄功能的现有终端中，在启用了拍摄模式的情况下，为了控制可远程控制的电子设备，必须停止拍摄模式并切换到电子设备远程控制模式。例如，如果可以远程控制的电子设备在开启的状态下被显示在预览屏幕上，则必须切换该模式以关闭该电子设备。
发明内容
本发明的示例性实施方式提供了一种具有拍摄功能的终端，该终端能够在所拍摄的图像被显示在预览屏幕上的状态下提供图像编辑服务。
本发明的示例性实施方式提供了一种具有拍摄功能的终端，该终端能够利用图像识别方法识别在预览屏幕上显示的虚拟对象并远程控制与所识别出的虚拟对象相对应的真实对象。
本发明的附加特征和优点将在下面的描述中加以阐述，并且部分上根据该描述变得清楚，或者可以通过本发明的实践来获知。
一个示例性实施方式提供了一种具有拍摄功能的终端，该终端包括：用于产生图像帧的图像输入单元；用于在屏幕上显示由所述图像输入单元产生的所述图像帧的图像输出单元；控制器，如果启用了预览模式，则所述控制器将所述图像输入单元产生的所述图像帧实时地发送给所述图像输出单元，其中，如果在所述预览模式中选择了在所述图像输出单元在所述屏幕上显示的图像中的对象，则所述控制器识别所选择的对象，检测其中存在有与所识别出的对象相匹配的对象的图像帧，处理所检测到的图像帧，并且将经过处理的图像帧发送给所述图像输出单元。
一个示例性实施方式提供了一种具有拍摄功能的终端，该终端包括：用于执行无线通信的通信单元；用于产生图像帧的图像输入单元；用于在屏幕上显示由所述图像输入单元产生的所述图像帧的图像输出单元；用于存储关于与特征数据相匹配的无线通信协议的信息的存储器；以及控制器，如果启用了预览模式，则所述控制器将所述图像输入单元产生的所述图像帧实时地发送给所述图像输出单元，其中，如果在所述图像输出单元在所述屏幕上显示的图像中选择了对象，则所述控制器提取所选择的对象的特征数据，从所述存储器中获取与所提取出的特征数据相匹配的对象的无线通信协议，利用获取的无线通信协议来产生用于对象控制的远程控制信号，并且通过所述通信单元来发送所产生的远程控制信号。
应当理解，上面的一般描述和下面的详细描述都是示例性和说明性的，旨在提供对所要求保护的本发明的进一步解释。其它特征和方面将从以下的详细描述、附图和权利要求书中显现。
附图说明
所包括的附图用于提供对本发明的进一步理解，并被结合到说明书中且构成说明书的一部分，附图示出了本发明的实施方式，并与文字说明一起用于解释本发明的原理。
图1是示出了根据一个示例性实施方式的具有拍摄功能的终端的构造的示意性框图。
图2、图3、图4和图5是例示了在根据一个示例性实施方式的具有拍摄功能的终端上显示的预览图像的图。
具体实施方式
下面将参照附图更全面地描述本发明的示例性实施方式，在附图中示出了示例性实施方式。但是，本公开可以通过很多不同的形式来实施，因此不应当视为限于本文所阐述的示例性实施方式。相反，提供这些示例性实施方式是为了使得本公开更加完整，并这些示例性实施方式将向本领域技术人员全面地传达本公开的范围。在描述中，可以略去公知特征和技术的细节以避免不必要地模糊所提出的实施方式。
本文所使用的词语仅是出于说明特定实施方式的目的，并不旨在限制本公开。除非上下文清楚地另有所指，否则在本文中使用的单数形式“一”和“所述”旨在也包括复数形式。此外，“一”等词语的使用并不表示数量上的限制，而是表示存在至少一个所涉及的项。词语“第一”、“第二”等的使用并不意味着特定的顺序，而是将它们包括在内以标识各个单独要素。此外，词语“第一”、“第二”等的使用并不表示任何顺序和重要性，而是使用词语“第一”、“第二”等来将一个要素与另一个要素区分开来。还应当理解的是，在本说明书中使用时，词语“包括”是指存在所陈述的特征、区域、要件、步骤、操作、要素和/或部件，但是并不排除一个或更多个其他特征、区域、要件、步骤、操作、要素、部件和/或它们的组合的存在或添加。
除非另有限定，否则在本文中使用的所有词语(包括科技术语)都具有本领域普通技术人员所普遍理解的相同含义。还应当理解，应当把例如在普遍使用的词典中限定的词语解释为具有与它们在相关技术和本公开中的语境相一致的含义，并且除非在本文中做出清楚的限定，否则不应当以理想化或过度正式的方式解释它们。
在附图中，相同的附图标记表示相同的要素。为了清楚起见，可以夸大附图的形状、尺寸和区域等。
下面，将参照附图详细地描述根据示例性实施方式的具有拍摄功能的终端。
图1是示出了根据示例性实施方式的具有拍摄功能的终端的构造的示意性框图。参照图1，具有拍摄功能的终端包括图像输入单元10、图像处理单元20、图像输出单元30、声音输入单元40、声音输出单元50、存储器60、通信单元70、用户操作单元75以及控制器80。
图像输入单元10采集并处理光学信号，并且将该光学信号转换成图像信号。图像输入单元10还以帧为单位对转换后的图像信号进行处理，以产生图像帧。图像输入单元10包括用于将光学信号转换成模拟图像信号的图像传感器和用于处理从图像传感器输出的模拟图像信号并输出数字信号的信号处理模块。图像传感器例如可以包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器。根据图像传感器的类型，数模(D/A)转换器(未示出)可以集成到图像传感器中，或者可以是分立的部件。
图像处理单元20根据图像输出单元30的特点(如图像输出单元30的屏幕尺寸)来处理由图像输入单元10产生的图像帧。也就是说，图像处理单元20可以包括用于将图像信号编码或解码成适于图像输出单元30的特点的特定格式的图像编解码器。
图像输出单元30在控制器80的控制下在屏幕上显示图像帧，以在屏幕上显示静止图像或运动图像。例如，图像输出单元30可以包括具有或不具有触摸屏的液晶显示器(LCD)、无机或有机发光二极管(LED)显示器等。如果图像输出单元包括触摸屏，则可以执行与用户操作单元75类似的输入。始终可以根据触摸输入、拖拽输入、多点触摸输入等来操纵选定对象90。
如果在启用了预览模式的状态下又启用了选定对象删除模式，则图像输出单元30在屏幕上显示可以删除选定对象90的预览图像。当在屏幕上显示预览图像的同时，可以将预览图像存储在与图像输出单元相关联的缓冲存储器(未示出)中。但是，预览图像可能还未被存储在终端的存储器60中。
如果在启用了预览模式的状态下又启用了选定对象移动模式，则如图2所示，图像输出单元30在屏幕上显示可以移动选定图像90的位置的预览图像。参照图2，用户可以选择对象90，即，某人在所显示的预览图像中的图像，并且在所显示的预览图像内移动选定对象90。
如果在启用了预览模式的状态下又启用了选定对象拍摄模式，则图像输出单元30在屏幕上显示预览图像，在该预览图像中，仅选定对象90被移动，而不包括选定对象90的区域则停止不动或处于静止状态。
如果在启用了预览模式的状态下又启用了选定对象放大/缩小模式，则图像输出单元30在屏幕上显示预览图像，在该预览图像中，仅选定对象90被移动和放大/缩小，而不包括选定对象90的区域停止不动或处于静止状态。
如果在启用了预览模式的状态下又启用了选定对象合成模式，则图像输出单元30在屏幕上显示预览图像，在该预览图像中，根据选定对象90的移动而移动了将与选定对象90合成的文字(即，“Jindo狗”)或图像，如图3所示。参照图3，文字“Jindo狗”可以被选择和/或添加到预览图像，与选定对象90合成，并且随选定对象90一起移动。
如果在启用了预览模式的状态下又启用了选定对象余像(after-image)模式，则图像输出单元30在屏幕上显示预览图像，在该预览图像中，仅选定对象90与选定对象90的余像一起移动，而不包括选定对象90的区域则停止不动，如图4所示。参照图4，选定对象90(例如，单板滑雪者)被移动，而不包括选定对象90的区域则停止不动。
如果在启用了预览模式的状态下又启用了图像特性改变模式，则图像输出单元30在屏幕上显示亮度与选定对象90的亮度相同的预览图像，如图5所示。参照图5，该图像的亮度可以被改变为与选定对象90的亮度相对应、相同或相似。
再次参照图1，声音输入单元40采集并处理声音，并且产生声音信号。例如，声音输入单元40可以包括麦克风等。
声音输出单元50输出声音信号。例如，声音输出单元50可以包括扬声器等。
存储器60存储数据(例如，静止图像、运动图像、声音、声音相关数据等)，并且向控制器提供所获取的存储数据。存储器60可以存储关于与对象的特征数据相匹配的语音信息的声音信号波形的信息和关于无线通信协议的信息。
通信单元70执行控制器80与无线通信系统之间的无线通信、控制器80与另一个终端之间的无线通信或者控制器80与另一个终端之间通过网络的无线通信。例如，通信单元70可以包括局域网(LAN)无线通信模块、无线因特网模块、广播按收模块、移动通信模块等。LAN通信模块可以包括蓝牙、射频识别(RFID)、红外数据联合、超宽带(UWB)和
Figure BSA00000416118100051
模块、以及各种有线通信端口。
用户操作单元75根据用户的操作而产生用于控制终端操作模式的各种输入事件。同时，用户操作单元75提供用户接口(UI)以供进行用户输入(如，选择存在于图像输出单元30在屏幕上显示的图像中的对象并且移动选定对象90)。例如，用户操作单元75可以包括键区、滚轮开关、触摸板等。图像输出单元30可以包括用户操作单元75，从而图像输出单元30可以是触摸屏。
控制器80根据由用户操作单元75产生的输入事件来启用或停用各种终端操作模式。
控制器80在拍摄模式被启用的状态下启用预览模式，随后通过图像处理单元20将图像输入单元10产生的图像帧实时发送给图像输出单元30。图像输出单元30顺序地接收这些图像帧并在屏幕上显示这些图像帧。
如果用户在启用了预览模式的状态下选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80识别该选定对象，检测其中存在与选定对象匹配的对象的图像帧，将检测到的图像帧处理成适合于终端操作模式，并且将经过处理的图像帧发送给图像输出单元30。
具体地说，如果在启用了预览模式的状态下又启用了选定对象控制模式，则在用户利用用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象时，控制器80提取选定对象90的特征数据(例如，该对象所占用的区域的形状、像素RGB值等)，并且将提取出的特征数据存储在存储器60中。之后，控制器80从由图像输入单元10产生的图像帧中检测存在与存储器60中存储的特征数据相对应的对象的图像帧。此外，控制器80在检测到的图像帧中对与存储器60中存储的特征数据相对应的对象进行控制，并且通过图像处理单元20将其中该对象受到控制的图像帧发送给图像输出单元30，或者通过通信单元70将该图像帧发送给另一个终端。
如果用户通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80可以启用选定对象控制模式。选定对象控制模式可以包括选定对象删除模式、选定对象移动模式、选定对象拍摄模式、选定对象放大/缩小模式、选定对象合成模式、选定对象余像模式、图像特性改变模式、选定对象语音/声音分离/去除模式、对象远程控制模式等。
如果在启用了预览模式的状态下又启用了选定对象删除模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据。控制器80将提取出的特征数据存储在存储器60中，并且从由图像输入单元10产生的图像帧中提取其中存在与存储器60中存储的特征数据相对应的对象的图像帧。此外，控制器80在检测到的图像帧中删除与存储器60中存储的特征数据相对应的对象，并且通过图像处理单元20把删除了该对象的图像帧发送给图像输出单元30，或者通过通信单元70把删除了该对象的图像帧发送给另一个终端。
控制器80利用归一化方法(normalization method)以与周围环境的图像图案相似的图案来填充图像帧中删除了对象的部位。例如，为了以与周围环境的图像图案相似的图案来填充图像帧中删除了对象的部位，可以使用图像帧中包围选定对象90所占据区域的预定像素的RGB值。
如图2所示，如果在启用了预览模式的状态下又启用了选定对象移动模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象并将选定对象90移动到特定位置，则控制器80提取选定对象90的特征数据，并且检查选定对象90在屏幕上的移动位置。控制器80将提取出的特征数据以及选定对象90的移动位置存储在存储器60中，从图像输入单元10产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧。控制器80在检测到的图像帧中将与存储器60中存储的特征数据相对应的对象移动到存储器60中存储的选定对象90的移动位置处。之后，控制器80通过图像处理单元20将其中移动了对象的图像帧发送给图像输出单元30，或者通过通信单元70将其中移动了对象的图像帧发送给另一个终端。控制器80利用归一化方法以与周围环境的图像图案相似的图案来填充图像帧中被移走对象的部位。
如果在启用了预览模式的状态下又启用了选定对象拍摄模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据，并且将提取出的特征数据以及与图像输入单元10所产生的任一图像帧相对应的背景图像帧存储在存储器60中。之后，控制器80从图像输入单元10所产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧。此外，控制器80在检测到的图像帧中删除未选中区域，并且通过图像处理单元20将删除了未选中区域的图像帧发送给图像输出单元30，或者通过通信单元70将删除了未选中区域的图像帧发送给另一个终端。该未选中区域是检测到的图像帧中不包括由与存储器60中存储的特征数据相对应的对象所占据的区域的区域。控制器80利用归一化方法以颜色来填充图像帧中被删除的未选中区域，或者用未选中区域被删除的图像帧来覆盖存储器60中存储的背景图像帧。
如果在图像输出单元30的屏幕上显示了其中仅移动了选定对象而使不包括选定对象90的未选中区域停止不动的预览图像，则控制器80利用归一化方法以与周围环境的图像图案相似的图案来填充伴随选定对象90的移动而在选定对象90与未选中区域之间产生的未限定空间。
如果在启用了预览模式的状态下又启用了选定对象放大/缩小模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象并且按比例放大/缩小了选定对象90的尺寸，则控制器80提取选定对象90的特征数据，并且将提取出的特征数据、选定对象90的放大/缩小比例、以及与图像输入单元10所产生的任一图像帧相对应的背景图像帧存储在存储器60中。之后，控制器80从图像输入单元10所产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧。此外，控制器80按照存储器60中存储的放大/缩小比例来放大/缩小在检测到的图像帧中与存储器60中存储的特征数据相对应的对象，并且删除不包括被放大/缩小的对象的区域，即，未选中区域。将被删除了未选中区域的图像帧通过图像处理单元20发送给图像输出单元30，或者通过通信单元70发送给另一个终端。控制器80利用归一化方法以颜色来填充图像帧中被删除的未选中区域，或者用被删除了未选中区域的图像帧来覆盖存储器60中存储的背景图像帧。
如果如图3所示在启用了预览模式的状态下又启用了选定对象合成模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据，并且将提取出的特征数据存储在存储器60中。之后，控制器80从图像输入单元10所产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧。此外，控制器80检查所检测到的图像帧中与存储器60中存储的特征数据相对应的对象的位置(例如，2维或3维位置坐标)，并且在与检查到的对象位置相对应的位置处产生其中存在待合成的文字或图像的新图像帧。之后，控制器80将所产生的新图像帧与检测到的图像帧合成，并且通过图像处理单元20将合成的图像帧发送给图像输出单元30，或者通过通信单元70将合成的图像帧发送给另一个终端。待合成的文字或图像可以由用户通过用户操作单元75直接输入，或者可以是预先存储在存储器60中的数据。
如果在启用了预览模式的状态下又启用了选定对象语音/声音分离/去除模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据，并且从存储器60获取与提取出的特征数据相匹配的语音信息的声音信号波形。之后，控制器80从声音输入单元40所产生的声音信号中提取出具有与所获取的语音信息的声音信号波形相匹配的波形的声音信号，分离/去除与提取出的声音信号相对应的语音或声音，并且通过声音输出单元50来发送由声音输入单元40产生的声音信号。
如果如图4所示在启用了预览模式的状态下又启用了选定对象余像模式，并且如果用户在用户等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据，并且将提取出的特征数据以及与图像输入单元10所产生的任一图像帧相对应的背景图像帧存储在存储器60中。之后，控制器80从图像输入单元10所产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧，并且顺序地将检测到的图像帧与存储器60中存储的背景图像帧合成。这里，按照使得帧具有间隔的方式执行合成。控制器80通过图像处理单元20将合成的图像帧发送给图像输出单元30，或者通过通信单元70将合成的图像帧发送给另一个终端。控制器80可以在图像帧被与背景图像帧合成起来的时间点起过去预定时间后顺序地去除与背景图像帧合成的图像帧，使得与背景图像帧合成的图像帧随着时间的过去而消失。
如果如图5所示在启用了预览模式的状态下又启用了图像特性改变模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据，并且将提取出的特征数据存储在存储器60中。之后，控制器80从图像输入单元10所产生的图像帧中检测其中存在与存储器60中存储的特征数据相对应的对象的图像帧，并且将检测到的图像帧的整体特性(例如，颜色、亮度等)改变成适合于在存储器60中存储的特征数据。另选地，控制器80将在检测到的图像帧中存在的对象的特性(例如，颜色、亮度等)改变成适合于存储器60中存储的特征数据，并且通过图像处理单元20将改变后的图像帧发送给图像输出单元30，或者通过通信单元70将改变后的图像帧发送给另一个终端。
如果在启用了预览模式的状态下又启用了对象远程控制模式，并且如果用户在用户输入等待状态下通过用户操作单元75选择了在图像输出单元30的屏幕上显示的图像中的对象，则控制器80提取选定对象90的特征数据。之后，控制器80从存储器60获取与提取出的特征数据相匹配的对象的无线通信协议，利用所获取的无线通信协议来产生用于对象控制的远程控制信号，并且通过通信单元70发送所产生的远程控制信号。这里，与选定对象90相对应的真实对象(例如，诸如TV接收机的电子设备)包括特定的无线通信协议，如红外接收通信模块。这样的电子设备接收从终端发送的远程控制信号，并且使用接收到的远程控制信号来执行预定操作。
在图像输入单元10所产的图像帧中，其中不存在与选定对象匹配的对象(即，与存储器60中存储的特征数据相对应的对象)的图像帧可以由控制器80通过图像处理单元20直接发送给图像输出单元30。
此外，如果在启用了预览模式的状态下通过通信单元70从另一个终端接收到图像帧，则控制器80通过图像处理单元20将接收的图像帧发送给图像输出单元30。
根据示例性实施方式，可以在在预览屏幕上显示拍摄图像的状态下提供图像编辑服务，并且可以在将拍摄图像记录到存储器中之前对图像进行编辑。因而，用户不需要在记录了拍摄图像之后使用单独的图像编辑工具来执行图像编辑操作。
此外，根据示例性实施方式，通过图像识别方法来识别在预览屏幕上显示的虚拟对象，并且可以对与所识别的虚拟对象相对应的真实对象进行远程控制。因而，无需在启用了预览模式的状态下改变模式就可以控制屏幕上显示的对象。
对于本领域技术人员而言很明显，在不偏离本发明的精神或范围的条件下，可以对本发明做出各种修改和变型。因而，本发明旨在涵盖落入所附权利要求及其等同物的范围内的对本发明的修改和变型。
本申请要求2010年2月9日提交的韩国专利申请No.10-2010-0011923的优先权，通过引用将该韩国专利申请并入于此，如同在此做了全面阐述一样。

Claims (20)

1.一种具有拍摄功能的终端，该终端包括：
用于产生图像帧的图像输入单元；
用于在屏幕上显示由所述图像输入单元产生的所述图像帧的图像输出单元；以及
控制器，如果启用了预览模式，则所述控制器将所述图像输入单元产生的所述图像帧实时发送给所述图像输出单元，
其中，如果在所述预览模式中选择了在所述图像输出单元的所述屏幕上显示的图像中的对象，则所述控制器识别该选定对象，检测其中存在与所识别出的对象相匹配的对象的图像帧，处理所检测到的图像帧，并且将经过处理的图像帧发送给所述图像输出单元。
2.根据权利要求1所述的终端，其中，如果启用了选定对象控制模式，则所述控制器提取并存储所述选定对象的特征数据，检测其中存在与所存储的特征数据相匹配的对象的图像帧，控制所检测到的图像帧中与所存储的特征数据相匹配的所述对象，并且将其中所述对象受到控制的所述图像帧发送给所述图像输出单元。
3.根据权利要求2所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器启用所述选定对象控制模式。
4.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取并存储所述选定对象的特征数据，检测其中存在与所存储的特征数据相匹配的对象的图像帧，删除所检测到的图像帧中与所存储的特征数据相匹配的所述对象，并且将删除了所述对象后的所述图像帧发送给所述图像输出单元。
5.根据权利要求4所述的终端，其中，所述控制器利用归一化方法以与周围环境的图像图案相似的图案来填充所述图像帧中删除了所述对象的部位。
6.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象并且将该选定对象从第一位置移动到第二位置，则所述控制器提取所述选定对象的特征数据，检查所述选定对象在所述屏幕上的移动位置，存储所述选定对象的所述特征数据和所述移动位置，检测其中存在与所存储的特征数据相匹配的对象的图像帧，将所检测到的图像帧中与所存储的特征数据相匹配的对象移动到所存储的所述选定对象的移动位置，并且将移动了所述对象后的所述图像帧发送给所述图像输出单元，所述第一位置对应于所述选定对象在所述图像中的原始位置，并且所述第二位置对应于所述移动位置。
7.根据权利要求6所述的终端，其中，所述控制器利用归一化方法以与周围环境的图像图案相似的图案来填充所述选定对象被移动的部位。
8.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取该选定对象的特征数据，存储所提取出的特征数据以及与所述图像输入单元所产生的图像帧相对应的背景图像帧，检测其中存在与所存储的特征数据相匹配的对象的图像帧，删除在所检测到的图像帧中不包括由与所存储的特征数据相匹配的所述对象占据的区域的未选中区域，并且将删除了所述未选中区域后的所述图像帧发送给所述图像输出单元。
9.根据权利要求8所述的终端，其中，所述控制器利用归一化方法以颜色来填充所述图像帧中被删除的未选中区域，或者用删除了所述未选中区域后的所述图像帧来覆盖所存储的背景图像帧。
10.根据权利要求9所述的终端，其中，如果在所述图像输出单元的所述屏幕上显示了其中仅所述选定对象被移动而使不包括所述选定对象的所述未选中区域停止不动的预览图像，则利用归一化方法以与周围环境的图像图案相似的图案来填充随着所述选定对象的移动而在所述选定对象与所述未选中区域之间产生的未限定空间。
11.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象并且根据比例放大或缩小了所述选定对象，则所述控制器提取所述选定对象的特征数据，存储所提取出的特征数据、所述选定对象的放大/缩小比例以及与所述图像输入单元所产生的图像帧相对应的背景图像帧，检测其中存在与所存储的特征数据相匹配的对象的图像帧，按照所存储的放大/缩小比例来放大或缩小所检测到的图像帧中与所存储的特征数据相匹配的对象，删除不包括被放大或缩小的对象的未选中区域，并且将删除了所述未选中区域后的所述图像帧发送给所述图像输出单元。
12.根据权利要求11所述的终端，其中，所述控制器利用归一化方法以颜色来填充所述图像帧中被删除的未选中区域，或者用删除了所述未选中区域后的所述图像帧来覆盖所存储的背景图像帧。
13.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取所述选定对象的特征数据，存储所提取出的特征数据，检测其中存在与所存储的特征数据相匹配的对象的图像帧，检查所检测到的图像帧中与所存储的特征数据相匹配的所述对象的位置，在与检查到的所述对象的位置相对应的位置处产生其中存在待合成的文字或图像的新图像帧，将产生的新图像帧与所检测到的图像帧合成，并且将合成的图像帧发送给所述图像输出单元。
14.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取所述选定对象的特征数据，存储所提取出的特征数据以及与所述图像输入单元所产生的图像帧相对应的背景图像帧，检测其中存在与所存储的特征数据相匹配的对象的图像帧，按使帧具有间隔的方式将所检测到的图像帧与所存储的背景图像帧合成，并且将合成的图像帧发送给所述图像输出单元。
15.根据权利要求14所述的终端，其中，所述控制器顺序去除与所述背景图像帧合成的所述图像帧。
16.根据权利要求1所述的终端，其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取所述选定对象的特征数据，存储所提取出的特征数据，检测其中存在与所存储的特征数据相匹配的对象的图像帧，改变所检测到的图像帧的特性，并且将改变了特性后的所述图像帧发送给所述图像输出单元。
17.根据权利要求16所述的终端，其中，所述控制器改变所检测到的图像帧中存在的对象的特性，并且将改变了所述对象的特性后的所述图像帧发送给所述图像输出单元。
18.根据权利要求1所述的终端，该终端还包括：
用于产生声音信号的声音输入单元；
用于输出由所述声音输入单元产生的所述声音信号的声音输出单元；以及
用于存储关于与对象的特征数据相匹配的声音信息的声音信号波形的信息，
其中，如果选择了在所述图像输出单元的所述屏幕上显示的所述图像中的所述对象，则所述控制器提取该选定对象的特征数据，从所述存储器中获取与所提取出的特征数据相匹配的声音信息的声音信号波形，从所述声音输入单元所产生的所述声音信号中提取具有与所获取的所述声音信息的声音信号波形相匹配的波形模式的声音信号，并且分离/去除与所提取出的声音信号相对应的声音。
19.根据权利要求1所述的终端，该终端还包括通信单元，所述通信单元用于执行所述控制器与无线通信系统之间的无线通信、所述控制器与另一个终端之间的无线通信和/或所述控制器与另一个终端之间通过网络的无线通信。
20.一种具有拍摄功能的终端，该终端包括：
用于执行无线通信的通信单元；
用于产生图像帧的图像输入单元；
用于在屏幕上显示由所述图像输入单元产生的所述图像帧的图像输出单元；
用于存储关于与特征数据相匹配的无线通信协议的信息的存储器；以及
控制器，如果启用了预览模式，则所述控制器将所述图像输入单元产生的所述图像帧实时发送给所述图像输出单元，
其中，如果选择了在所述图像输出单元的所述屏幕上显示的图像中的对象，则所述控制器提取该选定对象的特征数据，从所述存储器中获取与所提取出的特征数据相匹配的对象的无线通信协议，利用获取的无线通信协议来产生用于对象控制的远程控制信号，并且通过所述通信单元来发送所产生的远程控制信号。
CN201110004238.8A 2010-02-09 2011-01-04 具有拍摄功能的设备 Active CN102164234B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2010-0011923 2010-02-09
KR1020100011923A KR101105034B1 (ko) 2010-02-09 2010-02-09 촬영 기능을 보유한 단말기

Publications (2)

Publication Number Publication Date
CN102164234A true CN102164234A (zh) 2011-08-24
CN102164234B CN102164234B (zh) 2014-07-02

Family

ID=44063171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110004238.8A Active CN102164234B (zh) 2010-02-09 2011-01-04 具有拍摄功能的设备

Country Status (4)

Country Link
US (1) US20110193993A1 (zh)
EP (1) EP2355490A2 (zh)
KR (1) KR101105034B1 (zh)
CN (1) CN102164234B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905716A (zh) * 2012-12-27 2014-07-02 三星电子（中国）研发中心 拍摄照片时动态处理取景画面的照相设备及方法
WO2015032099A1 (zh) * 2013-09-09 2015-03-12 宇龙计算机通信科技(深圳)有限公司 图像处理方法和终端
CN104486546A (zh) * 2014-12-19 2015-04-01 广东欧珀移动通信有限公司 拍照的方法、装置及移动终端
CN104601902A (zh) * 2014-04-18 2015-05-06 张智宇 一种摄像机拍摄系统处理方法
CN105227867A (zh) * 2015-09-14 2016-01-06 联想(北京)有限公司 一种图像处理方法及电子设备
CN106971133A (zh) * 2016-01-14 2017-07-21 芋头科技（杭州）有限公司 一种提高图像识别精度装置及方法
CN107666572A (zh) * 2017-09-29 2018-02-06 北京金山安全软件有限公司 拍摄方法、装置、电子设备及存储介质
CN110493511A (zh) * 2019-07-30 2019-11-22 维沃移动通信有限公司 一种全景图像生成方法及移动终端
CN112511735A (zh) * 2019-09-13 2021-03-16 富士胶片株式会社 图像处理装置、摄影装置、图像处理方法及存储介质
CN112637517A (zh) * 2020-11-16 2021-04-09 北京字节跳动网络技术有限公司 视频处理方法、装置、电子设备及存储介质
CN112637477A (zh) * 2019-10-08 2021-04-09 华为技术有限公司 一种图像处理方法及电子设备
CN112671994A (zh) * 2014-10-31 2021-04-16 微软技术许可有限责任公司 视频通话期间实现的方法、用户终端及可读存储介质
CN113207038A (zh) * 2021-04-21 2021-08-03 维沃移动通信（杭州）有限公司 视频处理方法、视频处理装置和电子设备

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5326912B2 (ja) * 2009-07-31 2013-10-30 ブラザー工業株式会社 印刷装置、合成画像データ生成装置、及び、合成画像データ生成プログラム
TWI438715B (zh) * 2010-09-02 2014-05-21 Htc Corp 手持式裝置之影像處理方法及系統，及其電腦程式產品
KR101338818B1 (ko) * 2010-11-29 2013-12-06 주식회사 팬택 이동 단말기 및 이를 이용한 정보 표시 방법
US8700986B1 (en) 2011-03-18 2014-04-15 Google Inc. System and method for displaying a document containing footnotes
JP5814566B2 (ja) * 2011-02-28 2015-11-17 オリンパス株式会社 撮像装置、撮像方法及び撮像装置の制御プログラム
US8510266B1 (en) * 2011-03-03 2013-08-13 Google Inc. System and method for providing online data management services
US9575641B2 (en) * 2012-03-20 2017-02-21 Adobe Systems Incorporated Content aware image editing
KR20140073198A (ko) 2012-12-06 2014-06-16 삼성디스플레이 주식회사 유기물 기화 장치 및 그 제어방법
KR20150083475A (ko) * 2014-01-09 2015-07-20 이용수 터치입력을 이용한 미디어 편집 방법 및 장치
CN104796594B (zh) * 2014-01-16 2020-01-14 中兴通讯股份有限公司 一种预览界面特殊效果即时呈现方法及终端设备
US9807316B2 (en) * 2014-09-04 2017-10-31 Htc Corporation Method for image segmentation
CN104349065B (zh) * 2014-10-29 2018-11-30 宇龙计算机通信科技(深圳)有限公司 一种图片拍摄方法、装置和智能终端
KR20170010485A (ko) * 2015-07-20 2017-02-01 엘지전자 주식회사 단말 장치 및 단말 장치의 제어 방법
US10616502B2 (en) 2015-09-21 2020-04-07 Qualcomm Incorporated Camera preview
KR102247719B1 (ko) * 2019-10-17 2021-04-30 서울여자대학교 산학협력단 실시간 동영상에서의 인물 선별 송출 시스템
CN111464761A (zh) * 2020-04-07 2020-07-28 北京字节跳动网络技术有限公司 视频的处理方法、装置、电子设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1317124A (zh) * 1998-09-10 2001-10-10 伊强德斯股份有限公司 视觉装置
CN1893699A (zh) * 2005-06-07 2007-01-10 三星电子株式会社 缩放无线终端中的图像的方法及实现该方法的无线终端
CN101316324A (zh) * 2007-06-01 2008-12-03 三星电子株式会社 终端及其图像捕捉方法
KR20090001667A (ko) * 2007-05-09 2009-01-09 삼성전자주식회사 증강 현실 기술을 이용하여 컨텐츠를 구현하기 위한 장치및 방법

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101373333B1 (ko) * 2007-07-11 2014-03-10 엘지전자 주식회사 터치인식을 통한 영상촬영 기능을 구비한 휴대 단말기 및그 촬영방법
JP2010147808A (ja) * 2008-12-18 2010-07-01 Olympus Imaging Corp 撮像装置および撮像装置における画像処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1317124A (zh) * 1998-09-10 2001-10-10 伊强德斯股份有限公司 视觉装置
CN1893699A (zh) * 2005-06-07 2007-01-10 三星电子株式会社 缩放无线终端中的图像的方法及实现该方法的无线终端
KR20090001667A (ko) * 2007-05-09 2009-01-09 삼성전자주식회사 증강 현실 기술을 이용하여 컨텐츠를 구현하기 위한 장치및 방법
CN101316324A (zh) * 2007-06-01 2008-12-03 三星电子株式会社 终端及其图像捕捉方法

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905716B (zh) * 2012-12-27 2017-08-18 三星电子（中国）研发中心 拍摄照片时动态处理取景画面的照相设备及方法
CN103905716A (zh) * 2012-12-27 2014-07-02 三星电子（中国）研发中心 拍摄照片时动态处理取景画面的照相设备及方法
WO2015032099A1 (zh) * 2013-09-09 2015-03-12 宇龙计算机通信科技(深圳)有限公司 图像处理方法和终端
CN104601902A (zh) * 2014-04-18 2015-05-06 张智宇 一种摄像机拍摄系统处理方法
CN112671994A (zh) * 2014-10-31 2021-04-16 微软技术许可有限责任公司 视频通话期间实现的方法、用户终端及可读存储介质
CN104486546A (zh) * 2014-12-19 2015-04-01 广东欧珀移动通信有限公司 拍照的方法、装置及移动终端
CN104486546B (zh) * 2014-12-19 2017-11-10 广东欧珀移动通信有限公司 拍照的方法、装置及移动终端
CN105227867A (zh) * 2015-09-14 2016-01-06 联想(北京)有限公司 一种图像处理方法及电子设备
CN106971133A (zh) * 2016-01-14 2017-07-21 芋头科技（杭州）有限公司 一种提高图像识别精度装置及方法
CN107666572A (zh) * 2017-09-29 2018-02-06 北京金山安全软件有限公司 拍摄方法、装置、电子设备及存储介质
CN110493511A (zh) * 2019-07-30 2019-11-22 维沃移动通信有限公司 一种全景图像生成方法及移动终端
CN112511735A (zh) * 2019-09-13 2021-03-16 富士胶片株式会社 图像处理装置、摄影装置、图像处理方法及存储介质
CN112511735B (zh) * 2019-09-13 2024-06-21 富士胶片株式会社 图像处理装置、摄影装置、图像处理方法及存储介质
CN112637477A (zh) * 2019-10-08 2021-04-09 华为技术有限公司 一种图像处理方法及电子设备
CN112637517A (zh) * 2020-11-16 2021-04-09 北京字节跳动网络技术有限公司 视频处理方法、装置、电子设备及存储介质
CN113207038A (zh) * 2021-04-21 2021-08-03 维沃移动通信（杭州）有限公司 视频处理方法、视频处理装置和电子设备
WO2022222835A1 (zh) * 2021-04-21 2022-10-27 维沃移动通信（杭州）有限公司 视频处理方法、视频处理装置和电子设备

Also Published As

Publication number Publication date
US20110193993A1 (en) 2011-08-11
KR20110092481A (ko) 2011-08-18
EP2355490A2 (en) 2011-08-10
CN102164234B (zh) 2014-07-02
KR101105034B1 (ko) 2012-01-16

Similar Documents

Publication Publication Date Title
CN102164234B (zh) 具有拍摄功能的设备
CN105578267B (zh) 终端装置及其信息提供方法
CN103546716A (zh) 提供图像的系统及方法
KR101239284B1 (ko) 증강현실 컨텐츠를 통해 타겟장치를 제어하는 제어단말기 및 서버
KR102147329B1 (ko) 영상 표시 기기 및 그의 동작 방법
CN102656810A (zh) 使用具有投影功能的移动装置产生数据的方法和系统
US20170123585A1 (en) Terminal apparatus, display method and recording medium
KR102521343B1 (ko) 디스플레이 장치 및 그의 동작 방법
CN107392832A (zh) 图像处理方法及相关产品
CN105706457A (zh) 显示装置和设置通用遥控器的方法
CN111177420B (zh) 一种多媒体文件显示方法、电子设备及介质
EP3379805B1 (en) Method, apparatus for controlling a smart device and computer storage medium
JP5200900B2 (ja) 通信機器
WO2015194237A1 (ja) 情報処理装置、情報処理システム、情報処理装置の制御方法およびプログラム
CN109684277B (zh) 一种图像显示方法及终端
CN110719527A (zh) 一种视频处理方法、电子设备及移动终端
CN108182031A (zh) 一种拍照方法、终端及计算机可读存储介质
US20130286232A1 (en) Use of close proximity communication to associate an image capture parameter with an image
US10013949B2 (en) Terminal device
KR101714050B1 (ko) 휴대단말기의 데이터 표시장치 및 방법
CN104883603A (zh) 播放控制方法、系统及终端设备
CN110198411B (zh) 一种视频拍摄过程中的景深控制方法、设备及计算机可读存储介质
KR101642000B1 (ko) 이동 단말기, ｄｔｖ 및 ｄｔｖ의 제어 방법
CN103874031B (zh) 数据传输方法和设备
WO2022160965A1 (zh) 一种视频处理方法及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB03 Change of inventor or designer information

Inventor after: Lian Hengzhi

Inventor before: Lian Hengzhi

Inventor before: Jin Nanming

Inventor before: Jin Shanjing

Inventor before: Park Cheng Hwan

Inventor before: Bian Guanghao

Inventor before: Shen Dingxie

Inventor before: Wu Xiangjun

Inventor before: Li Zhenkui

Inventor before: Li Xiaoying

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: LIAN HENGZHI JIN NANMING JIN SHANJING PARK SUNGHWAN BIAN GUANGHAO SHEN DINGXIE WU XIANGJUN LI ZHENKUI LI XIAOYING TO: LIAN HENGZHI

C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
C56 Change in the name or address of the patentee
CP01 Change in the name or title of a patent holder

Address after: Seoul, South Kerean

Patentee after: Pantech property management Co.

Address before: Seoul, South Kerean

Patentee before: PANTECH Co.,Ltd.

TR01 Transfer of patent right

Effective date of registration: 20161028

Address after: Seoul, South Kerean

Patentee after: PANTECH CO.,LTD.

Address before: Seoul, South Kerean

Patentee before: Pantech property management Co.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200611

Address after: Seoul, South Kerean

Patentee after: Pan Thai Co.,Ltd.

Address before: Seoul, South Kerean

Patentee before: Pantech Co.,Ltd.