CN105607825A - 用于图像处理的方法和设备 - Google Patents
用于图像处理的方法和设备 Download PDFInfo
- Publication number
- CN105607825A CN105607825A CN201510796656.3A CN201510796656A CN105607825A CN 105607825 A CN105607825 A CN 105607825A CN 201510796656 A CN201510796656 A CN 201510796656A CN 105607825 A CN105607825 A CN 105607825A
- Authority
- CN
- China
- Prior art keywords
- image
- thumbnail
- images
- coordinate
- user interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000009434 installation Methods 0.000 claims description 8
- 230000003321 amplification Effects 0.000 claims description 5
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 25
- 238000012937 correction Methods 0.000 description 15
- 238000012805 post-processing Methods 0.000 description 10
- 230000001915 proofreading effect Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000003860 storage Methods 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000005055 memory storage Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 101000746134 Homo sapiens DNA endonuclease RBBP8 Proteins 0.000 description 1
- 101000969031 Homo sapiens Nuclear protein 1 Proteins 0.000 description 1
- 102100021133 Nuclear protein 1 Human genes 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000013011 mating Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- UAJUXJSXCLUTNU-UHFFFAOYSA-N pranlukast Chemical compound C=1C=C(OCCCCC=2C=CC=CC=2)C=CC=1C(=O)NC(C=1)=CC=C(C(C=2)=O)C=1OC=2C=1N=NNN=1 UAJUXJSXCLUTNU-UHFFFAOYSA-N 0.000 description 1
- 229960004583 pranlukast Drugs 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000036299 sexual function Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/22—Cropping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/247—Aligning, centring, orientation detection or correction of the image by affine transforms, e.g. correction due to perspective effects; Quadrilaterals, e.g. trapezoids
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Library & Information Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
提供了一种用于图像处理的方法,该方法包括:在正在接收多个图像的同时在该多个图像之一中检测矩形图像区域(RIR);获得与所检测的RIR对应的坐标;和在存储器中存储坐标和将坐标与其中检测到RIR的图像关联的链接。
Description
优先权要求
本申请要求于2014年11月18日在韩国知识产权局提交的韩国专利申请No.10-2004-0161159的权益,将其公开通过引用整体并入于此。
技术领域
本公开涉及图像处理,以及更加具体地涉及用于图像处理的方法和设备。
背景技术
以前,为了获取多页各种数据的图像,比如打印输出和演讲材料,应该执行不方便步骤,其中应该逐个地拍摄每一项的图像,且然后对于每个拍摄的图像,应该检测矩形区域和对于透视变换执行图像处理。
另外,虽然存在能够拍摄多个图像的应用,但是为了执行多个图像的图像处理,就像在每一单个图像的拍摄中,应该逐个地校正和编辑每一项的图像。
也就是,在提供多拍摄(multiplephotographing)功能的传统电子设备中,为了执行获取的多个照片的图像处理,在结束多个图像的拍摄之后同时执行多个获取的图像中的每一个的图像处理。因此,存在图像处理设备中的过载、时间延迟和管理多个图像的艰巨任务。
发明内容
根据本公开的各方面,提供一种用于图像处理的方法,包括:在正在接收多个图像的同时在多个图像之一中检测矩形图像区域(RIR);获得与所检测的RIR对应的坐标;和在存储器中存储坐标和将坐标与其中检测到RIR的图像关联的链接。
根据本公开的各方面,提供一种电子装置,包括:显示单元、存储器、和一个或多个处理器,该一个或多个处理器配置为:在正在接收多个图像的同时在多个图像之一中检测矩形图像区域(RIR);获得与所检测的RIR对应的坐标;和与在存储器中存储坐标和将坐标与其中检测到RIR的图像关联的链接。
附图说明
这些和/或其他方面将从结合附图进行的示例性实施例的以下描述中变得明显和更容易理解,在附图中:
图1是根据本公开的各方面的电子设备的示例的框图;
图2是根据本公开的各方面的用于图像处理的处理的示例的流程图;
图3是示出根据本公开的各方面的、当满足预定条件时电子设备在多个输入图像中检测RIR的示例的示意图;
图4是根据本公开的各方面的用于图像处理的处理的示例的流程图;
图5是示出根据本公开的各方面的用于图像选择的用户界面的示例的示意图;
图6是根据本公开的各方面的用于图像处理的处理的流程图;
图7是示出根据本公开的各方面的用于排序缩略图图像的用户界面的示例的示意图;
图8是示出根据本公开的各方面的用于删除缩略图图像的用户界面的示例的示意图;
图9是示出根据本公开的各方面的用于编辑与标识记号的各个缩略图图像一起显示的标识记号的用户界面的示例的示意图;
图10是示出根据本公开的各方面的用于透视变换的用户界面的示例的示意图;
图11是示出根据本公开的各方面的用于编辑缩略图图像的用户界面的示例的示意图;
图12是示出根据本公开的各方面的用于调整缩略图图像大小的用户界面的示例的示意图;
图13是示出根据本公开的各方面的电子设备后处理多个缩略图图像的示例的示意图;
图14是示出根据本公开的各方面的、电子设备与类别保存列表中的类别一起显示与多个变换图像有关的信息的示例的示意图;
图15是示出根据本公开的各方面的、电子设备与类别保存列表中的类别一起显示与多个变换图像有关的信息的示例的示意图;
图16是示出根据本公开的各方面的类别保存列表的示例的示意图;和
图17是示出根据本公开的各方面的、在外部设备的显示单元中检查电子设备的外部存储器中保存的多个变换图像的示例的示意图。
具体实施方式
因为本公开允许各种改变和许多实施例,所以将在附图中图示和在所写的描述中具体描述特定的实施例。通过与附图一起参考具体描述的实施例将清楚地理解本公开的效果和特征。本公开不限于在这里提出的示例性实施例。
虽然比如“第一”、“第二”等术语可以用于描述各种部件,但是这种部件不必受限于上述术语。上述术语仅用于区分一个部件与另一部件。
以单数使用的表达包含复数的表达,除非在上下文中其清楚地具有不同含义。在本说明书中,将要理解比如“包括”、“具有”等的术语意在指示特征或部件的存在,而不意在排除可能存在或者可能添加其一个或多个其他特征或部件的可能性。
在下文中,将参考附图更加详细地描述本公开的各方面。相同或者相应的那些部件被给予相同的附图标记而无论图号如何,且省略冗余的说明。
当在要素的列表之前时,比如“至少一个”的表达修改整个要素列表而不修改列表的单个要素。
图1是根据本公开的各方面的、在多个图像的连续拍摄期间识别多个图像中的每一个的矩形图像区域(RIR)的电子设备100的示例的框图。
电子设备100可以包括图像接收单元10、矩形图像区域(RIR)检测单元20、显示单元30、用户输入单元40、存储器50、图像处理单元60和控制单元70。
在下文中,将逐个地解释部件。
根据示例性实施例的控制单元70一般地控制电子设备100的总体操作。
也就是,控制单元70可以控制图1所示的图像接收单元10、RIR检测单元20、显示单元30、用户输入单元40、存储器50和图像处理单元60的操作。
图像接收单元10、RIR检测单元20、显示单元30、用户输入单元40、存储器50和图像处理单元60中的一些或者全部可以由软件模块操作。但是,该实施例不限于此且上面描述的部件中的某些可以操作为硬件。
此外,图像接收单元10、RIR检测单元20和图像处理单元60中的至少一个可以包括在控制单元70中,但是本实施例不由该实现限制。
包括按键以从用户生成电信号的用户输入单元40在电子设备100中提供。来自该用户输入单元30的电信号被发送到控制单元70,以使得控制单元70根据该电信号控制电子设备100。
根据示例性实施例的图像拍摄单元(未示出)可以顺序地获取多个图像。
图像拍摄单元(未示出)用于输入图像信号到电子设备100且可以包括相机。
相机可以包括镜头单元(未示出)和图像传感器(未示出)。
例如,通过镜头单元(未示出)的光信号当到达图像传感器(未示出)的光接收面时可以形成物体的图像。
相机可以以视频通信模式或者拍摄模式获得包括由图像传感器获得的静止图像和运动图像中的至少一个的图像帧。
根据该实施例的图像接收单元10可以接收输入图像。
根据该实施例的输入图像可以是从相机获得的输入图像。例如,从相机获得的输入图像可以是预览图像或者可以是在存储器50中保存的图像。此外,输入图像可以通过用户的操作手动地输入或者可以通过网络从网络服务器输入。
根据该实施例的RIR检测单元20可以在图像接收单元10中接收的输入图像中检测RIR。
在该情况下,因为存在通常使用在产业中的各种方法作为从输入图像检测矩形区域的方法,所以应当注意在输入图像中检测RIR的方法不限于特定的方法。
例如,根据该实施例的矩形图像区域(RIR)是输入图像中包括的具有矩形形状的对象,且与RIR对应的坐标信息可以用于在将来与输入图像一起生成包括预定标识记号的缩略图图像。
在该情况下,缩略图图像中包括的预定标识记号是在缩略图图像中标识RIR的记号且可以基于坐标信息生成。
此外,坐标信息可以用于执行用于透视变换的输入图像的图像处理。例如,坐标信息可以用于生成用于透视变换的图像处理的矩阵。
存储器50可以包括任何适当的类型的存储装置,包括快闪存储器类型、硬盘类型、微多媒体卡类型、卡类型存储器(例如,SD或者XD存储器)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘和光盘、网络可访问存储设备(NAS)、基于云的存储设备,等等。根据该实施例的存储器50可以存储用于控制单元70的处理和控制的程序或者可以存储输入到电子设备100和/或从电子设备100输出的数据。
例如,
此外,电子设备100可以操作执行网络存储功能的网络存储设备或者云服务器。
存储器50中存储的程序可以根据功能被分类为多个模块,且例如,可以被分类为UI模块(未示出)和触摸屏模块(未示出)。
UI模块(未示出)可以提供链接到电子设备的专用UI和GUI。
根据示例性实施例的用户界面用于编辑缩略图图像。
例如,通过使用该用户界面,用户可以改变在显示单元30上显示的多个缩略图图像的排序次序,或者可以删除由用户选择的缩略图图像。
此外,用户界面可以用于编辑与缩略图图像一起显示的标识记号。
此外,用户界面可以用于同时执行用于透视变换的在显示单元30上显示的多个缩略图图像的图像处理。
此外,用户界面可以用于调整在显示单元30上显示的多个缩略图图像大小放到预定尺寸。
因为可以由本领域技术人员从名称直观地推断UI模块(未示出)的功能,所以这里将省略详细说明。
触摸屏模块(未示出)可以感测用户的在触摸屏上的触摸手势,并将关于该触摸手势的信息发送到控制单元70。触摸屏模块(未示出)可以形成为分开的控制器(硬件,H/W)。
例如,用户的触摸手势可以包括轻触、触摸和保持、两次轻触、拖拽、平移(panning)、轻弹(flick)、拖放和挥动(swipe)。
根据该实施例的存储器50可以保存由电子设备100接收的多个输入图像和关于与多个输入图像中检测到的RIR对应的多个坐标的信息。
例如,坐标信息可以包括与输入图像中检测到的RIR的每一角对应的像素的坐标信息。在该情况下,当基于输入图像执行图像处理时可以使用该坐标信息。
此外,根据该实施例的存储器50可以保存基于坐标信息和输入图像或者通过执行用于透视变换的图像处理而获得的变换图像生成的缩略图图像。
根据此,当在将来执行多个输入图像的图像处理时,电子设备100可以使用存储器50中保存的多个坐标的信息且因此防止电子设备100的过载。
此外,可以生成与顺序地接收的多个输入图像有关的类别。在该情况下,与多个输入图像有关的变换图像可以关于类别保存在存储器50中。
根据此,电子设备100可以允许用户容易地管理多个图像。
根据该实施例的显示单元30可以包括液晶显示器、薄膜晶体管液晶显示器、有机发光二极管、柔性显示器和3D显示器中的至少一个。
当显示单元30形成为具有触摸板的相互层结构的触摸屏时,显示单元30可以用作输入装置以及输出装置。可以实现触摸屏以检测触摸输入压力以及触摸输入位置和触摸的区域。此外,触摸屏可以实现为检测接近触摸以及实际触摸。
根据该实施例的显示单元30可以显示输入到电子设备100和/或从电子设备100输出的图像数据。
根据该实施例的显示单元30可以显示与顺序地接收的多个输入图像有关的多个变换图像。
例如,显示单元30可以显示在图像接收单元10中顺序地接收的输入图像。
此外,可以显示包括预定标识记号的缩略图图像。在该情况下,预定标识记号可以是标识缩略图图像中的RIR的记号。
此外,通过放大由用户选择的缩略图图像而获得的图像可以与多个缩略图图像一起显示。根据此,用户可以看到包括标识RIR的预定标识记号的更大的缩略图图像,且因此增强多个缩略图图像的可见性。
此外,用户可以通过使用放大的缩略图图像来编辑缩略图图像。
此外,根据该实施例的显示单元30可以显示基于存储器50中保存的输入图像完成预定图像处理过程的变换图像。
例如,变换图像可以是基于输入图像和坐标信息生成且对于其执行了用于透视变换的图像处理的图像。
此外,变换图像可以是通过完成透视变换图像的后处理而获得的图像。此外,变换图像可以是通过调整透视的变换图像大小而获得的图像。
根据该实施例的用户输入单元40生成用于用户控制电子设备100的操作的输入数据。
用户输入单元40可以以小键盘、圆顶开关、触摸板(接触类型电容方法、压力类型电阻重叠方法、红外感测方法、表面超声传输方法、积分张力测量方法、压电效应方法等)、滚轮和摇动开关实现。具体来说,当要在之后解释的触摸板和显示单元30形成相互层结构时,这可以称为触摸屏。
根据该实施例的用户输入单元40可以生成用于用户在显示单元30上显示的多个缩略图图像当中选择用户想要编辑的缩略图图像的信号。
此外,用户输入单元40可以生成编辑由用户选择的缩略图图像的信号。
例如,用户输入单元40可以生成用于编辑缩略图图像中包括的标识记号的信号、用于执行用于透视变换的多个缩略图图像的图像处理的信号、用于调整多个缩略图图像大小为预定尺寸的信号、用于后处理多个缩略图图像的信号和用于显示以类别保存的多个变换图像的信号中的至少一个。
根据该实施例的图像处理单元60可以减少图像接收单元10接收的输入图像数据中的噪声,和执行用于画面质量改进的图像信号处理,比如伽玛校正、滤色阵列插值、彩色矩阵、彩色校正和彩色增强。
此外,图像处理单元60可以通过压缩由用于画面质量改进的图像信号处理获得的图像数据而生成图像文件,或者可以从图像文件恢复图像数据。例如,图像的压缩类型可以是可逆的或者不可逆的。作为适当的压缩类型的示例,变换可以是联合照相专家组(JPEG)类型或者JPEG2000类型。在该情况下,压缩的数据可以保存在存储器50中。
此外,图像处理单元60可以在功能上执行不清晰度处理、彩色处理、模糊处理、边缘强调处理、图像解释处理、图像识别处理和图像效果处理。
例如,图像识别处理可以包括面部识别或者场景识别处理。根据该实施例的图像处理单元60可以执行在图像接收单元10中顺序地接收的输入图像的场景识别处理。例如,当与相邻帧对应的多个输入图像在图像处理单元60中被识别为相同场景时,可以在RIR检测单元20中执行用于图像接收单元10中顺序地接收的多个输入图像的不同处理。这将在之后参考图3详细说明。
此外,图像处理单元60可以执行图像的亮度级的调整、彩色校正、对比度调整、轮廓强调调整、屏幕划分处理、字符图像生成和合成处理。这将在之后参考图13详细说明。
图像处理单元60可以连接到外部监视器和执行预定图像信号处理以用于在外部监视器上显示。通过发送这样处理的图像数据,图像可以显示在外部监视器上。
此外,图像处理单元60可以执行存储器50中存储的程序或者可以具有分开的模块。
此外,从图像处理单元60输出的图像数据可以直接或者通过存储器50发送到控制单元70。
根据该实施例的图像处理单元60可以执行用于在图像接收单元10中顺序地接收的多个输入图像的预定图像处理。
例如,通过使用存储器50中存储的多个输入图像和坐标信息,图像处理单元60可以生成多个缩略图图像。此外,通过执行用于透视变换的多个输入图像或者多个缩略图图像的图像处理,图像处理单元60可以生成多个变换图像。
此外,图像处理单元60可以执行用于透视变换的多个缩略图图像的图像处理,调整多个透视变换缩略图图像大小为预定尺寸和因此生成多个变换图像。
此外,图像处理单元60可以通过执行用于透视变换和后处理的多个缩略图图像的图像处理而生成多个变换图像。在该情况下,图像的后处理可以包括包含亮度级的调整、彩色校正、对比度调整和轮廓强调调整中的至少一个的图像处理。
在该情况下,图像处理单元60可以与多个输入图像的图像处理同时执行多个缩略图图像的图像处理。
根据本公开的各方面的控制单元70可以包括一个或多个处理器。每一处理器可以包括任何适当的类型的处理电路,比如一个或多个通用处理器(例如,基于ARM的处理器)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)、可编程逻辑器件(PLD),等等。在操作中,根据该实施例的控制单元70可以控制图像接收单元10、RIR检测单元20、显示单元30、用户输入单元40、存储器50和图像处理单元60当中的操作。
例如,无论何时图像接收单元10顺序地接收多个输入图像,控制单元70都可以控制RIR检测单元20以并行检测所接收的输入图像中的RIR。
在该情况下,控制单元70可以参考输入图像控制要保存在存储器50中的与RIR对应的坐标信息。
此外,控制单元70可以控制图像处理单元60以执行场景识别处理,来确定与图像接收单元10中顺序地接收的相邻帧对应的多个输入图像是否属于相同场景。在该情况下,控制单元70可以控制RIR检测单元以根据图像处理单元60的确定结果来不同地操作。这将在之后参考图3详细说明。
此外,控制单元70可以控制图像处理单元60以通过使用保存在存储器50中的多个输入图像和坐标信息来生成包括预定标识记号的多个缩略图图像。
在该情况下,预定标识记号是标识缩略图图像中的RIR的记号,且用户可以以缩略图图像的形式确认在输入图像中检测到的RIR。
此外,控制单元70可以控制用于编辑要在显示单元30上显示的多个缩略图图像的用户界面。
例如,用户界面可以用于编辑与缩略图图像一起显示的标识记号。
在该情况下,用户可以通过编辑通过放大缩略图图像而获得的放大图像中包括的标识记号来编辑缩略图图像中包括的标识记号。
此外,用户界面可以用于同时执行用于透视变换的在显示单元30上显示的多个缩略图图像的图像处理。
在该情况下,用户可以通过使用通过放大缩略图图像而获得的图像中包括的用户界面,来同时执行用于透视变换的多个缩略图图像的图像处理。
此外,用户界面可以用于调整在显示单元30上显示的多个缩略图图像大小到预定尺寸。
在该情况下,通过执行多个输入图像或者多个缩略图图像的透视变换而获得的变换图像可以被调整大小到预定尺寸和在显示单元30上以相等尺寸显示。此外,多个变换图像可以以相等尺寸保存在存储器50中。
根据此,与多个输入图像有关的多个变换图像可以通过电子设备100的显示单元30或者外部装置的显示单元以相等尺寸显示,从而增强对于用户的可见性和可读性。
此外,用户界面可以用于图像处理单元60执行在显示单元30上显示的多个缩略图图像的预定后处理。
在该情况下,在基于用户输入对于多个变换图像执行相同的后处理之后,与多个输入图像有关的多个变换图像可以在显示单元30上显示或者保存在存储器50中。
此外,控制单元70可以控制图像处理单元60以确定缩略图图像中包括的标识记号是否是有效矩形区域,且可以控制显示单元30以根据确定结果输出不同用户界面。这将在之后参考图11详细说明。
此外,控制单元70可以控制与接收要生成的多个输入图像有关的类别,和与要参考类别保存在存储器50中的多个输入图像有关的多个变换图像。在该情况下,控制单元70可以与类别一起控制与要在显示单元30上显示的多个变换图像有关的信息。例如,与多个变换图像有关的信息可以包括多个变换图像的数目和与多个变换图像对应的缩略图图像中的至少一个。
这将在之后参考图14到图16详细说明。
这里解释的各种实施例可以实现为软件、硬件或者使用软件和硬件的组合的计算机可读记录介质。
根据软件实现,可以以用于执行至少一个功能或操作的分开的软件模块实现比如过程或功能的各实施例。可以通过以适当的程序语言编写的软件应用实现软件代码。此外,软件代码可以存储在存储器50中和由控制单元70执行。
现在将依次详细说明电子设备100的操作。
图2是根据本公开的各方面的用于图像处理的处理的示例的流程图。
在操作100中,在电子设备100顺序地接收多个输入图像的同时,在来自多个图像的图像之一中检测RIR。因为存在产业中通常使用的在图像中检测RIR的各种方法,所以应当注意本公开不限于任何特定方法。
在操作110中,电子设备100获得与在操作100中检测到的RIR对应的坐标信息。例如,坐标信息可以包括位于所检测的RIR的每一角的像素的坐标。
在操作120中,电子装置100在将坐标信息链接到输入图像之后保存在操作110中获得的坐标信息。
在该情况下,电子设备100可以通过使用保存在存储器50中的坐标信息执行输入图像的预定图像处理。例如,可以生成包括预定标识记号的缩略图图像。另外地或者替代地,可以生成通过执行用于透视变换的输入图像或者缩略图图像的图像处理而获得的变换图像。
图3是示出根据本公开的各方面的当满足预定条件时电子设备100在多个输入图像中检测RIR的示例的示意图。
如图3所示,当顺序地接收第一图像200A和第二图像200B时,可以在电子设备100的图像处理单元60中确定第一图像200A和第二图像200B是否属于相同场景。例如,可以在图像处理单元60中执行第一图像200A和第二图像200B之间的场景识别处理。
可以使用用于确定图像是否属于相同场景的任何适当的技术。例如,如果第一图像200A的视角与第二图像200B的视角相同,可以确定第一图像200A和第二图像200B属于相同场景。
在该情况下,可以基于在图像处理单元60中分析的输入数据确定每一图像的视角。
另外地或者替代地,如果电子设备100是数码相机,当物体对焦时,视角可以根据作为镜头单元(未示出)到图像传感器(未示出)之间的距离的焦距而变化。例如,如果焦距很长,则视角变窄且要拍摄的对象变得更大。同时,具有较短焦距的镜头具有更宽的视角且要拍摄的范围变得更宽。因此,如果电子设备100是数码相机,则可以基于焦距确定第一图像200A和第二图像200B是否具有相同视角。
另外地或者替代地,可以检测电子设备100的运动,且如果电子设备100在预定时间段不移动,则可以确定第一图像200A和第二图像200B是相同场景。在该情况下,可以经由安装在电子设备100上的传感器感测电子设备100的运动。例如,如果在预定时间段没有由传感器感测到的运动,则可以确定电子设备100处于静止状态。
当第一图像200A和第二图像200B的视角相同(或者以其他方式匹配)时,如图3所示,可以确定第一图像200A和第二图像200B是相同场景。当确定第一图像200A和第二图像200B是相同场景时,电子设备100可以继续接收第三图像200C和第四图像200D而不在接收第二图像200B之后识别第二图像200B中包括的RIR。
当图像200A-D是相同场景的一部分时,通过使用在第一图像200A中获得的坐标信息,电子设备100可以执行第二图像200B、第三图像200C和第四图像200D的图像处理。在该情况下,在第一图像200A中获得的坐标信息在接收到第二图像200B之前是关于与在第一图像200A中检测到的RIR210对应的坐标的信息,且可以在完成多个输入图像的接收之前预先保存在存储器50中。因此,当接收到属于相同场景的多个输入图像时,不需要在多个输入图像中的每一个中检测RIR,由此实现电子设备100的资源的更有效利用。
图4是根据本公开的各方面的用于图像处理的处理的示例的流程图。操作200到220类似于图2的操作100到120,且因此将省略详细说明。
在操作230中,电子设备100基于在操作220中保存的坐标信息和多个输入图像,生成包括预定标识记号的多个缩略图图像。
例如,预定标识记号可以是标识缩略图图像中的RIR的记号,且可以基于坐标信息生成。
在操作240中,电子设备100在显示单元30上显示在操作230中生成的多个缩略图图像,以用于用户观看和选择。
通过放大由用户选择的缩略图图像而获得的图像可以与多个缩略图图像一起显示。在某些方面,向用户呈现较大的缩略图图像可以帮助用户更清楚地看到图像的标识记号。在某些方面,也可以显示用于编辑放大的缩略图图像的用户界面。
图5是示出根据本公开的各方面的用于图像选择的用户界面的示例的示意图。如图5所示,电子设备100可以在显示单元30显示多个缩略图图像以用于用户选择。另外,可以在多个缩略图图像300A到300E中一起显示基于保存在存储器50中的坐标信息生成的预定标识记号310A到310E。
因此,电子设备100在显示多个缩略图图像300A到300E时一起显示用于标识缩略图图像中的RIR的标识记号310A到310E,由此使用户能够标识其中识别出RIR的多个图像。当如图5所示基于来自用户的输入选择缩略图图像300D时,通过放大所选的缩略图图像300D而获得的图像(在下文中,将称为编辑图像400A)可以在显示单元30上显示。
如图5所示,与编辑图像400A中包括的RIR对应的标识记号410A可以在编辑图像400A中显示。在该情况下,标识记号410A可以对应于通过放大由用户选择的缩略图图像300D中包括的标识记号310D而获得的记号。
例如,可以一起显示编辑图像400A和用于编辑由用户选择的缩略图图像300D的用户界面420A。在该情况下,用户界面420A可以用于校正由用户选择的缩略图图像300D中包括的标识记号310D。另外地或者替代地,用户界面420D可以用于同时执行在显示单元30上显示的多个缩略图图像300A到300E的透视变换。
在该情况下,根据该实施例的电子设备100中的图像处理单元60也可以基于经由界面420A与编辑图像400的用户互动,同时编辑保存在存储器50中的多个输入图像。
图6是根据本公开的各方面的用于图像处理的处理的流程图。
操作300到340对应于图4的操作200到240,且因此将省略详细说明。
在操作350中,电子设备100提供用于编辑在操作340中在显示单元30上显示的多个缩略图图像的用户界面。
例如,用户界面可以用于编辑与缩略图图像一起显示的标识记号。
在该情况下,用户可以通过编辑通过放大缩略图图像而获得的放大图像中包括的标识记号来编辑缩略图图像中包括的标识记号。
此外,用户界面可以用于同时将透视变换应用于显示单元30上显示的多个缩略图图像。
在某些实现中,用户可以通过使用通过放大缩略图图像而获得的图像中包括的用户界面,来同时执行用于透视变换的多个缩略图图像的图像处理。
另外地或者替代地,用户界面可以用于调整在显示单元30上显示的多个缩略图图像大小到预定尺寸。在该情况下,通过将透视变换应用于多个输入图像或者多个缩略图图像中的不同图像而获得的每一变换图像可以被调整大小到预定尺寸。此外,变换图像可以以相等尺寸保存在存储器50中。
另外地或者替代地,用户界面可以用于图像处理单元60执行在显示单元30上显示的多个缩略图图像的预定后处理。在该情况下,在基于用户输入对于多个变换图像执行相同后处理之后,与多个输入图像有关的多个变换图像可以在显示单元30上显示或者保存在存储器50中。
另外地或者替代地,控制单元70可以控制图像处理单元60以确定缩略图图像中包括的标识记号是否是有效矩形区域,且可以控制显示单元30以根据确定结果输出不同用户界面。由此,在有些情况下,可以基于给定图像的标识记号自动地选择用户界面用于显示。
图7是示出根据本公开的各方面的用于排序缩略图图像的用户界面的示例的示意图。如图7所示,可以基于用户输入改变在显示单元30上显示的多个缩略图图像300A到300D的排序次序。例如,如图7所示,缩略图图像300C可以基于用户输入被拖放至显示器上的最右边位置。在该情况下,可以通过所选的缩略图图像300C的位置的移动来改变在显示单元30上显示的多个缩略图图像的排序次序。在某些实现中,保存在存储器50中的多个输入图像的排序次序可以相应于多个缩略图图像的改变的排序次序改变。
图8是示出根据本公开的各方面的用于删除缩略图图像的用户界面的示例的示意图。如图8所示,可以基于用户输入删除在显示单元30上显示的多个缩略图图像300A到300D。例如,可以基于用户输入在显示单元30上显示的用户界面430A的区域中拖放缩略图图像300C,如图8所示。在该情况下,可以通过用户界面430A在显示单元30中删除缩略图图像300C。在某些实现中,可以与缩略图图像300C的删除相应地删除保存在存储器50中的输入图像。
图9是示出根据本公开的各方面的用于编辑与标识记号的各自缩略图图像一起显示的标识记号的用户界面的示例的示意图。如图9所示,在显示单元30上显示的多个缩略图图像300A到300D当中,可能存在其中作为图像中RIR的不正确识别的结果的、图像中包括的对象不匹配标识记号310A到310D的缩略图图像300B。在该情况下,可以通过使用保存在存储器50中的坐标信息来执行多个缩略图图像的透视变换。因此,与缩略图图像中获得的坐标信息对应的标识记号越好地匹配缩略图图像中包括的对象,则图像处理的结果变得越好。
但是,当在多个缩略图图像中不正确地识别出RIR且缩略图图像中包括的对象不匹配标识记号时,与不正确地识别出的RIR对应的坐标信息用于执行用于透视变换的多个缩略图图像的图像处理。例如,与不正确地识别处的RIR对应的坐标信息用于设置透视变换图像处理所需的矩阵,且因此难以根据用户的意图执行透视变换图像处理。
因此,为了生成用于根据用户的意图的透视变换的处理的缩略图图像,需要根据图像中包括的对象校正缩略图图像中包括的标识记号。关于此,用户可以选择显示单元30中的缩略图图像300B以校正缩略图图像300B中包括的标识记号310B。
在该情况下,用于编辑由用户选择的缩略图图像300B的编辑图像400A显示在显示单元30上。与编辑图像400A一起显示的标识记号410A是所选的缩略图图像300B中包括的标识记号310B的放大的版本。因此,当缩略图图像300B中包括的对象不匹配标识记号310B时,在编辑图像400A中一起显示的标识记号410A也不匹配编辑图像400A中包括的对象。
在该情况下,如图9所示,可以与编辑图像400A中包括的对象相应地基于用户的输入校正编辑图像400A中包括的标识记号410A。当校正标识记号时,参考所选的缩略图图像300B将与编辑图像400A中校正的标识记号410B对应的校正的坐标信息保存在存储器50中。
例如,与校正的标识记号410B对应的校正的坐标信息可以包括与编辑图像400A中校正的标识记号410B的每一角对应的像素的坐标信息。在该情况下,可以参考所选的缩略图图像300B在存储器50中一起保存初始坐标信息和校正的坐标信息两者。通过这样做,当在将来校正的标识记号不很好地匹配图像中包括的对象时,可以通过使用初始标识记号和/或坐标信息再次执行标识记号的校正。更具体地,可以在编辑图像400A中一起显示校正的标识记号410B,且与此相应地,校正的标识记号310E也可以显示在由用户选择的缩略图图像300B中。
图10是示出根据本公开的各方面的用于透视变换的用户界面的示例的示意图。电子设备100可以在显示单元30上显示通过执行用于透视变换的多个缩略图图像和编辑图像的图像处理而获得的多个变换的缩略图图像和变换的编辑图像。例如,如图10所示,难以说按照用户的意图执行了用于多个变换的缩略图图像500A和500B以及变换的编辑图像510A的透视变换。
在该情况下,如图10所示,作为紧接在透视变换之前的图像的多个缩略图图像300A和300B以及编辑图像400A可以使用变换的编辑图像510A中包括的用户界面520A而显示在显示单元30上。
如图10所示,当编辑图像400A中包括的标识记号410A不匹配图像中包括的对象时,可以基于用户输入在编辑图像400A上显示校正的标识记号410B。此外,校正的标识记号310C也可以在缩略图图像300B中显示。在这情况下,与编辑图像400A中包括的校正的标识记号410B对应的校正的坐标信息可以与缩略图图像300B关联且保存在存储器50中。
因此,与校正为更接近地围绕编辑图像400A中包括的对象的标识记号410B对应的校正的坐标信息可以用于执行缩略图图像300B和编辑图像400A的透视变换。因此,如图10所示,通过执行用于透视变换的多个缩略图图像300A和300B以及编辑图像400A的图像处理而生成的多个变换的缩略图图像500C和500D以及变换的编辑图像510B,可以基于经由用户界面420A输入的用户输入而显示在显示单元30上。在该情况下,因为校正用于执行透视变换的校正的坐标信息以更接近地匹配图像中包括的对象,所以可以在显示单元30上显示具有更高质量的多个变换的缩略图图像500C和500D以及变换的编辑图像510B。
图11是示出根据本公开的各方面的用于编辑缩略图图像的用户界面的示例的示意图。在操作中,通过使用保存在存储器50中的坐标信息,电子设备100确定与多个缩略图图像一起显示的多个标识记号是否是有效矩形区域。例如,可以基于限定矩形区域的参数的值确定有效矩形区域。在该情况下,参数值可以包括限定矩形区域的尺寸、限定矩形区域的变形程度、限定矩形区域的角的数目和/或任何其他适当类型的参数值。
例如,当在图像处理单元60中确定多个缩略图图像中包括的多个标识记号表示有效矩形区域时,电子设备100可以通过使用保存在存储器50中的坐标信息将透视变换应用于多个缩略图图像并在之后显示产生的变换图像。
在某些实现中,当在图像处理单元60中确定与多个缩略图图像一起的多个标识记号中的至少一个不是有效矩形区域时,电子设备100可以包括在缩略图图像中的通知记号,并与该通知记号一起显示缩略图图像。根据本公开的各方面,用于给定缩略图图像的通知记号可以包括缩略图图像的标识记号无效的任何适当类型的指示。
另外地或者替代地,因为可以通过使用与标识记号对应的坐标信息执行用于透视变换的多个缩略图图像的图像处理,所以当在图像中检测到的标识记号不是有效矩形区域时难以执行高质量透视变换。因此,在一起执行多个缩略图图像的图像处理之前,根据该实施例的电子设备100可以通过使用通知记号预先向用户通知不可能按照用户的意图执行透视变换的缩略图图像的存在。
另外地或者替代地,在某些实现中,响应于检测特定的标识记号无效,电子设备100可以在显示单元30上显示用于编辑标识记号的用户界面。例如,可以显示用于编辑包括不是有效矩形区域的标识记号的缩略图图像的编辑图像。在该情况下,可以基于用户的输入校正编辑图像中包括的标识记号。替代地,在某些实现中,可以基于用户的输入删除包括无效矩形区域的缩略图图像。
当校正标识记号时,电子设备100可以参考缩略图图像在存储器50中保存与校正的标识记号对应的校正的坐标信息。当电子设备100基于用户的输入删除在显示单元30上显示的缩略图图像时,也可以删除保存在存储器50中的与缩略图图像对应的图像。
如图11所示,可以通过在编辑图像400A上显示的用户界面420A输入用于执行在显示单元30上显示的多个缩略图图像300A到300C和编辑图像400A的透视变换图像处理的信号。在该情况下,可以确定多个缩略图图像300A到300C中的每一个中包括的每一个标识记号310A到310C中的是否是有效矩形区域。
如图11所示,因为与缩略图图像300B中包括的标识记号对应的矩形区域的变形程度大,所以确定矩形区域不是有效矩形区域。在该情况下,电子设备100可以与预定通知记号330B一起显示包括确定为无效矩形区域的标识记号310B的缩略图图像300B。
在某些实现中,在一起执行用于透视变换的多个缩略图图像的图像处理之前,电子设备100可以预先向用户通知缩略图图像中无效标识记号的存在。另外地或者替代地,用于编辑缩略图图像300B和/或标识记号310B的编辑图像400B可以在显示单元30上显示。然后,可以基于对编辑图像的用户输入校正编辑图像400B中包括的标识记号410B。
另外地或者替代地,在某些实现中,当不基于用户的输入校正编辑图像400B中包括的标识记号410B以满足矩形区域的条件时,可以基于用户的输入从显示单元30删除缩略图图像300B。在该情况下,也可以在存储器50中删除与在显示单元30中删除的缩略图图像对应的图像。
图12是示出根据本公开的各方面的用于调整缩略图图像大小的用户界面的示例的示意图。当顺序地接收的多个输入图像的视角相同时,可以确定正在接收属于相同场景的多个输入图像。另外地或者替代地,在顺序地接收多个输入图像的同时,如果在预定时间段没有由电子设备100检测到运动,则可以确定正在接收具有相同场景的多个输入图像。例如,如果确定正在接收具有相同场景的多个输入图像,则多个缩略图图像可以被调整大小到预定尺寸。在该情况下,预定尺寸可以包括与多个输入图像中包括的一个输入图像对应的尺寸或者由用户默认指定的尺寸。
另外地或者替代地,可以基于在缩略图图像中描绘和由缩略图图像的各个标识记号围绕的对象的类型来确定给定缩略图图像的尺寸。例如,当顺序地接收的多个输入图像中描绘的对象被识别为名片时,多个缩略图图像的宽度或者长度的尺寸可以被调整为与名片关联的比率。作为另一示例,当在顺序地接收的多个输入图像中描绘的对象被识别为A4文档时,多个缩略图图像的宽度或者长度的尺寸可以被调节为与A4文档关联的比率。
因此,电子设备100在显示单元30上显示调整大小为预定尺寸的多个缩略图图像,且由此增加多个缩略图图像对于用户的可见性或者可读性。此外,如果将多个缩略图图像调整大小为预定尺寸,则也可以将保存在存储器50中的多个输入图像调整大小为预定尺寸。
另外地或者替代地,根据上面描述的实施例,在正在接收多个输入图像的同时,如果存在电子设备100的移动或者如果顺序地接收的多个输入图像的视角不相同,则不能确定在电子设备100中正在接收具有相同场景的多个输入图像。然而,例如,当没有三脚架来保持电子设备100和用户以一只手持有电子设备100以在上课期间拍摄上课材料时,仍然存在在调整大小为相等尺寸之后在存储器中保存顺序地接收的多个输入图像的必要性。在这点上,在接收多个输入图像之前的实况观看状态下,根据该实施例的电子设备100可以为用户提供用户界面以预先选择当执行图像处理时是否将要在之后接收的多个输入图像调整大小为相同尺寸。
例如,如图12所示,电子设备100可以在实况观看状态100A下为用户提供用户界面110A以预先选择在之后要接收的多个输入图像的图像处理中是否缩放为相等尺寸。因此,如图12所示,即使之后顺序地接收的多个输入图像不是相同场景,也可以基于用户的输入在显示单元30上显示缩放为预定尺寸的多个缩略图图像600A到600C。另外地或者替代地,即使电子设备100连续地接收不是相同场景的多个图像,提供能够在显示单元30上显示缩放为预定尺寸的多个缩略图图像的用户界面,且由此增强多个缩略图图像对于用户的可见性或者可读性。
图13是示出根据本公开的各方面的电子设备后处理多个缩略图图像的示例的示意图。如图所示,电子设备100可以执行用于透视变换和后处理的多个缩略图图像的图像处理。
在该情况下,通过执行用于透视变换和后处理的多个缩略图图像的图像处理,电子设备100可以执行用于透视变换和后处理的多个输入图像的图像处理。例如,用于后处理的图像处理可以包括用于改进画面质量的图像信号处理且可以包括亮度级的调整、彩色校正、对比度调整和轮廓强调调整。
如图13所示,电子设备100可以提供用于选择多个透视变换的缩略图图像500A到500D和编辑图像510A的图像处理的用户界面530A。用户界面530A可以用于选择用于改进多个透视变换的缩略图图像500A到500D和编辑图像510A的画面质量的图像信号处理的类型。
例如,用于改进画面质量的图像信号处理的类型可以包括亮度级的调整、彩色校正、对比度调整和轮廓强调调整。因此,电子设备100可以使用界面530A以在显示单元30上显示对于后处理处理的多个缩略图图像,且由此增加多个缩略图图像对于用户的可见性或者可读性。
图14和图15是示出根据本公开的各方面的电子设备与类别保存列表中的类别一起显示与多个变换图像有关的信息的示例的示意图。
在完成多个输入图像的图像处理之后,电子设备100可以执行用于生成与接收顺序地接收的多个输入图像对应的类别以及通过类别保存和管理多个输入图像的处理。例如,根据该实施例的电子设备100可以生成与多个输入图像的接收有关的类别,和参考类别在存储器50中保存与多个输入图像有关的多个变换图像。此外,与多个变换图像有关的信息可以与类别一起在显示单元30上显示。
例如,多个变换图像可以是在图像接收单元10中顺序地接收的多个输入图像。此外,多个变换图像可以是通过一起执行用于透视变换多个输入图像的图像处理而获得的多个变换图像。此外,与多个变换图像有关的信息可以包括按类别包括的多个变换图像的数目和与多个变换图像对应的缩略图图像中的至少一个。
如图14和15所示,当顺序地接收多个输入图像时,电子设备100可以生成与多个输入图像的接收对应的类别。
另外地或者替代地,可以按类别保存通过完成多个输入图像的预定图像处理而获得的多个变换图像。在该情况下,基于用户的输入,电子设备100可以在显示单元30上显示保存多个变换图像的类别1000A和1000B的列表。如图14所示,每一类别1010A到1010C的名称和与在每一类别中保存的多个变换图像对应的多个缩略图图像1020A可以一起显示在类别列表1000A中。
另外,如图15所示,每一类别1010D到1010I的名称和与每一类别中保存的多个变换图像当中的代表性图像对应的缩略图图像1020B可以一起显示在类别列表1000B中。指示每一类别中保存的多个变换图像的数目的图标1030A也可以一起显示在类别列表1000B中。此外,如图15所示,当在类别1010G中保存语音数据以及图像数据时,可以一起显示扬声器的图标1040A。因此,当显示保存多个变换图像的类别列表时,电子设备100也可以显示与保存的多个变换图像有关的信息,由此增强用户确认和管理多个变换图像的便利。
图16是示出根据本公开的各方面的类别保存列表的示例的示意图。如图16所示,每一类别1010D到1010I的名称和与每一类别中保存的多个变换图像当中的代表性图像对应的缩略图图像1020B可以一起显示在类别列表1000B中。在该情况下,当基于用户的输入选择在类别列表1000B中显示的缩略图图像1020B时,在具有类别名称1010D的类别中保存的多个变换图像可以显示在显示单元30上。如图16所示,与多个变换图像对应的多个缩略图图像500A到500D可以与通过放大在类别列表1000B中显示的缩略图图像500A而获得的图像510A一起在显示单元30上显示。
图17是示出根据本公开的各方面的在外部设备的显示单元中检查电子设备的外部存储器中保存的多个变换图像的示例的示意图。如图17所示,当显示保存在不是电子设备100的外部设备的显示单元的存储器50中的类别时,每一类别中包括的多个图像可以显示为单独文件,比如PDF、DOC和PPT类型的文件。
因此,根据该实施例的电子设备100使用户能够容易地一起管理多个图像和按类别保存和管理图像。
在这里描述的装置可以包括处理器,用于存储程序数据和执行其的存储器,比如盘驱动器的永久存储设备,用于处理与外部装置的通信的通信端口和包括显示器、按键等的用户界面装置。
当涉及软件模块时,这些软件模块可以存储为计算机可读介质上的在处理器上可执行的程序指令或者计算机可读代码,该计算机可读介质比如只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储装置。计算机可读记录介质也可以经网络耦合的计算机系统分发,以使得以分布方式存储和执行计算机可读代码。该介质可以由计算机读取、在存储器中存储和由处理器执行。
在这里引用的包括出版物、专利申请和专利的所有参考文件通过引用并入于此,到好象每一参考文件被单独地和特别地指示为通过引用并入其全部内容和在这里阐述其全部内容的相同程度。
为了促进本发明的原理的理解的目的,已经对在附图中图示的优选实施例做出参考,且特定语言已经用于描述这些实施例。但是,该特定语言不意在限制本公开的范围,且本公开应该解释为包括通常本领域技术人员将想到的所有实施例。
本公开可以以功能模块部件和各种处理步骤描述。这种功能模块可以由配置为执行特定功能的任何数量的硬件和/或软件部件实现。例如,本公开可以采用各种集成电路部件,例如,存储器元件、处理元件、逻辑元件、查询表等,其可以在一个或多个微处理器或者其他控制设备的控制下执行各种功能。类似地,在使用软件编程或者软件元素实现本公开的要素时,本公开可以用任何编程或者脚本语言实现,比如C、C++、Java、汇编程序等,其中各种算法以数据结构、对象、处理、例程或者其他的编程元素的任何组合实现。功能方面可以以在一个或多个处理器上执行的算法实现。此外,本公开可以采用用于电子设备配置、信号处理和/或控制、数据处理等的任何数量的现有技术。词“机制”和“元件”被广泛地使用且不限于机械或者物理的实施例,而是可以包括结合处理器的软件例程等。
在这里示出和描述的特定的实现是本公开的说明性的例子,且不意在以任何方式另外限制本公开的范围。为了简洁的缘故,可能不详细描述现有的电子设备、控制系统、软件开发及系统的其他功能方面(和系统的单独操作部件的部件)。此外,在呈现的各种图中示出的连接线或者连接器意在表示示例性功能关系和/或各种元件之间的物理或者逻辑耦合。应当注意在实际的装置中可能存在许多替换的或者另外的功能关系、物理连接或者逻辑连接。此外,没有项或部件是对本公开的实践必不可少的,除非该元件被特别地描述为“基本的”或者“紧要的”。
描述本公开的上下文中的术语“一”和“一个”和“该”和类似的指代的使用(特别是在以下权利要求的上下文中)要被解释为覆盖单数和复数两者。此外,在这里的值的范围的叙述仅意在用作单独地参考落在该范围内的每一单独的值的简写方法,除非在这里另有说明,每一分开的值被包括在说明书中就好象其在这里单独地叙述那样。最终,可以以任何适当的次序执行在这里描述的所有方法的步骤,除非在这里另有说明或者以另外与上下文清楚地矛盾。在这里提供的任何和所有示例或者示例性语言(例如,“比如”)的使用仅意在更好地阐明本公开且不对本公开的范围施加限制,除非另外说明。在不脱离本公开的精神和保护范围的情况下,许多修改和适配对本领域技术人员是显然的。
提供图1到图8仅作为示例。相对于这些图讨论的步骤中的至少一些可以同时执行,以不同次序执行和/或一起省略。将理解在这里描述的示例的提供以及表达为“比如”、“例如”、“包括”、“在某些方面”、“以某些实现”、“在该情况下”等的短语不应该被解释为将所请求的主题限制到特定的示例。
本公开的上述各方面可以以硬件、固件或者经由软件或者可以在记录介质(记录介质比如CD-ROM、数字多用途盘(DVD)、磁带、RAM、软盘、硬盘、或者磁光盘)中存储的计算机代码或者最初存储在远程记录介质或者非瞬时机器可读介质且要存储在本地记录介质上的经网络下载的计算机代码的执行来实现,以使得在这里描述的方法可以经由使用通用计算机、或者特定处理器存储在记录介质上或者在可编程或者专用硬件(比如ASIC或者FPGA)中这种的软件呈现。如在现有技术中将理解的,计算机、处理器、微处理器控制器或者可编程硬件包括可以存储或者接收软件或者计算机代码的存储器部件,例如RAM、ROM、闪存等,当软件或者计算机代码由计算机访问和执行时,处理器或者硬件实现在这里描述的处理方法。另外,将认识到当通用计算机访问代码以用于实现在这里示出的处理时,代码的执行将通用计算机变换为专用计算机以用于执行在这里示出的处理。在图中提供的任何功能和步骤可以以硬件、软件或者两者的组合实现,且可以在计算机的编程指令内完全或者部分地执行。没有在这里的权利要求要素要在35U.S.C.112条款、第六段的规定之下解释,除非该要素使用短语“...的装置”明确地表述。
虽然已经参考在这里提供的示例特别地示出和描述了本公开,但是本领域技术人员将理解在其中可以做出形式和细节上的各种改变而不脱离本公开如所附权利要求所定义的精神和保护范围。
Claims (15)
1.一种用于图像处理的方法,包括:
在正在接收多个图像的同时在所述多个图像之一中检测矩形图像区域RIR;
获得与所检测的RIR对应的坐标;和
在存储器中存储所述坐标和将坐标与其中检测到RIR的图像关联的链接。
2.如权利要求1所述的方法,进一步包括:
基于所述坐标和所述多个图像生成多个缩略图图像,每一缩略图图像包括基于所述坐标生成的标识记号;和
在显示单元上显示所述多个缩略图图像。
3.如权利要求2所述的方法,进一步包括:放大选择的缩略图图像以生成放大的缩略图图像,和与所述多个缩略图图像一起显示所述放大的缩略图图像。
4.如权利要求2所述的方法,进一步包括呈现用于编辑所述多个缩略图图像的用户界面。
5.如权利要求4所述的方法,其中,所述用户界面用于编辑所述多个图像中的任何一个的各个标识记号。
6.如权利要求4所述的方法,其中,所述用户界面用于对所述多个缩略图图像中的至少一个执行透视变换。
7.如权利要求4所述的方法,其中,所述用户界面用于调整所述多个缩略图图像中的至少一个的大小。
8.如权利要求1所述的方法,进一步包括:
基于所述坐标变换所述多个图像以生成多个变换图像;
向所述变换图像分配类别;和
在显示单元上与所述类别的指示一起显示与所述变换图像有关的信息。
9.如权利要求8所述的方法,其中,所述与所述变换图像有关的信息包括所述多个变换图像的计数和与所述变换图像对应的缩略图图像中的至少一个。
10.一种电子装置,包括显示单元、存储器和一个或多个处理器,所述一个或多个处理器配置为:
在正在接收多个图像的同时在所述多个图像之一中检测矩形图像区域RIR;
获得与所检测的RIR对应的坐标;和
在所述存储器中存储所述坐标和将坐标与其中检测到RIR的图像关联的链接。
11.如权利要求10所述的电子装置,其中,所述一个或多个处理器进一步配置为:
基于所述坐标和所述多个图像生成多个缩略图图像,每一缩略图图像包括基于所述坐标生成的标识记号;和
在所述显示单元上显示所述多个缩略图图像。
12.如权利要求11所述的电子装置,其中,所述一个或多个处理器进一步配置为放大选择的缩略图图像以生成放大的缩略图图像,和与所述多个缩略图图像一起显示所述放大的缩略图图像。
13.如权利要求11所述的电子装置,其中,所述一个或多个处理器进一步配置为呈现用于编辑所述多个缩略图图像的用户界面。
14.如权利要求13所述的电子装置,其中,所述用户界面用于编辑所述多个图像中的任何一个的各个标识记号。
15.如权利要求13所述的电子装置,其中,所述用户界面用于对所述多个缩略图图像中的至少一个执行透视变换。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2014-0161159 | 2014-11-18 | ||
KR1020140161159A KR102272310B1 (ko) | 2014-11-18 | 2014-11-18 | 영상 처리 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 전자 기기. |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105607825A true CN105607825A (zh) | 2016-05-25 |
CN105607825B CN105607825B (zh) | 2020-10-27 |
Family
ID=55961994
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510796656.3A Active CN105607825B (zh) | 2014-11-18 | 2015-11-18 | 用于图像处理的方法和设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9767588B2 (zh) |
EP (1) | EP3222036B1 (zh) |
KR (1) | KR102272310B1 (zh) |
CN (1) | CN105607825B (zh) |
WO (1) | WO2016080653A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111985517A (zh) * | 2019-05-22 | 2020-11-24 | 东芝泰格有限公司 | 信息处理装置、物品识别装置及物品识别系统 |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10353475B2 (en) * | 2016-10-03 | 2019-07-16 | Microsoft Technology Licensing, Llc | Automated E-tran application |
KR102403141B1 (ko) | 2017-08-31 | 2022-05-30 | 삼성전자주식회사 | 프리뷰 ui를 제공할 수 있는 디스플레이 장치 및 이의 제어 방법 |
US11087292B2 (en) * | 2017-09-01 | 2021-08-10 | Allstate Insurance Company | Analyzing images and videos of damaged vehicles to determine damaged vehicle parts and vehicle asymmetries |
CN109525646B (zh) * | 2018-10-23 | 2021-12-21 | 广州力挚网络科技有限公司 | 一种图像处理方法与装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101325637A (zh) * | 2007-06-14 | 2008-12-17 | 兄弟工业株式会社 | 图像选择装置和存储图像选择程序的存储介质 |
US20090204915A1 (en) * | 2008-02-08 | 2009-08-13 | Sony Ericsson Mobile Communications Ab | Method for Switching Desktop Panels in an Active Desktop |
US20090208118A1 (en) * | 2008-02-19 | 2009-08-20 | Xerox Corporation | Context dependent intelligent thumbnail images |
CN101561924A (zh) * | 2008-04-18 | 2009-10-21 | 株式会社Pfu | 笔记本信息处理器和投影变换参数计算方法 |
US20100284043A1 (en) * | 2009-05-07 | 2010-11-11 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, program, and storage medium |
KR20110023634A (ko) * | 2009-08-31 | 2011-03-08 | (주)아이디스 | 썸네일 이미지 생성 장치 및 이를 이용한 썸네일 이미지 출력 방법 |
CN102214000A (zh) * | 2011-06-15 | 2011-10-12 | 浙江大学 | 用于移动增强现实系统的目标物体混合注册方法及系统 |
US20130070122A1 (en) * | 2009-09-23 | 2013-03-21 | Microsoft Corporation | Camera-Based Scanning |
US8549435B1 (en) * | 2006-09-25 | 2013-10-01 | Adobe Systems Incorporated | Displaying thumbnails for one or more files to be imported |
US20130314401A1 (en) * | 2012-05-23 | 2013-11-28 | 1-800 Contacts, Inc. | Systems and methods for generating a 3-d model of a user for a virtual try-on product |
US20130332831A1 (en) * | 2012-06-07 | 2013-12-12 | Sony Corporation | Content management user interface that is pervasive across a user's various devices |
US20130339848A1 (en) * | 2012-06-14 | 2013-12-19 | International Business Machines Corporation | Deduplicating similar image objects in a document |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3743828B2 (ja) | 2003-10-14 | 2006-02-08 | カシオ計算機株式会社 | 電子カメラ |
JP4363151B2 (ja) | 2003-10-14 | 2009-11-11 | カシオ計算機株式会社 | 撮影装置、その画像処理方法及びプログラム |
JP4856263B2 (ja) | 2009-08-07 | 2012-01-18 | シャープ株式会社 | 撮像画像処理システム、画像出力方法、プログラムおよび記録媒体 |
-
2014
- 2014-11-18 KR KR1020140161159A patent/KR102272310B1/ko active IP Right Grant
-
2015
- 2015-09-02 US US14/843,324 patent/US9767588B2/en active Active
- 2015-10-08 EP EP15860528.7A patent/EP3222036B1/en active Active
- 2015-10-08 WO PCT/KR2015/010642 patent/WO2016080653A1/en active Application Filing
- 2015-11-18 CN CN201510796656.3A patent/CN105607825B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8549435B1 (en) * | 2006-09-25 | 2013-10-01 | Adobe Systems Incorporated | Displaying thumbnails for one or more files to be imported |
CN101325637A (zh) * | 2007-06-14 | 2008-12-17 | 兄弟工业株式会社 | 图像选择装置和存储图像选择程序的存储介质 |
US20090204915A1 (en) * | 2008-02-08 | 2009-08-13 | Sony Ericsson Mobile Communications Ab | Method for Switching Desktop Panels in an Active Desktop |
US20090208118A1 (en) * | 2008-02-19 | 2009-08-20 | Xerox Corporation | Context dependent intelligent thumbnail images |
CN101561924A (zh) * | 2008-04-18 | 2009-10-21 | 株式会社Pfu | 笔记本信息处理器和投影变换参数计算方法 |
US20090262199A1 (en) * | 2008-04-18 | 2009-10-22 | Pfu Limited | Notebook information processor and projective transformation parameter calculating method |
US20100284043A1 (en) * | 2009-05-07 | 2010-11-11 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, program, and storage medium |
KR20110023634A (ko) * | 2009-08-31 | 2011-03-08 | (주)아이디스 | 썸네일 이미지 생성 장치 및 이를 이용한 썸네일 이미지 출력 방법 |
US20130070122A1 (en) * | 2009-09-23 | 2013-03-21 | Microsoft Corporation | Camera-Based Scanning |
CN102214000A (zh) * | 2011-06-15 | 2011-10-12 | 浙江大学 | 用于移动增强现实系统的目标物体混合注册方法及系统 |
US20130314401A1 (en) * | 2012-05-23 | 2013-11-28 | 1-800 Contacts, Inc. | Systems and methods for generating a 3-d model of a user for a virtual try-on product |
US20130332831A1 (en) * | 2012-06-07 | 2013-12-12 | Sony Corporation | Content management user interface that is pervasive across a user's various devices |
US20130339848A1 (en) * | 2012-06-14 | 2013-12-19 | International Business Machines Corporation | Deduplicating similar image objects in a document |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111985517A (zh) * | 2019-05-22 | 2020-11-24 | 东芝泰格有限公司 | 信息处理装置、物品识别装置及物品识别系统 |
Also Published As
Publication number | Publication date |
---|---|
EP3222036A1 (en) | 2017-09-27 |
WO2016080653A1 (en) | 2016-05-26 |
EP3222036B1 (en) | 2021-05-05 |
US9767588B2 (en) | 2017-09-19 |
EP3222036A4 (en) | 2018-07-11 |
US20160140417A1 (en) | 2016-05-19 |
KR102272310B1 (ko) | 2021-07-02 |
CN105607825B (zh) | 2020-10-27 |
KR20160059358A (ko) | 2016-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105607825A (zh) | 用于图像处理的方法和设备 | |
US10440276B2 (en) | Generating image previews based on capture information | |
US8548211B2 (en) | Indicating a correspondence between an image and an object | |
JP6073487B2 (ja) | 写真に関連した分類 | |
US8531478B2 (en) | Method of browsing photos based on people | |
US20180300046A1 (en) | Image section navigation from multiple images | |
US20180300327A1 (en) | Display, visualization, and management of images based on content analytics | |
JP6209962B2 (ja) | 情報処理装置及び情報処理プログラム | |
US20170262159A1 (en) | Capturing documents from screens for archival, search, annotation, and sharing | |
US9646655B2 (en) | Systems and methods for interaction-based analysis and visualization of remote collaboration sessions | |
US20150154718A1 (en) | Information processing apparatus, information processing method, and computer-readable medium | |
US10860166B2 (en) | Electronic apparatus and image processing method for generating a depth adjusted image file | |
JP6857586B2 (ja) | 画像抽出装置,画像抽出方法および画像抽出プログラムならびにそのプログラムを格納した記録媒体 | |
US9813567B2 (en) | Mobile device and method for controlling the same | |
US8218823B2 (en) | Determining main objects using range information | |
KR20110062383A (ko) | 앨범 관리 방법 및 장치 | |
US10970548B1 (en) | Virtual assistant of safe locker | |
US10338780B2 (en) | System and method for graphical resources management and computer program product with application for graphical resources management | |
US20180063344A1 (en) | Mobile device and method for controlling the same | |
US20220283698A1 (en) | Method for operating an electronic device in order to browse through photos | |
KR20150096552A (ko) | 사진 앨범 또는 사진 액자를 이용한 온라인 사진 서비스 시스템 및 방법 | |
Dizaj et al. | A new image dataset for document corner localization | |
US20230104396A1 (en) | Scannable thumbnails for association with data objects | |
US20240062338A1 (en) | Systems and methods for blur identification and correction | |
EP3417608B1 (en) | System and method for video processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |