CN101543052B - 便携式成像设备中的图像对齐 - Google Patents

便携式成像设备中的图像对齐 Download PDF

Info

Publication number
CN101543052B
CN101543052B CN2007800431335A CN200780043133A CN101543052B CN 101543052 B CN101543052 B CN 101543052B CN 2007800431335 A CN2007800431335 A CN 2007800431335A CN 200780043133 A CN200780043133 A CN 200780043133A CN 101543052 B CN101543052 B CN 101543052B
Authority
CN
China
Prior art keywords
image
frame
alignment
imaging device
image recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007800431335A
Other languages
English (en)
Other versions
CN101543052A (zh
Inventor
贡纳·克林霍尔特
马茨·克勒韦曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Mobile Communications AB
Original Assignee
Sony Ericsson Mobile Communications AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Communications AB filed Critical Sony Ericsson Mobile Communications AB
Publication of CN101543052A publication Critical patent/CN101543052A/zh
Application granted granted Critical
Publication of CN101543052B publication Critical patent/CN101543052B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W48/00—Access restriction; Network selection; Access point selection
    • H04W48/08—Access restriction or access information delivery, e.g. discovery data delivery
    • H04W48/10—Access restriction or access information delivery, e.g. discovery data delivery using broadcasted information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B7/00—Radio transmission systems, i.e. using radiation field
    • H04B7/02—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/06—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station
    • H04B7/0602—Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas at the transmitting station using antenna switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B7/00—Radio transmission systems, i.e. using radiation field
    • H04B7/14—Relay systems
    • H04B7/15—Active relay systems
    • H04B7/155—Ground-based stations
    • H04B7/15528—Control of operation parameters of a relay station to exploit the physical medium
    • H04B7/1555—Selecting relay station antenna mode, e.g. selecting omnidirectional -, directional beams, selecting polarizations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/005—Discovery of network devices, e.g. terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W84/00—Network topologies
    • H04W84/18—Self-organising networks, e.g. ad-hoc networks or sensor networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Studio Devices (AREA)
  • Telephone Function (AREA)
  • Transceivers (AREA)

Abstract

本发明提供一种用于在便携式成像设备(10)中对齐倾斜图像(J1)的方法，该设备(10)包括：图像记录装置(24)，用于记录图像；倾斜传感器(42)，用于感测图像记录装置(24)的倾斜角(α)；以及显示装置(22)，用于呈现由图像记录装置(24)记录的图像。该方法包括以下步骤：通过所述倾斜传感器(42)检测图像记录装置(24)的倾斜角(α)；在所述显示装置(22)上呈现至少一个标记结构(H1T/H2T，H1/H2，F)，以指示所述倾斜角(α)。

Description

便携式成像设备中的图像对齐
技术领域
本发明涉及包括成像系统的便携式设备的领域，具体来说，涉及包括成像系统的便携式通信设备。更具体地说，本发明涉及用于在便携式成像设备中对齐(align)图像的方法和装置。 
背景技术
众所周知，存在许多情况，其中便携式成像设备的用户面临在水平或垂直方向上对齐(align)该设备的困难。典型的例子是其中待记录的物体正在移动，或者当设备的用户处于移动平台上(例如在船上或汽车上)时，或者当设备的用户正由于其他原因(例如跟随待记录的物体)而在移动时的情况。对齐设备的困难也可能当用户单手在与用户的头和身体隔开一段距离的地方握持设备时发生。即使在当用户和待记录物体都全然静止的情况下，仍可能难以获得适当的水平或垂直对齐以避免倾斜的图像，例如在物体不具有清晰的水平或垂直参照的情况下。 
在这方面，已知便携式成像设备可以设置有用于稳定图像的各种系统。一个方案是基于所谓的光学图像稳定(OIS)系统。该方案利用相机中的机械装置，用于通过改变到传感器(例如，如果是数码相机的情况下，电荷耦合器件(CCD))的光学路径来稳定所记录的图像。典型地，这些系统通过具有相对于透镜系统其余部分而移动的浮动透镜元件而工作。另一方案基于被移动以抵消相机的运动的可移动传感器。通常，可移动传感器以数码相机为先决条件。 
然而，如上所述的那些图像稳定系统致力于通过抵消由相机用户引起的相机抖动(shake)来生成清晰的图像。因而，如果以一角度操作相机，这些系统会抵消由相机用户引起的任何抖动，但它们不会抵消或校正相机工作的角度。结果在涉及水平或垂直地对齐相机时，图像稳定技 术不提供任何帮助。 
考虑到以上问题，为便携式成像设备的用户提供对水平或垂直地对齐设备的有效且灵活的支持将是有益的。特别是，提供一种简单、灵活且直观的支持将是有益的。 
发明内容
本发明旨在解决为便携式设备的用户提供用于对齐图像的有效且灵活的过程的问题。特别是，本发明致力于解决提供简单、灵活且直观的对齐过程的问题。 
因而，本发明的一个目的在于提供一种具有用于对齐图像的有效且灵活的过程的便携式设备。特别是，本发明的一个目的在于提供一种简单、灵活且直观的对齐过程。 
按照本发明的第一方面实现所述目的，该第一方面提供了一种用于在便携式成像设备中对齐倾斜图像J1的方法，该设备包括： 
-图像记录装置，用于记录图像， 
-倾斜传感器，用于感测图像记录装置的倾斜角α，以及 
-显示装置，用于呈现由图像记录装置记录的图像， 
该方法包括以下步骤： 
-通过所述倾斜传感器检测图像记录装置的倾斜角α； 
-在所述显示装置上呈现至少一个标记结构(mark arrangement)， 
以指示所述倾斜角α。 
本发明的第二方面关注于一种包括第一方面的特征的方法，其中通过使用陀螺仪(gyroscope)装置或加速计装置中的至少一种来执行检测倾斜角α的步骤。 
本发明的第三方面关注于一种包括第一方面的特征的方法，其中通过下述来执行呈现至少一个标记结构的步骤： 
-呈现基本固定于图像记录装置的第一横线，以显示关于该记录装置基本固定的角， 
-呈现基本固定于水平线的第二横线，以显示关于水平线基本固定 的角。 
本发明的第四方面关注于一种包括第一方面的特征的方法，其中通过下述来执行呈现至少一个标记结构的步骤： 
-呈现基本固定于图像记录装置的第一纵线，以显示关于该记录装置基本固定的角， 
-呈现基本固定于水平线的第二纵线，以显示关于水平线基本固定的角。 
本发明的第五方面关注于一种包括第一方面的特征的方法，其中通过下述来执行呈现至少一个标记结构的步骤： 
-呈现基本固定于图像记录装置的第一十字交叉，以显示关于该记录装置基本固定的角， 
-呈现基本固定于水平线的第二十字交叉，以显示关于水平线基本固定的角。 
本发明的第六方面关注于一种包括第一方面的特征的方法，其中通过呈现框来执行呈现至少一个标记结构的步骤，该框具有与由显示装置呈现的图像J1基本相同的形状并且基本固定于水平线以显示关于水平线基本固定的角。 
本发明的第七方面关注于一种包括第六方面的特征的方法，该方法包括使框F在图像J1之内最大化的进一步步骤。 
本发明的第八方面关注于一种包括第六或第七方面的特征的方法，该方法包括选择并存储倾斜图像J1的对齐子集J2的进一步步骤，该子集是由所述框F限定的。 
本发明的第九方面关注于一种包括第一方面的特征的方法，该方法包括将倾斜图像J1与记录该图像J1时的倾斜角α一起存储的进一步步骤。 
按照本发明的第十方面也实现上文所提及的目的，该第十方面关注于一种便携式成像设备，该便携式成像设备包括： 
-图像记录装置，用于记录图像， 
-倾斜传感器，用于感测图像记录装置的倾斜角α， 
-显示装置，用于呈现由图像记录装置记录的图像，以及 
对齐单元，其被设置为在操作时执行以下步骤： 
-通过所述倾斜传感器检测图像记录装置的倾斜角α； 
-在所述显示装置上呈现至少一个标记结构，以指示所述倾斜角α。 
本发明的第十一方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，倾斜传感器是陀螺仪装置或加速计装置中的至少一种。 
本发明的第十二方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时呈现至少一个标记结构，所述至少一个标记结构包括： 
-基本固定于图像记录装置的第一横线，以显示关于该记录装置基本固定的角，以及 
-基本固定于水平线的第二横线，以显示关于水平线基本固定的角。 
本发明的第十三方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时呈现至少一个标记结构，所述至少一个标记结构包括： 
-基本固定于图像记录装置的第一纵线，以显示关于记录装置基本固定的角，以及 
-基本固定于水平线的第二纵线，以显示关于水平线基本固定的角。 
本发明的第十四方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时呈现至少一个标记结构，所述至少一个标记结构包括： 
-基本固定于图像记录装置的第一十字交叉，以显示关于记录装置基本固定的角，以及 
-基本固定于水平线的第二十字交叉，以显示关于水平线基本固定的角。 
本发明的第十五方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时呈现包括框F的至少一个标记结构，框F具有与由显示装置呈现的图像J1基本相同的形状并且基本固定于水平线以显示关于水平线基本固定的角。 
本发明的第十六方面关注于一种包括第十五方面的特征的便携式成像设备，其特征在于，对齐单元被设置为使所述框F在图像J1之内最大化。 
本发明的第十七方面关注于一种包括第十五或第十六方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时选择并存储倾斜图像J1的对齐子集J2，该子集是由所述框F限定的。 
本发明的第十八方面关注于一种包括第十方面的特征的便携式成像设备，其特征在于，对齐单元被设置为在操作时将倾斜图像J1与记录该图像J1时的倾斜角α一起存储。 
本发明的第十九方面关注于一种存储在计算机可用介质上的计算机程序产品，其包括可读程序装置，当将所述程序装置加载到包括以下部件的便携式设备中时： 
-图像记录装置，用于记录图像， 
-倾斜传感器，用于感测图像记录装置的倾斜角α， 
-显示装置，用于呈现由图像记录装置记录的图像，以及 
-对齐单元， 
所述可读程序装置使得所述便携式设备执行以下步骤： 
-通过所述倾斜传感器检测图像记录装置的倾斜角α； 
-在所述显示装置上呈现至少一个标记结构，以指示所述倾斜角α。 
本发明的第二十方面关注于一种具有记录于其上的程序的计算机程序部件，其中当将所述程序装置加载到包括以下部件的便携式设备中时： 
-图像记录装置，用于记录图像， 
-倾斜传感器，用于感测图像记录装置的倾斜角α， 
-显示装置，用于呈现由图像记录装置记录的图像，以及 
-对齐单元， 
所述程序使得所述便携式设备执行以下步骤： 
-通过所述倾斜传感器检测图像记录装置的倾斜角α； 
-在所述显示装置上呈现至少一个标记结构，以指示所述倾斜角α。 
本发明及其实施方式的更多优点将从本发明的以下详细描述中显现。 
应当强调的是，当用于本申请文件中，措辞“包括”用来特指存在所宣称的特征、整体、步骤或组件，但并不排除存在或附加一个或更多个其它特征、整体、步骤、组件或它们的组合。 
附图说明
现在将结合附图更详细地描述本发明，在附图中： 
图1示出了手机形式的便携式通信设备； 
图2示出了连接到蜂窝网络的图1中的手机； 
图3示出了图1中的手机的相关部分的示意框图； 
图4a例示了图1中设备的显示，呈现了包括两个十字交叉的示例性示意图； 
图4b例示了图1中设备的显示，呈现了按一角度工作的手机所记录的示例性示意图； 
图4c例示了图1中设备的显示，呈现了裁剪图4b中示出的图像以对齐该图像； 
图5示出了执行按照本发明优选实施方式的方法的方法流程图； 
图6示出了在其上提供有用于执行按照本发明的方法的程序代码的CD-ROM。 
具体实施方式
本发明涉及包括成像系统的便携式设备。特别是，本发明涉及包括成像系统的便携式通信设备。然而，本发明绝不限于通信设备。而是能够应用于包括适当的成像系统的任何适当的便携式设备。 
在图1中示出了按照本发明优选实施方式的便携式通信设备。该设备优选为适于按照3G技术(例如W-CDMA或CDMA2000)或者可能按照2.5G技术(例如GPRS)或者类似技术来工作的移动手机10。关于3G技术和2.5G技术等的信息能够例如在来自3rd Generation PartnershipProject(3GPP第三代合作伙伴计划)的规范中找到，参见例如网址 www.3gpp.org。进一步的开发已经产生出用于使甚至更高的数据传输速 度成为可能的技术。为此，作为3G技术的演进，已经开发出所谓的高速下行链路分组接入(HSDPA)。本质上，HSDPA是移动电话协议，其为允许更高数据传输速度的3G网络提供了平滑的演进路径。 
在图1中所示的优选实施方式中，所述设备为手机10，其配置有键区12，扬声器14和话筒16。键区12用于输入比如功能选择的信息以及对提示进行响应。键区12可以是任何适当的类型，包括但不限于具有下压按钮以及触摸按钮和/或不同适当按钮布局的组合的键区。扬声器14用于向用户呈现声音，而话筒16用于感测来自用户的语音。另外，手机10包括用于通过网络与其他用户通信的天线。然而该天线内置在手机10中，因而未在图1中示出。 
并且，手机10包括用于使图像能够被电话10以数字方式记录的相机装置24。表述“图像”或“多个图像”意味着包括静物图像以及活动图像，除非清晰地声明或从上下文中能明确其他方式。优选地，相机装置24包括透镜和/或透镜系统以及图像传感器，比如包括具有连接或耦合的光敏电容阵列的集成电路的CCD(电荷耦合器件)。自然，其他图像传感器也是可以的，例如包括具有像素阵列的集成电路的APS(有源像素传感器)，每个像素包含一个光电探测器以及三个或更多个晶体管。在新式手机或类似设备中，使用例如有源像素传感器的CMOS图像传感器变得愈加普遍。相对于CCD，CMOS图像传感器能够以生产所有半导体芯片的90％的标准制造设施来制造，这例如会产生规模经济。并且，CMOS工艺使超大规模集成电路(VLSI)成为可能，并且其能够被用于将所有必需的相机功能合并到一个芯片上以生成紧凑的相机系统，该相机系统更为可靠并且不需要外围支承芯片封装和装配，从而进一步降低了成本。另外，有源像素传感器构造比对应的CCD功耗小得多。这在依靠电池的便携式应用(比如手机)中是一大优势。 
另外，手机10包括用于向手机10的用户显示功能和提示的显示器22。显示器22也被用来呈现由相机装置24记录的图像。应当强调的是，显示器22优选地被设置为在操作时呈现在先记录的图像以及由相机装置24当前记录的图像。换言之，优选地，设置显示器22以使其既能够作为 取景器来工作又能够作为用于在先记录的图像的演示设备来工作。 
在继续进行之前，应当强调的是，图1中的手机10仅仅是能够实施本发明的便携式设备的一个示例。本发明例如也能够在PDA(个人数字助理)，掌上型电脑，膝上型电脑或者智能电话或者任何其他适当的便携式设备(例如数码相机)中使用。 
图2示出了通过基站32连接到蜂窝网络30的手机10。网络30典型地为GSM或GPRS网络，或者是任何其他2G、2.5G或2.75G网络。该网络当然也可以为3G网络，比如WCDMA网络。然而，该网络并不必须为蜂窝网络，而可以是某种类型的网络，比如因特网，企业内部网，局域网或者无线局域网。 
图3示出了与本发明相关的手机10内部的部件。如前文所阐述的，优选地，手机10包括键区12，扬声器14，话筒16，显示器22和相机装置24。另外，电话10优选地设置有存储器18，该存储器18用于存储数据文件，特别是由相机装置24生成的图像文件。存储器18可以是典型地用于便携式设备的任何适当的存储器类型。 
另外，手机10包括连接到无线电电路36以使得能够与图2中的网络30进行无线电通信的天线34。无线电电路36又连接到事件处理单元19，该事件处理单元19用于处理比如经由网络30至外部单元的出通信以及来自外部单元的入通信的事件，例如呼叫和消息(例如SMS(短信息服务)和MMS(多媒体消息服务))。 
手机10也设置有控制单元20，该控制单元20用于控制和管理电话10的操作。控制单元20可以通过硬件和/或软件来实现，并且如本领域技术人员所熟知的，它可以包括一个或几个硬件单元和/或软件模块，例如，设置有或可以访问电话10所需功能所必需的合适的软件和硬件的一个或几个处理器单元。 
如在图3中可见，优选地，将控制单元20连接到键区12，扬声器14，话筒16，存储器18，事件处理单元19，显示器22，相机24和无线电单元36。这使得控制单元20能够控制这些单元并与它们通信，以使例如与这些单元交换信息和指令。 
在继续进行之前，应当强调的是，除图3中所示的部件和单元之外，电话10中还可以有更多部件和单元。也可以将图3中所示的部件和单元连接到除所例示的以外的其它部件和单元。 
针对本发明的目的，应当特别注意，手机10设置有倾斜传感器42，该倾斜传感器42用于在操作时检测相机装置24的倾斜角α。倾斜角α是相机24关于水平线的倾斜度或类似参数的度量(measure)，或者换句话说关于铅垂线的倾斜度或类似参数的度量。 
倾斜传感器42例如可以是陀螺仪。众所周知，陀螺仪是基于角动量守恒原理来测量的设备。在普通的实施中，该设备为在轮轴上的旋转轮。一旦旋转，该设备会因轮的角动量而抵抗其方位的改变。在物理上，这一现象也被称为回转惯性或空间刚度(rigidity in space)。新式的陀螺仪可以被造得非常小，而仍在这方面提供足够的精确度。在描述了压电陀螺仪元件的专利申请US 2006/0226741A1(Ogura等人)中能够找到一个这样的示例。在描述了垂直MEMS陀螺仪的专利申请US 2004/0226369A(Kang等人)中能够找到另一个示例。然而，优选地，倾斜传感器42是提供倾斜角α的绝对测量的加速计。加速计优选地被小型化，例如通过MEMS技术或类似的技术实现。在描述了通过由单晶硅晶片制成的传感器元件测量倾斜角的传感器的专利US 5,148,604(Bantien)中能够找到小型化加速计的示例，或者在描述了使用CMOS技术制造对流加速计和倾斜传感器的方法的专利US 6,171,880(Gaitan等人)中能够找到小型化加速计的示例，或者在描述了在其中心附着有配重的压阻膜的倾斜传感器的专利申请EP 1363104A2(Almaraz)中能够找到小型化加速计的示例。实际上，可以通过本领域技术人员已知的适合于在便携式成像设备中测量方位的任何设备来实现倾斜传感器42。 
将倾斜传感器42连接到控制单元20，控制单元20在操作时将所检测到的倾斜角α的测量值提供给对齐单元40，对齐单元40被设置在控制单元20中或者作为控制单元20的一部分，例如参见图3。作为控制单元20的一部分意味着可以通过硬件和/或软件来实现对齐单元40，并且对齐单元40可以包括一个或几个硬件单元和/或软件模块，例如设置有或可以访问适合于所需功能的软件和硬件的一个或几个处理器单元。对齐单元40优选地被设置为在操作时帮助手机10的用户对齐由相机24记录的图像。
如图4a所例示的，优选地，通过在手机10的显示器22上定位以第一十字交叉H1和第二十字交叉H2的形式的标记结构来帮助手机10的用户对齐图像。优选地，这两个十字交叉共有同一个中心点。典型地，在显示器22作为用于连续地呈现由相机装置24记录的图像的取景器工作时，由对齐单元42提供该帮助。在图4a中，由两条实线，即第一横线H1T和第一纵线H1L，例示出第一十字交叉H1。优选地，第一十字交叉H1基本上固定于相机装置24，以显示关于相机装置24基本固定的角，而与相机装置24的任何倾斜无关。在图4a中，由两条虚线，即第二横线H2T和第二纵线H2L，例示出第二十字交叉H2。优选地，第二十字交叉H2基本上固定于水平线，以显示关于水平线基本固定的角，而与相机装置24的任何倾斜无关。第二十字交叉H2与水平线的相关优选地由对齐单元42根据倾斜传感器42获得的倾斜角α操作来完成，如上所述。在图4a中，第二十字交叉H2关于第一十字交叉H1已经被旋转了角度α。这表示相机装置24关于水平线以角度α倾斜。结果当倾斜角α为零时，两个十字交叉H1，H2被完全对准。 
在继续进行之前，应当补充的是，一些实施方式可以通过使用第一横线H1T和第二横线H2T形式的简化标记结构，或者通过仅引入第一纵线H1L和第二纵线H2L，来帮助电话10的用户对齐由相机装置24记录的图像。 
图4b示出了示意性的记录图像J1，图像J1包括关于显示器22的横边以基本为α的角度倾斜的山脊R，人物P和树木T。敏锐的读者意识到图像J1是通过关于水平线以倾斜角α倾斜使用相机装置24而记录的。结果图像J1将关于矩形框或类似物的横边同样地倾斜，典型地，该矩形框或类似物将在图像J1的每次进一步复制中包围图像J1，例如在通过计算机监视器，TV监视器，光和/或激光投影仪，纸张拷贝和幻灯片拷贝或类似方式等的复制中。 
现在，如果所记录的图像(如图4b中的图像J1)没有在水平或垂直 方位完全对齐，这能够自动地校正。这可以，例如通过已经被提供了所记录的图像的计算机或类似处理设备中的后处理来校正。自然，如果图像的倾斜角α与图像并存，则这种后处理是便利的。然后，后处理能够直接找到该倾斜角α，而不是必须为了找到该倾斜角α而分析图像。因此，优选地，可以将图像J1与关于记录图像时的特定倾斜角α的信息相关联。图像例如可以与所关注的倾斜角α一起存储。 
然而，优选地在手机10中直接执行校正，因为这可以在来源处生成精确图像，其避免了不必要的麻烦，比如在图像的后序复制和分配中的重复校正。 
按照本发明的实施方式的手机10所做的校正优选地通过可以获得在记录图像时相机24倾斜的倾斜角α的对齐单元42来执行。然后，通过简单地以-α的角度旋转图像，即再旋转图像以将其对齐，能够完成校正。例如可以通过用于在平面上旋转对象并可能平移对象的公知数学关系来实现旋转。然而，旋转需要相当大量的处理，其可能既耗时又耗能。从而要特别考虑在新式数码相机中真正可用的像素数的不断增加以及待处理数据的相应增加。这是便携式设备中的特定缺点，因为在这类设备中处理功率和能量都是稀缺资源。 
现在将注意力转向图4c，其例示了帮助电话10的用户对齐由相机24记录的图像的另一种方式。在图4c中，已经引入了框F并将其叠置于如上所述正在显示器22上呈现的图像J1上。该功能典型地在显示器22作为用于连续地呈现由相机装置24记录的图像的取景器工作时由对齐单元42提供。优选地，框F与由显示器22呈现的图像J1具有基本相同的形状，即由于图4c中的图像J1是矩形的，因此图4c中的框F是矩形的。优选地，将框F在所呈现的图像J1的边界之内最大化。框F基本固定于水平线，以显示关于水平线基本固定的角度，而与相机24的任何倾斜等无关。框F到水平线的校正优选地通过对齐单元42根据从倾斜传感器42接收的倾斜角α操作来完成，如上所述。在图4c中，框F已经关于图像J1的横边旋转了角度α。如敏锐的读者所意识到的并且如从图4c中可见的，接下来以上描述的框F将界定或包围作为原始倾斜图像J1的子集的 对齐图像J2(aligned image)。通过示出在倾斜情况下的图像J1和在对齐情况下的图像J2，已经在图4c中对其进行了例示。这为手机10的操作者提供了相机24以倾斜角α工作的清楚指示。减小倾斜角将减小由第一图像J1覆盖的区域和由第二图像J2覆盖的区域之间的差，反之增大倾斜角将增大由第一图像J1覆盖的区域和由第二图像J2覆盖的区域之间的差。 
实际上，有利的是，使用这样的框(如框F)来便于校正可能的倾斜角，该框具有与所关注的图像基本相同的形状并且优选地关于图像的尺寸和相机24工作时的倾斜角α被最大化。将框F用来标记和选择倾斜图像(例如图像J1)的子集。如从图4c中可见，该子集表示作为原始倾斜图像的一部分的对齐图像，例如图像J2。现在，可以通过简单地保存倾斜图像中由框F标记的对齐子集来获得校正且对齐的图像。该原理的优势可能随着倾斜角的增加而降低。然而，该原理不要求需要大量处理的图像旋转等，通常，该大量处理既耗时又耗能。 
现在将注意力转向本发明的示例性实施方式的功能，将参照图1-3以及图4a-4c和图5对其进行说明，图4a-4c例示了呈现示例性示意图像J1和J2的显示器22，图5示出了按照本发明的方法的优选实施方式的流程图。 
如前文阐述的，按照本发明实施方式的手机10形式的示例性便携式成像设备适合于通过设置有透镜或透镜系统以及图像传感器的相机装置24记录图像。图像传感器例如是CCD(电荷耦合器件)或APS(有源像素传感器)或光敏传感器的类似阵列。 
另外，如下文将更详细阐述的，由相机装置24记录的图像能够通过标记结构H1/H2被对齐，在显示器22中引入了F以叠置于由显示器22当前呈现的图像J1上。 
现在将参照图5中的示例性流程图说明对齐图像的示例性方法中的步骤，该方法根据在记录图像时相机装置24工作的倾斜角α对齐图像。该方法优选地由如图3中示意性例示的对齐单元40来执行。 
在按照本发明实施方式的示例性方法的第一步骤S1中，对由对齐单元40执行的对齐功能进行初始化。初始化包括比如在由显示器22呈现 的图像J1上分配标记结构的动作。标记结构例如可以按一条或两条横线H1T/H2T，或者一条或两条纵线H1L/H2L的形式，或者按两个十字交叉H1/H2的形式，或者按框F或类似的形式来提供。 
在示例性方法的第二步骤S2中，从倾斜传感器42获得倾斜角α，倾斜角α代表了关于水平线(即关于铅垂线)对相机装置24当前工作时的倾斜角的度量。 
在第三步骤S3中，检测手机10的操作者是否已经启动了按钮或某些其他控制以存储由相机装置24记录的图像，在该情况下在步骤S6中存储所记录的图像或者至少所记录图像的表示。图像或图像表示例如可以被存储在如图3中所示的存储器18中。优选地，与记录图像时的倾斜角α一起存储图像。 
在第四步骤S4中，检测所获得的倾斜角α是否至少基本为零，在基本为零的情况下按照步骤S1获得新的倾斜角α。 
在第五步骤S5中，将标记结构的至少一部分倾斜以标记相机装置24当前倾斜的角度α，即标记水平线和/或铅垂线。 
必须要强调的是，上述方法应当被视为本发明的示例。该方法的其他实施方式可以包括更多步骤或较少步骤，并且这些步骤不一定按上述给定顺序来执行。 
通常，如上文阐述，优选地以具有包含程序代码形式的合适软件的相应存储器的一个或更多个处理器的形式提供被设置为执行上述示例性方法的对齐单元40。然而，也可以在数据载体(比如图6中图示的CD-ROM光盘46或可插入的记忆棒)上提供程序代码，当加载到计算机中或具有适当的处理性能的电话中时其将执行本发明。也可以从蜂窝网络外部或内部的服务器远程下载该程序代码，或者经由计算机(如与电话临时连接的PC)下载该程序代码。 
现在已经参照示例性实施方式描述了本发明。然而，本发明不限于此处描述的实施方式。相反，本发明的全部范围仅由所附权利要求的范围确定。 

Claims (8)

1.一种用于在便携式成像设备(10)中对齐倾斜图像(J1)的方法，该设备(10)包括：
图像记录装置(24)，其用于记录图像，
倾斜传感器(42)，其用于感测所述图像记录装置(24)关于水平线的倾斜角(α)，以及
显示装置(22)，其用于呈现由所述图像记录装置(24)记录的图像，
该方法包括以下步骤：
通过所述倾斜传感器(42)检测所述图像记录装置(24)关于水平线的倾斜角(α)；
在所述显示装置(22)上呈现至少一个标记结构(H1T/H2T，H1/H2，F)，以指示所述倾斜角(α)，其中标记结构是框(F)，该框(F)具有与由所述显示装置(22)呈现的图像(J1)基本相同的形状并且基本固定于水平线以显示关于该水平线基本固定的角；以及
选择并存储倾斜图像(J1)的对齐子集(J2)，该子集是由所述框(F)限定的。
2.根据权利要求1所述的方法，其中通过使用陀螺仪装置或加速计装置中的至少一种来执行检测所述倾斜角(α)的步骤。
3.根据权利要求1所述的方法，所述方法包括使所述框(F)在所述图像(J1)之内最大化的进一步步骤。
4.根据权利要求1所述的方法，所述方法包括将倾斜图像(J1)与记录该图像(J1)时的所述倾斜角α一起存储的进一步步骤。
5.一种便携式成像设备(10)，该便携式成像设备(10)包括：
图像记录装置(24)，其用于记录图像，
倾斜传感器(42)，其用于感测所述图像记录装置(24)关于水平线的倾斜角(α)，
显示装置(22)，其用于呈现由所述图像记录装置(24)记录的图像，以及
对齐单元(40)，其被设置为在操作时执行以下步骤：
通过所述倾斜传感器(42)检测所述图像记录装置(24)关于水平线的倾斜角(α)；
在所述显示装置(22)上呈现至少一个标记结构(H1T/H2T，H1/H2，F)，以指示所述倾斜角(α)，该标记结构是框(F)，该框(F)具有与由所述显示装置(22)呈现的图像(J1)基本相同的形状并且基本固定于水平线以显示关于该水平线基本固定的角；以及
选择并存储倾斜图像(J1)的对齐子集(J2)，该子集是由所述框(F)限定的。
6.根据权利要求5所述的便携式成像设备(10)，其中所述倾斜传感器(42)是陀螺仪装置或加速计装置中的至少一种。
7.根据权利要求5所述的便携式成像设备(10)，其中所述对齐单元(40)被设置为在操作时使所述框(F)在所述图像(J1)之内最大化。
8.根据权利要求5所述的便携式设备(10)，其中所述对齐单元(40)被设置为在操作时将倾斜图像(J1)与记录该图像(J1)时的倾斜角(α)一起存储。
CN2007800431335A 2006-11-24 2007-05-15 便携式成像设备中的图像对齐 Expired - Fee Related CN101543052B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US86715306P 2006-11-24 2006-11-24
US60/867,153 2006-11-24
PCT/EP2007/054710 WO2008061811A1 (en) 2006-11-24 2007-05-15 Aligning an image in a portable imaging device

Publications (2)

Publication Number Publication Date
CN101543052A CN101543052A (zh) 2009-09-23
CN101543052B true CN101543052B (zh) 2012-07-04

Family

ID=38190728

Family Applications (2)

Application Number Title Priority Date Filing Date
CN2007800431335A Expired - Fee Related CN101543052B (zh) 2006-11-24 2007-05-15 便携式成像设备中的图像对齐
CN2007800433398A Expired - Fee Related CN101554023B (zh) 2006-11-24 2007-05-15 带有改进的ad-hoc连接的便携式通信装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN2007800433398A Expired - Fee Related CN101554023B (zh) 2006-11-24 2007-05-15 带有改进的ad-hoc连接的便携式通信装置

Country Status (11)

Country Link
US (1) US7769348B2 (zh)
EP (2) EP2090036B1 (zh)
JP (1) JP5001377B2 (zh)
KR (1) KR101101583B1 (zh)
CN (2) CN101543052B (zh)
AT (1) ATE486479T1 (zh)
BR (1) BRPI0719039A2 (zh)
DE (1) DE602007010178D1 (zh)
MX (1) MX2009004672A (zh)
RU (1) RU2420002C2 (zh)
WO (2) WO2008061811A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7769348B2 (en) * 2006-11-24 2010-08-03 Sony Ericsson Mobile Communications Ab Ad-hoc connectivity system and method
US20090075589A1 (en) * 2007-09-13 2009-03-19 Azure Communications Inc. Broadband range extension relay for wireless networks
US8401598B2 (en) * 2009-05-11 2013-03-19 Broadcom Corporation Method and system for chip to chip communication utilizing selectable directional antennas
US20110199918A1 (en) * 2009-11-20 2011-08-18 Qualcomm Incorporated Methods and apparatus for assisting in network discovery
US8228837B2 (en) 2010-06-17 2012-07-24 Google Inc. Maintaining network connectivity
JP2012141811A (ja) * 2010-12-29 2012-07-26 Yahoo Japan Corp 商品情報提供装置および商品情報提供システム
CN102647552A (zh) * 2011-02-22 2012-08-22 华为终端有限公司 图像摄取控制方法及装置
JP5802450B2 (ja) 2011-06-24 2015-10-28 オリンパス株式会社 撮像装置、無線システム
JP5753009B2 (ja) 2011-06-24 2015-07-22 オリンパス株式会社 撮像装置、無線システム
US20130331090A1 (en) * 2012-06-07 2013-12-12 Lg Electronics Inc. Apparatus for performing ue-to-ue cooperative communication in a wireless communication system and method thereof
US9179485B2 (en) 2012-07-17 2015-11-03 Qualcomm Incorporated Methods and apparatus for associating user equipment electronic identifiers with users
CN103593643B (zh) * 2012-08-16 2019-02-12 百度在线网络技术（北京）有限公司 一种图像识别的方法及系统
CN102932430B (zh) * 2012-10-11 2016-08-03 小米科技有限责任公司 一种连接终端设备的方法、装置及系统
CN105430284A (zh) * 2015-12-30 2016-03-23 魅族科技（中国）有限公司 一种拍照取景框的控制方法及终端
JP2017175435A (ja) * 2016-03-24 2017-09-28 京セラ株式会社 電子機器
KR102411124B1 (ko) 2017-10-27 2022-06-21 삼성전자주식회사 전자 장치 및 전자 장치에서 외부 장치를 이용한 태스크 수행 방법
CN108515780A (zh) * 2018-03-21 2018-09-11 昆明理工大学 一种基于图像识别的纸张倾斜校正装置
US11133876B2 (en) * 2018-06-08 2021-09-28 Disney Enterprises, Inc. Interactive device with multiple antennas
EP3772227B1 (en) * 2019-07-29 2022-07-13 British Telecommunications public limited company Cellular telecommunications network
EP3970417B1 (en) 2019-07-29 2022-11-30 British Telecommunications public limited company Initiation of transfer of user equipment to base station according to visual data
CN113065502A (zh) * 2019-12-12 2021-07-02 天目爱视（北京）科技有限公司 一种基于标准化设置的3d信息采集系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1313004A (zh) * 1998-06-23 2001-09-12 夏普公司 图像处理装置,图像处理方法及记录图像处理程序的媒体
JP2004138737A (ja) * 2002-10-16 2004-05-13 Sharp Corp 撮像装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1071285A1 (en) * 1999-07-19 2001-01-24 Texas Instruments Inc. Vertical compensation in a moving camera
US6594503B1 (en) * 2000-02-02 2003-07-15 Motorola, Inc. Communication device with dial function using optical character recognition, and method
US7039391B2 (en) * 2000-11-28 2006-05-02 Xanboo, Inc. Method and system for communicating with a wireless device
US6940543B2 (en) * 2002-03-12 2005-09-06 Eastman Kodak Company Wireless transfer of at least one digital image file between a first device and a second device
AU2003242972A1 (en) 2002-07-16 2004-02-02 Shoot And Talk Ltd. Directional dialing cellular telephone protocol and appurtenances for use therewith
CN1817053A (zh) * 2003-06-19 2006-08-09 美商智慧财产权授权股份有限公司 以控制图框为基础存取点的天线操控
JP2005218066A (ja) * 2004-02-02 2005-08-11 Nakagawa Kenkyusho:Kk 位置情報通信装置
JP2006018593A (ja) * 2004-07-01 2006-01-19 Mitsubishi Electric Corp 通信システム
JP4745737B2 (ja) * 2004-08-06 2011-08-10 キヤノン株式会社 撮像装置、通信システム、伝送方法、撮像装置の制御方法、及びコンピュータプログラム
US20060046719A1 (en) * 2004-08-30 2006-03-02 Holtschneider David J Method and apparatus for automatic connection of communication devices
CN1750489A (zh) * 2004-09-17 2006-03-22 武汉中维宽带通信技术有限公司 利用通用wlan访问点构建可延展的wlan网络的方法
EP1646112A1 (en) * 2004-10-11 2006-04-12 Sony Deutschland GmbH Directivity control for short range wireless mobile communication systems
JP2006180217A (ja) * 2004-12-22 2006-07-06 Nec Corp 情報提供システム、その方法、携帯通信端末、情報管理装置、管理装置およびプログラム
US7359679B2 (en) * 2005-01-28 2008-04-15 Microsoft Corporation Multi-access system and method using multi-sectored antenna
US20060174203A1 (en) * 2005-01-31 2006-08-03 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Viewfinder for shared image device
JP2006245726A (ja) * 2005-03-01 2006-09-14 Fuji Photo Film Co Ltd デジタルカメラ
US7689167B2 (en) * 2005-07-22 2010-03-30 Intel Corporation Methods and apparatus for operating an ensemble of wireless electronic devices based on user activity
US7769348B2 (en) * 2006-11-24 2010-08-03 Sony Ericsson Mobile Communications Ab Ad-hoc connectivity system and method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1313004A (zh) * 1998-06-23 2001-09-12 夏普公司 图像处理装置,图像处理方法及记录图像处理程序的媒体
JP2004138737A (ja) * 2002-10-16 2004-05-13 Sharp Corp 撮像装置

Also Published As

Publication number Publication date
RU2009123975A (ru) 2010-12-27
BRPI0719039A2 (pt) 2013-01-15
DE602007010178D1 (de) 2010-12-09
MX2009004672A (es) 2009-05-15
CN101554023B (zh) 2012-01-11
US7769348B2 (en) 2010-08-03
WO2008061811A1 (en) 2008-05-29
KR20090082253A (ko) 2009-07-29
ATE486479T1 (de) 2010-11-15
KR101101583B1 (ko) 2012-01-02
EP2095626A1 (en) 2009-09-02
EP2090036A1 (en) 2009-08-19
CN101543052A (zh) 2009-09-23
WO2008061810A1 (en) 2008-05-29
EP2090036B1 (en) 2010-10-27
RU2420002C2 (ru) 2011-05-27
JP5001377B2 (ja) 2012-08-15
CN101554023A (zh) 2009-10-07
US20080125041A1 (en) 2008-05-29
JP2010510737A (ja) 2010-04-02

Similar Documents

Publication Publication Date Title
CN101543052B (zh) 便携式成像设备中的图像对齐
US7567752B2 (en) Image alignment system with overlying frame in display
JP4864295B2 (ja) 画像表示システム、画像表示装置およびプログラム
US20170104929A1 (en) Imaging device
US9148651B2 (en) Methods and devices for generating a stereoscopic image
JP6098874B2 (ja) 撮像装置および画像処理装置
JP2004318823A (ja) 情報表示システム、情報処理装置、ポインティング装置および情報表示システムにおけるポインタマーク表示方法
JP2009267792A (ja) 撮像装置
US9137517B2 (en) Methods and devices for generating a stereoscopic image
EP1775918A2 (en) Apparatus and method for photographing erect image in portable communication terminal
JP2008085488A (ja) カメラ付き携帯機器
CN110463177A (zh) 文档图像的校正方法及装置
JP2002073207A (ja) カメラ搭載の携帯型情報端末
WO2023072088A1 (zh) 对焦方法及装置
CN105827978A (zh) 一种半球形全景图的拍摄方法、装置及终端
CA2825342C (en) Methods and devices for controlling camera image capture
JP2007164534A (ja) 電子機器および撮像装置
CN100403767C (zh) 移动终端摄像装置的图像补偿系统及其方法
JP2008167225A (ja) 光学装置および情報配信／受信システム
JP4307932B2 (ja) 撮影システム
JP5324980B2 (ja) 携帯端末及び画像方向補正方法
JP5452412B2 (ja) 電子装置および画像出力方法
JP6057142B2 (ja) 撮像装置、その制御方法及びプログラム
CA2827531C (en) Methods and devices for generating a stereoscopic image
JP5558233B2 (ja) 撮像装置および方位設定方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120704

Termination date: 20130515