CN106534624A - 移动终端 - Google Patents

移动终端 Download PDF

Info

Publication number
CN106534624A
CN106534624A CN201610403032.5A CN201610403032A CN106534624A CN 106534624 A CN106534624 A CN 106534624A CN 201610403032 A CN201610403032 A CN 201610403032A CN 106534624 A CN106534624 A CN 106534624A
Authority
CN
China
Prior art keywords
optical system
image
mobile terminal
curved mirror
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610403032.5A
Other languages
English (en)
Other versions
CN106534624B (zh
Inventor
金宗必
李东珍
朱声范
金学海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106534624A publication Critical patent/CN106534624A/zh
Application granted granted Critical
Publication of CN106534624B publication Critical patent/CN106534624B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00Optical objectives specially designed for the purposes specified below
    • G02B13/06Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B17/00Systems with reflecting surfaces, with or without refracting elements
    • G02B17/08Catadioptric systems
    • G02B17/0804Catadioptric systems using two curved mirrors
    • G02B17/0808Catadioptric systems using two curved mirrors on-axis systems with at least one of the mirrors having a central aperture
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B17/00Systems with reflecting surfaces, with or without refracting elements
    • G02B17/08Catadioptric systems
    • G02B17/0804Catadioptric systems using two curved mirrors
    • G02B17/0816Catadioptric systems using two curved mirrors off-axis or unobscured systems in which not all of the mirrors share a common axis of rotational symmetry, e.g. at least one of the mirrors is warped, tilted or decentered with respect to the other elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/18Mountings, adjusting means, or light-tight connections, for optical elements for prisms; for mirrors
    • G02B7/182Mountings, adjusting means, or light-tight connections, for optical elements for prisms; for mirrors for mirrors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/02Bodies
    • G03B17/17Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/06Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe involving anamorphosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Telephone Set Structure (AREA)
  • Studio Devices (AREA)
  • Cameras In General (AREA)

Abstract

本发明涉及移动终端,该移动终端包括:终端主体;光学系统,所述光学系统位于所述终端主体中并且被配置为接收光;杆,所述杆位于所述光学系统的侧部;和曲面镜,所述曲面镜位于所述杆的端部,其中,所述杆和所述曲面镜能够在第一状态与第二状态之间定位,其中,在所述第一状态下,所述杆和所述曲面镜相对更靠近所述光学系统,并且在所述第二状态下,所述杆和所述曲面镜已经从所述光学系统向外延伸,并且其中,当在所述第二状态下时,所述曲面镜将入射在所述曲面镜上的全方位的光朝向所述光学系统反射。

Description

移动终端
技术领域
本说明书涉及具有能够全方位捕获的相机的移动终端。
背景技术
终端通常可根据其移动性而被分成移动/便携式终端或固定终端。移动终端还可根据用户是否能够直接携带终端而被分成手持终端或车载终端。
移动终端已经变得越来越多功能化。这些功能的示例包括数据和语音通信、经由相机拍摄图像和视频、记录音频、经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加功能,而其它终端被配置成多媒体播放器。最近,移动终端已经被配置为接收允许观看诸如视频和电视节目的内容的广播和多播信号。
随着这些功能变得更多样化,移动终端可支持更复杂的功能,例如拍摄图像或视频、再现音乐或视频文件、玩游戏、接收广播信号等。通过全面地和集总地实现这些功能,移动终端可按照多媒体播放器或装置的形式来具体实现。
人们正在努力以支持和增加移动终端的功能。这些努力包括软件和硬件改进以及结构组件上的改变和改进。
同时,为了获得通过单次图像捕获而记录的每个环境的照片或图像,用户应当通过在一个点上绕中心转动不方便地拍摄这种照片或图像。在这种情况下,当在全景模式下使用具有广视野(FOV)的相机时,执行将分别通过至少两个光学系统捕获的图像合并成一个图像的处理。作为一个示例,当分别在移动终端的前表面和后表面提供用于捕获前侧的相机(光学系统)和用于捕获后侧的相机(光学系统)时,应当合并由前相机获得的图像和由后相机获得的图像以获得与通过360°捕获获得的图像相似的图像。
如果仅简单地连接和合并前图像和后图像,则在合并的图像两端产生阴影或可能在图像对齐期间引起图像损失。
因此,需要一种具有能够全方位捕获图像且在图像合并期间不引起图像损失的相机(光学系统)的移动终端。
发明内容
因此,详细说明的方面提供了能够通过一次拍摄图像捕获完全记录用户的环境的移动终端。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体表达和广泛描述的,提供了一种移动终端,该移动终端包括:终端主体;光学系统,所述光学系统位于所述终端主体中并且被配置为接收光;杆,所述杆位于所述光学系统的侧部;和曲面镜,所述曲面镜位于所述杆的端部,其中,所述杆和所述曲面镜能够在第一状态与第二状态之间定位,其中,在所述第一状态下,所述杆和所述曲面镜相对更靠近所述光学系统,并且在所述第二状态下,所述杆和所述曲面镜已经从所述光学系统向外延伸,并且其中,当在所述第二状态下时,所述曲面镜将入射在所述曲面镜上的全方位的光朝向所述光学系统反射。
根据本发明的一个方面,所述曲面镜可以包括朝向所述光学系统凸出的半球形。
根据本发明的一个方面,所述曲面镜可以包括:第一曲面镜,所述第一曲面镜相对更靠近所述光学系统并且具有朝向所述移动终端的外部凸出的半球形;和第二曲面镜,所述第二曲面镜相对更远离所述光学系统并且以一定距离与所述第一曲面镜分开并且将从所述第一曲面镜反射的光反射至所述光学系统。
根据本发明的一个方面,所述第一曲面镜可以被成形为限定穿过其中心部分形成的孔,并且其中,所述光学系统的至少一部分位于所述孔内。
根据本发明的一个方面,所述杆可以是天线杆。
根据本发明的一个方面,所述移动终端还可以包括控制器,所述控制器被配置为:在所述第一状态期间激活普通相机模式;并且响应于从所述第一状态至所述第二状态的转换,从普通相机模式转换为全方位捕获模式。
根据本发明的一个方面,所述曲面镜的尺寸和所述曲面镜与所述光学系统的中心之间的分开距离可以根据所述光学系统的视野(FOV)的范围而变化。
根据本发明的一个方面,所述曲面镜可以沿着所述终端主体的纵向方向定位或能以向上倾斜的方式沿着所述终端主体的所述纵向方向定位,并且其中,所述曲面镜可以位于所述光学系统的光轴上以允许所述曲面镜能沿着所述光学系统的所述光轴定位。
根据本发明的一个方面,所述移动终端还可以包括:子曲面镜,当所述曲面镜按照偏离所述光学系统的所述光轴的方式而被拉动时,所述子曲面镜位于所述曲面镜和所述光学系统之间,所述子曲面镜将从所述曲面镜反射的光朝向所述光学系统的所述光轴反射。
根据本发明的另一示例性实施方式,提供了一种移动终端,该移动终端包括:终端主体;光学系统,所述光学系统位于所述终端主体中并且被配置为全方位地捕获所述终端主体的环境;其中,所述光学系统可以包括:捕获从第一方向接收的光的第一光学系统和捕获从与所述第一方向相反的第二方向接收的光的第二光学系统,其中所述第一光学系统和所述第二光学系统都可以具有超过180°的视野(FOV),并且其中,所述全方位捕获可以通过合并由所述第一光学系统捕获的第一图像和由所述第二光学系统捕获的第二图像来执行。
根据本发明的一个方面,所述第一光学系统和所述第二光学系统可以具有所述第一光学系统的第一光轴和所述第二光学系统的第二光轴可以对齐的对称结构或所述第一光轴和所述第二光轴可以不彼此对齐的非对称结构。
根据本发明的一个方面,所述第一光学系统和所述第二光学系统可以以所述对称结构布置,其中,所述移动终端还可以包括:可旋转曲面镜,所述可旋转曲面镜位于所述第一光学系统和所述第二光学系统之间;和图像传感器,所述图像传感器位于所述曲面镜的上部或下部中的至少一个处。
根据本发明的一个方面,所述第一光学系统和所述第二光学系统可以位于所述终端主体的不同侧处。
根据本发明的一个方面,合并所述第一图像和所述第二图像可以包括通过将所述第一图像和所述第二图像朝向第三轴线移动预定距离执行针对所述第一图像和所述第二图像的光轴对齐,其中,当所述第一光学系统和所述第二光学系统布置在所述非对称结构中时,所述第三轴线对应于所述第一光轴与所述第二光轴之间的中点。
根据本发明的一个方面,可以省略所述第一图像和所述第二图像的两端部分的部分区域,所述部分区域由于在所述光轴对齐期间的图像移动而靠近所述第三轴线。
根据本发明的一个方面,所述第一图像和所述第二图像可以通过将在全景模式下捕获的多个第一子图像和第二子图像结合而合并,并且其中,通过合并在相邻子图像之间的交叠区域而生成在所述多个第一子图像和第二子图像之间的交叠区域中的至少部分区域。
根据本发明的一个方面,所述移动终端还可以包括:第一显示器,所述第一显示器被配置为显示所述第一图像和所述第二图像;和第二显示器,所述第二显示器被配置为以放大的方式输出在所述第一显示器处显示的图像的部分区域,所述部分区域由引导进行指示。
根据本发明的一个方面,在预览显示在所述第二显示器上的所述部分区域的同时,执行快照捕获。
根据本发明的一个方面,所述移动终端还可以包括:被配置为感测所述终端主体的安装方向或运动方向的接近光传感器、激光传感器、陀螺仪传感器或加速度传感器中的至少一种以便阻止向所述第一光学系统或所述第二光学系统中的至少一个的电力供应。
下文将给出根据本发明的移动终端及其控制方法的效果的说明。
根据本文公开的至少一个示例性实施方式,通过一次拍摄图像捕获能够允许360°捕获,由此,用户能够完全记录他或她的环境,并且在以转动的方式捕获图像时没有不便。
根据本文公开的至少一个示例性实施方式,一种经历可以被重复地再现从而以各种视点获得特别的经历。
另外,根据本文公开的至少一个示例性实施方式,通过经由虚拟现实(VR)装置观看其他人的经历,能够获得新的经历。
根据本文公开的至少一个示例性实施方式,当合并在两个方向上捕获的多个图像时可以执行光轴对齐,由此防止图像损失以及在每个图像的两端处产生阴影。
根据本文公开的至少一个示例性实施方式,通过采用传感器能够感测光学系统的安装状态和移动方向,由此关闭不必要的光学系统。
根据下文给出的具体说明,本申请的适用性的其它范围将变得更明显。但是,应当理解,具体说明和特定示例在指示本发明的优选实施方式的同时,仅通过例示的方式给出,因为在本发明的精神和范围内的各种变化和修改根据具体说明对本领域技术人员来说将变得显而易见。
附图说明
根据下文给出的详细描述和附图,本发明将被更加全面地理解,这些附图仅是例示进而不是对本发明的限制,并且,在附图中:
图1A是根据本公开的移动终端的框图;
图1B和图1C是从不同方向看时移动终端的一个示例的概念图;
图2是根据本发明的一个示例性实施方式的广角相机模块的透镜的排列图;
图3是例示当通过使用根据图2的广角相机模块捕获前侧和后侧时的视野(FOV)的概念图;
图4A是根据本发明的一个示例性实施方式的具有设置在移动终端两侧的光学系统的移动终端的立体图;
图4B是例示根据本发明的一个示例性实施方式当移动终端包括从其两个表面伸出的两个光学系统和两个图像传感器时的光的路径的概念图;
图4C是例示根据本发明的一个示例性实施方式当移动终端包括从其两个表面伸出的两个光学系统和一个图像传感器时的光的路径的概念图;
图4D是例示图4B的第一光学系统和第二光学系统布置在移动终端的中心处的状态的图;
图4E是例示图4B的第一光学系统和第二光学系统布置在移动终端的一个端部处的状态的图;
图5A是例示在其中具有对称地设置的前相机和后相机的移动终端的图;
图5B是例示根据本发明的一个示例性实施方式的光学系统附接在移动终端上的状态的图;
图5C是例示根据本发明的一个示例性实施方式的第一光学系统和第二光学系统暴露于移动终端的两侧的图;
图6A是例示根据本发明的一个示例性实施方式的具有光轴不同的一对光学系统的移动终端的图;
图6B和图6C是与图6A相关的移动终端的前视立体图;
图7A、图7B和图7C是例示根据本发明的一个示例性实施方式在具有非对称结构的一对光学系统的移动终端中的图像合并的概念图;
图8A是根据本发明的第一示例性实施方式的处于第一状态下的移动终端的前视图;
图8B是根据本发明的第一示例性实施方式的处于第二状态下的移动终端的前视图;
图9A是根据本发明的第二示例性实施方式的处于第一状态下的移动终端的前视图;
图9B是根据本发明的第二示例性实施方式的处于第二状态下的移动终端的前视图;
图10A是根据本发明的第三示例性实施方式的处于第一状态下的移动终端的前视图;
图10B是根据本发明的第三示例性实施方式的处于第二状态下的移动终端的前视图;
图11A是根据本发明的第四示例性实施方式的处于第一状态下的移动终端的前视图;
图11B是根据本发明的第四示例性实施方式的处于第二状态下的移动终端的前视图;
图12A和图12B是根据本发明的一个示例性实施方式的具有不同反射镜的移动终端的图;
图13和图14是例示根据本发明的一个示例性实施方式的由反射镜反射的光线流的概念图;
图15A和图15B是例示根据本发明的一个示例性实施方式使用全方位捕获模式的示意图;以及
图16A和图16B是例示根据本发明的一个示例性实施方式在全方位捕获模式下的捕获期间在普通相机模式下捕获照片(图像)的方法的示意图。
具体实施方式
现在将参照附图,根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,相关领域的普通技术人员熟知的内容已被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
尽管可在本文中使用术语第一、第二等描述各种元件,但是这些元件不应当受这些术语的限制。这些术语一般仅用于将一个元件与另一个元件相区分。
当一个元件被称为“与”另一个元件“连接”时,该元件可以与另一个元件连接或中间元件也可以存在。相反,当一个元件被称为“与”另一个元件“直接连接”时,不存在中间元件。
单数表示可以包括复数表示,除非该单数表示根据上下文表示明确不同的含义。在本文中使用的诸如“包括”或“具有”的术语应当理解为它们旨在指示本说明书中公开的多个部件、功能或步骤的存在,并且还应当理解的是,同样可以使用更多或更少的部件、功能或步骤。
本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、石板PC、平板PC、超级本、可穿戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等。
仅通过非限制性示例,参照特定类型的移动终端进行进一步的描述。然而,这些教导同样适用于其它类型的终端,例如上述那些类型。另外,这些教导也可适用于诸如数字TV、台式计算机等的固定终端。
现在参照图1A至图1C,其中图1A是根据本公开的移动终端的框图,图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。将理解,不要求实现所示的所有组件,可另选地实现更多或更少的组件。
现在参照图1A,移动终端100被示出为具有利用多个通常实现的组件配置的无线通信单元110。例如,无线通信单元110通常包括允许移动终端100与无线通信系统或者移动终端所在的网络之间的无线通信的一个或更多个组件。
无线通信单元110通常包括允许通信(例如,移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。另外,无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120来获得,并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。
通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现感测单元140。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。
如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器获得的信息及其组合。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。
为了方便触摸屏,显示单元151可具有与触摸传感器的中间层结构或集成结构。触摸屏可在移动终端100与用户之间提供输出接口,并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,移动终端100可响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如,存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内,针对移动终端100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是,应用程序被存储在存储器170中,被安装在移动终端100中,并由控制器180执行以执行移动终端100的操作(或功能)。
除了与应用程序关联的操作以外,控制器180通常还用于控制移动终端100的总体操作。控制器180可通过处理经由图1A所描绘的各种组件输入或输出的信号、数据、信息等或者激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。作为一个示例,控制器180根据存储在存储器170中的应用程序的执行来控制图1A至图1C所示的一些或所有组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
现在参照图1B和图1C,参照直板型终端主体描述移动终端100。然而,另选地,移动终端100可按照各种不同配置中的任何配置来实现。这些配置的示例包括手表型、夹子型、眼镜型或者折叠型、翻盖型、滑盖型、旋转型和摆动型(其中两个和更多个主体按照能够相对移动的方式彼此组合)或其组合。本文的讨论将常常涉及特定类型的移动终端(例如,直板型、手表型、眼镜型等)。然而,关于特定类型的移动终端的这些教导将通常也适用于其它类型的移动终端。
移动终端100将通常包括形成终端的外观的壳体(例如,框架、外壳、盖等)。在此实施方式中,壳体利用前壳体101和后壳体102形成。各种电子组件被包含在前壳体101与后壳体102之间所形成的空间中。另外,可在前壳体101与后壳体102之间设置至少一个中间壳体。
显示单元151被示出为设置在终端主体的前侧以输出信息。如图所示,显示单元151的窗口151a可被安装到前壳体101以与前壳体101一起形成终端主体的前表面。
在一些实施方式中,电子组件也可被安装到后壳体102。这些电子组件的示例包括可拆卸电池191、标识模块、存储卡等。后盖103被示出为盖住电子组件,该盖可以可拆卸地连接到后壳体102。因此,当将后盖103从后壳体102拆卸时,安装到后壳体102的电子组件暴露于外。
如图所示,当后盖103连接到后壳体102时,后壳体102的侧表面部分地暴露。在一些情况下,在连接时,后壳体102也可被后盖103完全遮蔽。在一些实施方式中,后盖103可包括开口以用于将相机121b或音频输出模块152b暴露于外。
壳体101、102、103可通过合成树脂的注塑成型来形成,或者可由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。
不同于多个壳体形成用于容纳组件的内部空间的示例,移动终端100可被配置为使得一个壳体形成内部空间。在此示例中,具有单一体的移动终端100被形成为使得合成树脂或金属从侧表面延伸至后表面。
如果需要,移动终端100可包括用于防止水进入终端主体中的防水单元(未示出)。例如,防水单元可包括位于窗口151a与前壳体101之间、前壳体101与后壳体102之间、或者后壳体102与后盖103之间的防水构件,以在那些壳体连接时将内部空间气密地密封。
移动终端包括显示单元151、第一音频输出模块151a、第二音频输出模块151b、接近传感器141、照明传感器142、光学输出模块154、第一相机121a、第二相机121b、第一操纵单元123a、第二操纵单元123b、麦克风122、接口单元160等。
将如图1B和图1C所示描述移动终端。显示单元151、第一音频输出模块151a、接近传感器141、照明传感器142、光学输出模块154、第一相机121a和第一操纵单元123a被布置在终端主体的前表面中,第二操纵单元123b、麦克风122和接口单元160被布置在终端主体的侧表面中,第二音频输出模块151b和第二相机121b被布置在终端主体的后表面中。
然而,将理解,另选的布置方式也是可能的并且在本公开的教导内。一些组件可被省略或重新布置。例如,第一操纵单元123a可设置在终端主体的另一表面上,第二音频输出模块152b可设置在终端主体的侧表面上。
显示单元151输出在移动终端100中处理的信息。显示单元151可利用一个或更多个合适的显示装置来实现。这些合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、电子墨水显示器及其组合。
根据移动终端100的配置状态,可以存在两个或更多个显示单元151。例如,多个显示单元151可被布置在一侧,彼此间隔开或者这些装置可被集成,或者这些装置可被布置在不同的表面上。
显示单元151还可包括触摸传感器,该触摸传感器感测在显示单元处接收的触摸输入。当触摸被输入到显示单元151时,触摸传感器可被配置为感测该触摸,并且控制器180例如可生成与该触摸对应的控制命令或其它信号。以触摸方式输入的内容可以是文本或数值或者是可按照各种模式指示或指定的菜单项。
触摸传感器可按照设置在窗口151a与窗口151a的后表面上的显示器之间的具有触摸图案的膜或者在窗口151a的后表面上直接构图的金属丝的形式来配置。另选地,触摸传感器可与显示器一体地形成。例如,触摸传感器可设置在显示器的基板上或者显示器内。
显示单元151还可与触摸传感器一起形成触摸屏。这里,触摸屏可用作用户输入单元123(参见图1A)。因此,触摸屏可代替第一操纵单元123a的至少一些功能。
第一音频输出模块152a可按照扬声器的形式来实现以输出语音音频、报警音、多媒体音频再现等。
显示单元151的窗口151a通常将包括孔径以允许由第一音频输出模块152a生成的音频通过。一个另选方式是允许音频沿着结构体之间的装配间隙(例如,窗口151a与前壳体101之间的间隙)来释放。在这种情况下,从外观上看,独立地形成以输出音频音的孔不可见或者被隐藏,从而进一步简化移动终端100的外观和制造。
光学输出模块154可被配置为输出用于指示事件发生的光。这些事件的示例包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。当用户已查看发生的事件时,控制器可控制光学输出模块154停止光输出。
第一相机121a可处理由图像传感器在拍摄模式或视频呼叫模式下获得的图像帧(例如,静止图像或运动图像)。然后,经处理的图像帧可被显示在显示单元151上或者被存储在存储器170中。
第一操纵单元123a和第二操纵单元123b是用户输入单元123的示例,其可由用户操纵以提供对移动终端100的输入。第一操纵单元123a和第二操纵单元123b还可被共同称作操纵部分,并且可采用允许用户执行诸如触摸、推按、滚动等的操纵的任何触觉方法。第一操纵单元123a和第二操纵单元123b还可采用允许用户执行诸如接近触摸、悬停等的操纵的任何非触觉方法。
图1B将第一操纵单元123a示出为触摸键,但可能的另选方式包括机械键、按键、触摸键及其组合。
在第一操纵单元123a和第二操纵单元123b处接收的输入可按照各种方式来使用。例如,用户可使用第一操纵单元123a来将输入提供给菜单、主屏键、取消、搜索等,用户可使用第二操纵单元123b来提供输入以控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。
作为用户输入单元123的另一示例,后输入单元(未示出)可被设置在终端主体的后表面上。用户可操纵后输入单元以提供对移动终端100的输入。所述输入可按照各种不同的方式来使用。例如,用户可使用后输入单元来提供输入以进行电源开/关、开始、结束、滚动、控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。后输入单元可被配置为允许触摸输入、推按输入或其组合。
后输入单元可被设置为在终端主体的厚度方向上与前侧的显示单元151交叠。作为一个示例,后输入单元可被设置在终端主体的后侧的上端部,使得当用户用一只手抓握终端主体时用户可利用食指容易地操纵后输入单元。另选地,后输入单元可至多被设置在终端主体的后侧的任何位置。
包括后输入单元的实施方式可将第一操纵单元123a的一些或全部功能实现在后输入单元中。因此,在从前侧省略第一操纵单元123a的情况下,显示单元151可具有更大的屏幕。
作为另一另选方式,移动终端100可包括扫描用户的指纹的手指扫描传感器。然后控制器180可使用由手指扫描传感器感测到的指纹信息作为验证程序的一部分。手指扫描传感器也可被安装在显示单元151中或者被实现在用户输入单元123中。
麦克风122被示出为设置在移动终端100的端部,但其它位置也是可能的。如果需要,可实现多个麦克风,这种布置方式允许接收立体声。
接口单元160可用作允许移动终端100与外部装置进行接口的路径。例如,接口单元160可包括用于连接到另一装置(例如,耳机、外部扬声器等)的连接端子、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于向移动终端100供电的电源端子中的一个或更多个。接口单元160可按照用于容纳外部卡(例如,订户标识模块(SIM)、用户标识模块(UIM)、或者用于信息存储的存储卡)的插槽的形式来实现。
第二相机121b被示出为设置在终端主体的后表面处,并且其图像拍摄方向基本上与第一相机单元121a的图像拍摄方向相对。如果需要,可另选地将第二相机121b设置在其它位置或者使其能够移动,以便具有不同于所示的图像拍摄方向的图像拍摄方向。
第二相机121b可包括沿着至少一条线布置的多个透镜。所述多个透镜还可按照矩阵配置来布置。这些相机可被称作“阵列相机”。当第二相机121b被实现为阵列相机时,可利用多个透镜以各种方式拍摄图像,并且图像具有更好的质量。
如图1C所示,闪光灯124被示出为与第二相机121b相邻。当利用相机121b拍摄目标的图像时,闪光灯124可对目标进行照明。
如图1B所示,可在终端主体上设置第二音频输出模块152b。第二音频输出模块152b可结合第一音频输出模块152a实现立体声功能,并且还可用于实现呼叫通信的免提模式。
用于无线通信的至少一个天线可设置在终端主体上。所述天线可安装在终端主体中或者可由壳体形成。例如,构成广播接收模块111的一部分的天线可收缩到终端主体中。另选地,天线可利用附着到后盖103的内表面的膜或者包含导电材料的壳体来形成。
用于向移动终端100供电的电源单元190可包括电池191,该电池191被安装在终端主体中或者可拆卸地连接到终端主体的外部。电池191可经由连接到接口单元160的电源线来接收电力。另外,电池191可利用无线充电器以无线方式再充电。无线充电可通过磁感应或电磁共振来实现。
后盖103被示出为连接到后壳体102以用于遮蔽电池191,以防止电池191分离并保护电池191免受外部冲击或异物的影响。当电池191能够从终端主体拆卸时,后盖103可以可拆卸地连接到后壳体102。
在移动终端100上可另外设置用于保护外观或者辅助或扩展移动终端100的功能的附件。作为附件的一个示例,可设置用于覆盖或容纳移动终端100的至少一个表面的盖或袋。所述盖或袋可与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于辅助或扩展对触摸屏的触摸输入的触摸笔。
在下文中,将参照附图来描述与能够在具有这种配置的移动终端中实现的控制方法相关的实施方式。对本领域技术人员显而易见的是,在不偏离本公开的精神和必要特征的情况下,能够将本公开指定为其它具体形式。
图2是根据本发明的用于双向捕获的广角相机模块125的透镜的排列图。如图2所示,可以以对称地方式布置多个透镜以用于双向捕获。相机模块125可以包括捕获第一方向(例如,捕获前侧)的第一光学系统130a,和捕获与第一方向相反的第二方向(例如,捕获后侧)的第二光学系统130b。可以利用相同的透镜来设置第一光学系统130a和第二光学系统130b。沿第一方向进入的光(或光信号)可以通过第一图像传感器131a被转换成电信号,而沿第二方向进入的光(或光信号)可以通过第二图像传感器131b被转换成电信号。为此,第一图像传感器131a和第二图像传感器131b可以分别被布置在第一光学系统130a的最里侧和第二光学系统130b的最里侧。
可以利用多个透镜来设置第一光学系统130a和第二光学系统130b,每一个透镜具有凸型或凹型的一个表面或两个表面。图2例示了从外向内布置的第一透镜至第五透镜L11、L12、L21、L22、L31、L32、L41、L42、L51和L52,图像传感器131a和图像传感器131b布置在第五透镜L51和L52的每一侧处,并且切断除了可见光以外的红外光的红外截止(IR)滤波器11和12设置在图像传感器131a和131b与第五透镜L51和L52之间。
以这种方式,第一光学系统130a和第二光学系统130b是这样的装置,其各自具有沿光轴连续布置的多个透镜,并且被设置为从要捕获的对象的一个点收集大量的光并且将收集的光折射以会聚在单个点上。在这种情况下,从一个点直接入射的光穿过透镜会聚在单个点上,由此产生一个图像。在这种情况下,图形传感器131a、131b与产生图像的透镜之间的距离可以被称为焦距。
第一透镜至第五透镜L11、L12、L21、L22、L31、L32、L41、L42、L51和L52可以是针对视野(FOV)超过180°的情况装配的部件。如果光学系统支持在超过180°的FOV范围中捕获,则那些透镜的排列顺序和每一个透镜的折光力可以不被具体地限制。为了将第一光学系统130a和第二光学系统130b中的每一个的视野(FOV)设置为180°或更大,第一透镜至第五透镜L11、L12、L21、L22、L31、L32、L41、L42、L51和L52的折光力可以具有正(+)值或负(-)值的组合。
本发明的一个示例性实施方式可以不具体地限制第一透镜至第五透镜L11、L12、L21、L22、L31、L32、L41、L42、L51和L52中的每一个的折光力,并且将省略其详细说明。
图3是在图2所示的相机模块125在移动终端中在安装状态下捕获前侧和后侧的情况下FOV的概念图。参照图3,当每个光学系统的FOV是180°时,可能难以确保FOV与对应于移动终端100的厚度的范围一样宽。也就是,可能产生与对应于移动终端的厚度的部分一样大的阴影。
不考虑移动终端100的厚度,如果每个光学系统的FOV是θ1,可能额外地捕获区域R1,并且因此阴影可以减小区域R1。如果FOV是大于θ1的θ2,可以额外地捕获区域R2,并且因此阴影可以减小区域R2。区域R3可以是在θ1和θ2两者的FOV下都不捕获的区域。也就是,当第一光学系统130a和第二光学系统130b的FOV增大时,可以减小阴影区域。在这种情况下,图3示意性地例示了第一光学系统130a和第二光学系统130b具有相同的光轴。
阴影区域是干扰用户环境的360°捕获(或全方位捕获)的元素。为了克服这个问题,已经开发了具有大于180°的FOV的光学系统。如图3所示,阴影区域响应于FOV的增大而减小。但是,即使是具有超过180°的FOV的这种光学系统,也具有捕获与应用终端100相对应的部分的限制。
图4A是根据本发明的一个示例性实施方式的具有伸出至两个表面的相机模块125的移动终端100的立体图。图4B是例示在移动终端100包括伸出至其两个表面的两个光学系统130a和130b和两个图像传感器131a和131b的情况下的光的路径的概念图。图4C是例示在移动终端100包括伸出至其两个表面的两个光学系统130a和130b和一个图像传感器131c的情况下的光的路径的概念图。
另外,图4D是例示图4B的第一光学系统130a和第二光学系统130b布置在移动终端的中心处的状态的图,并且图4E是例示第一光学系统130a和第二光学系统130b布置在移动终端100的一个端部处的状态的图。
在这种情况下,图4A是移动终端100的示意性立体图,并且图4B和图4C是移动终端100的示意性侧视图。第一光学系统130a和第二光学系统130b可以是能够捕获超过180°的广视野的光学系统。
如图4A至图4C所示,可以注意到,第一光学系统130a和第二光学系统130b向外伸出至移动终端100的两侧表面。图4A至图4C例示了第一光学系统130a和第二光学系统130b布置在对称的位置处以具有相同的光轴X1。在这种情况下,图4B例示了可旋转的反射镜132设置在第一光学系统130a与第二光学系统130b之间,并且第一图像传感器131a和第二图像传感器131b布置在与光轴X1正交的位置处。也就是,第一图像传感器131a和第二图像传感器131b可以分别布置在相机模块125的上侧和下侧处或第一光学系统130a和第二光学系统130b的上侧和下侧处。
除了采用单个图像传感器131以外,图4C与图4B相同。在这种情况下,反射镜132每秒可旋转60次,这允许立即同时捕获前侧和后侧。
再来参照图4B,在使用第一光学系统130a捕获前侧和使用第二光学系统130b捕获后侧的情况下,当按压捕获按钮时,从前侧入射到第一光学系统130a中的光L1可以被反射镜132反射并且被下面的第二图像传感器131b转变成电信号。然后,反射镜132可以立即被旋转为反射入射到第二光学系统130b中的光L2。因此,光L2可以由第一图像传感器131a转换成电信号。在这种情况下,由于反射镜132的旋转速度快,因此几乎可以在相同的时间区段捕获前侧和后侧。在这种情况下,用于反射朝向第一光学系统130a进入的光L1的反射镜132用实线表示,并且用于反射朝向第二光学系统130b进入的光L2的反射镜132用虚线表示。
同时,参照图4C,在使用第一光学系统130a和第二光学系统130b同时捕获前侧和后侧的情况下,当按压捕获按钮时,从前侧入射到第一光学系统130a中的光可以由反射镜132反射,并且首先由公共图像传感器131c转变成电信号。然后,反射镜132可以被旋转为反射入射到第二光学系统130b中的光。然后,反射的光可以其次被公共图像传感器131c转变成电信号。因此,能够捕获前侧和后侧。在图4C中例示的箭头L1和L2指示光进入到第一光学系统130a和第二光学系统130b中的路径。
也就是说,在图4C中朝向第一光学系统130a和第二光学系统130b进入的这种光L1和L2可以由相同的公共图像传感器131c转变成电信号。更具体地,入射到第一光学系统130a中的光L1可以被反射镜132反射并且由公共图像传感器131c转变成电信号。然后,反射镜132可以旋转。入射到第二光学系统130b中的光L2可以然后被旋转的反射镜132反射并且由公共图像传感器131c转变成电信号。这里,与图4B类似,用于反射进入到第一光学系统130a中的光L1的反射镜132用实线表示,并且用于反射进入到第二光学系统130b中的光L2的反射镜用虚线表示。
如图4C所示,利用单个图像传感器131c的设计,具有第一光学系统130a和第二光学系统130b的摄像机模块125可以具有更小的尺寸和/或厚度。
如图4A至图4C所示,如果第一光学系统130a和第二光学系统130b伸出至移动终端100外,则会导致使用不便。因此,第一光学系统130a和第二光学系统130b可以优选地位于移动终端100中。在这种情况下,减少图像传感器的数量是有益的,如图4C所示。
参照图4D,在将第一光学系统130a和第二光学系统130b布置在移动终端100的中心处而不是端部处的情况下,阴影区域可以响应于FOV的增大而减小,如图3所示。但是,即使FOV增大,最小的阴影区域也可能由于移动终端100的厚度而受到限制。在这种情况下,当每个光学系统的FOV是θ时,区域R4和R5不会被第一光学系统130a和第二光学系统130b捕获。这可能由移动终端100的阻挡部分造成。也就是,区域R4和R5会是未捕获的阴影区域。
另一方面,参照图4E,当第一光学系统130a和第二光学系统130b形成在移动终端100的两个端部处时,可以通过第一光学系统130a和第二光学系统130b捕获更宽的区域。更具体地,由第一光学系统130a和第二光学系统130b捕获的右区域与图4D中所示的相同,但是由第一光学系统130a和第二光学系统130b捕获的左区域可以比在图4D中所示的更宽。
也就是,阴影区域R5与图4D中的几乎相同,但是可以减小移动终端100的端部的外部区域(即,在移动终端100的左侧形成的阴影区域R4)。换句话说,可以减小由第一光学系统130a和第二光学系统130b形成的阴影的几乎一半。
为了通过使用广视野相机(每个广视野相机具有超过180°的FOV)获得等于360°捕获的效果,应当彼此合并(融合、结合)前侧的捕获图像和后侧的捕获图像。
另外,图5A例示了前相机和后相机彼此对称地布置的移动终端,图5B例示了根据本发明的一个示例性实施方式光学系统附接至移动终端的状态,并且图5C例示了根据本发明的一个示例性实施方式的第一光学系统和第二光学系统暴露于移动终端的两侧。
如图5B所示,当前相机121a和后相机121b分别设置在移动终端的前表面和后表面中时,当期望全方位捕获环境时,可以设置光学构件130d。光学构件130d可以包括作为附件的第一光学系统130a’和第二光学系统130b’以分别覆盖前相机121a和后相机121b,以及连接第一光学系统130a’和第二光学系统130b’的连接构件130c。例如,移动终端100可以在普通相机模式下按通常地那样使用。当期望执行全方位捕获时,可以附接光学构件130d以覆盖移动终端100的前相机121a和后相机121b,由此有助于全方位捕获。然后,当完成全方位捕获时,可以拆除光学构件130d。在这种情况下,光学构件130d的第一光学系统130a’和第二光学系统130b’中的每一个可以实现广视野相机,该广视野相机通过将前相机121a和后相机121b的透镜相结合可以捕获超过180°的区域。
另外,参照图5C,如参照图4E所述,当光学系统130设置在移动终端100的端部处而不是中心时,可以使用确保较宽FOV的特征。也就是,如图5C所示,当通过在移动终端100的侧表面处提供第一光学系统130a和第二光学系统130b而捕获移动终端100的前侧和后侧时,可以使阴影区域最小化。在这种情况下,当在移动终端100的前表面和后表面处设置第一光学系统130a和第二光学系统130b时,移动终端100可能占据被捕获区域的大部分。另一方面,当在移动终端100的两个侧表面处设置第一光学系统130a和第二光学系统130b时,移动终端100可能占据被捕获区域的更小的部分。这里,图5C是移动终端100的前视图。
图6A例示了具有光轴不同的一对光学系统的移动终端,并且图6B和图6C是与图6A相关的移动终端的前视图。这里,图6B例示了以相同高度形成在移动终端的前表面和后表面处的一对光学系统,而图6C例示了以不同高度形成在移动终端100的前表面和后表面处的一对光学系统。
如图4A至图4E所示,当第一光学系统130a和第二光学系统130b以对称的结构彼此相反地布置时,可能不需要单独的光轴对齐。但是,如图6A至图6C所示,当第一光学系统130a和第二光学系统130b以非对称的结构布置时,有时会需要光轴对齐以便获得等于360°捕获的效果。
在图4A至图4E中例示的第一光学系统130a和第二光学系统130b分别具有厚度,并且因此当第一光学系统130a和第二光学系统130b安装至厚度薄的移动终端100时,可能增加移动终端100的厚度。为了解决该问题,本发明的一个示例性实施方式例示了第一光学系统130a和第二光学系统130b安装在彼此不对称的位置(而不是对称位置)处的情况。在下文中,将一般地给出第一光学系统130a和第二光学系统130b的非对称结构的说明。与此相关,首先将参照图7A至图7C给出说明。针对第一光学系统130a和第二光学系统130b具有相同光轴的对称结构,不需要下文将进行解释的光轴对齐。
图7A至图7C是例示根据本发明的一个示例性实施方式在具有以非对称结构布置的一对光学系统的移动终端中的图像合并的图。图7A是例示在针对前侧和后侧中的每一个执行单次拍摄图像捕获的情况下的光轴对齐的概念图,图7B是例示在执行双次拍摄(两次拍摄)的情况下的光轴对齐的概念图,并且图7C是例示在执行超过两次的多次拍摄图像捕获的情况下的光轴对齐的概念图。
首先,参照图7A,当第一光学系统130a和第二光学系统130b具有不同的光轴时,前图像133a的中心轴线X1和后图像133b的中心轴线X2在相同(相等)的时间彼此不同。在这种情况下,为了进行解释,前图像133a的中心轴线X1被称为第一光轴,并且后图像133b的中心轴线X2被称为第二光轴。另外,前图像133a被称为第一图像,并且第二图像133b被称为第二图像。
为了获得与在移动终端100周围的所有方向中捕获背景相同的效果,第一光轴X1的位置和第二光轴X2的位置应当彼此对齐。为此,如图7A所示,第一图像133a应当移动预定距离I13,并且第二图像133b应当移动与预定距离I13相等的距离I23。在这种情况下,第一光轴X1和第二光轴X2被称为中心轴线,并且第一光轴X1和第二光轴X2彼此对齐所在的光轴被称为第三光轴X3。这里,由于图像运动,可以将第一图像133a和第二图像133b的两个端部切除靠近第三光轴X3的预定区域I13和I23。也就是,为了合并第一图像133a和第二图像133b,可以切除第一图像133a和第二图像133b的两端的远离第三光轴X3的区域的部分区域I13和I23。
例如,在图7A中,为了通过光轴对齐而合并第一图像133a和第二图像133b,第一图像133a的左端应当向右移动直到第四轴线X4。在这种情况下,第一图像133a的左端的区域I13可以具有与第一光轴X1和第三光轴X3之间的区域相同的尺寸,并且通过第一光轴X1的对齐可以切除左端的部分区域I13。因此,可以留下第一图像133a的整个区域I11的部分区域I12。
另外,为了光轴对齐,第二图像133b应当向左移动直到第五轴线X5。第二图像133b的右端的部分区域I23可以具有与在第二光轴X2和第三光轴X3之间的区域相同的尺寸,并且通过第二光轴X2的对齐可以切除右端的部分区域I23。因此,可以留下第二图像133b的整个区域I21的部分区域I22。这可以允许获得与以360°捕获图像相同的效果。但是,由于切除了第一图像133a的端部区域I13和第二图像133b的端部区域I23,在一些情况下可能不能获得与以360°捕获图像完全相同的效果。为了解决该问题,可以执行将参照图7B描述的双次拍摄图像捕获。
图7A例示了使用第一光学系统130a和第二光学系统130b中的每一个的单次拍摄图像捕获,并且图7B例示了使用第一光学系统130a和第二光学系统130b中的每一个的双次拍摄图像捕获。在这种情况下,双次拍摄图像捕获可以不总指的是按压相机快门两次,而可以指的是在全景模式下的双次拍摄。例如,当在全景模式下捕获时,用户在他的位置以预定速度转动,且按压相机快门以拍摄他或她的环境。在这种情况下,相机模块执行与以预定时间间隔按压快门的捕获类似的捕获。当用户转动且按压快门时,可以自动地拍摄多个图像,并且当用户观看时,那些图像合并。在这种情况下,如果用户以比预定速度更快的速度拍摄环境时,可能不能顺畅地执行图像合并。
也就是,图7A例示了针对前侧和后侧中的每一侧的单次拍摄图像捕获。该示例可能不能完全反应前侧和后侧。为了解决这个问题,可以使用全景模式。
图7B是例示合并在全景模式下捕获的图像的图。
在全景模式下,第一光学系统130a和第二光学系统130b在沿着一个方向移动的同时执行捕获。沿捕获方向新添加至第一图像133a和第二图像133b的图像134a的区域和图像134b的区域可以不同。图7B例示了在不执行光轴对齐的情况下添加的图像134a和134b连接至第一图像133a和第二图像133b,然后在全景模式下被用户观看。
如图7B所示,在沿着由箭头指示的方向捕获期间,添加至第一图像133a’的第一添加图像134a直接连接至第一图像133a’的左端,并且添加至第二图像133b’的第二添加图像134b可以直接连接至第二图像133b’的右端。在这种情况下,第一添加图像134a的面积可以小于第二添加区域134b的面积。这可能是因为第一光轴X1比第二光轴X2更靠近捕获方向地被捕获。因此,当捕获方向与图7B所示的相反时,添加至第二图像133b’的第二添加图像134b的面积可以小于添加至第一图像133a’的第一添加图像134a的面积。这里,用户观看的前图像134a、133a’和后图像134b、133b’例示在图7B的下部处。
另外,为了在全景模式下捕获前侧和后侧两者,由于第一光学系统130a和第二光学系统130b具有不同的光轴X1和X2,如图7A所示,因此第一光学系统130a和第二光学系统130b的光轴可以彼此对齐。为此,如图7B的上部所示,第一光轴X1和第二光轴X2可以移动直到用于图像合并的第三光轴X3。这将参照图7C进行解释。
另外,当使用广视野相机执行图像捕获时,在图像两端的图像失真可能随着FOV(或视角)增大而增大。也就是,捕获的图像在其中心部分处看起来大且失真小,但是朝向被捕获图像的两端由于增大的图像压缩比而看起来小且更失真。例如,在第一图像133a’和第一添加图像134a之间的边界可能产生画面失真。为了解决该问题,在本发明的一个示例性实施方式中,提出了通过使用全景功能以及内插(融合、合并)所捕获图像来捕获多个图像的方法。
图7C是例示根据一个示例性实施方式在全景模式下捕获期间合并图像的方法的图。在下文中,将参照图7C,一般地给出以沿着向左的方向移动(或转动)的方式使用第一光学系统130a和第二光学系统130b来捕获前侧和后侧的描述。在这种情况下,由第一光学系统130a捕获的图像依次指的是第一前图像F1、第二前图像F2和第三前图像F3,并且由第二光学系统130b捕获的图像依次指的是第一后图像R1、第二后图像R2和第三后图像R3。这里,第一前图像F1、第二前图像F2和第三前图像F3可以具有相同大小的面积,并且第一后图像R1、第二后图像R2和第三后图像R3可以具有相同大小的面积。
在下文中,将首先描述前图像F的合并方法。在使用第一光学系统130a沿着向左方向捕获期间,可以获得第一前图像F1、第二前图像F2和第三前图像F3。在这种情况下,第一前图像F1可以是通过第一拍摄捕获的图像,第二前图像F2可以是通过第二拍摄捕获的图像,并且第三前图像F3可以是通过第三拍摄捕获的图像。这里,第一前图像F1、第二前图像F2和第三前图像F3可以被理解为用于生成前图像F的子图像。
另外,上述的第一拍摄至第三拍摄不仅可以指的是直接按压快门,而且还可以指的是在全景模式下以预定时间间隔自动地捕获图像。下文将给出后者的说明。
图7C例示了三个连续捕获的图像,并且第一前图像F1、第二前图像F2和第三前图像F3可以以部分区域交叠的方式被捕获。在这种情况下,在第一前图像F1和第二前图像F2之间的交叠区域可以被称为第一前交叠图像F12,并且在第二前图像F2和第三前图像F3之间交叠的区域可以被称为第二前交叠图像F23。可以优选地通过以切去第一前图像F1、第二前图像F2和第三前图像F3中的每一个的两个端部的部分区域的方式将第一前图像F1、第二前图像F2和第三前图像F3合并来获得前图像F。如上所述,由于利用一次拍摄捕获的图像的两端显示出极端的图像失真,因此应当通过移除这种失真的端部来将图像连接至相邻的图像以获得具有较少失真的合并图像。
在这种情况下,可以通过适当地合并第一前图像F1的左端区域和第二前图像F2的右端区域来获得第一前交叠图像F12。与此类似,可以通过适当地合并第二前图像F2的左端区域和第三前图像F3的右端区域来获得第二前交叠图像F23。然后,由此合并的第一前交叠图像F12和第二前交叠图像F23可以通过内插到第一前图像F1、第二前图像F2和第三前图像F3的交叠区域中而连接,由此获得由图像构造的具有更好的图像质量的前图像F。
这可以与在图7A中例示的光轴对齐同样地理解。也就是,在图7A中的被切去的区域I13可以被理解为与第一前交叠图像F12相对应。另外,在图7A中的被切去的区域I23可以被理解为与下文将解释的第一后交叠图像R12相对应。
后图像R可以以与前图像F类似的合并方法获得。也就是,在沿着向左方向使用第二光学系统130b捕获期间,可以获得第一后图像R1、第二后图像R2和第三后图像R3。在这种情况下,第一后图像R1可以是通过第一拍摄捕获的图像,第二后图像R2可以是通过第二拍摄捕获的图像,并且第三后图像R3可以是通过第三拍摄捕获的图像。在这种情况下,第一后图像R1、第二后图像R2和第三后图像R3可以被理解为用于生成后图像R的子图像。
另外,上述的第一拍摄至第三拍摄不仅可以指的是直接按压快门,而且还可以指的是在全景模式下以预定时间间隔自动地捕获图像。下文将给出后者的说明。
第一后图像R1、第二后图像R2和第三后图像R3可以以部分区域交叠的方式被捕获。在这种情况下,在第一后图像R1和第二后图像R2之间的交叠区域可以被称为第一后交叠图像R12,并且在第二后图像R2和第三后图像R3之间交叠的区域可以被称为第二后交叠图像R23。可以优选地通过以切去第一后图像R1、第二后图像R2和第三后图像R3中的每一个的两个端部的部分区域的方式将第一后图像R1、第二后图像R2和第三后图像R3合并来获得后图像R。
在这种情况下,可以通过适当地合并第一后图像R1的左端区域和第二后图像R2的右端区域而获得第一后交叠图像R12。与此类似,可以通过适当地合并第二后图像R2的左端区域和第三后图像R3的右端区域而获得第二后交叠图像R23。然后,由此合并的第一后交叠图像R12和第二后交叠图像R23可以通过内插到第一后图像R1、第二后图像R2和第三后图像R3的交叠区域中而连接,由此获得由图像构造的具有更好的图像质量的后图像R。
在这种情况下,在图7C中,可以通过从第一前图像F1的右端区域开始至第三前图像F3的与第三后图像R3的左端相对应的区域合并第一前图像F1、第二前图像F2和第三前图像F3而获得前图像F,并且可以通过从第一后图像R1的与第一前图像F1的右端相对应的区域开始至第三后图像R3的左端区域合并第一后图像R1、第二后图像R2和第三后图像R3而获得后图像R。
如上所述,在使用一对光学系统期望获得针对前侧和后侧的360°捕获(或全方位捕获)的效果的情况下,存在应当合并前图像和后图像的基本限制。因此,在本发明的一个示例性实施方式中提出了立刻执行全方位捕获的方法以解决该问题。
图8A至图11B是例示根据本发明的一个示例性实施方式的具有支持全方位捕获的光学系统的移动终端的图。图8A是根据第一示例性实施方式的处于第一状态下的移动终端的前视图,并且图8B是根据第一示例性实施方式的处于第二状态下的移动终端的前视图。图9A是根据本发明的第二示例性实施方式的处于第一状态下的移动终端的前视图,并且图9B是根据第二示例性实施方式的处于第二状态下的移动终端的前视图。图10A是根据第三示例性实施方式的处于第一状态下的移动终端的前视图,并且图10B是根据第三示例性实施方式的处于第二状态下的移动终端的前视图。图11A是根据第四示例性实施方式的处于第一状态下的移动终端的前视图,并且图11B是根据第四示例性实施方式的处于第二状态下的移动终端的前视图。
根据一个示例性实施方式的移动终端100可以包括:光学系统130,其设置在终端主体中;杆136,其设置在光学系统130的上侧处并且拉出到终端主体外;和反射镜135,其设置在杆136的端部处并且位于外侧且当杆136被拉出时,与终端主体分开。
反射镜135可以以全方位的方式将到达反射镜的光反射至光学系统130。也就是,反射镜135可以通过向光学系统130反射环境的光而在所有方向中(即,360°)捕获终端主体的环境。在本发明的一个示例性实施方式中,反射镜135位于移动终端100中的状态被称为第一状态,并且反射镜135被拉到移动终端外的状态被称为第二状态。
另外,本发明的一个示例性实施方式例示了手拉型和按钮型。图8A、图8B、图10A和图10B示意性地例示了手拉型,该手拉型将被理解为与相关技术数字管理广播(DMB)天线相同的方法。图9A、图9B、图11A和图11B示意性地例示了按钮型。按钮型指的是响应于在被按压时的排斥力被弹出的反射镜135。例如,可以在杆136的下端处设置诸如按钮或闭锁开关的部件。按钮和闭锁在本发明所属的技术领域中是公知的,并且可能转移本发明的主旨。因此,将省略其详细说明。
反射镜135是曲面镜。作为一个示例,反射镜135是朝向光学系统130凸出的且不是球面的半球反射镜。另外,反射镜135不总是必须向光学系统130凸出,并且可以是凹面镜。例如,反射镜135可以是从光学系统130向外部延伸的喇叭形镜子。但是,为了确保较宽的FOV,凸面镜可以是优选的。图13和图14是例示根据本发明的一个示例性实施方式由反射镜反射的光线流的概念图。图13例示了采用凸型反射镜135a的实施方式,并且图14例示了采用两个非球面的反射镜135b和135c的实施方式。
在这种情况下,光学系统130可以在其中设置有例如布置在图2中所示的光学系统的左侧和右侧的光学系统130a和130b。也就是,假设布置在左侧并且包括图2中的第一透镜L11、第二透镜L21、第三透镜L31、第四透镜L41和第五透镜L51的光学系统被称为第一光学系统130a,并且布置在右侧且包括第一透镜L12、第二透镜L22、第三透镜L32、第四透镜L42和第五透镜L52的光学系统被称为第二光学系统130b,在图13和图14中例示的光学系统130可以是第一光学系统130a和第二光学系统130b中的一个。
杆136可以是天线杆,例如,嵌入DMB的天线。杆136可以是一体形成的并且具有相同的直径,但是也可以是直径逐渐减小或增大的多阶形式。以这种方式,当杆136具有多阶直径时,具有预定尺寸和体积的杆136可以容易地容纳在有限的空间中。
反射镜135可以被布置为沿着光学系统130的光轴被拉动,或按照偏离光学系统130的光轴的方式而被拉动。在图8B、9B和11B中例示了沿着光学系统130的光轴拉动反射镜135的实施方式,并且在图10B中例示了按照偏离光学系统130的光轴的方式拉动反射镜135的实施方式。
如图8B、9B和11B所示,根据一个示例性实施方式的反射镜135沿着终端主体的纵向方向或以沿着终端主体的纵向方向向上倾斜的方式被拉动。光学系统130可以被配置为使得反射镜135设置在光学系统130的要沿着光学系统130的光轴被拉动的光轴上。在这种情况下,光学系统130的光轴可以等于形成杆136的方向。
同时,如图10B所示,根据一个示例性实施方式,当反射镜135按照偏离光学系统130的光轴的方式被拉动时,可以在反射镜135和光学系统130之间进一步设置子反射镜137。子反射镜137可以将从反射镜135反射的光朝向光学系统130的光轴反射。子反射镜137可以是平面形、球形或非球形。
也就是,如参照图5C所述,由于在移动终端的端部处而不是移动终端100的中心部分处布置光学系统130a和130b对于确保FOV是有益的,因此本文公开的一个示例性实施方式例示了反射镜135沿着移动终端100的纵向方向正向上被拉动的情况和反射镜135被拉成从正向上的方向倾斜的情况。也就是,图8A至图9B例示了反射镜135正向上被拉动的情况,并且图10A至图11B例示了反射镜135被拉成从正向上的方向倾斜预定角度α的情况。
在反射镜135被拉成从正向上的方向倾斜的情况可以具有使捕获角度倾斜的优点。通过变化拉动反射镜135的角度,这可以允许用户以期望的角度(视点)捕获图像。以这种方式,当反射镜135从终端主体的纵向方向被倾斜地拉动时,可以阻止移动终端100的被反射镜135反射的区域。因此,移动终端100可以在捕获的图像上被显示为小的区域。
如图13所示,根据本文公开的一个示例性实施方式,反射镜135可以形成为朝向光学系统130凸出的半球形。另外,如图14所示,可以设置两个反射镜135b和135c。也就是,反射镜135b和135c可以包括靠近光学系统130设置的向外凸出的第一反射镜135b以及以分开的方式位于反射镜135b上方且将从第一反射镜135b反射的图像反射至光学系统130的第二反射镜135c。第一反射镜135b可以具有向外凸出的半球形,并且第二反射镜135c可以具有半球形或非球形或平面形。第一反射镜135b可以设置有穿过其中心部分形成的通孔130d,并且光学系统130可以插入到该通孔130d中。
利用该配置,可以捕获位于第一反射镜135b上方的背景。也就是,当期望捕获位于反射镜135a下方(例如,在图8B的线S1的下部)的背景时,可以一般地使用在图13中例示的光学系统130,并且当期望捕获在第一反射镜135b上方(例如,在图10B中的线S2的下部)的背景时,可以一般地使用在图14中例示的光学系统130。
如图8A至图11B所示,在通过使用设置在外部且与移动终端100分开的反射镜135进行捕获的期间,光学系统130可以捕获由反射镜135反射的图像。但是,当光学系统的FOV过宽时,甚至会反射反射镜135的环境和由反射镜135反射的图像。例如,当使用在图13中例示的反射镜135a时,甚至反射镜135a外的区域也会属于光学系统130的宽的FOV范围。
为了防止该问题,在本文公开的一个示例性实施方式中,光学系统130的FOV可以形成为与通过从光学系统130延伸以接触反射镜135的外表面的线形成的角度相同。也就是,光学系统130的FOV应当与通过从光学系统130延伸并且接触反射镜135的外表面的线所形成的角度相同。
图12A和图12B例示了根据本发明的一个示例性实施方式的具有不同反射镜的移动终端。图12A例示了在采用具有宽的FOV的光学系统130’的情况下反射镜235a的位置和尺寸,并且图12B例示了在采用具有窄的FOV的光学系统130”的情况下反射镜235b的位置和尺寸。
首先,参照图12A,针对具有宽的FOVα1的光学系统130’,FOVα1应当与通过光学系统130’延伸以接触反射镜235a的外表面的线形成的角度相同,并且反射镜235a的尺寸应当随着反射镜235a远离光学系统130’而增加。因此,为了均匀地保持FOVα1,应当调节反射镜235a的尺寸和从光学系统130’至反射镜235a的距离。如果在反射镜235a’与光学系统130’之间的距离被过度地减小以便减小反射镜235a’的尺寸,则移动终端100可能被过分地包括在反射镜235a’的反射区域中,这会妨碍物镜捕获环境。因此,反射镜235a的尺寸以及反射镜235a与光学系统130’之间的分开位置可以与光学系统130’的FOVα1相关地适当变化。
参照图12B,针对具有窄的FOVα2的光学系统130”,FOVα2应当与通过从光学系统130”延伸以接触反射镜235b的外表面的线形成的角度相同,并且反射镜235b的尺寸应当随着反射镜235b远离光学系统130”而增加。因此,为了均匀地保持FOVα2,可以调节反射镜235b的尺寸和从光学系统130”至反射镜235b的距离。但是,如果在反射镜235b’与光学系统130”之间的距离被过度地减小以减小反射镜235b’的尺寸,则与图12A类似,移动终端100可能过分地占用反射镜235b’的反射区域。因此,应当与光学系统130’的FOVα2相关地适当调节反射镜235b的尺寸和位置。
在这种情况下,在本文公开的一个示例性实施方式中,可以在反射镜135位于终端主体中的第一状态下激活普通相机模式,并且普通相机模式可以在将反射镜135拉出终端主体的第二状态下自动地转换到全方位捕获模式中。
另外,安装在移动终端100中的相机应用可以在第二状态下在全方位捕获模式下执行的同时,在第一状态下在普通相机模式下执行。
图15A和图15B是根据本文公开的一个示例性实施方式的全方位捕获模式的示意图,该示意图不仅包括通过在图8A至图11B中例示的光学系统捕获的图像,而且还包括通过在图4A至图7C中例示的光学系统捕获的图像。
如图15A和图15B所示,当将反射镜135拉出移动终端100时,可以在全方位捕获模式下自动激活相机应用,并且移动终端100的显示单元可以被划分成第一显示器155a、155b和第二显示器156a、156b。图15A示意性地例示了在第一显示器155a上输出通过捕获用户周围的前侧获得的图像,并且在第二显示器156a上以放大的方式输出第一显示器155a的预定区域。在这种情况下,与在全景模式下类似,第一显示单元155a可以在水平方向形成的长,并且可以通过引导157a从其它区域中区分用户期望放大的区域。可以以矩形框的形状输出引导157a。
另外,参照图15B,输出前侧的捕获图像的第一显示器155b可以以球形视图或平面视图的形式被输出,并且因此用户能够利用转动第一显示器155b来查看特定的区域。即使在这种情况下,可以通过引导157b从第一显示器155b的其它区域中区分出用户期望放大的区域。
在这种情况下,在第二显示器156b上输出的画面信息可以是已经通过上述方法(参见图7A至图7C)补偿了失真画面的画面信息。
当反射镜135插回到移动终端100以便切换到第一状态下时,可以再次激活普通相机模式,并且当在第一状态下执行相机应用时,可以在普通相机模式下执行相机应用。
图16A和图16B是例示根据本文公开的一个示例性实施方式在全方位捕获模式下捕获图像的同时在普通相机模块中捕获快照的方法的示意图,该实施方式不仅包括通过在图8A至图11B中例示的光学系统捕获的图像,而且还包括通过在图4A至图7C中例示的光学系统捕获的图像。
如图16A和图16B所示,当在全方位捕获模式下捕获视频的同时希望拍摄快照时,可以在第一显示器155a、155b上输出通过前相机(或第一光学系统130a)捕获的前图像133a和通过后相机(或第二光学系统130b)捕获的后图像133b。在这种情况下,可以输出前图像133a和后图像133b中的一个,或可以以驱动一个区域的方式输出前图像133a和后图像133b两者。可以以放大的方式在第二显示器156a、156b上输出由第一显示单元155a的输出区域的引导157a、157b指示的特定区域的预览图像。
在这种情况下,当在第一显示器155a、156b上同时输出前图像133a和后图像133b时,如图15A和图15B所示,可以与在全景模式下的画面类似,画面可以在一个方向上被输出地长,或可以输出球形画面以提供立体感。图16A例示了后者,而图16B例示了前者。
即使在这种情况下,可以通过移动在第一显示器155a、155b上显示的引导157a、157b来选择用户期望捕获的画面的部分区域。图16A例示了在第一显示单元155a的上侧处输出的前图像133a和在第一显示单元155a的下侧处输出的后图像133b,并且图16B例示了在第一显示器155b的右侧处输出的前图像133a和在第一显示器155b的左侧处输出的后图像133b。但是,本发明可以不限于此。
可能存在以装配的方式使用根据一个示例性实施方式的光学系统130的情况。例如,通过在用户骑自行车时附接至用户的手腕等可以像可穿戴设备那样使用光学系统130。在这种情况下,不可避免地会产生阴影。
具体地,当期望使用根据本文公开的一个示例性实施方式的一对光学系统130a和130b(每个光学系统具有超过180°的FOV)执行全方位捕获时,光学系统130a和130b中的一个的FOV可能由于与人体(用户的身体)相接触而被部分地掩盖,由此产生阴影。在这种情况下,不需要激活第一光学系统130a和第二光学系统130b两者,因此可以自动关闭第一光学系统130a和第二光学系统130b中的位于阴影产生区域处的光学系统。例如,当用户通过在运动期间将在图4中例示的移动终端100佩戴在他的手腕上而捕获环境时,可能通过用户的身体(手腕)在第二光学系统130b处产生阴影区域。因此,利用第二光学系统130b进行捕获不方便。在这种情况下,可以自动关闭第二光学系统130b。这可以防止不必要的电力供应。
为此,在本文公开的一个示例性实施方式中,如果通过在移动终端100的后表面中设置的激光传感器(未示出)识别出第二光学系统130b与用户的身体相邻,则可以关闭第二光学系统130b并且只操作第一光学系统130a。另外,如果通过在移动终端100的前表面中设置的接近光传感器(参见图1B的141、142)识别出第一光学系统130a与用户的身体相邻,则可以关闭第一光学系统130a并且只操作第二光学系统130b。以这种方式,在第一光学系统130a和第二光学系统130b处形成的阴影可以被在移动终端100中设置的接近光传感器和激光传感器感测。
在本文公开的一个示例性实施方式中,移动终端100的安装方向可以由在移动终端100中设置的陀螺仪传感器(未示出)识别,并且因此可以关闭第一光学传感器130a和第二光学传感器130b中的一个。例如,如果陀螺仪传感器感测到移动终端100沿第一光学系统130a所在的方向倾斜,则不需要通过第一光学系统130a的捕获。因此,可以关闭第一光学系统130a并且可以只打开第二光学系统130b以捕获图像。
另外,在本文公开的一个示例性实施方式中,可以通过安装在移动终端100中的加速度传感器来感测移动终端100的移动方向,并且因此可以关闭第一光学系统130a和第二光学系统130b中的一个。例如,当车辆向前运动只希望捕获前侧时,可以由加速度传感器识别移动终端100的向前运动,由此可以防止使用第二光学系统130b捕获背景。当然,即使在这种情况下,如果期望使用第一光学系统130a和第二光学系统130b两者来进行捕获,则也可以释放这种操作模式。
在本文公开的一个示例性实施方式中,可以通过安装在移动终端100中的颜色传感器(未示出)来确定亮度,以开启/关闭闪光灯124(参见,图1C)。例如,当通过颜色传感器感测到夜间时,可以开启闪光灯124,而当通过颜色传感器感测到白天时,关闭闪光灯124。另外,闪光灯124的亮度是可以调节的。
普通相机模块可以设置有用于测量直到要捕获的对象的距离的激光二极管或光电二极管,并且可以通过激光传感器来测量直到对象的距离。但是,由于黑暗的环境,距离测量在夜间可能很难。为了解决该问题,应当根据黑暗度来调节闪光灯的亮度。在本文公开的一个示例性实施方式中,可以由激光二极管或光电二极管来感测闪光灯的亮度,并且可以调节闪光灯的亮度以能够顺利进行距离测量。
在本文公开的一个示例性实施方式中,通过与诸如智能手表的可穿戴设备相配合,可以以远程控制的方式来控制全方位捕获模式。智能手表可以执行全方位捕获模式的开启/关闭、记录、记录文件的再现、WiFi连接等。
以上描述中提到的本发明可利用存储有指令的机器可读介质来实现,所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文所呈现的其它类型的存储介质及其组合。如果期望,机器可读介质可按照载波的形式实现(例如,经由互联网的传输)。处理器可包括移动终端的控制器180。
以上实施方式仅是示例性的,并且不被认为限制本公开。本说明书旨在是说明性的,而不是限制权利要求的范围。对于本领域技术人员而言,许多替代、修改和变型将是显而易见的。在此描述的示例性实施方式的特征、结构、方法和其它特性可以按照各种方式组合以获得另外的和/或另选的示例性实施方式。
由于在不脱离本发明的特性的情况下,本发明的特征可以按照多种形式来具体实现,所以还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节限制,而是应该在所附权利要求书中所限定的范围内广义地理解,因此,落入权利要求的范围及其等同范围内的所有改变和修改因此旨在被所附的权利要求书涵盖。

Claims (20)

1.一种移动终端,该移动终端包括:
终端主体;
光学系统,所述光学系统位于所述终端主体中并且被配置为接收光;
杆,所述杆位于所述光学系统的侧部;和
曲面镜,所述曲面镜位于所述杆的端部,其中,所述杆和所述曲面镜能够在第一状态与第二状态之间定位,
其中,在所述第一状态下,所述杆和所述曲面镜相对更靠近所述光学系统,并且在所述第二状态下,所述杆和所述曲面镜已经从所述光学系统向外延伸,并且其中,当在所述第二状态下时,所述曲面镜将入射在所述曲面镜上的全方位的光朝向所述光学系统反射。
2.根据权利要求1所述的移动终端,其中,所述曲面镜包括朝向所述光学系统凸出的半球形。
3.根据权利要求1所述的移动终端,其中,所述曲面镜包括:
第一曲面镜,所述第一曲面镜相对更靠近所述光学系统并且具有朝向所述移动终端的外部凸出的半球形;以及
第二曲面镜,所述第二曲面镜相对更远离所述光学系统并且以一定距离与所述第一曲面镜分开,并且将从所述第一曲面镜反射的光反射至所述光学系统。
4.根据权利要求3所述的移动终端,其中,所述第一曲面镜被成形为限定穿过所述第一曲面镜的中心部分形成的孔,并且其中,所述光学系统的至少一部分位于所述孔内。
5.根据权利要求1所述的移动终端,其中,所述杆是天线杆。
6.根据权利要求1所述的移动终端,所述移动终端还包括:
控制器,所述控制器被配置为:
在所述第一状态期间激活普通相机模式;并且
响应于从所述第一状态至所述第二状态的转换,从所述普通相机模式转换为全方位捕获模式。
7.根据权利要求1所述的移动终端,其中,所述曲面镜的尺寸以及所述曲面镜与所述光学系统的中心之间的分开距离根据所述光学系统的视野FOV的范围而变化。
8.根据权利要求1所述的移动终端,其中,所述曲面镜能够沿着所述终端主体的纵向方向定位,或能够以向上倾斜的方式沿着所述终端主体的所述纵向方向定位,并且
其中,所述曲面镜位于所述光学系统的光轴上,以允许所述曲面镜能够沿着所述光学系统的所述光轴定位。
9.根据权利要求1所述的移动终端,该移动终端还包括:
子曲面镜,当所述曲面镜按照偏离所述光学系统的光轴的方式而被拉动时,所述子曲面镜位于所述曲面镜和所述光学系统之间,所述子曲面镜将从所述曲面镜反射的光朝向所述光学系统的所述光轴反射。
10.一种移动终端,该移动终端包括:
终端主体;
光学系统,所述光学系统位于所述终端主体中并且被配置为全方位地捕获所述终端主体的环境;
其中,所述光学系统包括:捕获从第一方向接收的光的第一光学系统;以及捕获从与所述第一方向相反的第二方向接收的光的第二光学系统,其中,所述第一光学系统和所述第二光学系统各自具有超过180°的视野FOV,并且
其中,通过对由所述第一光学系统捕获的第一图像和由所述第二光学系统捕获的第二图像进行合并来执行所述全方位捕获。
11.根据权利要求10所述的移动终端,其中,所述第一光学系统和所述第二光学系统具有所述第一光学系统的第一光轴和所述第二光学系统的第二光轴对齐的对称结构或者所述第一光轴和所述第二光轴不彼此对齐的非对称结构。
12.根据权利要求11所述的移动终端,其中,所述第一光学系统和所述第二光学系统以所述对称结构布置,
其中,所述移动终端还包括:
可旋转曲面镜,所述可旋转曲面镜位于所述第一光学系统和所述第二光学系统之间;以及
图像传感器,所述图像传感器位于所述曲面镜的上部或下部中的至少一个处。
13.根据权利要求11所述的移动终端,其中,所述第一光学系统和所述第二光学系统位于所述终端主体的不同侧。
14.根据权利要求11所述的移动终端,其中,对所述第一图像和所述第二图像进行合并包括通过将所述第一图像和所述第二图像朝向第三轴线移动预定距离来执行针对所述第一图像和所述第二图像的光轴对齐,
其中,当所述第一光学系统和所述第二光学系统布置在所述非对称结构中时,所述第三轴线对应于所述第一光轴与所述第二光轴之间的中点。
15.根据权利要求14所述的移动终端,其中,省略了所述第一图像和所述第二图像的两端部分的部分区域,所述部分区域由于在所述光轴对齐期间的图像移动而靠近所述第三轴线。
16.根据权利要求11所述的移动终端,其中,通过将在全景模式下捕获的多个第一子图像和第二子图像结合来合并所述第一图像和所述第二图像,并且
其中,通过合并在相邻子图像之间的交叠区域来生成在所述多个第一子图像和第二子图像之间的交叠区域中的至少一个部分区域。
17.根据权利要求10所述的移动终端,该移动终端还包括:
第一显示器,所述第一显示器被配置为显示所述第一图像和所述第二图像;以及
第二显示器,所述第二显示器被配置为以放大的方式输出在所述第一显示器处显示的图像的部分区域,所述部分区域由引导进行指示。
18.根据权利要求17所述的移动终端,其中,在预览显示在所述第二显示器上的所述部分区域的同时,执行快照捕获。
19.根据权利要求10所述的移动终端,该移动终端还包括:
被配置为感测所述终端主体的安装方向或运动方向的接近光传感器、激光传感器、陀螺仪传感器或加速度传感器中的至少一个传感器,以阻止向所述第一光学系统或所述第二光学系统中的一个光学系统的电力供应。
20.根据权利要求10所述的移动终端,该移动终端还包括:
颜色传感器,所述颜色传感器感测在所述终端主体周围的亮度以调节闪光灯的亮度,或者激活所述闪光灯或不激活所述闪光灯。
CN201610403032.5A 2015-09-15 2016-06-08 移动终端 Expired - Fee Related CN106534624B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150130562A KR20170032761A (ko) 2015-09-15 2015-09-15 이동 단말기
KR10-2015-0130562 2015-09-15

Publications (2)

Publication Number Publication Date
CN106534624A true CN106534624A (zh) 2017-03-22
CN106534624B CN106534624B (zh) 2020-12-08

Family

ID=56108476

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610403032.5A Expired - Fee Related CN106534624B (zh) 2015-09-15 2016-06-08 移动终端

Country Status (4)

Country Link
US (1) US10126532B2 (zh)
EP (1) EP3144727A1 (zh)
KR (1) KR20170032761A (zh)
CN (1) CN106534624B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020086219A (ja) * 2018-11-28 2020-06-04 株式会社リコー 撮像装置
JP2020122895A (ja) * 2019-01-31 2020-08-13 株式会社リコー 撮像装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10122918B2 (en) * 2016-06-16 2018-11-06 Maurizio Sole Festa System for producing 360 degree media
US10547776B2 (en) * 2016-09-23 2020-01-28 Apple Inc. Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes
KR102367943B1 (ko) * 2017-08-23 2022-02-24 엘지디스플레이 주식회사 전자 기기
CN107613184A (zh) * 2017-11-06 2018-01-19 广东欧珀移动通信有限公司 摄像头组件及电子设备
US10789911B2 (en) * 2018-12-11 2020-09-29 Microsoft Technology Licensing, Llc Phase locked multi-display synchronization
CN112019660B (zh) 2019-05-31 2021-07-30 Oppo广东移动通信有限公司 电子装置的控制方法及电子装置
CN113810530B (zh) 2019-05-31 2024-10-11 Oppo广东移动通信有限公司 电子装置的控制方法及电子装置
CN110213413B (zh) 2019-05-31 2021-05-14 Oppo广东移动通信有限公司 电子装置的控制方法及电子装置
US11277551B2 (en) * 2020-04-03 2022-03-15 Qualcomm Incorporated Multiple optical path imaging techniques and shared emitter for active depth sensing techniques

Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005283616A (ja) * 2004-03-26 2005-10-13 Softopia Japan Foundation 撮像装置
CN102177468A (zh) * 2008-08-14 2011-09-07 远程保真公司 三反射镜全景相机
CN102196172A (zh) * 2010-03-01 2011-09-21 三洋电机株式会社 图像合成装置
CN102263926A (zh) * 2010-05-31 2011-11-30 鸿富锦精密工业(深圳)有限公司 电子设备及其图像处理方法
CN102342092A (zh) * 2009-03-05 2012-02-01 韩国科亚电子股份有限公司 生成全景图像的装置、方法及由记录有运行该方法的程序的计算机可读取的记录介质
CN102884471A (zh) * 2010-02-10 2013-01-16 泡泡影像有限公司 一种个人通信设备的附加装置
CN103685955A (zh) * 2013-12-10 2014-03-26 福州瑞芯微电子有限公司 一种具有双摄像头的手持设备的全景拍摄方法及设备
US8730299B1 (en) * 2013-11-27 2014-05-20 Dmitry Kozko Surround image mode for multi-lens mobile devices
CN103869444A (zh) * 2011-03-18 2014-06-18 普睿美系统美国有限公司 用于通讯装置的可选择性接附及拆卸的镜头
CN103916582A (zh) * 2013-01-07 2014-07-09 华为技术有限公司 一种图像处理方法及装置
CN103945045A (zh) * 2013-01-21 2014-07-23 联想(北京)有限公司 一种数据处理的方法及装置
CN103973950A (zh) * 2014-04-29 2014-08-06 蒂莫西·奥耶诺比 移动通信设备多向/广角摄像机镜头系统
CN104243805A (zh) * 2013-06-20 2014-12-24 Lg电子株式会社 移动终端和控制移动终端的方法
CN104349044A (zh) * 2013-08-09 2015-02-11 联想(北京)有限公司 全景图像的拍摄方法及电子设备
CN104519265A (zh) * 2013-09-29 2015-04-15 联想(北京)有限公司 一种终端设备以及摄像方法
CN104717414A (zh) * 2013-12-12 2015-06-17 腾讯科技(深圳)有限公司 一种照片处理方法及装置
CN104717415A (zh) * 2013-12-12 2015-06-17 华为技术有限公司 一种摄像装置
CN104835118A (zh) * 2015-06-04 2015-08-12 浙江得图网络有限公司 通过两路鱼眼摄像头采集全景图像的方法
CN104880805A (zh) * 2015-06-12 2015-09-02 武汉赫天光电股份有限公司 360°全景超清摄像镜头

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2456334B (en) 2008-01-11 2012-08-15 Atreides Ltd Panoramic optical assembly
JP5872818B2 (ja) * 2010-08-20 2016-03-01 パナソニック株式会社 測位処理装置、測位処理方法、および画像処理装置
EP2860699A1 (en) * 2013-10-11 2015-04-15 Telefonaktiebolaget L M Ericsson (Publ) Technique for view synthesis

Patent Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005283616A (ja) * 2004-03-26 2005-10-13 Softopia Japan Foundation 撮像装置
CN102177468A (zh) * 2008-08-14 2011-09-07 远程保真公司 三反射镜全景相机
CN102342092A (zh) * 2009-03-05 2012-02-01 韩国科亚电子股份有限公司 生成全景图像的装置、方法及由记录有运行该方法的程序的计算机可读取的记录介质
CN102884471A (zh) * 2010-02-10 2013-01-16 泡泡影像有限公司 一种个人通信设备的附加装置
CN102196172A (zh) * 2010-03-01 2011-09-21 三洋电机株式会社 图像合成装置
CN102263926A (zh) * 2010-05-31 2011-11-30 鸿富锦精密工业(深圳)有限公司 电子设备及其图像处理方法
CN103869444A (zh) * 2011-03-18 2014-06-18 普睿美系统美国有限公司 用于通讯装置的可选择性接附及拆卸的镜头
CN103916582A (zh) * 2013-01-07 2014-07-09 华为技术有限公司 一种图像处理方法及装置
CN103945045A (zh) * 2013-01-21 2014-07-23 联想(北京)有限公司 一种数据处理的方法及装置
CN104243805A (zh) * 2013-06-20 2014-12-24 Lg电子株式会社 移动终端和控制移动终端的方法
CN104349044A (zh) * 2013-08-09 2015-02-11 联想(北京)有限公司 全景图像的拍摄方法及电子设备
CN104519265A (zh) * 2013-09-29 2015-04-15 联想(北京)有限公司 一种终端设备以及摄像方法
US8730299B1 (en) * 2013-11-27 2014-05-20 Dmitry Kozko Surround image mode for multi-lens mobile devices
CN103685955A (zh) * 2013-12-10 2014-03-26 福州瑞芯微电子有限公司 一种具有双摄像头的手持设备的全景拍摄方法及设备
CN104717414A (zh) * 2013-12-12 2015-06-17 腾讯科技(深圳)有限公司 一种照片处理方法及装置
CN104717415A (zh) * 2013-12-12 2015-06-17 华为技术有限公司 一种摄像装置
CN103973950A (zh) * 2014-04-29 2014-08-06 蒂莫西·奥耶诺比 移动通信设备多向/广角摄像机镜头系统
CN104835118A (zh) * 2015-06-04 2015-08-12 浙江得图网络有限公司 通过两路鱼眼摄像头采集全景图像的方法
CN104880805A (zh) * 2015-06-12 2015-09-02 武汉赫天光电股份有限公司 360°全景超清摄像镜头

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020086219A (ja) * 2018-11-28 2020-06-04 株式会社リコー 撮像装置
JP7286956B2 (ja) 2018-11-28 2023-06-06 株式会社リコー 撮像装置
JP2020122895A (ja) * 2019-01-31 2020-08-13 株式会社リコー 撮像装置
JP7268372B2 (ja) 2019-01-31 2023-05-08 株式会社リコー 撮像装置

Also Published As

Publication number Publication date
US10126532B2 (en) 2018-11-13
US20170075092A1 (en) 2017-03-16
EP3144727A1 (en) 2017-03-22
CN106534624B (zh) 2020-12-08
KR20170032761A (ko) 2017-03-23

Similar Documents

Publication Publication Date Title
CN106534624A (zh) 移动终端
US9768824B2 (en) Mobile terminal and control method for the mobile terminal
KR102056193B1 (ko) 이동 단말기 및 그 제어 방법
CN105282316B (zh) 移动终端及其控制方法
CN106341522B (zh) 移动终端及其控制方法
KR102401009B1 (ko) 이동 단말기
CN106406688B (zh) 移动终端及其控制方法
KR102149780B1 (ko) 이동 단말기
CN106371782A (zh) 移动终端及其控制方法
CN106662724A (zh) 移动终端
CN106899801A (zh) 移动终端及其控制方法
CN105718187A (zh) 移动终端及控制移动终端的内容的方法
KR102446264B1 (ko) 이동 단말기
KR20180013151A (ko) 이동 단말기
KR102406843B1 (ko) 이동 단말기
US10122448B2 (en) Mobile terminal and control method therefor
KR102689437B1 (ko) 홈스크린을 설정하는 이동 단말기 및 그 제어 방법
KR102158699B1 (ko) 이동 단말기 제어방법 및 이동 단말기
KR102611056B1 (ko) 이동 단말기 및 그 제어 방법
EP3148175A1 (en) Camera module and mobile terminal communicating with the same
KR102127396B1 (ko) 이미지 획득 장치
KR20150094358A (ko) 이동단말기 및 그 제어방법
KR20170021038A (ko) 이동 단말기 및 그 제어 방법
KR102192820B1 (ko) 이동 단말기
KR20200055728A (ko) 이동 단말기

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201208

Termination date: 20210608