CN1878241A - 具有全景摄像功能的手机 - Google Patents

Abstract

一种具有全景摄像功能的手机，包括微处理器、摄像部件、存储器、显示装置，微处理器包括用于实现通讯功能的手机模块，摄像部件包括反射部件、透镜、CCD摄像装置组成，反射部件包括双曲线面镜，CCD摄像装置位于双曲线面镜的虚焦点位置，透镜位于CCD摄像装置与双曲线面镜之间，摄像装置通过视频输入接口与微处理器通信连接，显示屏与微处理器的视频输出接口连接，微处理器还包括图像采集模块，图像存储模块，图像预处理模块，图像初始化模块，图像展开处理模块，用于圆形全方位图像通过几何变换展开成矩形柱面全景图像；图像输出模块。手机中的微处理器执行上述模块将压缩的、圆形的全方位图像展开成矩形的柱面全景图像并实时地显示在手机的显示屏上。

Description

具有全景摄像功能的手机

(一)技术领域

本发明属于光学技术、计算机图像处理技术和计算机软件技术在移动通信设备方面的应用，主要适用于带有摄像功能的手机以及掌上电脑PDA等小型的具有移动计算设备上。

(二)背景技术

目前市场上销售的具有摄像功能的手机在摄像时要将手机上的摄像头瞄准摄像目标，通过这种摄像方法拍摄到的图像的范围限制在摄像头瞄准的小视野内，不能一次拍摄360度范围内的全景图像。

近年发展起来的全景视觉传感器ODVS(OmniDirectional Vision Sensors)为实时获取场景的全景图像提供了一种新的解决方案。ODVS的特点是视野广(360度)，能把一个半球视野中的信息压缩成一幅图像，一幅图像的信息量更大；这种ODVS摄像机可以在全景拍摄到半球视野中的所有情况。能把一个半球视野中的信息压缩成一幅图像，一幅图像的信息量更大。

随着Internet的飞速发展和移动通信技术的日益成熟，两者的相互渗透和融合的步伐正在加快。21世纪是“移动为王”的时代已经成为业内人士和广大消费者的共识。手机作为“移动为王”的时代的杰出代表，发展非常迅猛。现有手机的款式五花八门，功能也日益强大，正朝着移动数据中心的目标坚定地迈进。要使手机摆脱单纯的”傻瓜型”移动通讯工具的形象，真正成为智能化的数据终端，我们就必须赋予它“灵魂”。除了底层硬件芯片的强有力支持，操作系统(OS)就成为这种“灵魂”的关键提供者。同样地，OS在手机中也扮演着类似的重要角色。在操作系统之上开发应用程序可以避免直接和最底层硬件打交道，并能够方便实现许多较为复杂的功能，可谓好处多多。没有OS的支持，现在使用的手机就不可能拥有花样不断翻新、令人眼花缭乱的功能。目前市场上的高档手机都具有嵌入式的操作系统。

因此如何通过全景光学成像技术、计算机图象处理技术、嵌入式系统技术为移动通信设备领域提供一种快速、可靠的视觉信息采集途径，获取一个场景图像时，只要将手机高高举起，不用瞄准目标就可以获得场景的实时图像。

(三)发明内容

为了克服现有的摄像头手机不能获取实时全景图像，图形容易变形的不足，本发明提供一种能够获取实时全景图像、获取实时不变形的透视和全景图像的具有全景摄像功能的手机。

本发明为解决其技术问题采用的技术方案为：

一种具有全景摄像功能的手机，包括微处理器、摄像部件、存储器、显示装置，所述的微处理器包括用于实现通讯功能的手机模块，其特征在于：所述的摄像装置包括反射部件、透镜、CCD摄像装置组成，所述的反射部件包括双曲线面镜，CCD摄像装置位于双曲线面镜的虚焦点位置，透镜位于CCD摄像装置与双曲线面镜之间，所述的摄像装置通过视频输入接口与微处理器通信连接，所述的显示装置与微处理器的视频输出接口连接，所述的微处理器还包括图像采集模块，用于采集CCD摄像装置上的图像；图像存储模块，用于将采集的图像数据存入存储器；图像预处理模块，用于将采集的图像去噪、平滑处理；所述的微处理器还包括：图像初始化模块，用于确定所采集的全方位图像的中心点的位置和内径为r、外径为R，查找半径变化时相应圆周上像素平均值变化最大的值所对应的(r，x^* ₀，y^* ₀)，其计算式为：

${\max }_{(r,{x^{*}}_0,{y^{*}}_0)}\left|\frac{1}{\mathrm{\Δr}}\underset{k}{\mathrm{\Σ}}\right\{G_{\mathrm{\σ}}\left(r\right)\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})\left\}\right|...\left(1\right)$

其中：G_σ(r)＝G_σ((n-k)Δr)-G_σ((n-k-1)Δr)    (2)

$\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})=I[(\mathrm{k\Δ}r\cos \left(\mathrm{m\Δ\β}\right)+{x^{*}}_0),(\mathrm{k\Δ}r\sin \left(\mathrm{m\Δ\β}\right)+{y^{*}}_0)]...\left(3\right)$

I(x^*，y^*)为图像的像素，r为圆周的半径，G为对原图像进行平滑的高斯模板，Δr表示半径搜索的步长，Δβ表示沿着圆弧分隔的角度的步长；

图像展开处理模块，用于将CCD摄像装置获得的圆形全方位图像通过几何变换展开成矩形柱面全景图像；

图像输出模块，用于将展开后的矩形柱面全景图像输出到显示装置。

进一步，所述的图像展开处理模块包括：读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；近似展开计算单元，用于根据上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径，将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，设定中间圆的半径：r₁＝(r+R)/2，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；建立矩形柱面全景图像中任意一点像素坐标P^**(x^**，y^**)与圆形全方位图像中的像素坐标Q^*(x^*，y^*)的对应关系，其计算式为：

x^*＝y^*/(tan(360x^**/π(R+r)))    (4)

y^*＝(y^**+r)cosβ                (5)

上式中，x^**，y^**为矩形柱面全景图像的像素坐标值，x^*，y^*为圆形全方位图像的像素坐标值，R为圆形全方位图像的外径，r为圆形全方位图像的内径，β为圆形全方位图像坐标的方位角。

或者是，所述的图像展开处理模块包括：读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；映射矩阵展开单元，用于根据上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径，将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标Q^*(x^*，y^*)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，建立从Q^*(x^*，y^*)到P^**(x^**，y^**)的映射矩阵对应关系，其计算式为：

P^**(x^**，y^**)← M× Q^*(x^*，y^*)           (6)

上式中， Q^*(x^*，y^*)为全方位图像上的各个像素坐标的矩阵， M为从全方位图像坐标到矩形柱面全景图像坐标的对应关系矩阵， P^**为矩形柱面全景图像上的各个像素坐标的矩阵。

又或者是，所述的图像展开处理模块包括：读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；极坐标展开计算单元，用于根据全方位图像的中心点的位置和内径为r、外径为R，r^*为图像上任意点距离内圆的径向长度，方位角为：β＝tan^-1(y^*/x^*)，建立极坐标(r^*，β)，与全方位内外圆边界的交点坐标分别为(x^* _inner(β)，y^* _inner(β))和(x^* _outer(β)，y^* _outer(β))；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标(r^*，β)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，其计算式为：

$\left\{\begin{array}{c}{x}^{**}(r^{*},\mathrm{\β})=(1-r^{*})x^{*}\mathrm{inner}\left(\mathrm{\β}\right)+r^{*}{x}^{*}\mathrm{outer}\left(\mathrm{\β}\right)\\ y^{**}(r^{*},\mathrm{\β})=(1-r^{*})y^{*}\mathrm{inner}\left(\mathrm{\β}\right)+r^{*}{y}^{*}\mathrm{outer}\left(\mathrm{\β}\right)\end{array}\right....\left(7\right).$

再进一步，图像展开处理模块还包括：插值计算单元，用于消除在所述的展开单元取整计算所带来的误差，计算得到的矩形柱面全景图像的某个像素坐标P^**(x^**，y^**)的像素点为(k₀，j₀)，所述的像素点坐标落在由(k，j)，(k+1，j)，(k，j+1)，(k+1，j+1)四个相邻整数像素为顶点坐标所构成的正方形内，用式(8)插值计算：

P^**(x^**，y^**)＝(P^*(x^*+1，y^*)-P^*(x^*，y^*))*(k0-k)+(P^*(x^*，y^*+1)-P^*(x^*，y^*))*(j0-j)

                                                                                    (8)+(P^*(x^*+1，y^*+1)+P^*(x^*，y^*)-P^*(x^*+1，y^*)-P^*(x^*，y^*+1))*(k0-k)*(j0-j)+P^*(x^*，y^*)

所述的插值计算单元的输入端连接展开计算单元的输出端，所述的插值计算单元的输出端连接图像输出模块。

更进一步，图像展开处理模块还包括：图像增强单元，用于对图像输出单元输出的像素均衡化，计算式为：

$S\left(r_k\right)=T\left(r_k\right)=\frac{1}{N}\underset{i=0}{\overset{k}{\mathrm{\Σ}}}N\left(r_i\right)...\left(9\right)$

上式中，变换函数为灰度级累积分布函数T(r)，设原始图像的灰度级为r_k，S(r)为变换后图像的灰度分布函数，N为图像中的像素总数，N(r_i)为图像中灰度级为r_i的像素总数。

所述的图像预处理模块包括：图像滤波单元，用于采用二维Gabor滤波器对圆形全方位图像进行滤波；图像质量判断单元，用于采用二维FFT变换计算频域高频能量，并比较所得的高频能量值与预设的下限值，在高频能量值大于下限值时选择性地输出全方位图像。

所述的手机的光学部分的结构为：所述的反射部件还包括非透光圆锥体、透明圆柱体，所述的双曲线面镜位于圆柱体的上端，且面部的凹口向内伸入圆柱体内，所述的双曲线面镜的底面为反射面；所述的反射面中央固定连接所述的圆锥体，所述的圆锥体的锥角向下；所述的双曲线面镜、圆锥体、圆柱体的旋转轴在同一中心轴线上；所述的透镜位于圆柱体内的下方；所述的摄像装置包括CCD摄像头、底座，所述的CCD摄像头安装在底座上部中央，所述的底座上开有与所述的圆柱体的壁厚相同的圆槽；所述的圆锥体填充非透光性物质或者用遮光性涂料来喷涂其表面；所述的底座上设有透镜固定架，所述的透镜安装在透镜固定架上。

所述的摄像部件为旋转式，所述的摄像部件通过旋转轴安装在手机外壳上。

所述的摄像部件为伸缩式，所述的摄像部件通过伸缩轴安装在手机外壳上。

本发明的工作原理是：图1、图2是表示本发明的具有全景摄像功能的手机的光学系统的原理图，图1是仰视图，图2是正视图。双曲线镜面1有2个焦点(0，0，c)、(0，0，-c)，CCD摄像装置12配置在与双曲线镜面中心轴同轴的一个焦点(0，0，-c)上。根据这样配置，能对CCD传感器周围360°方位进行摄像。如图2所示，进入双曲线镜面的中心的光，根据双曲面的镜面特性向着其虚焦点折射。实物图像经双曲面镜反射到聚光透镜6中成像，在该成像平面上的一个点P₁(x^* ₁，y^* ₁)对应着实物在空间上的一个点的坐标A(x₁，y₁，z₁)，大五角星为空间上的一个点A(x₁，y₁，z₁)；中五角星为入射到双曲线面镜上的图像的空间坐标P₁(x₁，y₁)。

图1、图2中所示的双曲面镜构成的光学系统可以由下面5个等式表示；

((X²+Y²)/a²)-(Z²/b²)＝-1   (Z＞0)           (10)

$c=\sqrt{a^2+b^2}...\left(11\right)$

β＝tan^-1(Y/X)                                (12)

α＝tan^-1[(b²+c²)sinγ-2bc]/(b²+c²)cosγ    (13)

$\mathrm{\γ}={\tan }^{-1}[f/\sqrt{(X^2+Y^2)}]...\left(14\right)$

式中X，Y，Z表示空间坐标，c表示双曲面镜的焦点，2c表示两个焦点之间的距离，a，b分别是双曲面镜的实轴和虚轴的长度，β表示入射光线在XY平面上的夹角—方位角，α表示入射光线在XZ平面上的夹角—俯角，f表示成像平面到双曲面镜的虚焦点的距离。

由式(1)可以在三维空间上作出一个双叶双曲面，如图3所示，该双曲面有2个焦点(0，0，c)、(0，0，-c)，并对称与XY平面，本专利将CCD配置在与双曲面中心轴同轴的另一个焦点(0，0，-c)上，替换在XY平面下的一个双曲面，如图4所示，进入双曲线镜面的中心(0，0，c)的光，根据双曲面的镜面特性向着其虚焦点(0，0，-c)折射。

根据图5、图6来说明360°全方位进行摄像的原理，空间上的一个点A(x₁，y₁，z₁)(图中用大五角星表示)经双曲线镜面1进入凹部镜面，入射到双曲线面镜1上的图像的空间坐标点P1(x₁，y₁)(图中用中五角星表示)，反射到透镜6上对应有一个投影点P₁(x^* ₁，y^* ₁)(图6中用小五角星表示)，通过透镜6的光线变成平行光投射到CCD摄像装置12，这时在CCD摄像装置12上成像的图像是一种发生形变的环状图像，微处理器通过视频接口读入该环状图像，采用软件对该环状图像进行展开得到全方位的图像并显示在显示装置上。

上面提到的具有全景摄像功能的手机的反射部件中有一个防止光饱和的圆锥体，因此在成像平面上有一个黑色圆形，该黑色圆形的圆心就是全方位图像的展开中心点，全方位图像中心定位是为了减少在展开过程中不同心而造成的图像失真，利用全方位图像中心定位的算法，可以检测拍到的一幅图像中迅速找到全方位图像的展开中心点，而不需要人工干预，这对于全方位摄像装置的实用化有十分重要的意义。

本专利中采用Daugman的圆模板匹配法进行全方位图像的展开中心点的定位。在拍摄获取的全方位图像中，灰度分布存在着一定的差异，一般而言全方位展开部分比圆锥体反射部分亮。然后根据全方位的形状是圆环形的情况，利用圆形检测匹配器的方法分割全方位，其数学方程为：

其中： $G_{\mathrm{\σ}}\left(r\right)=(1/\sqrt{2\mathrm{\π\σ}})e^{-({(r-r_0)}^2/{2\mathrm{\σ}}^2)},$ I(x^*，y^*)为图像的象素；r为圆周的半径；G为对原图像进行平滑的高斯模板。公式(1-1)的物理意义是，查找随着半径r变化相应圆周上象素平均值变化最大的值所对应的(r，x^* ₀，y^* ₀)，以此来确定全方位图像的展开中心点和圆锥体反射部分的边缘。卷积用来对图像进行平滑，消除区域边缘中噪声的影响，平滑模板的大小与定位的精度有关。为了方便公式(1-1)的离散化实现，利用卷积性质，把公式(1-1)转化为：

其中： $\frac{\∂G_{\mathrm{\σ}}\left(r\right)}{\∂r}\≈G_{\mathrm{\σ}}\left(n\right)=\frac{1}{\mathrm{\Δr}}{G}_{\mathrm{\σ}}\left(\mathrm{n\Δr}\right)-\frac{1}{\mathrm{\Δr}}{G}_{\mathrm{\σ}}\left((n-1)\mathrm{\Δr}\right)...(1-3)$

对公式(1-2)进行离散化，用累加和Σ来代替卷积和曲线积分，转换为：

${\max }_{(r,{x^{*}}_0,{y^{*}}_0)}\left|\frac{1}{\mathrm{\Δr}}\underset{k}{\mathrm{\Σ}}\right\{G_{\mathrm{\σ}}\left(r\right)\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})\left\}\right|...\left(1\right)$

其中：G_σ(r)＝G_σ((n-k)Δr)-G_σ((n-k-1)Δr)    (2)

$\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})=I\left[\left(\mathrm{k\Δ}r\cos \left(\mathrm{m\Δ\β}\right)+{x^{*}}_0\right),(\mathrm{k\Δ}r\sin \left(\mathrm{m\Δ\β}\right)+{y^{*}}_0)\right]...\left(3\right)$

Δr表示半径搜索的步长，Δβ表示沿着圆弧分隔的角度的步长。也可以对式(14)进行改进，使得能更好的定位全方位内边缘：

其中r′略小于r，它们之间的距离是一定的，且r′随着r变化；λ为预设的值，防止分母为0。式(1-4)利用了这样一个事实，即圆锥体反射部分的灰度分布总是均匀的。因此，当搜索的圆弧与圆锥体反射部分的边缘很好匹配时，式(1-4)的分母非常小，因而式(1-4)会有一个突变值，这个突变值的位置就是全方位图像的展开中心点的位置。

进一步，在展开方法上本专利中采用了一种快速的近似展开算法，能够将时间消耗和对各种参数的要求降到最小，同时尽可能的保持有用的信息。考虑到后面几个步骤的算法中，β分量即方位角度的信息是最需要的；而在竖直方向上，发生一些形变对结果几乎没有什么影响，这种展开的快速近似算法，如图7、图8、图9所示。图7为反射平面成像示意图，图8为透镜成像平面成像示意图，图9为展开平面示意图。图8是圆形全方位图像，其中内径为r，外径为R，内外径之间的是图像的有效区域，现将其展开成图9的矩形全景图，展开规则有三条，

(1)X^*轴为起始位置，按逆时针方式展开；

(2)左图中X^*轴与内径r的交点O，对应到右图中左下角的原点O(0，0)；

(3)展开后的右图的宽度等于左图中虚线所示的圆的周长。其中虚线圆为左图内外径的同心圆，且其半径r1＝(r+R)/2。

设圆形图图8的圆心O^*坐标(x^*0，y^*0)，展开的矩形图左下角原点坐标O^**(0，0)，矩形图C)中任意一点P^**＝(x^**，y^**)所对应的点在圆形图中的坐标为(x^*，y^*)。下面我们需要求的是(x^*，y^*)和(x^**，y^**)的对应关系。根据几何关系可以得到如下公式：

β＝tan^-1(y^*/x^*)                (15)

r1＝(r+R)/2                        (16)

令虚线圆的半径r1＝(r+R)/2，目的是为了让展开后的图看起来形变均匀一些。

x^*＝y^*/(tan(360x^**/π(R+r)))        (4)

y^*＝(y^**+r)cosβ                                         (5)

从式(4)、(5)可以得到圆形全方位图像上的一个点(x^*，y^*)和矩形全景图上的一个点(x^**，y^**)的对应关系。该方法实质上是做了一个图像插值的过程。展开后，虚线上方的图像是横向压缩过的，虚线下方的图像是横向拉伸过的，而在虚线本身上的点则保持不变。

另一种方法是根据圆形全方位图像上的一个点(x^*，y^*)和矩形全景图上的一个点(x^**，y^**)的对应关系，建立(x^*，y^*)与(x^**，y^**)的映射矩阵。由于这种一一对应关系，通过映射矩阵方法能把转变成不变形的全景图像。通过M映射矩阵可以建立起式(6)关系。

P^**(x^**，y^**)← M× P^*(x^*，y^*)         (6)

根据式(6)，对于成像平面上的每个像素P^*(x^*，y^*)在全方位图像上有一个点P^**(x^**，y^**)对应，建立了M映射矩阵后，实时图像处理的任务可以得到简化。每次在成像平面上得到的变形的全方位图像完成查表运算，生成不变形的全方位图像显示到显示器上或者保存在存储单元中或者通过Web服务发布到网页上。

再一种方法是利用极坐标系，全方位的图像内外边界都为圆形，因此可以简单地利用几何方法归一。以圆锥体反射部分的圆心为起点，与全方位内外边界的交点坐标分别为(x_p(θ)，y_p(θ))和(x_s(θ)，y_s(θ))，利用下式：

$\left\{\begin{array}{c}x(r,\mathrm{\θ})=(1-r)x_p\left(\mathrm{\θ}\right)+r{x}_s\left(\mathrm{\θ}\right)\\ y(r,\mathrm{\θ})=(1-r)y_p\left(\mathrm{\θ}\right)+r{y}_s\left(\mathrm{\θ}\right)\end{array}\right....\left(17\right)$

可将全方位图像中的每个点一一映射到极坐标(r，θ)中，如图10所示。

将压缩的、圆形的全方位图像展开成矩形的柱面全景图像，由于成像平面上的某个像素P^*(x^*，y^*)与全方位图像上的点P^**(x^**，y^**)存在着非线形的几何关系，全方位图像上的点P^**(x^**，y^**)的像素可能不正好是成像平面上的某个像素P^*(x^*，y^*)，在这种情况下，本专利中采用插入法来解决小数坐标的像素值，如图11所示，假定计算得到的一个像素(k₀，j₀)，计算方法可以采用上述介绍的两种方法中的一种，像素(k₀，j₀)落在由(k，j)，(k+1，j)，(k，j+1)，(k+1，j+1)为顶点坐标所构成的正方形内：

P^**(x^**，y^**)＝(P^*(x^*+1，y^*)-P^*(x^*，y^*))*(k0-k)+(P^*(x^*，y^*+1)-P^*(x^*，y^*))*(j0-j)

                                                                                    (8)+(P^*(x^*+1，y^*+1)+P^*(x^*，y^*)-P^*(x^*+1，y^*)-P^*(x^*，y^*+1))*(k0-k)*(j0-j)+P^*(x^*，y^*)

通过式(8)的插值计算能够消除在展开变化时产生的取整所带来的误差，也可以采用其他一些插值计算方法，如样条法、平均法以及二次插入法等方法。

本发明的有益效果为：1、能够获取实时全景图像、透视和全景图像实时不变形；2、能够把半球视野中的信息压缩成一幅图像，图像的信息量很大；3、光学部分结构合理，使用寿命长；3、圆锥体具有防止光饱和功能；4、摄像头可以设置成旋转式或伸缩式，外观美观。

(四)附图说明

图1为具有全景摄像功能的手机的摄像部件的光学原理的仰视图；

图2为有全景摄像功能的手机的摄像部件的光学原理的主视图；

图3为一个双叶双曲面的三维示意图；

图4为在双叶双曲面中用CCD摄像单元替换另一个虚双曲面的示意图；

图5为全空间上的一个光点在成像平面上光路的说明示意图；

图6为图5的双曲线镜面侧的仰视图；

图7为反射平面成像示意图；

图8为透镜成像平面成像的圆形全方位图像的示意图；

图9为展开平面的柱形全景图像的示意图；

图10为极坐标展开算法的图像转化示意图；

图11为像素插值图解示意图；

图12为具有全景摄像功能的手机的光学部分的结构图；

图13为实施例1的手机结构图；

图14为实施例2的手机结构图；

图15为实施例3的手机结构图；

图16为实施例4的手机结构图；

图17为实施例1、2的微处理器的结构框图；

图18为实施例3的微处理器的结构框图；

图19为实施例4的微处理器的结构框图；

图20为微处理器的图像初始化单元的流程图；

图21为微处理器的图像展开成全景图像的流程图。

(五)具体实施方式

下面结合附图对本发明作进一步描述。

实施例1

参照图12、图13、图17、图20、图21，一种具有全景摄像功能的手机，包括微处理器15、摄像装置、存储器17、显示装置16，所述的微处理器15包括用于实现通讯功能的手机模块，所述的摄像部件包括反射部件、透镜6、CCD摄像装置12组成，所述的反射部件包括双曲线面镜1，CCD摄像装置12位于双曲线面镜1的虚焦点位置，透镜6位于CCD摄像装置12与双曲线面镜1之间，所述的摄像装置12通过视频输入接口与微处理器15通信连接，所述的显示装置16与微处理器15的视频输出接口连接，所述的微处理器15还包括图像采集模块24，用于采集CCD摄像装置上的图像；图像存储模块25，用于将采集的图像数据存入存储器；图像预处理模块26，用于将采集的图像去噪、平滑处理；所述的微处理器还包括：图像初始化模块35，用于确定所采集的全方位图像的中心点的位置和内径为r、外径为R，查找半径变化时相应圆周上像素平均值变化最大的值所对应的(r，x^* ₀，y^* ₀)，其计算式为：

${\max }_{(r,{x^{*}}_0,{y^{*}}_0)}\left|\frac{1}{\mathrm{\Δr}}\underset{k}{\mathrm{\Σ}}\right\{G_{\mathrm{\σ}}\left(r\right)\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})\left\}\right|...\left(1\right)$

其中：G_σ(r)＝G_σ((n-k)Δr)-G_σ((n-k-1)Δr)    (2)

$\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})=I\left[\left(\mathrm{k\Δ}r\cos \left(\mathrm{m\Δ\β}\right)+{x^{*}}_0\right),(\mathrm{k\Δ}r\sin \left(\mathrm{m\Δ\β}\right)+{y^{*}}_0)\right]...\left(3\right)$

I(x^*，y^*)为图像的像素，r为圆周的半径，G为对原图像进行平滑的高斯模板，Δr表示半径搜索的步长，Δβ表示沿着圆弧分隔的角度的步长；

图像初始化处理模块35，首先进行滤波、去噪，然后确定圆心和内外圆半径处理单元37中完成上述(1)、(2)、(3)式的计算，通过保存处理结果单元38将计算结果保存在文件中，以便在图像展开处理模块29中调用；

图像展开处理模块29，用于将CCD摄像装置获得的圆形全方位图像通过几何变换展开成矩形柱面全景图像；图像输出模块34，用于将展开后的矩形柱面全景图像输出到显示装置。

本实施例采用近似展开算法，所述的图像展开处理模块29包括：读取坐标信息单元30，将上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径等数据读取到程序中以便展开计算；近似展开计算单元31，将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，设定中间圆的半径：r₁＝(r+R)/2，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；用于建立矩形柱面全景图像中任意一点像素坐标P^**(x^**，y^**)与圆形全方位图像中的像素坐标Q^*(x^*，y^*)的对应关系，其计算式为：

x^*＝y^*/(tan(360x^**/π(R+r)))    (4)

y^*＝(y^**+r)cosβ                            (5)

上式中，x^**，y^**为矩形柱面全景图像的像素坐标值，x^*，y^*为圆形全方位图像的像素坐标值，R为圆形全方位图像的外径，r为圆形全方位图像的内径，β为圆形全方位图像坐标的方位角。

再进一步，上述展开单元的计算方法得到全景图像，对图像进行进一步的处理，图像展开处理模块29还包括：插值计算单元32，用于消除在所述的展开单元取整计算所带来的误差，计算得到的矩形柱面全景图像的某个像素坐标P^**(x^**，y^**)的像素点为(k₀，j₀)，所述的像素点坐标落在由(k，j)，(k+1，j)，(k，j+1)，(k+1，j+1)四个相邻整数像素为顶点坐标所构成的正方形内，用式(8)插值计算：

P^**(x^**，y^**)＝(P^*(x^*+1，y^*)-P^*(x^*，y^*))*(k0-k)+(P^*(x^*，y^*+1)-P^*(x^*，y^*))*(j0-j)

                                                                                    (8)+(P^*(x^*+1，y^*+1)+P^*(x^*，y^*)-P^*(x^*+1，y^*)-P^*(x^*，y^*+1))*(k0-k)*(j0-j)+P^*(x^*，y^*)

所述的插值计算单元32的输入端连接展开计算单元31的输出端，所述的插值计算单元32的输出端连接图像增强单元33。

更进一步，图像展开处理模块29还包括：图像增强单元33，用于对图像输出单元输出的像素均衡化，计算式为：

$S\left(r_k\right)=T\left(r_k\right)=\frac{1}{N}\underset{i=0}{\overset{k}{\mathrm{\Σ}}}N\left(r_i\right)...\left(9\right)$

上式中，变换函数为灰度级累积分布函数T(r)，设原始图像的灰度级为r_k，S(r)为变换后图像的灰度分布函数，N为图像中的像素总数，N(r_i)为图像中灰度级为r_i的像素总数。

所述的图像预处理模块26包括：图像滤波单元27，用于采用二维Gabor滤波器对圆形全方位图像进行滤波；图像质量判断单元28，用于采用二维FFT(傅立叶)变换计算频域高频能量，并比较所得的高频能量值与预设的下限值，在高频能量值大于下限值时选择性地输出全方位图像。

本发明的光学部分的结构为：所述的反射部件还包括非透光圆锥体10、透明圆柱体9，所述的双曲线面镜1位于圆柱体9的上端，且面部的凹口向内伸入圆柱体9内，所述的双曲线面镜1的底面为反射面；所述的反射面中央固定连接所述的圆锥体10，所述的圆锥体10的锥角向下；所述的双曲线面镜1、圆锥体10、圆柱体9的旋转轴在同一中心轴线上；所述的透镜6位于圆柱体9内的下方；所述的摄像装置包括CCD摄像头12、底座11，所述的CCD摄像头12安装在底座11上部中央，所述的底座11上开有与所述的圆柱体9的壁厚相同的圆槽；所述的圆锥体10填充非透光性物质或者用遮光性涂料来喷涂其表面；所述的底座11上设有透镜固定架8，所述的透镜6安装在透镜固定架8上。

全方位摄像的光学系统由多个零部件所构成，为了降低制造成本，该光学系统也可以由单个成形的零部件构成。图12是表示各零部件相对的位置关系图。本专利中又将全方位摄像的光学系统分为上部和下部两个单元，光学系统的上部单元，首先形成一个双曲线面镜1的凹部，从上述凹部的最深部向着突出方向沿着中心轴线形成一个圆锥体10，圆柱体9由透明合成树脂或玻璃等的透明材料压注而成。凹部和圆锥体10最好与圆柱体9成型时同时形成。其次要对上述凹部实施镀银的镜面处理，对上述圆锥体10填充非透光性物质，也可以对上述圆锥体10用遮光性涂料来喷涂其表面。经过这样的工序得到的光学系统的上部单元，凹部成为双曲面镜，填充非透光性物质的圆锥体10具有防止在光学画像的光饱和功能。下部单元的底座11由有色合成树脂材料压注而成，在装配下部单元时，首先将透镜6固定在透镜固定架8上，再将CCD摄像头12放进底座11中的固定CCD摄像装置的位置上，然后再将透镜固定架8装配到底座11中的固定透镜固定架11的位置上。在完成了光学系统的上部和下部两个单元的装配后，就可以将全方位摄像的光学系统进行组装，底座11上开有一个与圆柱体9的壁厚相同的圆槽，将光学系统的上部单元对准下部单元施加一定的力就能完成整个全方位摄像的光学系统的装配过程。按这种生产方式和装配所构成的全方位摄像的光学系统有良好的生产性、加工成本低。能保证透镜6和双曲线面镜1的位置关系以及透镜6和CCD摄像头12的位置关系。

参照图13，所述的摄像头为旋转式摄像头，所述的摄像头通过旋转轴安装在底座上，所述的摄像头安装在手机外壳的右侧。

本发明的工作原理是：图1、图2是表示本发明的具有全景摄像功能的手机的光学系统的原理图，图1是仰视图，图2是正视图。双曲线面镜1有2个焦点(0，0，c)、(0，0，-c)，CCD摄像装置12配置在与双曲线面镜中心轴同轴的一个焦点(0，0，-c)上。根据这样配置，能对CCD传感器周围360°方位进行摄像。如图2所示，进入双曲线面镜的中心的光，根据双曲面的镜面特性向着其虚焦点折射。实物图像经双曲面镜反射到聚光透镜6中成像，在该成像平面上的一个点P₁(x^* ₁，y^* ₁)对应着实物在空间上的一个点的坐标A(x₁，y₁，z₁)，大五角星为三维空间上的一个点A(x₁，y₁，z₁)；中五角星为入射到双曲线面镜上的图像的三维空间坐标P(x₁，y₁，z₁)。

图1、图2中所示的双曲面镜构成的光学系统可以由下面5个等式表示；

((X²+Y²)/a²)-(Z²/b²)＝-1  (Z＞0)           (10)

$c=\sqrt{a^2+b^2}...\left(11\right)$

β＝tan^-1(Y/X)                                (12)

α＝tan^-1[(b²+c²)sinγ-2bc]/(b²+c²)cosγ   (13)

$\mathrm{\γ}={\tan }^{-1}[f/\sqrt{(X^2+Y^2)}]...\left(14\right)$

式中X，Y，Z表示空间坐标，c表示双曲面镜的焦点，2c表示两个焦点之间的距离，a，b分别是双曲面镜的实轴和虚轴的长度，β表示入射光线在XY平面上的夹角—方位角，α表示入射光线在XZ平面上的夹角—俯角，f表示成像平面到双曲面镜的虚焦点的距离。

由式(1)可以在三维空间上作出一个双叶双曲面，如图3所示，该双曲面有2个焦点(0，0，c)、(0，0，-c)，并对称与XY平面，本专利将CCD配置在与双曲面中心轴同轴的另一个焦点(0，0，-c)上，替换在XY平面下的一个双曲面，如图4所示，进入双曲线面镜的中心(0，0，c)的光，根据双曲面的镜面特性向着其虚焦点(0，0，-c)折射。

根据图5、图6来说明360°全方位进行摄像的原理，空间上的一个点A(x₁，y₁，z₁)(图中用大五角星表示)经双曲线面镜1进入凹部镜面，入射到双曲线面镜1上的图像的空间坐标点P₁(x₁，y₁，z₁)(图中用中五角星表示)，反射到透镜6上对应有一个投影点P₁(x^* ₁，y^* ₁)(图6中用小五角星表示)，通过透镜6的光线变成平行光投射到CCD摄像装置12，这时在CCD摄像装置12上成像的图像是一种发生形变的环状图像，微处理器通过视频接口读入该环状图像，采用软件对该环状图像进行展开得到全方位的图像并显示在显示装置上。

上面提到的全方位摄像装置中有一个防止光饱和的圆锥体，因此在成像平面上有一个黑色圆形，该黑色圆形的圆心就是全方位图像的展开中心点，全方位图像中心定位是为了减少在展开过程中不同心而造成的图像失真，利用全方位图像中心定位的算法，可以检测拍到的一幅图像中迅速找到全方位图像的展开中心点，而不需要人工干预，这对于全方位摄像装置的实用化有十分重要的意义。

本专利中采用Daugman的圆模板匹配法进行全方位图像的展开中心点的定位。在拍摄获取的全方位图像中，灰度分布存在着一定的差异，一般而言全方位展开部分比圆锥体反射部分亮。然后根据全方位的形状是圆环形的情况，利用圆形检测匹配器的方法分割全方位，其数学方程为：

其中： $G_{\mathrm{\σ}}\left(r\right)=(1/\sqrt{2\mathrm{\π\σ}})e^{-({(r-r_0)}^2/{2\mathrm{\σ}}^2)},$ I(x^*，y^*)为图像的象素；r为圆周的半径；G为对原图像进行平滑的高斯模板。公式(1-1)的物理意义是，查找随着半径r变化相应圆周上象素平均值变化最大的值所对应的(r，x^* ₀，y^* ₀)，以此来确定全方位图像的展开中心点和圆锥体反射部分的边缘。卷积用来对图像进行平滑，消除区域边缘中噪声的影响，平滑模板的大小与定位的精度有关。为了方便公式(1-1)的离散化实现，利用卷积性质，把公式(1-1)转化为：

其中： $\frac{\∂G_{\mathrm{\σ}}\left(r\right)}{\∂r}\≈G_{\mathrm{\σ}}\left(n\right)=\frac{1}{\mathrm{\Δr}}{G}_{\mathrm{\σ}}\left(\mathrm{n\Δr}\right)-\frac{1}{\mathrm{\Δr}}{G}_{\mathrm{\σ}}\left((n-1)\mathrm{\Δr}\right)...(1-3)$

对公式(1-2)进行离散化，用累加和Σ来代替卷积和曲线积分，转换为：

${\max }_{(r,{x^{*}}_0,{y^{*}}_0)}\left|\frac{1}{\mathrm{\Δr}}\underset{k}{\mathrm{\Σ}}\right\{G_{\mathrm{\σ}}\left(r\right)\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})\left\}\right|...\left(1\right)$

其中：G_σ(r)＝G_σ((n-k)Δr)-G_σ((n-k-1)Δr)    (2)

$\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})=I\left[\left(\mathrm{k\Δ}r\cos \left(\mathrm{m\Δ\β}\right)+{x^{*}}_0\right),(\mathrm{k\Δ}r\sin \left(\mathrm{m\Δ\β}\right)+{y^{*}}_0)\right]...\left(3\right)$

Δr表示半径搜索的步长，Δβ表示沿着圆弧分隔的角度的步长。也可以对式(14)进行改进，使得能更好的定位全方位内边缘：

其中r′略小于r，它们之间的距离是一定的，且r′随着r变化；λ为预设的值，防止分母为0。式(1-4)利用了这样一个事实，即圆锥体反射部分的灰度分布总是均匀的。因此，当搜索的圆弧与圆锥体反射部分的边缘很好匹配时，式(1-4)的分母非常小，因而式(1-4)会有一个突变值，这个突变值的位置就是全方位图像的展开中心点的位置。

进一步，在展开方法上本专利中采用了一种快速的近似展开算法，能够将时间消耗和对各种参数的要求降到最小，同时尽可能的保持有用的信息。考虑到后面几个步骤的算法中，β分量即方位角度的信息是最需要的；而在竖直方向上，发生一些形变对结果几乎没有什么影响，这种展开的快速近似算法，如图7、图8、图9所示。图7为反射平面成像示意图，图8为透镜成像平面成像示意图，图9为展开平面示意图。图8是圆形全方位图像，其中内径为r，外径为R，内外径之间的是图像的有效区域，现将其展开成图9的矩形全景图，展开规则有三条，

(1)X^*轴为起始位置，按逆时针方式展开；

(2)左图中X^*轴与内径r的交点O，对应到右图中左下角的原点O(0，0)；

(3)展开后的右图的宽度等于左图中虚线所示的圆的周长。其中虚线圆为左图内外径的同心圆，且其半径r1＝(r+R)/2。

设圆形图图8的圆心O^*坐标(x^*0，y^*0)，展开的矩形图左下角原点坐标O^**(0，0)，矩形图图9中任意一点P^**＝(x^**，y^**)所对应的点在圆形图中的坐标为(x^*，y^*)。下面我们需要求的是(x^*，y^*)和(x^**，y^**)的对应关系。根据几何关系可以得到如下公式：

β＝tan^-1(y^*/x^*)                (15)

r1＝(r+R)/2                         (16)

令虚线圆的半径r1＝(r+R)/2，目的是为了让展开后的图看起来形变均匀一些。

x^*＝y^*/(tan(360x^**/π(R+r)))    (4)

y^*＝(y^**+r)cosβ                          (5)

从式(4)、(5)可以得到圆形全方位图像上的一个点(x^*，y^*)和矩形全景图上的一个点(x^**，y^**)的对应关系。该方法实质上是做了一个图像插值的过程。展开后，虚线上方的图像是横向压缩过的，虚线下方的图像是横向拉伸过的，而在虚线本身上的点则保持不变。

参照图13，所述的摄像部件为旋转式摄像头，所述的摄像部件通过旋转轴14安装在手机外壳13的右侧。

实施例2

参照图12、图14、图17、图20、图21，本实施例的光学部分、电子部分基本构成、工作原理与实施例1基本相同，不同之处在于：参照图14，所述的摄像部件为旋转式摄像头，所述的摄像部件通过旋转轴14安装在手机外壳13的上端。

实施例3

参照图12、图15、图18、图20、图21，本实施例的光学部分、电子部分基本构成、工作原理与实施例1基本相同，不同之处在于：图像展开处理模块采用映射矩阵展开算法：展开处理模块29包括：读取坐标信息单元30，将上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径等数据读取到程序中以便展开计算；映射矩阵展开单元39，将上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径，将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标Q^*(x^*，y^*)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，建立从Q^*(x^*，y^*)到P^**(x^**，y^**)的映射矩阵对应关系，其计算式为：

P^**(x^**，y^**)← M× Q^*(x^*，y^*)         (6)

上式中， Q^*(x^*，y^*)为全方位图像上的各个像素坐标的矩阵， M为从全方位图像坐标到矩形柱面全景图像坐标的对应关系矩阵， P^**为矩形柱面全景图像上的各个像素坐标的矩阵。

本实施例的展开计算方法的原理为：根据圆形全方位图像上的一个点(x^*，y^*)和矩形全景图上的一个点(x^**，y^**)的对应关系，建立(x^*，y^*)与(x^**，y^**)的映射矩阵。由于这种一一对应关系，通过映射矩阵方法能把转变成不变形的全景图像。通过M映射矩阵可以建立起式(6)关系。

P^**(x^**，y^**)← M× P^*(x^*，y^*)    (6)

根据式(6)，对于成像平面上的每个像素P^*(x^*，y^*)在全方位图像上有一个点P^**(x^**，y^**)对应，建立了M映射矩阵后，实时图像处理的任务可以得到简化。每次在成像平面上得到的变形的全方位图像完成查表运算，生成不变形的全方位图像显示到显示器上或者保存在存储单元中或者通过Web服务发布到网页上。

参照图18，所述的摄像部件为伸缩式摄像头，所述的摄像头通过伸缩轴15安装在手机外壳13的上端的右侧。

实施例4

参照图12、图15、图19、图20、图21，本实施例的光学部分、电子部分基本构成、基本原理与实施例1基本相同，不同之处在于图像展开处理模块采用极坐标展开算法：展开处理模块29包括：读取坐标信息单元30，将上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径等数据读取到程序中以便展开计算；极坐标展开计算单元40，用于将全方位图像的中心点的位置和内径为r、外径为R，r为图像上任意点距离内圆的径向长度，方位角为：β＝tan^-1(y^*/x^*)，建立极坐标(r^*，β)，与全方位内外圆边界的交点坐标分别为(x^* _inner(β)，y^* _inner(β))和(x^* _outer(β)，y^* _outer(β))；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标(r^*，β)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，其计算式为：

$\left\{\begin{array}{c}{x}^{**}(r^{*},\mathrm{\β})=(1-r^{*})x^{*}\mathrm{inner}\left(\mathrm{\β}\right)+r^{*}{x}^{*}\mathrm{outer}\left(\mathrm{\β}\right)\\ y^{**}(r^{*},\mathrm{\β})=(1-r^{*})y^{*}\mathrm{inner}\left(\mathrm{\β}\right)+r^{*}{y}^{*}\mathrm{outer}\left(\mathrm{\β}\right)\end{array}\right....\left(17\right).$

可将全方位图像中的每个点一一映射到极坐标(r，β)中，如图10所示。

参照图19，所述的摄像部件为伸缩式摄像头，所述的摄像部件通过伸缩轴15安装在手机外壳13的上端的左侧。

Claims (10)

1、一种具有全景摄像功能的手机，包括微处理器、摄像部件、存储器、显示装置，所述的微处理器包括用于实现通讯功能的手机模块，其特征在于：所述的摄像部件包括反射部件、透镜、CCD摄像装置组成，所述的反射部件包括双曲线面镜，CCD摄像装置位于双曲线面镜的虚焦点位置，透镜位于CCD摄像装置与双曲线面镜之间，所述的摄像装置通过视频输入接口与微处理器通信连接，所述的显示装置与微处理器的视频输出接口连接，所述的微处理器还包括图像采集模块，用于采集CCD摄像装置上的图像；图像存储模块，用于将采集的图像数据存入存储器；图像预处理模块，用于将采集的图像去噪、平滑处理；所述的微处理器还包括：

图像初始化模块，用于确定所采集的全方位图像的中心点的位置和内径为r、外径为R，查找半径变化时相应圆周上像素平均值变化最大的值所对应的(r，x^* ₀，y^* ₀)，其计算式为：

${\max }_{(r,{x^{*}}_0,{y^{*}}_0)}\left|\frac{1}{\mathrm{\Δr}}\underset{k}{\mathrm{\Σ}}\right\{G_{\mathrm{\σ}}\left(r\right)\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})\left\}\right|---\left(1\right)$

其中：G_σ(r)＝G_σ((n-k)Δr)-G_σ((n-k-1)Δr)    (2)

$\underset{m}{\mathrm{\Σ}}I(x^{*},y^{*})=I[(\mathrm{k\Δ}r\cos \left(\mathrm{m\Δ\β}\right)+{x^{*}}_0),(\mathrm{k\Δ}r\sin \left(\mathrm{m\Δ\β}\right)+{y^{*}}_0)]---\left(3\right)$

I(x^*，y^*)为图像的像素，r为圆周的半径，G为对原图像进行平滑的高斯模板，Δr表示半径搜索的步长，Δβ表示沿着圆弧分隔的角度的步长；

图像展开处理模块，用于将CCD摄像装置获得的圆形全方位图像通过几何变换展开成矩形柱面全景图像；

图像输出模块，用于将展开后的矩形柱面全景图像输出到显示装置。

2、如权利要求1所述的具有全景摄像功能的手机，其特征在于：所述的图像展开处理模块包括：

读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；

近似展开计算单元，用于将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，设定中间圆的半径：r₁＝(r+R)/2，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；建立矩形柱面全景图像中任意一点像素坐标P^**(x^**，y^**)与圆形全方位图像中的像素坐标Q^*(x^*，y^*)的对应关系，其计算式为：

x^*＝y^*/(tan(360x^**/π(R+r)))    (4)

y^*＝(y^**+r)cosβ                (5)

上式中，x^**，y^**为矩形柱面全景图像的像素坐标值，x^*，y^*为圆形全方位图像的像素坐标值，R为圆形全方位图像的外径，r为圆形全方位图像的内径，β为圆形全方位图像坐标的方位角。

3、如权利要求1所述的具有全景摄像功能的手机，其特征在于：所述的图像展开处理模块包括：

读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；

映射矩阵展开单元，用于将圆形全方位图像的中心坐标设定平面坐标系的原点O^**(0，0)、X^*轴、Y^*轴，图像的内径为r，外径为R，方位角为：β＝tan^-1(y^*/x^*)；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标Q^*(x^*，y^*)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，建立从Q^*(x^*，y^*)到P^**(x^**，y^**)的映射矩阵对应关系，其计算式为：

P^**(x^**，y^**)← M× Q^*(x^*，y^*)    (6)上式中， Q^*(x^*，y^*)为全方位图像上的各个像素坐标的矩阵， M为从全方位图像坐标到矩形柱面全景图像坐标的对应关系矩阵， P^**为矩形柱面全景图像上的各个像素坐标的矩阵。

4、如权利要求1所述的具有全景摄像功能的手机，其特征在于：所述的图像展开处理模块包括：

读取坐标信息单元，用于读取上述初始化模块中计算得到的圆形全方位图像的中心坐标以及图像的内外圆半径；

极坐标展开计算单元，用于根据全方位图像的中心点的位置和内径为r、外径为R，r^*为图像上任意点距离内圆的径向长度，方位角为：β＝tan^-1(y^*/x^*)，建立极坐标(r^*，β)，与全方位内外圆边界的交点坐标分别为(x^* _inner(β)，y^* _inner(β))和(x^* _outer(β)，y^* _outer(β))；矩形柱面全景图像以坐标原点O^**(0，0)、X^**轴、Y^**轴为平面坐标系，将圆形全方位图像中的内径为r与X^*轴的交点(r，0)作为坐标原点O^**(0，0)，以方位角β逆时针方向展开；根据圆形全方位图像中的任意一点像素坐标(r^*，β)与矩形柱面全景图像中像素坐标P^**(x^**，y^**)的对应关系，其计算式为：

$\left\{\begin{array}{c}{x}^{**}(r^{*},\mathrm{\β})=(1-r^{*}){x^{*}}_{\mathrm{inner}}\left(\mathrm{\β}\right)+r^{*}{x^{*}}_{\mathrm{outer}}\left(\mathrm{\β}\right)\\ y^{**}(r^{*},\mathrm{\β})=(1-r^{*}){y^{*}}_{\mathrm{inner}}\left(\mathrm{\β}\right)+r^{*}{y^{*}}_{\mathrm{outer}}\left(\mathrm{\β}\right)\end{array}\right.---\left(7\right).$

5、如权利要求1-4之一所述的具有全景摄像功能的手机，其特征在于：图像展开处理模块还包括：

插值计算单元，用于消除在所述的展开单元取整计算所带来的误差，计算得到的矩形柱面全景图像的某个像素坐标P^**(x^**，y^**)的像素点为(k₀，j₀)，所述的像素点坐标落在由(k，j)，(k+1，j)，(k，j+1)，(k+1，j+1)四个相邻整数像素为顶点坐标所构成的正方形内，用式(8)插值计算：

P^**(x^**，y^**)＝(P^*(x^*+1，y^*)-P^*(x^*，y^*))*(k0-k)+(P^*(x^*，y^*+1)-P^*(x^*，y^*))*(j0-j)+(P^*(x^*+1，y^*+1)+P^*(x^*，y^*)-P^*(x^*+1，y^*)-P^*(x^*，y^*+1))*(k0-k)*(j0-j)+P^*(x^*，y^*)(8)

所述的插值计算单元的输入端连接展开计算单元的输出端，所述的插值计算单元的输出端连接图像输出模块。

6、如权利要求5所述的具有全景摄像功能的手机，其特征在于：图像展开处理模块还包括：

图像增强单元，用于对图像输出单元输出的像素均衡化，计算式为：

$S\left(r_k\right)=T\left(r_k\right)=\frac{1}{N}\underset{i=0}{\overset{k}{\mathrm{\Σ}}}N\left(r_i\right)---\left(9\right)$

上式中，变换函数为灰度级累积分布函数T(r)，设原始图像的灰度级为r_k，S(r)为变换后图像的灰度分布函数，N为图像中的像素总数，N(r₁)为图像中灰度级为r_i的像素总数。

7、如权利要求6所述的具有全景摄像功能的手机，其特征在于：所述的图像预处理模块包括：

图像滤波单元，用于采用二维Gabor滤波器对圆形全方位图像进行滤波；

图像质量判断单元，用于采用二维FFT变换计算频域高频能量，并比较所得的高频能量值与预设的下限值，在高频能量值大于下限值时选择性地输出全方位图像。

8、如权利要求5所述的具有全景摄像功能的手机，其特征在于：所述的反射部件还包括非透光圆锥体、透明圆柱体，所述的双曲线面镜位于圆柱体的上端，且面部的凹口向内伸入圆柱体内，所述的双曲线面镜的底面为反射面；所述的反射面中央固定连接所述的圆锥体，所述的圆锥体的锥角向下；所述的双曲线面镜、圆锥体、圆柱体的旋转轴在同一中心轴线上；所述的透镜位于圆柱体内的下方；

所述的摄像装置包括CCD摄像头、底座，所述的CCD摄像头安装在底座上部中央，所述的底座上开有与所述的圆柱体的壁厚相同的圆槽；

所述的圆锥体填充非透光性物质或者用遮光性涂料来喷涂其表面；

所述的底座上设有透镜固定架，所述的透镜安装在透镜固定架上。

9、如权利要求8所述的具有全景摄像功能的手机，其特征在于：所述的摄像部件为旋转式，所述的摄像部件通过旋转轴安装在手机外壳上。

10、如权利要求8所述的具有全景摄像功能的手机，其特征在于：所述的摄像部件为伸缩式，所述的摄像部件通过伸缩轴安装在手机外壳上。

Images