CN102929091A - 数字球幕立体电影的制作方法 - Google Patents
数字球幕立体电影的制作方法 Download PDFInfo
- Publication number
- CN102929091A CN102929091A CN2012102739860A CN201210273986A CN102929091A CN 102929091 A CN102929091 A CN 102929091A CN 2012102739860 A CN2012102739860 A CN 2012102739860A CN 201210273986 A CN201210273986 A CN 201210273986A CN 102929091 A CN102929091 A CN 102929091A
- Authority
- CN
- China
- Prior art keywords
- screen
- sub
- image
- trapezoidal
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
一种数字球幕立体电影的制作方法,本发明属于光学技术领域,包含确定立体摄像机的瞳距、设置渲染参数、进行渲染、对构成子银幕的图像进行拼接和几何校正等步骤完成。本发明能够将普通的3D数字动画转化成适应球幕播放的3D动画,播放的3D数字动画电影的画面连续、逼真、纵深感强烈、3D效果极佳,使观看者能确实感受到身临其境的感受。
Description
技术领域
本发明属于光学技术领域,涉及一种球幕立体电影的制作方法。
背景技术
随着时代的发展和科技的进步,电影制作行业也经历了数个跨时代的阶段: 2D电影、3D电影、环幕2D电影、环幕3D电影、球幕2D电影、球幕3D电影。伴随着电影阶段性的发展,现代科学技术手段也没有停止前进的脚步,数字三维动画这种新兴的艺术表现形式发展势头迅猛,已经在电影行业的各个阶段取得了广泛的应用。
现在最为流行、震撼的电影表现形式当属数字球幕3D电影,它集合了数字动画、球幕、3D全部科技元素于一身。球幕影院的观众厅为圆顶式结构,银幕呈半球形如同苍穹,观众被包围其中,可以平时或仰视于观看电影,且银幕的播放视觉范围可高达180度,可自观众目前延至身后,伴随着环绕立体声,给观众一种身临其境的感觉,所以这种电影的效果非常震撼,及时在脱离立体眼镜的情况下也可产生立体效果;三维数字动画是一种虚拟现实并能超越现实的一种表现形式,它与传统的拍摄制作方式相比,可以制作出无法达到的过去、未来、宇宙等一切人类未知或无法拍摄到的场景,只要你的想象力够丰富,它的表现潜力不受限制,具体三维数字动画技术实现是通过计算机用特殊的动画软件设计出一个虚拟的三维空间,并将制作好的场景模型、人物模型等置于这个三维空间中静止或活动,从不同的角度用灯光照射,再用虚拟摄像机去拍摄,经过渲染,才能生成栩栩如生的三维动画;数字动画3D技术和传统胶片的立体电影的制作原理相同,采用双摄像机或双镜头摄像机拍摄,对应观察点延与观察方向垂直的水平线错开瞳距的距离,来产生视差,放映时通过两台放映机分别放映,在放映机镜头前加偏振片,使两路图像具有不同的偏振方向,两台摄像机分别放映对应于人左右眼的通道图像,并使之投射到同一银幕上,观众一般都是借助于偏振眼镜区别两路通道的图像引起视差来产生立体感,只不过在数字动画制作软件中,摄像机都是虚拟出来的,但同真实摄像机拥有大体一致的参数,如:机位、焦距、观察方向、片门等,由于虚拟摄像机和真实摄像机拥有几乎完全的摄像功能,所以同样可以采用真实摄像机的3D拍摄技术来进行三维动画制作,并且这种三维立体拍摄技术有一个巨大的优点:高精确度,可以实现任意数量的模拟摄像机的观察点的完全重合。
传统的球幕电影采用70mm胶片和鱼眼镜头进行拍摄和放映,这种传统的拍摄方法制作球幕电影存在很多难以克服的技术障碍,制作成本昂贵、影片题材单调,所以片源少、运营成本高成了所有球幕影院运营的巨大困难;而且现在的三维动画制作软件(例如:Maya、3D Max)只能提供渲染平面的渲染方式,具体的说通过软件制作的三维动画只有在平面屏幕上播放时,才能正确、无变形的还原出三维动画制作软件中制作的场景。可见如果想用三维动画制作软件制作球幕画面,则需要采用球面的渲染方式。此外,对不同的球幕影院,其放映设备的位置和数量又各不相同。
综上,在业内解决利用数字动画技术来制作适应不同球幕影院的3D球幕片源的问题成为重要课题,也正是本发明所要解决的问题。
发明内容
本发明所要解决的问题在于提出一种数字球幕立体电影的制作方法,能够将普通的3D数字动画转化成适应球幕播放的3D动画。
本发明解决技术问题的方法包含以下步骤:
1、首先应确定立体摄像机的瞳距D,为了实现3D效果,应当建立相应的视差模型。有两台摄像机分别在观察者左右眼两个角度分别拍摄所需要的3D场景效果,生成左右两个图像;然后再由两台投影机在观察者的左右两个角度将左右两个副图像分别投在同一块银幕上;之后观察者通过佩戴偏振眼镜对光线进行过滤,分别进入观看者左右眼,最后形成3D效果。因此,立体摄影机的瞳距,应按照人的两眼瞳孔的距离d、渲染距离L、以及观看者和球幕之间的距离约为球幕半径R计算得出。
即:D =
2、设置渲染参数,其中包括子银幕的数量K子银幕,按照x,y轴两个方向进行拓扑。其中子银幕包括梯形子银幕数量K梯形和三角形子银幕数量K三角。每个梯形子银幕由N层梯形组成,每层由M个相同梯形组成; 三角形子银幕则由K子银幕x M个三角形组成。因此:
K子银幕 = K子银幕x K子银幕y
K梯形 = M N
K三角 = K子银幕x M
3、在输入渲染参数以后,立体摄像机将按照梯形和三角形两种方式对3D场景图像进行渲染。在梯形渲染时,相机的视角会透过一个梯形面对场景进行渲染;当三角形渲染时,相机的视角则会透过一个三角形对3D场景进行渲染。
梯形渲染时,梯形的形状根据角度的不同而变化。
当渲染K(x,y)子银幕中的K(m,n)梯形时,摄像机所对应的Y轴夹角角度则为:
180 (y n) / (Ky + 1)
X轴角度则为:
360 (x m) / (Kx + 2)
梯形的形状为:
斜边:2 R sin( )
顶边:2 R sin( ) sin()
底边:2 R sin( ) sin()
最后的渲染效果如图7所示,为一梯形图片。
同理,每个三角形的形状为:
斜边:2 R sin( )
底边:顶边:2 R sin( ) sin()
4、在按照顺序对3d动画依次渲染后,对构成子银幕的图像进行图像拼接和几何校正。主要是通过摄像头采集数据,运用计算机视觉的方法,标定相关的几何对应关系;通过纯软件的方法,自动实现投影仪间的无缝拼接。包括得到标定图像空间和投影空间:将PC机与投影仪相连,PC机绘制的内容和投到屏幕上的内容是一致的,PC机绘制的内容保存在缓存区,将这个区域成为投影空间。用摄像头来捕捉投影仪投到屏幕上的内容,投影的内容在拍摄的图片上有一个2D坐标,定义这个2D空间为图像空间。图像空间的2D坐标表示的是该点在摄像头拍摄的图片上的坐标。很明显在不同位置捕捉得到的图像空间是不同的。有时候在一个位置无法将整个系统拍全,囚此需要从不同位置捕捉画面进行校正,这种情况我们需要将几个不同位置的图像空间校正到一个统一的图像空间,我们用虚拟图像空间来表示。
PC机屏幕上的点和投影屏幕上的点是对应的,摄像机拍摄屏幕上的图像得到的图像空间上的点和PC机屏幕上的点也是一一对应的。令m1为投影空间中的点X的坐标,m2为点X被投到幕上被摄像头拍摄后,
在图像空间的坐标,m1和m2间的关系可以用函数B1表示为:
m2 = B1m1
由可逆变化得: m1 = B1-1m2
基于图像空间拼接的标定技术:通过将多个摄像机的图像空间映射到同一个图像空间。根据视点的成像模型得到:,通过求解的,一组点对xi和x,i。这需要进行特征点提取,然后将特征点进行匹配完成图像的拼接与融合。
5、进行衰减处理,将相邻的两帧画面进行图像融合,在融合时,对图像之间的叠加部分进行衰减处理并输出子银幕的图像文件。最后在播放时,每个子银幕对应一台投影仪,进行播放。
本发明能够将普通的3D数字动画转化成适应球幕播放的3D动画,通过利用3D数字动画技术、图像校对技术、图像拼接融合技术、球幕投影技术,实现了3D数字动画和球幕电影的完美结合,可以使完整的立体图像在180度至360度的球形银幕上上映。
通过使用本技术的制作、播放的3D数字动画电影的画面连续、逼真、纵深感强烈、3D效果极佳。突破了以往球幕影院放映时图像效果模糊、图像有被拉伸感,图像形变严重,画面敏感不均匀、视觉张角小等缺点,使观看者能确实感受到身临其境的感受。
附图说明
图1 为3D立体显示技术偏振光原理示意图;
图2 为梯形子银幕示意图;
图3 为三角形子银幕示意图;
图4为梯形渲染示意图;
图5为三角形渲染示意图;
图6为梯形渲染效果示意图;
图7为图像矫正拼接效果图;
图8为图像融合衰减效果图;
图9为整体操作流程图。
具体实施方式
下面结合附图和具体实施方式对本发明作进一步说明:
1. 如图9所示,为制作球幕3D动画软件的整体流程。
2. 首先应确定立体摄像机的瞳距D,如图1所示,为3D摄像机的具体摆设方法,为了实现3D效果,应当建立相应的视差模型。有两台摄像机分别在观察者左右眼两个角度分别拍摄所需要的3D场景效果,生成左右两个图像;然后再由两台投影机在观察者的左右两个角度将左右两个副图像分别投在同一块银幕上;之后观察者通过佩戴偏振眼镜对光线进行过滤,分别进入观看者左右眼,最后形成3D效果。例如,正常人瞳距为6cm,球幕半径为15m, 渲染距离(焦距)为6cm则:立体摄影机的瞳距,应按照人的两眼瞳孔的距离d、渲染距离L、以及观看者和球幕之间的距离约为球幕半径R计算得出。
即:D = = =0.004com
3. 设置渲染参数,其中包括子银幕的数量K子银幕,按照x,y轴两个方向进行拓扑。如图2所示,建立一个180度的球幕,其中子银幕包括梯形子银幕数量K梯形是6个和三角形子银幕数量K三角是1个。如图2所示,阴影部分为梯形子银幕;如图3所示,阴影部分为三角形子银幕。每个梯形子银幕由N层:2层梯形组成,每层由M:2个相同梯形组成; 三角形子银幕则由K子银幕x M个三角形组成。因此:
K子银幕 = K子银幕x K子银幕y +1= 2 6 +1 = 13个
K梯形 = M N = 2 2 = 4个
K三角 = K子银幕x M = 6 2=12个
4. 如图6所示,对每个梯形和三角形进行渲染,梯形渲染时,梯形的形状根据角度的不同而变化。
5. 如图7所示,进行图像拼接工作:具体实施如下:(1)对图像序列进行预处理,预处理一般会考虑光照,尺度,位置变化等因素的干扰。常用的预处理方法有非线性平滑滤波,使像素的灰度值接近,从而消除孤立的噪声点。 (2)几何标定,主要是通过摄像头采集数据,运用计算机视觉的方法,标定相关的几何对应关系;通过纯软件的方法,获取到多投影的重叠区域缝拼接。包括得到标定图像空间和投影空间(3)图象空间拼接标定,通过将多个摄像机的图像空间映射到同一个图像空间。根据视点的成像模型得到:,其中表示摄像头在两个位置的图像空间的映射关系,是一个透视矩阵。通过特征点提取算法求解上式中的和。(4)特征提取与匹配:提取中图像中的显著特征作为图像特征点,如边缘。拐点等信息。通过匹配算法确定相互匹配的特征点,进而确定投影图像重叠区域。(5)边缘融合,获得重叠区域后,采用多频段融合算法进行图像融合。(6)颜色校正,解决多个投影仪间的颜色亮度和色差问题和重叠区域的颜色问题。
5. 如图8所示,进行衰减处理,将相邻的两帧画面进行图像融合,在融合时,对图像之间的叠加部分进行衰减处理并输出子银幕的图像文件。最后在播放时,每个子银幕对应一台投影仪,进行播放。
Claims (2)
1.一种数字球幕立体电影的制作方法,其特征在于由以下步骤完成:
(1)确定立体摄像机的瞳距D,建立相应的视差模型,通过两台摄像机分别在观察者左右眼两个角度分别拍摄所需要的3D场景效果,生成左右两个图像,然后再由两台投影机在观察者的左右两个角度将左右两个副图像分别投在同一块银幕上;之后观察者通过佩戴偏振眼镜对光线进行过滤,分别进入观看者左右眼,最后形成3D效果;其中立体摄影机的瞳距,应按照人的两眼瞳孔的距离d、渲染距离L、以及观看者和球幕之间的距离约为球幕半径R计算得出,
即:D = ;
(2)设置渲染参数,其中包括子银幕的数量K 子银幕,按照x,y轴两个方向进行拓扑,其中子银幕包括梯形子银幕数量K 梯形和三角形子银幕数量K 三角,每个梯形子银幕由N层梯形组成,每层由M个相同梯形组成; 三角形子银幕则由K 子银幕x M个三角形组成,因此:
(3)在输入渲染参数以后,立体摄像机将按照梯形和三角形两种方式对3D场景图像进行渲染,在梯形渲染时,相机的视角会透过一个梯形面对场景进行渲染;当三角形渲染时,相机的视角则会透过一个三角形对3D场景进行渲染,
梯形渲染时,梯形的形状根据角度的不同而变化,
当渲染K(x,y)子银幕中的K(m,n)梯形时,摄像机所对应的Y轴夹角角度则为:
X轴角度则为:
梯形的形状为:
同理,每个三角形的形状为:
(4)在按照顺序对3d动画依次渲染后,对构成子银幕的图像进行图像拼接和几何校正,通过摄像头采集数据,运用计算机视觉的方法,标定相关的几何对应关系;通过纯软件的方法,自动实现投影仪间的无缝拼接,包括得到标定图像空间和投影空间:将PC机与投影仪相连,PC机绘制的内容和投到屏幕上的内容是一致的,PC机绘制的内容保存在缓存区,将这个区域成为投影空间,用摄像头来捕捉投影仪投到屏幕上的内容,投影的内容在拍摄的图片上有一个2D坐标,定义这个2D空间为图像空间,图像空间的2D坐标表示的是该点在摄像头拍摄的图片上的坐标;
(5)进行衰减处理,将相邻的两帧画面进行图像融合,在融合时,对图像之间的叠加部分进行衰减处理并输出子银幕的图像文件,在播放时,每个子银幕对应一台投影仪,进行播放。
2.根据权利要求1所述的数字球幕立体电影的制作方法,其特征在于:步骤(4)中将几个不同位置的图像空间校正到一个统一的图像空间,用虚拟图像空间来表示,PC机屏幕上的点和投影屏幕上的点是对应的,摄像机拍摄屏幕上的图像得到的图像空间上的点和PC机屏幕上的点也是一一对应的,令m 1为投影空间中的点X的坐标,m 2为点X被投到幕上被摄像头拍摄后,在图像空间的坐标,m 1和m 2间的关系用函数B 1表示为:
m 2 = B 1 m 1
由可逆变化得: m 1 = B 1 -1 m 2
基于图像空间拼接的标定技术:通过将多个摄像机的图像空间映射到同一个图像空间,
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012102739860A CN102929091A (zh) | 2012-08-03 | 2012-08-03 | 数字球幕立体电影的制作方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012102739860A CN102929091A (zh) | 2012-08-03 | 2012-08-03 | 数字球幕立体电影的制作方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102929091A true CN102929091A (zh) | 2013-02-13 |
Family
ID=47643925
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012102739860A Pending CN102929091A (zh) | 2012-08-03 | 2012-08-03 | 数字球幕立体电影的制作方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102929091A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104715468A (zh) * | 2015-03-31 | 2015-06-17 | 王子强 | 一种基于Unity3D的裸眼3D内容制作的改进方法 |
CN105139336A (zh) * | 2015-08-19 | 2015-12-09 | 北京莫高丝路文化发展有限公司 | 一种多通道全景影像转换球幕鱼眼影片的方法 |
CN105137705A (zh) * | 2015-08-14 | 2015-12-09 | 太微图影(北京)数码科技有限公司 | 一种虚拟球幕的创建方法和装置 |
CN105809729A (zh) * | 2016-03-04 | 2016-07-27 | 深圳华强数码电影有限公司 | 一种虚拟场景的球形全景渲染方法 |
CN105991921A (zh) * | 2015-02-12 | 2016-10-05 | 北京光影侠数码科技股份有限公司 | 对拍摄影像的处理方法 |
TWI623879B (zh) * | 2016-10-31 | 2018-05-11 | 樂金顯示科技股份有限公司 | 顯示裝置與多屏顯示裝置 |
CN108646922A (zh) * | 2018-05-24 | 2018-10-12 | 国家基础地理信息中心 | 一种交互式数字地球仪及交互方法 |
CN105991921B (zh) * | 2015-02-12 | 2019-07-16 | 北京绿维文旅科技发展有限公司 | 对拍摄影像的处理方法 |
CN112118435A (zh) * | 2020-08-04 | 2020-12-22 | 山东大学 | 面向异形金属屏幕的多投影融合方法及系统 |
CN114339405A (zh) * | 2022-01-04 | 2022-04-12 | 广州博冠信息科技有限公司 | Ar视频数据流远程制作方法及装置、设备、存储介质 |
CN116880723A (zh) * | 2023-09-08 | 2023-10-13 | 江西格如灵科技股份有限公司 | 一种3d场景显示方法及系统 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1372227A (zh) * | 2001-02-28 | 2002-10-02 | 深圳华强智能技术有限公司 | 数字环幕立体电影制作方法 |
-
2012
- 2012-08-03 CN CN2012102739860A patent/CN102929091A/zh active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1372227A (zh) * | 2001-02-28 | 2002-10-02 | 深圳华强智能技术有限公司 | 数字环幕立体电影制作方法 |
Non-Patent Citations (1)
Title |
---|
陈亮: "基于摄像头校正的多投影仪拼接研究与实现", 《硕士论文》 * |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105991921A (zh) * | 2015-02-12 | 2016-10-05 | 北京光影侠数码科技股份有限公司 | 对拍摄影像的处理方法 |
CN105991921B (zh) * | 2015-02-12 | 2019-07-16 | 北京绿维文旅科技发展有限公司 | 对拍摄影像的处理方法 |
CN104715468A (zh) * | 2015-03-31 | 2015-06-17 | 王子强 | 一种基于Unity3D的裸眼3D内容制作的改进方法 |
CN105137705A (zh) * | 2015-08-14 | 2015-12-09 | 太微图影(北京)数码科技有限公司 | 一种虚拟球幕的创建方法和装置 |
CN105137705B (zh) * | 2015-08-14 | 2017-09-22 | 太微图影(北京)数码科技有限公司 | 一种虚拟球幕的创建方法和装置 |
CN105139336A (zh) * | 2015-08-19 | 2015-12-09 | 北京莫高丝路文化发展有限公司 | 一种多通道全景影像转换球幕鱼眼影片的方法 |
CN105139336B (zh) * | 2015-08-19 | 2018-06-22 | 北京莫高丝路文化发展有限公司 | 一种多通道全景影像转换球幕鱼眼影片的方法 |
CN105809729B (zh) * | 2016-03-04 | 2019-04-26 | 深圳华强数码电影有限公司 | 一种虚拟场景的球形全景渲染方法 |
CN105809729A (zh) * | 2016-03-04 | 2016-07-27 | 深圳华强数码电影有限公司 | 一种虚拟场景的球形全景渲染方法 |
US10078486B2 (en) | 2016-10-31 | 2018-09-18 | Lg Display Co., Ltd. | Display device and multi-display device |
TWI623879B (zh) * | 2016-10-31 | 2018-05-11 | 樂金顯示科技股份有限公司 | 顯示裝置與多屏顯示裝置 |
CN108646922A (zh) * | 2018-05-24 | 2018-10-12 | 国家基础地理信息中心 | 一种交互式数字地球仪及交互方法 |
CN108646922B (zh) * | 2018-05-24 | 2021-10-08 | 国家基础地理信息中心 | 一种交互式数字地球仪及交互方法 |
CN112118435A (zh) * | 2020-08-04 | 2020-12-22 | 山东大学 | 面向异形金属屏幕的多投影融合方法及系统 |
CN112118435B (zh) * | 2020-08-04 | 2021-06-25 | 山东大学 | 面向异形金属屏幕的多投影融合方法及系统 |
CN114339405A (zh) * | 2022-01-04 | 2022-04-12 | 广州博冠信息科技有限公司 | Ar视频数据流远程制作方法及装置、设备、存储介质 |
CN116880723A (zh) * | 2023-09-08 | 2023-10-13 | 江西格如灵科技股份有限公司 | 一种3d场景显示方法及系统 |
CN116880723B (zh) * | 2023-09-08 | 2023-11-17 | 江西格如灵科技股份有限公司 | 一种3d场景显示方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102929091A (zh) | 数字球幕立体电影的制作方法 | |
CN106131530B (zh) | 一种裸眼3d虚拟现实展示系统及其展示方法 | |
US8928654B2 (en) | Methods, systems, devices and associated processing logic for generating stereoscopic images and video | |
CN205901977U (zh) | 一种裸眼3d增强现实互动展示系统 | |
CN103676168A (zh) | 立体观像器以及带4g通信系统的个人立体影院装置 | |
CN104977796B (zh) | 一种立体球幕投影系统的实现方法 | |
CN103544725B (zh) | 一种二维立体动画制作方法 | |
CN203746012U (zh) | 一种三维虚拟场景人机交互立体显示系统 | |
WO2019041614A1 (zh) | 沉浸式虚拟现实头戴显示装置和沉浸式虚拟现实显示方法 | |
SG181708A1 (en) | A system and method for producing stereoscopic images | |
CN107005689B (zh) | 数字视频渲染 | |
CN105141941A (zh) | 一种数字全景3d影片制作的方法及系统 | |
CN107545537A (zh) | 一种从稠密点云生成3d全景图片的方法 | |
CN108600729A (zh) | 动态3d模型生成装置及影像生成方法 | |
CN100552539C (zh) | 一种环幕立体电影图像的制作方法 | |
CN101435989B (zh) | 跟踪视场及二次渲染制作立体电影的方法 | |
CN200986649Y (zh) | 立体数码摄影及观看装置组合 | |
WO2023174385A1 (zh) | 利用虚拟场景进行真实社交的方法、系统及ar眼镜 | |
CN101908233A (zh) | 产生用于三维影像重建的复数视点图的方法及系统 | |
KR20080007451A (ko) | 깊이 착시 디지털 이미지화 | |
CN109151273B (zh) | 一种光扇立体摄像机及立体测量方法 | |
CN112995640A (zh) | 一种同屏立体摄像机 | |
CN207603821U (zh) | 一种基于集群和渲染的裸眼3d系统 | |
CN101540063B (zh) | 应用三维软件制作数字球幕电影的方法 | |
CN108564651A (zh) | 具有数据生成功能的身体扫描装置及数据生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C05 | Deemed withdrawal (patent law before 1993) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130213 |