JP2016504828A - 単一のカメラを用いて3d画像を取り込む方法およびシステム - Google Patents
単一のカメラを用いて3d画像を取り込む方法およびシステム Download PDFInfo
- Publication number
- JP2016504828A JP2016504828A JP2015544289A JP2015544289A JP2016504828A JP 2016504828 A JP2016504828 A JP 2016504828A JP 2015544289 A JP2015544289 A JP 2015544289A JP 2015544289 A JP2015544289 A JP 2015544289A JP 2016504828 A JP2016504828 A JP 2016504828A
- Authority
- JP
- Japan
- Prior art keywords
- image
- picture
- camera
- cursors
- feature points
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
- H04N13/221—Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/02—Stereoscopic photography by sequential recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/246—Calibration of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Studio Devices (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
1.ユーザは、カメラを備えた携帯電話を使用して、第1の画像を取り込む(図3A)。
2.スクリーンに、3つの奥行き情報アイコンが表示される。3つのアイコンは、それぞれ「スクリーンの前方」、「スクリーン上」および「スクリーンの後方」を示す。ユーザは、2つの画像の視差に対してどのような影響を及ぼしたいかに基づいて、3つのアイコンのうちの1つを選択する(図3B)。
3.ユーザは、携帯電話を右に移動させて、右画像の視野を探し出す(図3C)。
4.スクリーンに、2つの3Dカーソルが表示される。1つは、取り込む右画像の目標位置を示し、もう1つは、カメラの現在位置を示す。ユーザは、2つの3Dカーソルを平行移動および回転によって重ね合わせる(図3D)。
5.2つの3Dカーソルが重なり合ったら、右画像を取り込む(図3E)。
1.モバイル装置は、左画像を取り込む。
2.システムは、この左画像を第1の画像とし、第1の画像の特徴点を抽出する。
3.スクリーンに、3つの奥行き情報アイコンが表示される。3つのアイコンは、それぞれ「スクリーンの前方」、「スクリーン上」および「スクリーンの後方」を示す。ユーザは、2つの画像の視差に対してどのような影響を及ぼしたいかに基づいて、3つのアイコンのうちの1つを選択する。
4.携帯電話を右に移動させて、右画像の視野を探し出す。
5.システムは、ディスプレイに表示される右ピクチャの特徴点を抽出する。
6.既知の通り、ほとんどの現在の3Dディスプレイは、3Dステレオの概念に基づいて構築されており、大きな違いは、左眼と右眼のそれぞれ2つの視野を分離する方法である。従って、システムは、特徴点一致方法を用いて2つのピクチャの間の視差を解析する。
7.スクリーンに、2つのピクチャの間の視差を調節するための2つの3Dカーソルが表示される。
8.システムは、双方向性最大相関および視差制約に基づいて、特徴点一致方法を用いて、左画像の特徴点マップ、すなわち物体の外側境界を示す特徴点の集合を、右ピクチャの特徴点マップと比較し、これにより、システムは、両マップにおける物体のサイズを解析することができる。2つのマップ中の物体のサイズが同じである場合には、これは、両ピクチャの視距離が同じであることを示している。
9.スクリーンに、2つの3Dカーソルが表示される。2つの3Dカーソルのサイズが異なる場合には、ユーザは、両カーソルのサイズが同じになるまで、カメラを前方または後方に移動させる。これにより、左画像と右ピクチャの両方の視距離が同じになる。
10.システムは、両特徴点マップの間の垂直ずれを比較する。
11.平行移動および回転によって垂直ずれを打ち消すために、2つの3Dカーソルがスクリーンに表示される。
12.2つの3Dカーソルが重なり合ったら、右画像を取り込む。システムは、右画像を第2の画像とする。次いで、システムは、第1の画像と第2の画像を正確に結合して、3Dステレオ画像にする。
Claims (10)
- 単一のカメラを使用して3D画像を作成する方法であって、
単一のカメラによって、第1の位置で、右側画像または左側画像のうちの一方となる第1の画像を取り込むステップと、
前記第1の画像の特徴点を抽出するステップと、
前記第1の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第2の画像を発見するためにピクチャを撮影するステップと、
前記ピクチャの特徴点を抽出するステップと、
前記第1の画像および前記ピクチャの特徴点を比較するステップと、
2つの3Dカーソルを生成するステップであり、前記3Dカーソルのうちの一方が前記第2の画像の目標位置を示し、前記3Dカーソルのうちの他方が前記カメラの現在位置を示すステップと、
前記2つの3Dカーソルを前記ピクチャ内に表示するステップと、
前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第2の画像を取り込むステップと、
前記第1の画像と前記第2の画像を結合して、3D画像を作成するステップと
を含む、方法。 - 前記比較するステップが、前記第1の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析することを含み、前記特徴点マップが、前記第1の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項1に記載の方法。
- 前記第1の画像および前記第2の画像の視差に対する所望の影響を得るための3つの奥行き情報アイコンを表示するステップをさらに含み、前記3つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標3Dカーソルの位置が、選択した奥行きアイコンの3D効果を得るように決定される、請求項2に記載の方法。 - 前記2つの3Dカーソルのサイズが同じである場合には、前記第1の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記2つの3Dカーソルの大きさが同じになる、請求項1から3の何れか一項に記載の方法。
- 前記第1の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項1から4の何れか一項に記載の方法。
- 単一のカメラを使用して3D画像を作成するシステムであって、
単一のカメラによって、第1の位置で、右側画像または左側画像のうちの一方となる第1の画像を取り込む手段と、
前記第1の画像の特徴点を抽出する手段と、
前記第1の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第2の画像を発見するためにピクチャを撮影する手段と、
前記ピクチャの特徴点を抽出する手段と、
前記第1の画像および前記ピクチャの特徴点を比較する手段と、
2つの3Dカーソルを生成する手段であり、前記3Dカーソルのうちの一方が前記第2の画像の目標位置を示し、前記3Dカーソルのうちの他方が前記カメラの現在位置を示す手段と、
前記2つの3Dカーソルを前記ピクチャ内に表示する手段と、
前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第2の画像を取り込む手段と、
前記第1の画像と前記第2の画像を結合して、3D画像を作成する手段と
を含む、システム。 - 前記比較する手段が、前記第1の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析する手段を含み、前記特徴点マップが、前記第1の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項6に記載のシステム。
- 前記第1の画像および前記第2の画像の視差に対する所望の影響を得るための3つの奥行き情報アイコンを表示する手段をさらに含み、前記3つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標3Dカーソルの位置が、選択した奥行きアイコンの3D効果を得るように決定される、請求項7に記載のシステム。 - 前記2つの3Dカーソルのサイズが同じである場合には、前記第1の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記2つの3Dカーソルの大きさが同じになる、請求項6から8の何れか一項に記載のシステム。
- 前記第1の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項6から9の何れか一項に記載のシステム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2012/085613 WO2014082276A1 (en) | 2012-11-30 | 2012-11-30 | Method and system for capturing a 3d image using single camera |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016504828A true JP2016504828A (ja) | 2016-02-12 |
Family
ID=50827063
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015544289A Pending JP2016504828A (ja) | 2012-11-30 | 2012-11-30 | 単一のカメラを用いて3d画像を取り込む方法およびシステム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20150326847A1 (ja) |
EP (1) | EP2926196A4 (ja) |
JP (1) | JP2016504828A (ja) |
KR (1) | KR20150091064A (ja) |
CN (1) | CN104813230A (ja) |
WO (1) | WO2014082276A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105306921A (zh) * | 2014-06-18 | 2016-02-03 | 中兴通讯股份有限公司 | 一种基于移动终端的三维照片拍摄方法及移动终端 |
US10531071B2 (en) * | 2015-01-21 | 2020-01-07 | Nextvr Inc. | Methods and apparatus for environmental measurements and/or stereoscopic image capture |
CN106210705A (zh) * | 2016-09-21 | 2016-12-07 | 深圳市大族三维科技有限公司 | 一种手机拍摄视频处理方法 |
CN106534832A (zh) * | 2016-11-21 | 2017-03-22 | 深圳岚锋创视网络科技有限公司 | 立体影像处理方法及系统 |
CN106791782A (zh) * | 2016-12-19 | 2017-05-31 | 北京星辰美豆文化传播有限公司 | 基于单摄像头的立体图像的拍摄方法、装置和电子设备 |
US20200128224A1 (en) * | 2018-10-18 | 2020-04-23 | Brian W. Bush | Computer implemented method of capturing stereo images using single lens optics of any smart device without the use of any additional hardware |
KR102667741B1 (ko) | 2019-11-19 | 2024-05-22 | 삼성전자주식회사 | 3차원 객체를 표시하는 방법 및 장치 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007504511A (ja) * | 2003-09-04 | 2007-03-01 | シャープ株式会社 | 立体画像を選択するための方法および装置 |
WO2011086898A1 (ja) * | 2010-01-14 | 2011-07-21 | パナソニック株式会社 | 3d画像撮影装置及びその制御方法 |
US20120162374A1 (en) * | 2010-07-23 | 2012-06-28 | 3Dmedia Corporation | Methods, systems, and computer-readable storage media for identifying a rough depth map in a scene and for determining a stereo-base distance for three-dimensional (3d) content creation |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003244727A (ja) * | 2002-02-13 | 2003-08-29 | Pentax Corp | ステレオ画像撮像装置 |
US7466336B2 (en) * | 2002-09-05 | 2008-12-16 | Eastman Kodak Company | Camera and method for composing multi-perspective images |
US7656429B2 (en) * | 2004-02-04 | 2010-02-02 | Hewlett-Packard Development Company, L.P. | Digital camera and method for in creating still panoramas and composite photographs |
TWI411870B (zh) * | 2009-07-21 | 2013-10-11 | Teco Elec & Machinery Co Ltd | 立體影像產生方法及系統 |
US20110025830A1 (en) * | 2009-07-31 | 2011-02-03 | 3Dmedia Corporation | Methods, systems, and computer-readable storage media for generating stereoscopic content via depth map creation |
JP4911230B2 (ja) * | 2010-02-01 | 2012-04-04 | カシオ計算機株式会社 | 撮影装置、並びに制御プログラム及び制御方法 |
US9635251B2 (en) * | 2010-05-21 | 2017-04-25 | Qualcomm Incorporated | Visual tracking using panoramas on mobile devices |
JP5641200B2 (ja) * | 2010-05-28 | 2014-12-17 | ソニー株式会社 | 画像処理装置、画像処理方法および画像処理プログラムならびに記録媒体 |
JP5539514B2 (ja) * | 2010-06-30 | 2014-07-02 | 富士フイルム株式会社 | 撮影装置、プログラム、及び撮影方法 |
US8933996B2 (en) * | 2010-06-30 | 2015-01-13 | Fujifilm Corporation | Multiple viewpoint imaging control device, multiple viewpoint imaging control method and computer readable medium |
KR101731343B1 (ko) * | 2010-07-14 | 2017-04-28 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
US8605136B2 (en) * | 2010-08-10 | 2013-12-10 | Sony Corporation | 2D to 3D user interface content data conversion |
KR20120015165A (ko) * | 2010-08-11 | 2012-02-21 | 엘지전자 주식회사 | 영상의 깊이감 조절 방법 및 이를 이용하는 이동 단말기 |
KR101688153B1 (ko) * | 2010-08-11 | 2016-12-20 | 엘지전자 주식회사 | 3차원 영상의 편집 방법 및 이를 이용하는 이동 단말기 |
JP4763847B1 (ja) * | 2010-08-30 | 2011-08-31 | 楽天株式会社 | 画像変換装置、画像処理装置、ならびに、画像処理システム |
TWI433530B (zh) * | 2010-11-01 | 2014-04-01 | Ind Tech Res Inst | 具有立體影像攝影引導的攝影系統與方法及自動調整方法 |
KR20120054746A (ko) * | 2010-11-22 | 2012-05-31 | 삼성전자주식회사 | 휴대용 단말기에서 입체 이미지를 생성하기 위한 장치 및 방법 |
US9530192B2 (en) * | 2011-06-30 | 2016-12-27 | Kodak Alaris Inc. | Method for determining stereo quality score and automatically improving the quality of stereo images |
US20130121559A1 (en) * | 2011-11-16 | 2013-05-16 | Sharp Laboratories Of America, Inc. | Mobile device with three dimensional augmented reality |
US20130155049A1 (en) * | 2011-12-15 | 2013-06-20 | Luugi Marsan | Multiple hardware cursors per controller |
US20130163854A1 (en) * | 2011-12-23 | 2013-06-27 | Chia-Ming Cheng | Image processing method and associated apparatus |
US9639959B2 (en) * | 2012-01-26 | 2017-05-02 | Qualcomm Incorporated | Mobile device configured to compute 3D models based on motion sensor data |
US8259161B1 (en) * | 2012-02-06 | 2012-09-04 | Google Inc. | Method and system for automatic 3-D image creation |
US20130293686A1 (en) * | 2012-05-03 | 2013-11-07 | Qualcomm Incorporated | 3d reconstruction of human subject using a mobile device |
-
2012
- 2012-11-30 CN CN201280077279.2A patent/CN104813230A/zh active Pending
- 2012-11-30 WO PCT/CN2012/085613 patent/WO2014082276A1/en active Application Filing
- 2012-11-30 EP EP12889005.0A patent/EP2926196A4/en not_active Withdrawn
- 2012-11-30 KR KR1020157014402A patent/KR20150091064A/ko not_active Application Discontinuation
- 2012-11-30 JP JP2015544289A patent/JP2016504828A/ja active Pending
- 2012-11-30 US US14/648,706 patent/US20150326847A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007504511A (ja) * | 2003-09-04 | 2007-03-01 | シャープ株式会社 | 立体画像を選択するための方法および装置 |
WO2011086898A1 (ja) * | 2010-01-14 | 2011-07-21 | パナソニック株式会社 | 3d画像撮影装置及びその制御方法 |
US20120162374A1 (en) * | 2010-07-23 | 2012-06-28 | 3Dmedia Corporation | Methods, systems, and computer-readable storage media for identifying a rough depth map in a scene and for determining a stereo-base distance for three-dimensional (3d) content creation |
Also Published As
Publication number | Publication date |
---|---|
WO2014082276A1 (en) | 2014-06-05 |
CN104813230A (zh) | 2015-07-29 |
KR20150091064A (ko) | 2015-08-07 |
EP2926196A4 (en) | 2016-08-24 |
EP2926196A1 (en) | 2015-10-07 |
US20150326847A1 (en) | 2015-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI712918B (zh) | 擴增實境的影像展示方法、裝置及設備 | |
KR102013978B1 (ko) | 이미지들의 융합을 위한 방법 및 장치 | |
EP2328125B1 (en) | Image splicing method and device | |
TWI544448B (zh) | 影像處理方法以及影像處理裝置 | |
EP3997662A1 (en) | Depth-aware photo editing | |
JP2016504828A (ja) | 単一のカメラを用いて3d画像を取り込む方法およびシステム | |
CN102722080B (zh) | 一种基于多镜头拍摄的多用途立体摄像方法 | |
WO2015192547A1 (zh) | 一种基于移动终端的三维照片拍摄方法及移动终端 | |
CN102135722B (zh) | 摄像机结构、摄像机系统和方法 | |
KR101804199B1 (ko) | 입체 파노라마 영상을 생성하는 장치 및 방법 | |
WO2017032336A1 (en) | System and method for capturing and displaying images | |
CN108616733B (zh) | 一种全景视频图像的拼接方法及全景相机 | |
TW201351959A (zh) | 立體全景影像合成方法及其相關之立體攝影機 | |
TW201220817A (en) | Camera system and image-shooting method with guide for taking stereo photo and method for automatically adjusting stereo photo | |
TWI584050B (zh) | 全景立體圖像的合成方法、裝置及其移動終端 | |
KR20120046802A (ko) | 하나의 카메라를 이용하여 3차원 파노라마 영상을 생성하는 장치 및 방법 | |
WO2023169283A1 (zh) | 双目立体全景图像的生成方法、装置、设备、存储介质和产品 | |
TWI613904B (zh) | 立體影像產生方法及使用此方法的電子裝置 | |
TWI502271B (zh) | 控制方法及電子裝置 | |
Richardt et al. | Video for virtual reality | |
JP2016036081A (ja) | 画像処理装置、方法及びプログラム並びに記録媒体 | |
WO2022002158A1 (zh) | 拍照方法、图像处理方法和电子设备 | |
Rastogi et al. | StereoCam3D (An Android App. That Lets You Capture Realtime 3D Pics And Videos) | |
KR20130070034A (ko) | 스마트폰을 이용한 입체이미지 촬영 장치 및 그 방법 | |
KR20230115816A (ko) | 360 캠을 이용한 스테레오 영상 생성 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20160603 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20160610 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160711 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160809 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20161108 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170829 |