KR20140046344A - 멀티 디스플레이 장치 및 그 촬상 방법 - Google Patents

멀티 디스플레이 장치 및 그 촬상 방법 Download PDF

Info

Publication number
KR20140046344A
KR20140046344A KR1020120112683A KR20120112683A KR20140046344A KR 20140046344 A KR20140046344 A KR 20140046344A KR 1020120112683 A KR1020120112683 A KR 1020120112683A KR 20120112683 A KR20120112683 A KR 20120112683A KR 20140046344 A KR20140046344 A KR 20140046344A
Authority
KR
South Korea
Prior art keywords
display
imaging
unit
image
display unit
Prior art date
Application number
KR1020120112683A
Other languages
English (en)
Other versions
KR101951228B1 (ko
Inventor
곽지연
서석원
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120112683A priority Critical patent/KR101951228B1/ko
Priority to EP13188133.6A priority patent/EP2720191B1/en
Priority to US14/050,683 priority patent/US9571734B2/en
Priority to CN201310470325.1A priority patent/CN103731602B/zh
Publication of KR20140046344A publication Critical patent/KR20140046344A/ko
Application granted granted Critical
Publication of KR101951228B1 publication Critical patent/KR101951228B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof

Abstract

멀티 디스플레이 장치가 개시된다. 멀티 디스플레이 장치는 제1 디스플레이부를 포함하는 제1 바디(body), 제2 디스플레이부를 포함하는 제2 바디(body), 제1 바디 및 제2 바디를 연결하는 힌지부, 제1 바디에 마련된 제1 촬상부, 제2 바디에 마련된 제2 촬상부 및, 제1 촬상부에서 촬상된 제1 이미지와 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 이미지 컨텐츠를 생성하는 제어부를 포함한다. 이에 따라, 멀티 디스플레이 장치를 이용한 다양한 촬상이 가능하다.

Description

멀티 디스플레이 장치 및 그 촬상 방법{MULTI DISPLAY DEVICE AND METHOD FOR PHOTOGRAPHING THEREOF}
본 발명은 멀티 디스플레이 장치 및 그 촬상 방법에 관한 것으로서, 특히, 복수 개의 촬상부를 이용하여 피사체를 각각 촬상하여 그 이미지를 사용하는 멀티 디스플레이 장치 및 그 촬상 방법에 관한 것이다.
최근, 기술 개발에 힘입어 다양한 유형의 디스플레이 장치가 사용되고 있다. 이러한 디스플레이 장치는 카메라도 함께 구비하고 있다. 일반적으로 디스플레이 장치에 구비된 카메라는 기본적인 피사체 촬상, 동영상 촬영의 기능을 제공하고 있다.
최근, 휴대용 디스플레이 장치의 하드웨어 성능이 향상되고, 디스플레이 유닛이 고화질의 선명한 영상을 표시할 수 있게 되면서, 카메라를 활용한 다양한 기능이 개발되고 있다. 대표적으로, 통신 기능을 가진 디스플레이 장치에 구비된 카메라는 일반적인 촬상 기능과 더불어 화상 통화시 사용자를 촬상하여 전송하는 기능을 포함한다.
하지만, 종래의 카메라 활용 기술은 대부분 하나의 디스플레이 유닛을 구비하는 디스플레이 장치를 전제로 한 것이다. 이에 따라, 복수 개의 디스플레이 유닛을 구비한 멀티 디스플레이 장치에 적합한 카메라 활용 기술에 대한 연구는 미진한 것이 사실이었다. 특히, 복수 개의 카메라를 구비한 경우, 그 카메라를 효과적으로 사용할 수 있는 방안에 대한 연구 역시 미진하였다.
따라서 복수의 카메라와 복수의 디스플레이 유닛을 구비한 멀티 디스플레이 장치에서 사용자가 다양하게 카메라를 활용할 수 있는 기술에 대한 필요성이 대두되었다.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은 복수 개의 촬상부를 이용하여 촬상한 이미지를 이용하여 다양한 촬상 이미지를 촬상할 수 있는 멀티 디스플레이 장치 및 그 촬상 방법을 제공하는 것을 목적으로 한다.
본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 멀티 디스플레이 장치는 제1 디스플레이부를 포함하는 제1 바디(body), 제2 디스플레이부를 포함하는 제2 바디(body), 상기 제1 및 제2 바디를 연결하는 힌지부, 상기 제1 바디에 마련된 제1 촬상부, 상기 제2 바디에 마련된 제2 촬상부, 상기 힌지부를 기준으로 상기 제1 바디 또는 상기 제2 바디가 회전하면서 상기 제1 촬상부 또는 상기 제2 촬상부에 의해 촬상이 이루어지면, 촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 제어부를 포함한다.
그리고, 상기 제어부는 상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고, 상기 제1 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성할 수 있다.
또한, 상기 제어부는 상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고, 상기 힌지부를 기준으로 상기 제2 바디가 상기 제1 방향의 반대인 제2 방향으로 회전하면, 상기 제2 촬상부에서 생성되는 라이브 뷰를 상기 제1 디스플레이부에 표시하면서 상기 제2 촬상부를 이용하여 촬상을 수행하여 제2 촬영 범위 내의 이미지들을 캡쳐하며, 상기 제1 촬영 범위 내에서 캡쳐된 이미지 및 상기 제2 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성할 수 있다.
한편, 상기 제어부는 상기 라이브 뷰에서 피사체의 특정 부분이 인식되면 자동 촬상을 수행할 수 있다.
또한, 상기 제어부는 상기 제1 바디 및 상기 제2 바디 사이의 사이각이 기 설정된 각도 조건을 충족하면 자동 촬상을 수행할 수 있다.
또한, 상기 제어부는 상기 회전이 개시되면 기 설정된 시간 주기마다 자동 촬상을 수행할 수 있다.
그리고, 상기 제어부는 파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고, 상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 자동 조정할 수 있다.
그리고, 상기 제어부는 파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고, 상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 조정하도록 유도하는 가이드 이미지를 상기 제1 및 제2 디스플레이부에 디스플레이할 수 있다.
한편, 멀티 디스플레이 장치의 상기 제1 촬상부는 상기 제1 바디에서 상기 제1 디스플레이부가 배치된 면과 동일 면에 배치되고, 상기 제2 촬상부는 상기 제2 바디에서 상기 제2 디스플레이부가 배치된 면과 동일 면에 배치될 수 있다.
그리고, 상기 제1 촬상부는 상기 제1 바디에서 상기 제1 디스플레이부가 배치된 면의 반대측 면에 배치되고, 상기 제2 촬상부는 상기 제2 바디에서 상기 제2 디스플레이부가 배치된 면의 반대측 면에 배치될 수 있다.
또한, 상기 제1 촬상부 및 상기 제2 촬상부 중 적어도 하나의 촬상부는 회전이 가능한 것일 수 있다.
그리고, 상기 제어부는 상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하며, 상기 설정 화면을 통해 선택된 기능에 따라 상기 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어할 수 있다.
또한, 상기 제어부는 상기 제1 디스플레이부에 파노라마 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 일반 디스플레이 기능이 설정되면, 상기 제1 디스플레이부에 상기 파노라마 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 제1 촬상부 및 상기 제2 촬상부에서 각각 촬상한 개별 이미지 컨텐츠 중 적어도 하나를 디스플레이할 수 있다.
본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 멀티 디스플레이 장치는 제1 디스플레이부를 포함하는 제1 바디(body), 제2 디스플레이부를 포함하는 제2 바디(body), 상기 제1 및 제2 바디를 연결하는 힌지부, 상기 제1 바디에 마련된 제1 촬상부, 상기 제2 바디에 마련된 제2 촬상부, 상기 제1 촬상부에 의해 생성되는 제1 라이브 뷰를 상기 제1 디스플레이부를 통해 디스플레이하고, 상기 제2 촬상부에 의해 생성되는 제2 라이브 뷰를 상기 제2 디스플레이부를 통해 디스플레이하는 제어부를 포함하며, 상기 제어부는, 상기 제1 및 제2 라이브 뷰 간의 중복 영역의 크기가 기 설정된 조건을 충족하면 상기 제1 촬상부 및 상기 제2 촬상부를 각각 제어하여 촬상을 수행하고, 촬상된 이미지들을 조합하여 파노라마 이미지 컨텐츠를 생성한다.
그리고, 본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 멀티 디스플레이 장치는 제1 디스플레이부를 포함하는 제1 바디(body), 제2 디스플레이부를 포함하는 제2 바디(body), 상기 제1 및 제2 바디를 연결하는 힌지부, 상기 제1 바디에 마련된 제1 촬상부, 상기 제2 바디에 마련된 제2 촬상부, 상기 제1 촬상부에서 촬상된 제1 이미지와 상기 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 컨텐츠를 생성하는 제어부를 포함하며, 상기 제어부는 상기 제1 이미지를 좌안 영상으로 처리하고, 상기 제2 이미지를 우안 영상으로 처리하여, 상기 좌안 영상 및 상기 우안 영상을 포함하는 3D 이미지 컨텐츠를 생성한다.
그리고, 상기 제어부는 상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하며, 상기 설정 화면을 통해 선택된 기능에 따라 상기 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어할 수 있다.
또한, 상기 제어부는 상기 제1 디스플레이부에 3D 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 2D 디스플레이 기능이 설정되면, 상기 제1 디스플레이부에 상기 3D 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 좌안 영상 및 상기 우안 영상 중 적어도 하나를 디스플레이할 수 있다.
본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서, 상기 제1 바디에 마련된 제1 촬상부 또는 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계, 촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 단계를 포함하며, 상기 촬상을 수행하는 단계는 상기 힌지부를 기준으로 상기 제1 바디 또는 상기 제2 바디가 회전하면서 상기 제1 촬상부 또는 상기 제2 촬상부에 의해 촬상이 이루어진다.
그리고, 상기 촬상을 수행하는 단계는 상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고, 상기 파노라마 이미지 컨텐츠를 생성하는 단계는 상기 제1 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성할 수 있다.
또한, 상기 촬상을 수행하는 단계는 상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고, 상기 힌지부를 기준으로 상기 제2 바디가 상기 제1 방향의 반대인 제2 방향으로 회전하면, 상기 제2 촬상부에서 생성되는 라이브 뷰를 상기 제1 디스플레이부에 표시하면서 상기 제2 촬상부를 이용하여 촬상을 수행하여 제2 촬영 범위 내의 이미지들을 캡쳐하며, 상기 파노라마 이미지 컨텐츠를 생성하는 단계는 상기 제1 촬영 범위 내에서 캡쳐된 이미지 및 상기 제2 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성할 수 있다.
그리고, 상기 촬상을 수행하는 단계는 상기 라이브 뷰에서 피사체의 특정 부분이 인식되면 자동 촬상을 수행할 수 있다.
또한, 상기 촬상을 수행하는 단계는 상기 제1 바디 및 상기 제2 바디 사이의 사이각이 기 설정된 각도 조건을 충족하면 자동 촬상을 수행할 수 있다.
그리고, 상기 촬상을 수행하는 단계는 상기 회전이 개시되면 기 설정된 시간 주기마다 자동 촬상을 수행할 수 있다.
또한, 상기 촬상을 수행하는 단계는 파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고, 상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 자동 조정할 수 있다.
그리고, 상기 촬상을 수행하는 단계는 파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고, 상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 조정하도록 유도하는 가이드 이미지를 상기 제1 및 제2 디스플레이부에 디스플레이할 수 있다.
한편, 멀티 디스플레이 장치의 촬상 방법은 상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하는 기능 설정 단계, 상기 설정 화면을 통해 선택된 기능을 상기 제1 및 제2 디스플레이부에 디스플레이하는 단계를 더 포함할 수 있다.
그리고, 상기 디스플레이하는 단계는 상기 제1 디스플레이부에 파노라마 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 일반 디스플레이 기능이 설정되면, 상기 제1 디스플레이부에 상기 파노라마 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 제1 촬상부 및 상기 제2 촬상부에서 각각 촬상한 개별 이미지 컨텐츠 중 적어도 하나를 디스플레이할 수 있다.
본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서, 상기 제1 바디에 마련된 제1 촬상부 또는 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계, 촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 단계를 포함하며, 상기 촬상을 수행하는 단계는 상기 제1 촬상부에 의해 생성되는 제1 라이브 뷰를 상기 제1 디스플레이부를 통해 디스플레이하고, 상기 제2 촬상부에 의해 생성되는 제2 라이브 뷰를 상기 제2 디스플레이부를 통해 디스플레이하며, 상기 제1 및 제2 라이브 뷰 간의 중복 영역의 크기가 기 설정된 조건을 충족하면 상기 제1 촬상부 및 상기 제2 촬상부를 각각 제어하여 촬상을 수행한다.
그리고, 본 발명의 상술한 목적을 달성하기 위한 일 실시 예에 따르면 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서, 상기 제1 바디에 마련된 제1 촬상부 및 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계, 상기 제1 촬상부에서 촬상된 제1 이미지와 상기 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 이미지 컨텐츠를 생성하는 단계를 포함하며, 상기 하나의 이미지 컨텐츠를 생성하는 단계는 상기 제1 이미지를 좌안 영상으로 처리하고, 상기 제2 이미지를 우안 영상으로 처리하여, 상기 좌안 영상 및 상기 우안 영상을 포함하는 3D 이미지 컨텐츠를 생성한다.
한편, 멀티 디스플레이 장치의 촬상 방법은 상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하는 기능 설정 단계, 상기 설정 화면을 통해 선택된 기능을 상기 제1 및 제2 디스플레이부에 디스플레이하는 단계를 더 포함할 수 있다.
그리고, 상기 디스플레이하는 단계는 상기 제1 디스플레이부에 3D 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 2D 디스플레이 기능이 설정되면, 상기 제1 디스플레이부에 상기 3D 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 좌안 영상 및 상기 우안 영상 중 적어도 하나를 디스플레이할 수 있다.
따라서, 멀티 디스플레이 장치는 복수의 카메라를 이용하여 촬상한 이미지를 이용하여 다양한 촬상 이미지를 촬상할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 구성을 나타낸 블록도.
도 2 내지 도 7은 본 발명의 다양한 실시 예에 따른 멀티 디스플레이 장치의 촬상부 배치 예를 설명하기 위한 도면.
도 8 내지 도 9는 본 발명의 일 실시 예에 따른 뷰 파인더를 구비한 멀티 디스플레이 장치를 도시한 도면.
도 10은 본 발명의 일 실시 예에 따른 촬영 방법을 설명하기 위한 도면.
도 11은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 3D 이미지 촬상 방법의 흐름도.
도 12는 본 발명의 일 실시 예에 따른 3D 이미지 컨텐츠의 뎁스 설정 방법을 나타내는 도면.
도 13은 본 발명의 일 실시 예에 따른 3D 이미지 촬상을 위해 뎁스 가이드를 이용하는 방법을 설명하는 도면.
도 14는 본 발명의 일 실시 예에 따른 회전형 촬상부를 구비한 멀티 디스플레이 장치에서 3D 이미지 컨텐츠를 생성하는 방법을 설명하는 도면.
도 15는 본 발명의 일 실시 예에 따른 파노라마 이미지 컨텐츠를 생성하는 방법을 설명하는 도면.
도 16은 본 발명의 일 실시 예에 따른 최소 중복 영역을 인식하여 파노라마 이미지를 자동 촬상하는 방법을 설명하는 도면.
도 17은 본 발명의 일 실시 예에 따른 파노라마 이미지를 촬상하는 방법의 흐름도.
도 18은 본 발명의 일 실시 예에 따른 싱글 촬상 모드에서 파노라마 이미지의 촬상 방법을 설명하는 도면.
도 19는 본 발명의 일 실시 예에 따른 멀티 촬상 모드에서 파노라마 이미지의 촬상 방법을 설명하는 도면.
도 20은 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치에서의 파노라마 이미지 촬상 방법의 흐름도.
도 21은 본 발명의 일 실시 예에 따른 파노라마 이미지 촬상을 위한 촬상부의 각도 설정 방법을 나타내는 도면.
도 22는 본 발명의 일 실시 예에 따른 파노라마 이미지 촬상을 위해 각도 가이드를 이용하는 방법을 설명하는 도면.
도 23은 본 발명의 일 실시 예에 따른 크롭 이미지 생성을 설명하는 도면.
도 24는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 싱글 모드를 도시한 도면.
도 25는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 익스펜딩 모드를 도시한 도면.
도 26 내지 도 28은 본 발명의 일 실시 예에 따른 익스펜딩 모드에서 촬상부 촬상 화면을 도시한 도면.
도 29는 본 발명의 일 실시 예에 따른 화면 프레임을 선택하는 방법을 설명하는 도면.
도 30 내지 도 31은 본 발명의 또 다른 실시 예에 따른 멀티 디스플레이 장치의 동작을 설명하기 위한 도면.
도 32는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 툴 킷 모드를 도시한 도면.
도 33 내지 도 35는 본 발명의 일 실시 예에 따른 툴 킷 모드에서 화면 프레임을 설명하는 도면.
도 36은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 화상 통화 기능을 설명하는 도면.
도 37은 본 발명의 일 실시 예에 따른 회전형 촬상부를 구비한 멀티 디스플레이 장치의 화상 통화 기능을 설명하는 도면.
도 38은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 스탠딩 모드를 도시한 도면.
도 39 내지 도 40은 본 발명의 일 실시 예에 따른 스탠딩 모드에서 화면 프레임을 설명하는 도면.
도 41은 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치의 스탠딩 모드를 도시한 도면.
도 42는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 구성을 구체적으로 설명하기 위한 블록도.
도 43은 다양한 구현 예에 따른 멀티 디스플레이 장치의 세부적인 구성을 설명하기 위한 블록도.
도 44는 복수의 프레임 버퍼를 이용하여 각 디스플레이부의 동작을 제어하는 멀티 디스플레이 장치의 구성을 나타내는 블럭도.
도 45는 통합 프레임 버퍼를 이용하여 각 디스플레이부의 동작을 제어하는 멀티 디스플레이 장치의 구성을 나타내는 블럭도.
도 46은 도 44에 도시된 2개의 디스플레이부 중 제1 디스플레이부의 구성을 구체적으로 설명하기 위한 도면.
도 47은 도 46에 도시된 디스플레이 패널을 구성하는 R, G, B 화소를 구성하는 회로 구조를 설명하기 위한 도면.
도 48은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 시스템 계층 구조를 설명하기 위한 도면.
도 49 내지 도 50은 근접 터치를 감지하는 방법을 설명하기 위한 도면.
도 51은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도.
도 52는 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도.
도 53은 본 발명의 또 다른 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도.
이하 본 발명의 다양한 실시 예를 첨부된 도면을 참조하여 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 명세서에서는 멀티 디스플레이 장치는 복수의 디스플레이부를 포함하며 그 디스플레이부들을 통해 각종 화면을 디스플레이하는 장치이다. 구체적으로는, 멀티 디스플레이 장치는, 태블릿 PC(Tablet Personal Computer), 휴대용 멀티미디어 재생 장치(Portable Multimedia Player: PMP), 개인 정보 단말기(Personal Digital Assistant: PDA), 스마트 폰(Smart Phone), 휴대폰, 디지털 액자, 게임기 등과 같은 유형으로 구현될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 구성을 나타낸 블록도이다.
도 1을 참조하면 멀티 디스플레이 장치(100)는 제1 바디(body)(2), 제2 바디(body)(4) 및 힌지부(185)를 포함한다. 제1 바디(body)(2)는 제어부(130), 제1 촬상부(140a), 제1 디스플레이부(190a)를 포함하는 하나의 독립적인 외관 구성을 의미하고, 제2 바디(body)(4)는 제2 촬상부(140b), 제2 디스플레이부(190b)를 포함하는 또 다른 독립적인 외관 구성을 의미한다.
제어부(130)는 제2 바디(4)에 포함될 수도 있고, 복수 개로 마련되어 제1 및 제2 바디(2, 4) 모두에 포함될 수도 있다. 제1 및 제2 바디(2, 4)에는 도시된 구성 이외에 다양한 회로나 칩, 신호선 등이 더 포함될 수 있으나, 설명의 편의상 세부적인 구성은 도시를 생략한다.
제1 바디(2)와 제2 바디(4)는 힌지부(185)에 의해 연결된다. 힌지부(185)는 제1 바디(2) 및 제2 바디(4)가 힌지부(185)를 기준으로 회전 가능하도록 제1 바디(2) 및 제2 바디(4)를 지지한다. 제1 바디(2) 및 제2 바디(4)의 회전 각도는 힌지부(185)의 형상에 따라 다양하게 결정될 수 있다.
가령, 제1 바디(2) 및 제2 바디(4) 중 적어도 하나가 회전하게 되면 제1 및 제2 디스플레이부(190a, 190b)가 서로 맞닿는 형태로 클로즈될 수도 있고, 그 반대 방향으로 완전히 젖혀져서 제1 및 제2 디스플레이부(190a, 190b)의 배면이 서로 맞닿는 형태로 오픈될 수도 있다. 또는, 힌지부(185)의 구성에 따라서는 180도로 완전히 펴지는 형태로 오픈될 수도 있다. 힌지부(185)를 기준으로 제1 바디(2) 및 제2 바디(4)가 벌어지는 형태에 대해서는 후술하는 다양한 실시 예들에서 구체적으로 설명한다.
제어부(130)는 제1 및 제2 디스플레이부(190a, 190b)에 대한 사용자 터치, 제1 및 제2 바디(2, 4)에 마련된 버튼 선택, 사용자 제스처, 음성 명령 등과 같은 다양한 사용자 조작에 따라 멀티 디스플레이 장치의 동작을 제어한다. 가령, 제1 및 제2 바디(2, 4)에 전원 버튼이 마련되어 있다면, 그 전원 버튼의 선택 여부에 따라 턴-온 또는 턴-오프 동작을 수행할 수 있다. 또는, 제1 및 제2 디스플레이부(190a, 190b)의 화면 상에 메뉴가 표시되어 있고, 그 메뉴를 사용자가 터치하였다면 터치된 메뉴에 대응되는 동작을 수행할 수도 있다. 또한, 제어부(130)는 제1 및 제2 디스플레이부(190a, 190b) 중 적어도 하나를 이용하여 다양한 화면을 디스플레이할 수 있다. 이 경우, 제1 및 제2 디스플레이부(190a, 190b)가 함께 하나의 화면을 표시할 수도 있고, 각자 서로 다른 화면을 표시할 수도 있다. 제어부(130)는 실행되는 어플리케이션이나, 컨텐츠의 종류, 사용자의 선택 등과 같은 다양한 조건에 따라 제1 및 제2 디스플레이부(190a, 190b) 각각을 선택적으로 활성화시켜 다양한 화면을 디스플레이할 수 있다. 도 1에서는 제1 및 제2 디스플레이부(190a, 190b)와 같이 두 개의 디스플레이 유닛을 포함하는 장치의 구성을 나타냈으므로, 듀얼 디스플레이 장치라고도 칭할 수 있다. 하지만, 디스플레이 유닛의 개수는 2개 뿐 아니라 3개 이상이 될 수도 있으므로, 설명의 편의를 위해서 본 명세서에서는 멀티 디스플레이 장치로 통칭하여 설명한다.
제1 및 제2 촬상부(140a, 140b)는 각각 제1 바디(2) 및 제2 바디(4)에 마련될 수 있다. 제1 및 제2 촬상부(140a, 140b) 각각은 카메라를 포함한다. 각 카메라는 렌즈와 이미지 센서를 포함한다.
상술한 바와 같이 멀티 디스플레이 장치(100)는 복수의 촬상부(140a, 140b)와 복수의 디스플레이부(190a, 190b)를 포함하므로, 제어부(130)는 이들 구성요소들을 제어하여 다양한 방식의 촬영을 수행할 수 있다.
가령, 제어부(130)는 제1 및 제2 촬상부(140a, 140b)에서 각각 촬상된 이미지를 조합하여 하나의 이미지 컨텐츠를 생성할 수 있다. 예를 들어, 하나의 이미지 컨텐츠는 3D 이미지 컨텐츠일 수 있고, 파노라마 이미지 컨텐츠일 수 있다. 3D 이미지 컨텐츠는 동일한 피사체에 대한 제1 및 제2 촬상부(140a, 140b)의 시차를 이용하여 피사체에 뎁스(depth)를 줌으로써 입체적으로 인식될 수 있다. 파노라마 이미지 컨텐츠는 좌우 또는 상하로 촬상된 이미지를 연속적으로 연결하여 생성될 수 있다.
이 밖에도, 제어부(130)는 실시 예에 따라 다양한 방식의 촬영 동작을 수행할 수 있다. 제어부(130)는 제1 바디(2)와 제2 바디(4)가 이루는 사이 각이나, 부가 정보, 기타 사용자 명령 등에 기초하여 촬영 동작을 제어할 수 있다.
이러한 촬영 동작은 촬상부의 개수나, 형태, 배치 위치에 따라 상이하게 구현될 수 있다.
가령, 도 1의 멀티 디스플레이 장치의 블록도는 제1 및 제2 촬상부(140a, 140b)가 구비된 것으로 도시되었으나, 제3 및 제4 촬상부를 더 포함할 수 있다. 따라서, 제어부(130)는 활성화되는 촬상부의 개수에 따라 제1 및 제2 디스플레이부의 화면 분할 개수 및 방법을 제어할 수 있다. 또한, 각 촬상부를 각각 다른 기능으로 동작하도록 제어할 수 있다. 예를 들어, 제1 촬상부(140a)는 스틸 이미지 캡쳐 기능을 할당하고, 제2 촬상부(140b)는 동영상 이미지 생성 기능을 할당할 수 있다. 또는, 제1 촬상부(140a)는 일반 촬영 기능을 할당하고, 제2 촬상부(140b)는 줌 촬영 기능을 할당할 수 있다.
따라서, 촬영 동작과 관련된 다양한 실시 예들을 설명함에 앞서, 촬상부의 배치와 관련된 다양한 실시 예들에 대하여 먼저 설명한다.
< 촬상부 배치에 대한 다양한 실시 예>
도 2 내지 도 7은 본 발명의 다양한 실시 예들에 따른 멀티 디스플레이 장치의 촬상부 배치 예를 설명하기 위한 도면이다. 설명의 편의 상, 도 2 내지 도 7에서는 촬상부 배치의 설명과 관련없는 부분에 대한 도시는 간략화하거나, 생략하였으나, 실제 제품으로 구현되었을 때는 도시되지 않은 버튼이나, 스피커, 마이크 및 기타 구성이 더 마련될 수 있음은 물론이다.
도 2를 참조하면 멀티 디스플레이 장치(100)는 제1 바디(2) 및 제2 바디(4)로 구성되며, 제1 바디(2)는 제1 디스플레이부(190a)를 포함하고, 제2 바디(4)는 제2 디스플레이부(190b)를 포함한다. 제1 바디(2) 및 제2 바디(4)는 힌지부(185)에 의해 연결되어 상대적으로 이동 가능하도록 구성된다.
제1 촬상부(141)는 제1 바디(2)의 가장자리 영역 중 상기 힌지부(185)의 맞은 편 가장자리 영역의 중앙부에 배치될 수 있다. 제2 촬상부(142)는 제2 바디(4)의 가장자리 영역 중 상기 힌지의 맞은 편 가장자리 영역의 중앙부에 배치될 수 있다.
다음으로, 도 3을 참조하여 촬상부의 배치를 설명한다. 설명의 편의를 위해 사용자가 멀티 디스플레이 장치(100)를 바라보는 방향을 기준으로 설명한다. 제1 촬상부(141')는 제1 바디(2) 좌측 가장자리 영역의 중앙 면에 배치될 수 있고, 제2 촬상부(142')는 제2 바디(4) 좌측 가장자리 영역의 중앙 면에 배치될 수 있다. 다른 실시 예로는 제1 및 제2 촬상부는 각각 제1 및 제2 바디(2, 4)의 우측 가장자리 영역의 중앙면에 배치될 수 있다. 또 다른 실시 예로는 제1 및 제2 촬상부는 각각 제1 및 제2 바디(2, 4)의 모서리 영역에 배치될 수 있다. 멀티 디스플레이 장치(100)는 도 3에서 도시한 바와 같이 가로 방향으로 사용 가능할 뿐만 아니라 세로 방향으로도 사용 가능하다.
도 4는 촬상부가 디스플레이부의 반대면에 배치된 멀티 디스플레이 장치를 도시하였다. 제1 및 제2 촬상부(141a, 142a)는 디스플레이부가 배치된 반대면 가장자리 영역에 배치될 수 있다. 그러나, 촬상부의 배치는 도 4에서 도시된 위치에 한정되는 것은 아니다. 제1 및 제2 촬상부(141a, 142a)가 디스플레이부 반대면에 배치된 경우, 사용자가 피사체를 촬상할 때, 디스플레이부에 표시되는 라이브 뷰 화면을 확인하면서 촬상하는 것이 가능하다.
도 5는 본 발명의 일 실시 예에 따른 세 개의 촬상부가 구비된 멀티 디스플레이 장치를 도시한 도면이다. 도 5를 참조하면, 제1 촬상부(141)는 제1 바디(2)의 제1 디스플레이부(190a)가 배치된 면과 같은 면에 배치되고, 제2 촬상부(142)는 제2 바디(4)의 제2 디스플레이부(190b)가 배치된 면과 같은 면에 배치된다. 그리고, 제3 촬상부(146)는 제2 바디(4)의 제2 디스플레이부(190b)가 배치된 면의 반대면에 배치될 수 있다. 도 5에는 제1 및 제2 촬상부(141, 142)가 힌지부(185)의 맞은편 가장자리 영역의 중앙부에 배치된 멀티 디스플레이 장치(100)가 도시되어 있으나, 여기에 한정되지 않는다. 예를 들어, 제1 및 제2 바디(2, 4)의 가장자리 영역 중 어느 하나의 일 측 가장자리 영역의 중앙부 또는 힌지부(185)와 접하지 않는 모서리 영역에 각각 배치될 수 있다. 제3 촬상부(146)도 제2 바디(4)의 제2 디스플레이부(190b)가 배치된 반대면 일 측 모서리 영역에 배치가 한정되는 것은 아니고, 반대측 모서리 영역 또는 제2 바디(4)의 힌지와 접하지 않는 가장자리 영역의 중앙부에 배치될 수 있다. 또한, 제3 촬상부(146)는 제1 바디(2)의 제1 디스플레이부(190a)가 배치된 반대면에 배치될 수 있다.
도 6은 본 발명의 일 실시 예에 따른 네 개의 촬상부가 구비된 멀티 디스플레이 장치를 도시한 도면이다.
도 6을 참조하면, 제1 및 제2 촬상부(141, 142)는 각각 제1 및 제2 바디(2, 4)의 디스플레이부가 배치된 면 가장자리 영역 중 힌지부(185)와 접하지 않는 가장자리 중앙부에 배치될 수 있고, 제3 및 제4 촬상부(143, 144)는 각각 제1 및 제2 바디(2, 4)의 디스플레이부 반대면에 배치될 수 있다. 제1 내지 제4 촬상부(141, 142, 143, 144)는 도 6에 도시된 배치 위치에 한정되는 것은 아니다.
세 개 이상의 멀티 촬상부가 배치되는 경우, 동일한 면에 배치된 두 개의 촬상부는 3D 또는 파노라마 이미지 컨텐츠 생성을 위해 사용되고, 나머지 촬상부는 이미지 촬영, 동영상 촬영 등 다른 용도로 사용될 수 있다.
도 7은 본 발명의 일 실시 예에 따른 회전이 가능한 촬상부가 구비된 멀티 디스플레이 장치를 도시한 도면이다.
도 7을 참조하면, 제1 회전형 촬상부(148)는 제1 바디(2)의 힌지부(185) 맞은편 가장자리 영역의 중앙부에 배치되고, 제2 회전형 촬상부(149)는 제2 바디(4)의 힌지부(185) 맞은편 가장자리 영역의 중앙부에 배치된다. 그리고 제1 및 제2 회전형 촬상부(148, 149)는 각각 제1 및 제2 바디(2, 4)와 회전 가능한 힌지로 연결될 수 있다. 따라서, 회전형 촬상부(148, 149)는 일정 각도 범위 내에서 회전할 수 있다.
회전형 촬상부의 회전 방법은 사용자가 직접 회전시키는 수동형이 될 수 있고, 기설정된 조건에 의해 기설정된 값으로 회전하는 자동형이 될 수 있다. 또는, 수동형과 자동형이 모두 가능한 구조가 될 수 있다. 제1 및 제2 회전형 촬상부 중 적어도 하나는 외부 영상을 촬영하기 위하여 디스플레이부의 반대면으로 자동으로 회전하거나 수동으로 회전시킬 수 있고, 공간 제스처 인식을 위해 다스플레이부와 같은 면으로 자동으로 회전하거나 수동으로 회전시킬 수 있다.
공간 제스처는 터치 스크린의 터치나 버튼의 누름과 같은 물리적인 접촉없이 공간 상에서 사용자 객체의 일정한 움직임을 이용하여 멀티 디스플레이 장치(100)를 동작시키는 것을 의미한다.
이상과 같이 촬상부의 개수 및 배치 위치는 실시 예에 따라 다양하게 구현될 수 있다. 하지만, 촬상부의 개수는 상술한 도면에 도시된 개수에 한정되는 것은 아니고, 또한, 촬상부의 배치 위치도 상술한 배치 위치에 한정되는 것은 아니다.
제어부(130)는 각 촬상부를 통해 입사되는 광에 대응되는 라이브 뷰를 제1 및 제2 디스플레이부(190a, 190b) 중 적어도 하나에 디스플레이할 수 있다. 따라서, 사용자가 라이브 뷰를 보면서 촬상을 수행하도록 할 수 있다. 하지만, 도 2나 도 3과 같이 촬상부와 디스플레이부가 같은 면에 배치된 경우에는 사용자의 위치 상 라이브 뷰를 볼 수 없게 된다. 따라서, 이러한 상황을 대비하기 위하여 뷰 파인더나 추가 디스플레이를 마련할 여지가 있다.
도 8 내지 도 9는 본 발명의 일 실시 예에 따른 뷰 파인더(view finder)를 구비한 멀티 디스플레이 장치를 도시한 도면이다.
도 8을 참조하면 멀티 디스플레이 장치(100)의 한 쪽 힌지부(185a)는 뷰 파인더(11a)를 포함한다. 뷰 파인더는 촬상부를 이용하여 피사체를 촬상할 때 사용자에게 촬상되는 이미지 또는 구도를 볼 수 있도록 해 주는 역할을 한다. 도 8과 같이 제1 및 제2 촬상부(141, 142)가 제1 및 제2 디스플레이부(190a, 190b)와 같은 면에 배치된 경우, 사용자가 피사체을 촬상하기 위해 촬상부를 피사체 방향으로 향하게 하면 디스플레이부도 피사체 방향을 향하게 된다. 따라서, 사용자는 어떤 이미지가 촬상되는지 인지함에 불편함이 있을 수 있다. 뷰 파인더가 있으면 사용자는 뷰 파인더를 통해 어떤 이미지가 촬상되는지 인지할 수 있으므로 이러한 불편함이 해소된다.
제1 실시 예로서 뷰 파인더는 힌지부에 일정한 크기의 공간을 가진 구멍 형태로 제작될 수 있다. 촬상부들(141, 142) 및 뷰 파인더(11a)는 각각 바디(2, 4) 및 힌지부(185a)에 고정된 형태로 배치되어 있으므로 뷰 파인더(11a)를 통해 보이는 피사체의 구도는 촬상부에 의해 촬상되는 이미지와 거의 일치하게 된다. 뷰 파인더를 통해 보이는 피사체의 구도와 촬상부에 의해 촬상되는 이미지를 최대한 일치시키기 위하여 뷰 파인더의 공간 크기를 조정하여 제작하거나 촬상부의 배치 위치를 조정하여 제작할 수 있다.
제2 실시 예로서 뷰 파인더는 서브 디스플레이 모듈로 제작될 수 있다. 이 경우, 서브 디스플레이부는 제1 및 제2 디스플레이부(190a, 190b)에 표시되는 영상을 그대로 표시할 수 있다. 뷰 파인더(11a)는 도 8에서 도시된 위치에 한정되는 것은 아니며 제1 바디(2) 또는 제2 바디(4)에 구비될 수도 있다.
도 9를 참조하면, 뷰 파인더(11b)는 힌지부에 슬라이딩되어 업-다운 될 수 있는 구조로 제작될 수 있다. 뷰 파인더(11b)의 피사체를 관찰하는 부분은 도 8에서 설명한 바와 같이, 일정한 크기의 공간을 가진 구멍 형태로 제작될 수 있고, 서브 디스플레이 모듈로 제작될 수 있다. 서브 디스플레이 모듈은 액정 디스플레이 패널(Liquid Crystal Display Panel: LCD Panel), 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), 유기발광 소자(Organic Light Emitting Diode, OLED), VFD(Vacuum Fluorescent Display), FED(Field Emission Display), ELD(Electro Luminescence Display), 투명 디스플레이 패널 등 다양한 디스플레이 기술로 구현될 수 있다.
제1 실시 예로서 뷰 파인더(11b)는 힌지부(185b)의 디스플레이부 반대 면에 제1 레일을 설치하고 뷰 파인더(11b)의 좌우측 끝단에 제1 레일과 쌍을 이루는 제2 레일을 설치하여 힌지부(185b)와 뷰 파인더(11b)를 결합하는 방법으로 제작될 수 있다.
제2 실시 예로서 뷰 파인더(11b)는 한 쪽 끝단을 회전할 수 있는 구조로 힌지부(185b)에 연결하여 필요한 경우 180도 돌려 돌출시키는 방법으로 제작될 수 있다.
제3 실시 예로서 뷰 파인더(11b)는 힌지부(185b) 측면의 중앙부에 제1 및 제2 디스플레이부(190a, 190b)가 나누어지는 축 방향으로 팝 업(pop up)되는 형태로 제작될 수 있다. 뷰 파인더(11b)를 팝 업 시키는 방법은 수동으로 업-다운 시킬 수 있고, 팝 다운(pop down) 상태에서 한 번 누르면 팝 업 되고, 팝 업 상태에서 한 번 누르면 팝 다운되도록 할 수 있다. 상술한 동작을 위해서 스프링, 버튼 등과 같은 적절한 부품이 추가될 수 있다.
이상과 같이, 촬영 동작에 사용되는 촬상부나 뷰 파인더 등은 실시 예에 따라 다양한 개수 및 위치에 배치될 수 있다. 따라서, 이러한 촬상부를 이용한 촬영 동작도 다양하게 이루어질 수 있다. 이하에서는, 본 발명의 다양한 실시 예에 따른 촬영 동작을 설명한다.
< 촬영 동작에 대한 다양한 실시 예>
도 10은 본 발명의 일 실시 예에 따른 촬영 방법을 설명하기 위한 도면이다. 구체적으로는, 도 10은 3D 이미지 컨텐츠를 촬영하는 방법을 설명하기 위한 도면이다.
사람은 좌우측 양안으로 사물을 바라본다. 좌우측 양안은 일정거리만큼 떨어져 있으므로 동일한 사물을 다른 각도의 두 개의 이미지로 받아들이게 된다. 각도가 다른 2개의 이미지를 받는 대뇌는 이를 하나의 이미지로 인식하도록 하고, 이런 과정에서 사물이 입체적으로 느껴지게 되는 것이다.
도 10을 참조하면, 제1 및 제2 촬상부(141a, 142a)는 동일한 'A'라는 피사체를 촬상한다. 사용자가 피사체를 바라보는 방향을 기준으로 볼 때, 제1 촬상부(141a)는 'A'보다 좌측에 있으므로 다소 좌측 방향에서 바라보는 이미지가 쵤상되고, 제2 촬상부(142a)는 'A'보다 우측에 있으므로 다소 우측 방향에서 바라보는 이미지가 촬상된다. 제1 및 제2 촬상부(141a, 142a)의 간격을 시차라고 하며 시차가 발생한 두 개의 이미지를 하나의 이미지 컨텐츠로 조합하여 3D 이미지 컨텐츠(21)를 생성할 수 있다. 구체적으로는 제1 촬상부(141a)에서 촬상된 제1 이미지와 제2 촬상부(141b)에서 촬상된 제2 이미지를 상하로 연결하는 탑투바텀(top to bottom) 방식 또는 제1 이미지 및 제2 이미지를 좌우로 연결하는 사이드바이사이드(side by side) 방식으로 조합하여, 3D 이미지 컨텐츠(21)를 생성할 수 있다.
3D 입체감을 더 잘 느낄 수 있도록 디스플레이부는 특수한 방식으로 제작될 수 있다. 하나의 예로서, 디스플레이 패널 위에 사람의 두 눈이 서로 다른 픽셀을 볼 수 있게 해 주는 배리어(barrier)를 포함시킬 수 있다. 배리어에 의해 좌우 양안이 서로 다른 픽셀을 보게 됨에 따라 이미지의 뎁스(depth)가 생겨 사용자는 입체감을 느낄 수 있다. 뎁스는 양 안 시차로 인한 입체감의 정도를 의미한다. 다른 예로서는, 디스플레이부 패널은 작은 렌즈를 포함한다. 사용자가 디스플레이부에 표시되는 이미지를 바라보면 양안 시차 및 렌즈의 굴절에 의해 좌우 양안은 서로 다른 픽셀을 보게 된다. 따라서, 이미지의 뎁스(depth)가 생겨 사용자는 입체감을 느낄 수 있다. 결과적으로 뎁스에 따라 입체감이 달라질 수 있다. 이러한 뎁스는 제1 및 제2 촬상부(141a, 142a) 각각의 촬상 범위 간의 각도 차이에 의해 결정된다. 따라서, 사용자는 힌지부(185)를 기준으로 제1 바디(2) 및 제2 바디(4) 중 적어도 하나를 수동으로 회전시켜, 원하는 뎁스가 확보되도록 맞춘 후 촬상을 수행할 수 있다.
이 경우, 사용자가 3D 이미지 컨텐츠의 뎁스를 원하는 크기로 조정하기 위하여 수 차례 반복 촬영을 하는 등의 시행착오를 겪을 수 있다. 따라서, 본 발명의 또 다른 실시 예에 따르면, 사용자가 원하는 뎁스를 먼저 설정하고 그에 따라 촬영을 수행하는 뎁스 설정 모드를 제공하여 줄 수 있다.
도 11은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 3D 이미지 촬상 방법의 흐름도이다.
도 11에 따르면, 멀티 디스플레이 장치는 뎁스 설정 모드를 지원한다. 구체적으로는, 제어부는 뎁스 설정 모드가 선택된 상태인지 판단한다(S1110). 가령, 사용자가 설정 메뉴를 선택하면 멀티 디스플레이 장치는 뎁스 설정 화면을 디스플레이할 수 있다. 사용자는 뎁스 설정 화면에서 뎁스를 설정할 수 있고, 멀티 디스플레이 장치는 뎁스 설정 모드가 선택된 것으로 판단한다. 뎁스 설정 모드란 3D 이미지 컨텐츠의 뎁스를 사용자가 원하는 크기로 선택할 수 있는 모드를 의미한다.
두 촬상부간의 간격이 조절되면 시차가 변하기 때문에 뎁스가 조정될 수 있다. 사용자는 뎁스를 설정하지 않고 촬상을 할 수 있고(S1130), 원하는 뎁스를 설정하여 촬상을 수행할 수도 있다. 예를 들어, 뎁스는 깊음 보통, 얕음의 3단계로 구분될 수 있고, 단계를 나누어 숫자로 구분될 수도 있다.
상술한 바와 같이 뎁스는 두 개 촬상부의 시차에 의해 발생하는 것이므로, 설정된 뎁스에 해당되는 촬상부 간격이 되도록 촬상부를 조절해야 한다. 따라서, 제어부는 촬상 각도 조정 가이드를 표시할 수 있다(S1120). 촬상 각도 조정 가이드는 디스플레이부를 통하여 사용자에게 촬상부를 어느 정도 이동시켜야 되는지 표시할 수 있다. 또는, 촬상부 사이의 각도가 표시될 수 있고, 촬상부 사이의 각도에 대응되는 뎁스 정도가 표시될 수도 있다.
각도 조정이 끝나면 사용자의 촬상 명령의 입력에 따라 촬상을 수행한다(S1130). 촬상이 수행되면 제어부는 두 개의 이미지를 조합하여 3D 이미지 컨텐츠를 생성한다(S1140). 3D 이미지 컨텐츠는 두 개의 촬상부 촬상 시차에 따른 기본 뎁스로 생성될 수 있고, 소프트웨어를 이용하여 뎁스 단계를 변경하여 생성될 수도 있다.
이상과 같이 제어부(130)는 사이 각을 모니터링하여 그에 대응되는 뎁스 가이드를 제공하여 줄 수 있다. 이 경우, 멀티 디스플레이 장치는 힌지 센서를 포함할 수 있다. 힌지 센서는 힌지부를 기준으로 제1 바디 및 제2 바디가 이루는 사이 각을 센싱하기 위한 센서이다.
제어부(130)는 힌지 센서의 센싱 값에 기초하여, 뎁스 설정 모드를 수행할 수 있다. 가령, 제어부(130)는 뎁스가 설정되면 설정된 뎁스에 대응되는 사이 각을 결정하고, 그 사이 각에 대응되는 뎁스 가이드를 디스플레이한다. 이에 따라 사용자가 제1 바디 또는 제2 바디를 회전시키면 힌지 센서를 이용하여 그 사이 각을 측정한다. 제어부(130)는 측정 결과에 따라 뎁스 가이드를 변경하거나, 뎁스 가이드 표시를 종료할 수 있다.
한편, 이상에서는 사용자가 수동으로 바디를 회전시키는 형태의 멀티 디스플레이 장치에서의 뎁스 설정 동작을 설명하였으나, 본 발명의 또 다른 실시 예에 따르면, 멀티 디스플레이 장치는 자동으로 바디를 회전시켜 뎁스를 맞출 수도 있다. 가령, 멀티 디스플레이 장치는 힌지 액츄에이터(미도시)를 더 포함할 수 있다. 힌지 액츄에이터는 회전축을 기준으로 제1 바디 또는 제2 바디를 회전시키는 구성이다.
제어부(130)는 뎁스 설정 화면에서 하나의 뎁스가 선택되면, 선택된 뎁스에 대응되는 사이 각을 이루도록 힌지 액츄에이터를 구동시켜 제1 바디 또는 제2 바디를 회전시킬 수 있다.
도 12는 본 발명의 일 실시 예에 따른 3D 이미지 컨텐츠의 뎁스 설정 방법을 나타내는 도면이다.
도 12를 참조하면 제1 디스플레이부(190a)는 뎁스 설정 화면을 표시한다. 뎁스 설정 화면(31)은 팝 업 창 형태로 표시될 수 있고, 제1 디스플레이부(190a)의 일정 공간에 메뉴 바 형태로 표시될 수도 있다. 팝 업 창 형태의 뎁스 설정 메뉴(31)는 투명 또는 반투명하게 표시될 수 있다. 제1 디스플레이부(190a)는 뎁스 설정 메뉴(31)만 표시할 수 있고, 제1 촬상부에서 촬상되는 화면을 표시하고 그 위에 뎁스 설정 메뉴(31)를 표시할 수도 있다. 예를 들어, 뎁스 설정 메뉴(31)는 깊음, 보통, 얕음의 3 단계로 표시될 수 있고, 뎁스 정도에 따라 숫자를 이용하여 단계가 표시될 수도 있다.
제2 디스플레이부(190b)는 촬상부에 의해 생성되는 라이브 뷰 화면을 표시한다. 제2 디스플레이부(190b)는 제2 촬상부에서 촬상되는 화면만을 전체 화면으로 표시할 수 있고, 두 개 영역으로 화면 분할을 하여 제1 및 제2 촬상부에서 촬상되는 화면을 표시할 수도 있다. 또는, 제1 및 제2 촬상부에서 촬상되는 이미지를 3D 이미지 컨텐츠로 생성하여 표시할 수도 있다.
도 13은 본 발명의 일 실시 예에 따른 3D 이미지 촬상을 위해 뎁스 가이드를 이용하는 방법을 설명하는 도면이다.
도 13에 따르면, 제1 디스플레이부(190a)는 뎁스 가이드(33)를 표시한다. 뎁스 가이드(33)는 텍스트나, 기호, 숫자 등과 같은 다양한 그래픽 객체로 표현될 수 있다. 상술한 바와 같이 뎁스 설정 화면에서 뎁스는 다양한 레벨로 설정될 수 있다. 가령, 깊음, 보통, 얕음과 같은 3레벨 뎁스 중 하나로 설정될 수 있고, 1 내지 5 단계와 같이 숫자로 구분되는 레벨 중 하나로 설정될 수 있다. 제1 바디 및 제2 바디 사이의 각도는 각 뎁스 레벨에 따라 상이하게 결정된다. 따라서, 제어부(130)는 뎁스 설정 모드에서 선택된 뎁스 레벨에 대응되는 회전 각도만큼 제1 바디 및 제2 바디 중 적어도 하나가 회전되도록 유도하는 뎁스 가이드(33)를 생성한다.
도 13에 따르면, 앞쪽으로 더 회전하도록 유도하기 위한 텍스트 형태의 뎁스 가이드(33)가 표시된 상태를 나타낸다. 사용자는 뎁스 가이드(33)가 시키는 대로 제1 바디부(2)를 앞쪽으로 회전시킨다. 제어부(130)는 정해진 각도만큼 회전이 이루어졌다고 판단되면 뎁스 가이드(33)를 촬상 가능 상태임을 알리기 위한 메시지로 변경하여 디스플레이할 수 있다. 또는, 도 12와 달리, “전방으로 10도 회전”과 같이 회전 각도를 직접적으로 알려주는 뎁스 가이드(33)가 표시될 수도 있다. 이 경우, 사용자가 제1 바디(2)를 전방으로 회전시키면 그 각도에 따라 뎁스 가이드(33)를 업데이트하여 줄 수 있다.
본 발명의 또 다른 실시 예에 따르면, 제어부(130)는 사용자가 뎁스 가이드(33)에 따라 바디부를 회전시키다가 설정된 뎁스에 매칭되는 회전각을 이루게 되면, 자동으로 촬상 동작을 수행할 수도 있다.
도 13에서는 제1 디스플레이부(190a)에만 뎁스 가이드가 디스플레이되고 제2 디스플레이부(190b)에는 피사체에 대한 라이브 뷰가 디스플레이되고 있는 상태를 도시하였으나, 뎁스 가이드는 라이브 뷰에 중첩되어 디스플레이될 수도 있고, 두 디스플레이부(190a, 190b) 모두에 디스플레이될 수도 있다.
제2 디스플레이부(190b)는 도 12에서 설명한 것과 동일한 화면을 표시할 수 있다. 도 12 내지 도 13의 제1 및 제2 디스플레이부(190a, 190b) 표시 화면은 서로 반대 디스플레이부에 표시될 수도 있다.
일반적으로 3D 촬영을 위해서는 두 개의 촬상부의 중심선은 피사체에 대해 수평을 유지해야 한다. 그러나, 피사체의 거리에 따라 두 개의 촬상부의 중심선은 수평이 아니라도 일정 각도까지는 3D 촬영이 가능하다. 그러나, 회전형 촬상부는 피사체에 대해 항상 수평을 유지할 수 있으므로 더 다양한 뎁스의 3D 이미지 컨텐츠를 생성할 수 있다.
도 14는 본 발명의 일 실시 예에 따른 회전형 촬상부를 구비한 멀티 디스플레이 장치에서 3D 이미지 컨텐츠를 생성하는 방법을 설명하는 도면이다.
도 14의 (1)에 따르면, 제1 회전형 촬상부(148)는 제1 바디(2)에 구비되어 있고, 제2 회전형 촬상부(149)는 제2 바디(4)에 구비되어 있다. 제1 및 제2 바디(2, 4)의 각도가 변함에 따라 제1 및 제2 회전형 촬상부(148, 149)의 간격은 변한다. 그러나, 제1 및 제2 회전형 촬상부(148, 149)는 회전이 가능하므로 촬상부의 중심선은 정면을 향하게 할 수 있다. 도 14의 (2)는 앞서 설명한 내용을 도시한 도면이다. 따라서, 제1 및 제2 바디(2, 4)의 각도에 상관없이 3D 이미지 컨텐츠 생성이 가능하다. 다만, 제1 및 제2 바디(2, 4)의 각도가 0도에 가까우면 촬상부들은 뎁스가 얕은 3D 이미지 컨텐츠 생성을 위한 이미지 촬상이 가능하고, 180도에 가까우면 뎁스가 깊은 3D 이미지 컨텐츠 생성을 위한 이미지 촬상이 가능하다.
제1 및 제2 회전형 촬상부(148, 149)는 수동으로 회전시킬 수 있고, 예를 들어, 일정 각도를 입력하면 자동으로 회전시킬 수도 있다.
지금까지 멀티 디스플레이 장치가 복수 개의 촬상부를 이용하여 3D 이미지 컨텐츠를 생성하는 다양한 실시 예에 대해서 설명하였다. 다음은 파노라마 이미지 컨텐츠를 생성하는 다양한 실시 예에 대해서 설명하기로 한다.
도 15는 본 발명의 일 실시 예에 따른 파노라마 이미지 컨텐츠를 생성하는 방법을 설명하는 도면이다.
도 15에 따르면, 제1 및 제2 촬상부(141a, 142a)는 피사체 'ABC'를 향하여 촬상한다. 제1 디스플레이부(190a)는 제1 촬상부(141a)에서 촬상되는 이미지를 표시하고, 제2 디스플레이부(190b)는 제2 촬상부(142a)에서 촬상되는 이미지를 표시한다. 즉, 제1 디스플레이부(190a)는 'AB'를 표시하고, 제2 디스플레이부(190b)는 'BC'를 표시한다. 파노라마 이미지를 생성하기 위해서는 일정부분 겹치는 부분이 필요하다. 도 15에서는 'B'영역이 겹치는 부분을 나타낸다. 제어부는 두 개의 촬상부에서 촬상된 이미지의 중복되는 부분을 검출하고, 중복되는 부분을 겹치게 하여 하나의 파노라마 이미지(35)를 생성한다. 도 15에서는 제1 및 제2 디스플레이부(190a, 190b)에 각각 제1 및 제2 촬상부(141a, 142a)에서 촬상된 이미지가 표시되는 것으로 도시하였으나, 제1 및 제2 디스플레이부(190a, 190b)를 하나의 전체 화면으로 보고 상하로 화면을 분할하여 촬상 이미지가 표시될 수도 있다.
파노라마 이미지 컨텐츠를 생성하기 위한 촬상은 사용자의 선택에 의해 수행될 수도 있고, 기 설정된 일정 조건이 되면 자동으로 수행될 수도 있다.
도 16은 본 발명의 일 실시 예에 따른 최소 중복 영역을 인식하여 파노라마 이미지를 자동 촬상하는 방법을 설명하는 도면이다.
도 16의 (1)에 따르면, 멀티 디스플레이 장치는 피사체인 ‘ABCD’를 촬상하려고 한다. 제1 및 제2 바디의 각도에 의해 제1 디스플레이부(190a)는 ABC를 표시하고, 제2 디스플레이부(190b)는 BCD를 표시한다. 즉, BC부분이 중복 영역이 된다.
도 16의 (2)에 따르면, 제1 및 제2 바디의 각도가 조절되어 제1 및 제2 촬상부에서 촬상되는 이미지가 최소 중복 영역을 가지게 된다. 구체적으로, 제1 디스플레이부(190a)는 AB를 표시하고, 제2 디스플레이부(190b)는 CD를 표시한다. 촬상부는 이 순간 자동으로 촬상을 수행한다.
최소 중복 영역이란, 제1 및 제2 촬상부의 촬상 이미지에서 겹치는 영역이 최소가 되는 것을 의미한다.
이상적으로는 제1 및 제2 촬상부의 촬상되는 이미지가 겹치지 않고 연속되는 것을 의미한다. 중복 영역을 확인하기 위하여, 제어부(130)는 제1 및 제2 촬상부에서 촬상된 각 이미지를 복수 개의 블록 단위로 분할 한 후, 분할된 각 블록 내의 픽셀들의 픽셀 값을 확인한다. 가령 n x m 개수의 픽셀들로 이루어진 복수의 블록으로 구분되었다면, 제어부(130)는 각 블록 내의 픽셀들의 평균 값이나 합산 값을 연산하여, 그 연산 결과 값을 블록 대표값으로 설정한다. 제어부(130)는 제1 촬상부에서 촬상된 제1 이미지의 각 블록 대표값과, 제2 촬상부에서 촬상된 제2 이미지의 각 블록 대표값을 비교하여 기 설정된 오차 범위 이내의 값을 가지는 블록들이 서로 중복되는 것으로 판단한다.
제어부는 한 개의 이미지 중에서 일정한 중복 영역 비율을 정하고 중복되는 이미지의 비율이 기 설정된 비율 이내가 되는 경우 최소 중복 영역으로 인식할 수 있다. 또는, 촬상부의 일정 영역을 정하고 촬상되는 이미지 중 중복 영역이 기 설정된 영역 이내로 들어오는 경우 최소 중복 영역으로 인식할 수 있다.
그 밖에 제어부는 다른 조건을 이용하여 촬상부가 자동 촬상을 수행하도록 제어할 수 있다. 예를 들어, 촬상부는 피사체 특정 부분 인식, 제1 촬상부와 제2 촬상부의 각도, 일정 주기 등을 이용하여 자동 촬상을 수행할 수도 있다. 하나의 예로서, 피사체 특정 부분 인식을 이용한 자동 촬상은 사람의 형상 또는 얼굴을 인식하여 자동으로 촬상하는 것을 의미한다.
제1 및 제2 촬상부가 바디(body)에 고정된 형태인 경우 파노라마 이미지를 촬상하기 위한 여러 가지 방법이 있다. 파노라마 이미지를 촬상하기 위한 다양한 실시 예에 대해서 설명하기로 한다.
도 17은 본 발명의 일 실시 예에 따른 파노라마 이미지를 촬상하는 방법의 흐름도이다.
도 17에 따르면 제어부는 멀티 디스플레이 장치가 자동 파노라마 모드인지 판단한다(S1710). 자동 파노라마 모드란 기 설정된 조건에 따라 촬상부가 자동으로 촬상을 수행하는 모드를 의미한다. 예를 들어, 기 설정된 조건은 일정 주기, 제1 및 제2 촬상부의 일정 각도, 피사체 특정 부분 인식, 최소 중복 영역 인식, 촬상하려는 프레임 수 등이 될 수 있다.
자동 파노라마 모드에 진입하면 제어부는 기 설정된 조건에 따라 제1 촬상부에 촬상 명령을 한다(S1720). 따라서, 제1 촬상부는 복수 번의 촬상을 진행하고, 저장부에 촬상한 이미지를 저장한다. 자동 파노라마 모드가 아닌 경우, 제어부는 사용자의 촬상 명령 입력에 따라 제1 촬상부에 촬상 명령을 한다(S1730).
일정 조건이 되면 제어부는 제1 촬상부의 촬상을 종료하고 제2 촬상부의 촬상을 진행할지 여부에 대해 판단한다(S1740). 예를 들어, 일정 조건은 제1 촬상부와 제2 촬상부의 각도가 평행이 되고 2초간 유지되는 경우가 될 수 있다.
제어부는 멀티 디스플레이 장치가 자동 파노라마 모드인지 판단한다(S1750). S1710 단계에서 제어부가 자동 파노라마 모드인지 판단을 했기 때문에 이 과정은 생략될 수도 있다. 자동 파노라마 모드에 진입하면 제어부는 제2 디스플레이부가 회전하는 동안 기 설정된 조건에 따라 제2 촬상부에 촬상 명령을 한다(S1760). 자동 파노라마 모드가 아닌 경우, 제어부는 사용자의 촬상 명령 입력에 따라 제2 촬상부에 촬상 명령을 한다(S1770). 제2 촬상부의 촬상을 진행하는 구체적인 과정은 제1 촬상부의 촬상을 진행하는 과정과 동일하다.
도 18은 본 발명의 일 실시 예에 따른 싱글 촬상 모드에서 파노라마 이미지의 촬상 방법을 설명하는 도면이다.
도 18의 (1)에 따르면 제1 및 제2 바디(2, 4)는 서로 반대방향을 바라보면서 겹쳐져 있다. 파노라마 이미지의 촬상은 제1 바디(2)와 제2 바디(4)가 바깥쪽으로 완전히 접힌 상태에서 제1 촬상부가 구비된 제1 바디(2)를 회전시키면서 진행된다. 파노라마 이미지의 촬상 전에 사용자는 싱글 촬상 모드 또는 멀티 촬상 모드를 선택할 수 있다. 싱글 촬상 모드는 제1 촬상부만을 사용하여 파노라마 이미지를 위한 촬상을 진행하는 것을 의미한다. 그리고, 멀티 촬상 모드는 제1 및 제2 촬상부를 모두 사용하여 파노라마 이미지의 촬상을 진행하는 것을 의미한다. 즉, 제1 및 제2 바디(2, 4)를 순차적으로 회전시키면서 진행하는 것을 의미한다.
제2 디스플레이부(190b)는 수동/자동 파노라마 모드의 선택 메뉴 창(41)을 표시한다. 수동 파노라마 모드를 선택하는 경우 멀티 디스플레이 장치(100)는 사용자의 촬상 명령에 따라 촬상을 수행한다. 자동 파노라마 모드를 선택하는 경우, 사용자는 촬상 프레임을 선택할 수 있다. 촬상 프레임의 선택이란 촬상 과정이 종료될 때까지 몇 장의 이미지를 촬상할 것인지 선택하는 것이다.
도 18의 (1)에는 촬상 프레임 선택 창만 도시되어 있으나, 다른 조건을 설정하여 자동 파노라마 모드를 진행할 수도 있다. 예를 들어, 멀티 디스플레이 장치는 사람의 얼굴을 인식하여 자동 촬상을 수행할 수 있다. 이 경우, 일정 각도 조건 또는 최소 중복 영역 인식 조건을 피사체 특정 부분 인식 조건과 동시에 적용하여 자동 촬상을 수행할 수도 있다.
도 18의 (2)에 따르면 제1 바디를 왼쪽 방향으로 회전시키면서 촬상을 진행한다. 제1 바디는 사용자에 의해 수동으로 회전시킬 수 있고, 모터나 회전 장치를 구비하여 자동으로 회전시킬 수도 있다. 제2 디스플레이부(190b)는 상단과 하단에 촬상과 관련된 메뉴를 표시할 수 있다. 제2 디스플레이부(190b)의 중앙부에는 굴곡이 있는 반호 형태(75)를 표시하고 제1 촬상부에 의해 현재 촬상되는 이미지(77)를 표시할 수 있다.
도 18의 (3)과 (4)에 따르면 제1 촬상부가 촬상을 진행하고 왼쪽으로 회전하여 다음 촬상을 진행하는 경우 제2 디스플레이부(190b)는 이전에 촬상된 이미지(79)를 반호 형태(75)에 따라 우측으로 이동시켜 표시하고 현재 촬상 이미지(77)를 중앙부에 표시할 수 있다. 다른 예로서, 이전 촬상된 이미지(79)는 중앙부에 표시하고, 현재 촬상 이미지(77)를 좌측으로 이동시켜 표시할 수 있다. 또는, 이전 촬상된 이미지(79)는 우측으로, 현재 촬상 이미지(77)는 좌측으로 동시에 이동시켜 표시할 수도 있다.
도 18의 (5)에 따르면 제1 촬상부가 배치된 제1 바디가 제2 바디와 일정 각도 이내가 되면 촬상을 종료한다.
상술한 바와 같이 멀티 디스플레이 장치는 힌지부를 기준으로 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 제1 촬상부를 이용하여 촬상을 수행할 수 있다. 제어부는 제1 촬영 범위 내의 이미지들을 캡쳐하고, 제1 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성하도록 멀티 디스플레이 장치를 제어할 수 있다. 이미지 캡쳐는 기 설정된 시점 또는 사용자의 촬상 명령이 입력된 시점에 수행될 수 있다. 캡쳐된 이미지는 저장부에 저장될 수 있다. 상술한 실시예 뿐만 아니라 다른 실시예에서도 캡쳐된 이미지는 저장부에 저장될 수 있다. 멀티 디스플레이 장치는 캡쳐된 이미지를 램(RAM) 등에 임시로 저장하였다가 해당 촬상 모드가 종료되는 경우 자동으로 삭제할 수도 있고, 사용자에게 삭제 여부를 묻는 메시지를 출력하여 사용자가 삭제를 선택하면 삭제할 수도 있다. 경우에 따라, 캡쳐된 이미지를 플래쉬 메모리, 하드 디스크 등에 자동으로 저장할 수도 있고, 사용자의 선택에 따라 저장할 수도 있다.
도 19는 본 발명의 일 실시 예에 따른 멀티 촬상 모드에서 파노라마 이미지의 촬상 방법을 설명하는 도면이다.
도 19의 (1)에 따르면 제1 디스플레이부(190a)를 포함하는 제1 바디(2)와 제2 디스플레이부(190b)를 포함하는 제2 바디(4)는 서로 반대방향을 바라보면서 겹쳐져 있다. 제2 디스플레이부(190b)는 수동/자동 파노라마 모드의 선택 메뉴 창(41')을 표시한다. 도 19의 (2)에 따르면 제1 바디가 왼쪽 방향으로 회전되면서 촬상은 진행된다. 도 19의 (3)과 (4)에 따르면 제1 촬상부가 촬상을 진행하고 왼쪽으로 회전하여 다음 촬상을 진행하는 경우 제2 디스플레이부(190b)는 이전에 촬상된 이미지(77')를 반호 형태(75')에 따라 이동시켜 표시하고 다음 촬상 이미지를 중앙부에 표시할 수 있다. 구체적인 내용은 도 18에서 설명한 바와 같다.
도 19의 (5)에 따르면 제1 바디(2)와 제2 바디(4)가 평행을 이루면 제1 촬상부의 촬상을 종료하고 제2 촬상부의 촬상을 진행한다. 또는, 멀티 디스플레이 장치는 제1 및 제2 바디(2, 4)가 평행을 이루고 몇 초간 유지되면 제2 촬상부가 촬상을 진행하도록 설정될 수도 있다.
이 경우 제2 디스플레이부(190b)에 표시되는 촬상 화면은 제1 디스플레이부(190a)로 자동 전환된다. 예를 들어, 제1 디스플레이부(190a)와 제2 디스플레이부(190b)가 평행을 이루고 일정시간 유지되면 제어부는 화면을 자동 전환시킬 수 있다. 다른 예로서, 제어부는 제1 디스플레이부(190a)와 제2 디스플레이부(190b)의 각도가 180도를 넘어가는 순간 화면을 자동 전환시킬 수 있다.
도 19의 (6)에 따르면 제2 바디(4)가 오른쪽 방향으로 회전되면서 촬상은 진행된다. 구체적인 내용은 상술한 바와 같다. 도 19의 (7)에 따르면 제어부는 제2 촬상부가 배치된 제2 바디(4)가 제1 바디(2)와 일정 각도가 되면 촬상을 종료한다. 또는, 제2 바디(4)가 제1 바디(2)와 서로 반대 방향을 바라보면서 겹쳐지면 촬상은 종료될 수 있다.
도 20은 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치에서의 파노라마 이미지 촬상 방법의 흐름도이다.
제어부는 촬영 범위 설정 모드인지 판단한다(S2010). 촬영 범위 설정 모드에서는 촬영 범위 설정 화면을 디스플레이부에 표시한다. 예를 들어, 사용자는 촬영 범위 설정 화면에서 제1 및 제2 촬상부의 촬영 각도를 설정할 수 있다. 또는, 제1 및 제2 촬상부의 중복되는 부분이 최소가 되도록 설정할 수 있다. 촬영 범위가 설정되면 제어부는 촬상 각도 조정 가이드를 표시할 수 있다(S2020). 촬상 각도 조정 가이드는 촬상부 사이의 각도를 표시할 수 있다. 또는, 제1 및 제2 촬상부의 중복되는 부분이 최소가 되는 각도가 되면 소리 또는 이미지를 이용하여 사용자에게 알려줄 수 있다. 다른 예로는, 사용자가 설정한 촬영 각도에 대한 직접적인 유도를 위한 각도 이동 안내 가이드가 표시될 수 있다.
각도 조정이 끝나면 사용자의 촬상 명령의 입력에 따라 촬상을 수행한다(S2030). 촬상이 수행되면 제어부는 두 개의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성한다(S2040).
도 21은 본 발명의 일 실시 예에 따른 파노라마 이미지 촬상을 위한 촬상부의 각도 설정 방법을 나타내는 도면이다.
도 21을 참조하면, 제1 디스플레이부(190a)는 촬영 범위 설정 화면(37)을 표시한다. 촬영 범위 설정 화면(37)은 팝 업 창 형태로 표시될 수 있고, 제1 디스플레이부(190a)의 일정 공간에 메뉴 바 형태로 표시될 수도 있다. 팝 업 창 형태의 촬영 범위 설정 화면(37)는 투명 또는 반투명하게 표시될 수 있다. 제1 디스플레이부(190a)는 촬영 범위 설정 화면(37)만 표시할 수 있고, 제1 촬상부에서 촬상되는 화면을 표시하고 그 위에 촬영 범위 설정 화면(37)를 표시할 수도 있다. 예를 들어, 촬영 범위 설정 화면(37)는 촬상부의 각도를 몇 개 표시하고 사용자가 선택하도록 할 수 있다. 다른 예로는, 입력창을 표시하고 사용자가 숫자로 각도를 입력하도록 할 수 있다. 또는, 촬영 범위 설정 화면(37)는 '최소 중복 영역 각도'를 리스트로 포함할 수 있다.
제2 디스플레이부(190b)는 촬상부에 의해 생성되는 라이브 뷰 화면을 표시한다. 제2 디스플레이부(190b)는 제2 촬상부에서 촬상되는 화면만을 전체 화면으로 표시할 수 있고, 두 개 영역으로 화면 분할을 하여 제1 및 제2 촬상부에서 촬상되는 화면을 표시할 수도 있다.
도 22는 본 발명의 일 실시 예에 따른 파노라마 이미지 촬상을 위해 각도 가이드를 이용하는 방법을 설명하는 도면이다.
도 22를 참조하면, 제1 디스플레이부(190a)는 사용자가 설정한 촬상 각도가 되도록 유도하기 위한 텍스트 형태의 각도 가이드(39)가 표시된 상태를 나타낸다.
각도 가이드(39)는 사용자에게 촬상부를 이동시키는 방향과 정도를 직접적으로 표시할 수 있고, 촬상부의 각도 변화에 따라 변하는 각도를 표시할 수 있다. 또는, 디스플레이부에 촬상부에서 촬상되는 각도로 이미지를 표시할 수도 있다. 촬상되는 각도로 이미지를 표시하는 방법은 촬상부가 좌측 부분을 촬상하는 경우 디스플레이부의 좌측 부분으로 쏠리는 이미지로 표시하고 우측 부분을 촬상하는 경우 디스플레이부의 우측 부분으로 쏠리는 이미지로 표시할 수 있다. 촬상부의 각도가 촬영 범위 설정 화면에서 설정한 각도 또는 최소 중복 영역 각도가 되면 이미지나 소리를 이용하여 사용자에게 알림을 줄 수 있다. 다른 예로서, 사용자가 설정한 각도가 되면 촬상부가 자동으로 촬상을 수행하도록 할 수도 있다.
제2 디스플레이부(190b)는 도 21에서 설명한 것과 동일한 화면을 표시할 수 있다. 도 21 내지 도 22의 제1 및 제2 디스플레이부(190a, 190b) 표시 화면은 서로 반대 디스플레이부에 표시될 수도 있다.
지금까지 멀티 디스플레이 장치가 가로 방향으로 복수의 이미지를 촬상하는 방법을 설명하였으나, 세로 방향으로 복수의 이미지를 촬상할 수도 있다. 제어부는 상술한 방법으로 촬상된 복수의 이미지를 가로 방향 또는 세로 방향으로 연결하여 하나의 파노라마 이미지 컨텐츠를 생성할 수 있다. 상기와 같은 방법으로 생성된 하나의 파노라마 이미지 컨텐츠의 형태는 다양하므로 크롭(crop)과 같은 편집이 필요하다.
도 23은 본 발명의 일 실시 예에 따른 크롭 이미지 생성을 설명하는 도면이다.
도 23의 (1)에 따르면 디스플레이부는 복수의 이미지를 조합하여 하나의 파노라마 이미지를 생성한다. 파노라마 이미지는 각각의 이미지에서 중복되는 부분을 연결하여 하나의 연속적인 이미지를 의미한다. 최초 생성된 파노라마 이미지(22)는 각각 이미지의 구도가 정확히 일치하지 않으므로 다양한 형태를 가질 수 있다. 최초 생성된 파노라마 이미지(22)가 선택되면 제어부는 파노라마 이미지(22)를 제1 및 제2 디스플레이 전체 화면으로 확대시켜 표시할 수 있다.
도 23의 (2)에 따르면 디스플레이부는 크롭 여부를 선택할 수 있는 메뉴를 표시할 수 있다. 상술한 바와 같이 최초 생성된 파노라마 이미지(22)는 다양한 형태를 가지므로 일정한 사각형 형태로 잘라내는 편집이 가능하다. 자동 크롭(43)을 선택하면 디스플레이부는 크롭 이미지를 생성하는 진행 상태를 알려주는 진행바(13)를 표시할 수 있다. 크롭된 이미지는 저장시킬 수 있고, 디스플레이부에 확대시켜 표시될 수 있다.
< 힌지 각도에 따른 다양한 실시 예>
도 24는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 힌지 각도에 따른 싱글 모드를 도시한 도면이다.
도 24를 참조하면, 멀티 디스플레이 장치(100)는 제1 및 제2 바디(2, 4)로 구성되며, 제1 및 제2 바디(2, 4)는 힌지부(185)에 의해 연결되어 상대적으로 이동 가능하도록 구성된다. 제1 바디(2)의 일면에는 제1 디스플레이부(190a)가 구비되고, 제1 디스플레이부(190a)의 일 측면에는 적어도 하나의 물리적 버튼이 배치될 수 있다.
멀티 디스플레이 장치(100)는 제1 바디(2) 및 제2 바디(4)가 힌지부(185)에 의해 연결되어 회전 가능하도록 구성된다면, 휴대폰, 노트북, 태블릿 PC, PMP 등 어떠한 기기도 될 수 있다. 제1 디스플레이부(190a)와 제2 디스플레이부(190b)가 제1 바디(2) 및 제2 바디(4)에 각각 구비되는 것으로 설명하였으나, 후술되는 설명은 두 개의 패널 중 어느 하나의 패널에만 터치 스크린 디스플레이가 제공되는 기기에도 적용 가능하다. 또한, 각 디스플레이부 측면의 기능버튼 중 적어도 하나는 생략될 수도 있다. 더 나아가, 제1 바디(2)와 제2 바디(4)의 연결은 힌지부(185)에 의한 것을 예로 들어 도시하였지만, 제1 바디(2)와 제2 바디(4)가 상대적 이동을 통해 접힐 수 있게 구성되기만 한다면 다른 구성요소의 연결로도 대체 가능하다.
한편, 힌지부(185)는 제1 바디(2) 및 제2 바디(4)의 연결부 상 하측에 배치된 2개의 힌지로 구성될 수 있다. 또한 힌지부(185)는 제1 바디(2) 및 제2 바디(4)의 연결부 전체에 배치된 1개의 힌지로 구성될 수도 있다.
멀티 디스플레이 장치(100)는 물리적 혹은 그래픽적으로 분리되는 제1 디스플레이부(190a)과 제2 디스플레이부(190b)로 구성된 디스플레이 장치를 구비하고, 두 개의 디스플레이부(190a, 190b)을 활용하여 다양한 스크린 모드(Screen Mode)를 지원할 수 있다.
멀티 디스플레이 장치(100)의 제1 바디(2)와 제2 바디(4) 사이의 상대 각도에 따라 다양한 모드가 사용될 수 있다. 상대 각도(θ)는 제1 바디(2)에 대해 소정 방향(일 예로 반시계 방향)으로 회전된 제2 바디(4) 사이의 회전각도이다. 구체적으로, 상대 각도(θ)는 힌지부(185) 자체에 내장된 힌지 센서를 이용하여 검출될 수 있다. 힌지 센서는 홀 센서, 압력 센서, 유도 검출 센서, 전기 컨텍트 센서 및 광학 센서 중 어느 하나로 이루어져 힌지의 움직임 및 상대적인 위치를 검출하여 상대 각도(θ)를 인식할 수 있다.
또한, 상대 각도(θ)는 힌지 센서 이외에도 지자기 센서, 가속도 센서로 제1 및 제2 바디(2, 4) 각각의 위치를 검출하여 인식될 수 있다.
도 24에 도시된 바와 같이, 제1 바디(2)와 제2 바디(4)상의 제1 및 제2 디스플레이부(190a, 190b)가 각각 서로 대향하고 있는 상태로, 제1 바디(2)와 제2 바디(4)가 맞닿아 있다. 즉, 제1 디스플레이부(190a)의 반대쪽에 제2 디스플레이부(190b)가 위치하게 된다. 사용자가 제1 디스플레이부(190a)를 보면 제2 디스플레이부(190b)는 반대쪽에 위치하게 되므로 사용자는 직접 볼 수가 없다. 이렇게 사용자는 하나의 디스플레이부만을 볼 수 있다.
이때의 상대 각도(θ)는 0도로 정의한다. 일 예로서 제1 및 제2 바디(2,4) 간의 상대 각도가 0도 내지 60도 사이인 경우를 싱글 모드로 명명할 수 있다. 싱글 모드는 멀티 디스플레이 장치(100)가 사용되지 않는 잠금 상태일 때 및 통화(call) 어플리케이션에서 유용하게 사용될 수 있다. 싱글 모드에서는 전면의 제1 디스플레이부(190a)가 적어도 하나의 어플리케이션에 의한 작업 화면을 표시하며, 후면의 제2 디스플레이부(190b)는 턴-오프 될 수 있다. 일부 어플리케이션은 옵션 메뉴를 사용하여 후면의 제2 디스플레이부(190b)를 턴-온 할 수 있다. 싱글 모드일 경우에는 사용자가 하나의 디스플레이 화면만을 볼 수 있으므로, 제어부는 하나의 디스플레이부만을 제어한다. 즉, 제어부(130)는 사용자가 현재 바라보고 있는 디스플레이부에 대해서만 제어 신호를 전송한다. 제어부(130)에 의해서 제어되고 있지 않은 디스플레이부에 대해서는 별도의 제어 신호 및 데이터 신호를 전송하지 않음으로써 전력 소비를 줄여준다.
이때 실질적으로 제어 신호 및 데이터 신호를 공급받지 않는 디스플레이부는 슬립 모드로 동작하고, 제어부(130)에 의해서 슬립 모드에서 벗어나는 신호가 인가되거나 사용자가 멀티 디스플레이 장치(100)의 방향을 회전하여 슬립 모드 중인 디스플레이부를 바라볼 경우에는 슬립 모드에서 벗어난다.
도 25는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 익스펜딩 모드를 도시한 도면이다.
도 25에 따르면 제1 바디(2)와 제2 바디(4)가 나란히 평행한 상태로서 상대 각도(θ)가 180도 혹은 소정 범위 내에서 180도에 근접한 상태, 즉 펼친(unfolded) 상태를 도시한다. 이하에서 이를 익스펜딩 모드로 칭한다. 일 예로서, 제1 및 제2 바디(2,4) 간의 상대 각도가 175도-185도의 범위에 있을 때 멀티 디스플레이 장치(100)는 제1 및 제2 바디(2,4)가 펼쳐져 있는 것으로 간주할 수 있다. 익스펜딩 모드는 두 개의 어플리케이션에 대한 두 개의 작업 화면을 각각 디스플레이부(109a, 190b)에 표시하거나, 하나의 어플리케이션에 대한 하나의 화면을 두 개의 디스플레이부(190a, 190b)에 표시하거나, 혹은 1개의 어플리케이션에 대한 두 개의 작업 화면을 두 개의 디스플레이부(190a, 190b)에 표시할 수 있다. 어느 하나의 디스플레이부에 아무런 어플리케이션도 표시하지 않을 수 도 있지만, 디폴트된 홈 화면을 표시할 수 있다. 익스펜딩 모드는 E-book, 동영상 플레이어 어플리케이션, 웹 브라우징 화면에서 유용하게 사용될 수 있다. 또한, 익스펜딩 모드는 촬상부(140)를 이용한 여러가지 촬상에 유용하게 사용될 수 있다.
상술한 바와 같이, 제어부(130)는 제1 및 제2 촬상부를 동시에 이용하여 3D 이미지 컨텐츠를 생성하기 위한 촬상 과정을 제어할 수 있고, 파노라마 이미지 컨텐츠를 생성하기 위한 촬상 과정을 제어할 수 있다.
하나 이상의 촬상부가 활성화되는 경우 제1 및 제2 디스플레이부(190a, 190b)는 활성화된 촬상부에서 촬상되는 이미지를 표시할 수 있다. 디스플레이부에서 촬상 이미지를 표시하는 방법은 다음에서 설명하기로 한다.
도 26 내지 도 28은 본 발명의 일 실시 예에 따른 익스펜딩 모드에서 촬상부 촬상 화면을 도시한 도면이다.
도 26을 참조하면, 제1 디스플레이부(190a)의 상단에는 선택 메뉴 바(511)가 있다. 선택 메뉴 바(511)는 촬상부 선택 버튼, 촬영 모드 선택 버튼 등이 포함될 수 있다. 촬상부 선택 버튼은 멀티 디스플레이 장치에 장착된 촬상부를 개별적으로 온-오프(on-off)시킬 수 있다. 제1 디스플레이부(190a)의 하단에는 앨범 영역(513)이 있다. 앨범 영역(513)은 최근 촬영된 일정 개수의 사진 리스트를 표시할 수 있다.
제2 디스플레이부(190b)의 상단에는 퀵 도크(quick dock) 바(521)가 있다. 퀵 도크 바(521)은 촬상부 툴셋(tool set) 바로가기 기능을 빠르게 실행시킬 수 있는 영역이다. 사용자는 직접 툴셋을 활성화시켜 원하는 기능을 퀵 도크 바(521)에 추가할 수 있다. 제2 디스플레이부(190b)의 하단에는 컨트롤 바(523)가 있다. 컨트롤 바(523)는 촬영 버튼, 사진/동영상 모드 전환 버튼 등이 포함될 수 있다. 제2 디스플레이부(190b)의 오른쪽 중앙부에는 보조 촬영 버튼부(525)가 있다. 보조 촬영 버튼부(525)는 촬상 기능을 수행할 수 있는 보조 버튼으로서 손가락과 같은 사용자 객체 또는 일정 조건의 펜 등이 다가가면 근접센서를 이용하여 활성화될 수 있다.
두 개의 촬상부가 활성화되면 디스플레이부는 두 개의 영역으로 분할될 수 있다. 두 개의 영역으로 분할하는 일 실시예로서, 제1 촬상부 이미지는 제1 디스플레이부에 표시하고, 제2 촬상부 이미지는 제2 디스플레이부에 표시할 수 있다. 다른 실시예로서, 도 26에서 도시된 바와 같이, 제1 및 제2 디스플레이부(190a, 190b)는 전체를 하나의 화면으로 간주하여 상측 화면(90)과 하측 화면(91)으로 분할될 수 있다. 분할된 화면의 경계선(52)은 터치 제스처, 공간 제스처 등을 이용하여 움직일 수 있다.
도 27에 따르면 세 개의 촬상부가 활성화된 상태를 나타낸다. 제1 및 제2 디스플레이부(190a, 190b)에 표시되는 메뉴 화면은 도 26에서 설명한 바와 같다. 활성화된 세 개의 촬상부 이미지를 표시하기 위해 디스플레이부는 세 개의 영역으로 분할될 수 있다. 일 실시예로서, 도 27에서 도시된 바와 같이, 제1 및 제2 디스플레이부(190a, 190b)는 전체를 하나의 화면으로 간주하여 세로로 동일한 세 개의 화면(93, 94, 95)으로 분할될 수 있다. 분할된 화면의 경계선(54, 55)은 터치 제스처, 공간 제스처 등을 이용하여 움직일 수 있다. 다른 실시예로서 세 개의 화면은 가로로 동일하게 분할될 수 있다.
도 28을 참조하면 세 개의 촬상부가 활성화된 경우 화면이 분할되는 또 다른 실시예를 도시하였다.
활성화된 세 개의 촬상부 이미지를 표시하기 위해 디스플레이부는 세 개의 영역으로 분할될 수 있다. 제1 촬상부에서 촬상된 이미지는 제1 디스플레이부 하단의 제1 화면 속 화면(Picture In Picture: PIP)(98)으로 표시될 수 있다. 제2 촬상부에서 촬상된 이미지는 제2 디스플레이부 하단의 제2 PIP(99)로 표시될 수 있다. 제3 촬상부에서 촬상된 이미지는 제1 및 제2 디스플레이부 전체 화면(97)으로 표시될 수 있다. 이 경우 전체 화면으로 표시되는 이미지는 제1 및 제2 PIP(98, 99)의 후면으로 배치될 수 있다. 제1 및 제2 PIP(98, 99)의 위치 및 크기는 다양하게 조정될 수 있고, 각각의 촬상부에서 촬상된 이미지의 표시가 상술한 영역에 한정되는 것은 아니다.
도 26 내지 도 28은 두 개의 디스플레이부에서 표시되는 화면 분할에 대해서 설명하였다. 그러나, 한 개의 디스플레이부에서도 상술한 분할 방법이 적용될 수 있다. 즉, 하나의 디스플레이부도 가로 또는 세로로 두 부분 또는 세 부분의 영역으로 분할될 수 있고 분할된 영역의 경계선 이동이 가능하다. 또는, 하나의 디스플레이부에서 전체 화면 및 PIP로 이미지 표시가 가능하다.
도 29는 본 발명의 일 실시 예에 따른 화면 프레임을 선택하는 방법을 설명하는 도면이다.
도 29의 (1)을 참조하면 제1 및 제2 디스플레이부(190a, 190b)와 제2 디스플레이부의 PIP로 이미지가 표시된다. 제2 디스플레이부(190b) 상단에는 화면 프레임 선택 버튼(531)이 있다. 사용자는 화면 프레임 선택 버튼(531)을 탭한다.
도 29의 (2)를 참조하면 프레임 선택 메뉴(533)가 팝 업 창 형태로 제2 디스플레이부(190b)에 표시된다. 프레임 선택 메뉴(533)은 활성화된 촬상부의 개수에 따라 다양하게 표시될 수 있다. 예를 들어, 두 개 촬상부가 활성화된 경우, 제1 및 제2 디스플레이부(190a, 190b)에 각각의 화면 표시, 제1 및 제2 디스플레이부 전체를 가로로 분할 표시 등이 가능하다. 도 29의 (2)에서는 세 개의 촬상부가 활성화되었기 때문에 프레임 선택 메뉴(533)는 제1 디스플레이 가로분할 및 제2 디스플레이 전체 표시, 제1 디스플레이 전체표시 및 제2 디스플레이 가로분할, 제1 및 제2 디스플레이 전체를 가로로 3 영역 분할, 세로로 3 영역 분할의 메뉴를 표시한다.
하나의 촬상부를 사용하는 경우 화면 분할 기능을 수행할 수 없다. 따라서, 이 경우 프레임 선택 메뉴가 선택되면 제어부는 프레임 선택 메뉴를 사용할 수 없다는 알림을 표시한다.
도 29의 (3)을 참조하면, 제1 디스플레이 가로분할 및 제2 디스플레이 전체 표시를 선택하였기 때문에 선택된 것과 같이 화면이 분할되어 이미지가 표시된다. 도 26에서 설명한 바와 같이 분할된 경계선은 이동이 가능하다.
한편, 멀티 디스플레이 장치는 복수 개의 촬상부와 복수 개의 디스플레이부를 구비하고 있으므로, 이들을 다양한 방법으로 활용하여 다양한 이미지를 획득할 수 있다. 즉, 복수 개의 촬상부와 복수 개의 디스플레이부 각각에 대해 개별적으로 기능을 설정하여, 동일한 피사체에 대해서 서로 다른 기능을 적용하여 촬상을 수행하고, 또한, 서로 다른 형태로 디스플레이할 수 있다.
가령, 제1 촬상부에 대해서는 스틸 이미지를 촬상하는 기능을 설정하고, 제2 촬상부에 대해서는 동영상을 촬영하는 기능을 설정하여, 개별적으로 이용할 수 있다. 또는 제1 촬상부에 대해서는 일반 이미지 촬상 기능을 설정하고, 제2 촬상부에서는 특수 효과 촬상 기능을 설정하여 사용할 수도 있다. 디스플레이부에 대해서도 개별적으로 기능을 설정할 수 있다. 가령, 제1 디스플레이부에 대해서는 동영상 디스플레이, 제2 디스플레이부에 대해서는 정지 영상 디스플레이 기능을 각각 설정하여 사용할 수 있다.
이러한 개별 기능은 설정 화면을 통해 사용자가 설정할 수 있다. 즉, 사용자가 메뉴 버튼 등을 선택하면, 멀티 디스플레이 장치는 제1 및 제2 디스플레이부 중 적어도 하나에 설정 화면을 디스플레이한다. 설정 화면에서는 각 촬상부나 각 디스플레이부에 대해 적용 가능한 기능들이 표시될 수 있다. 사용자는 설정 화면을 이용하여 자신이 원하는 기능을 각 촬상부 또는 각 디스플레이부 별로 설정하고, 저장할 수 있다. 멀티 디스플레이 장치의 제어부는 설정 화면을 통해 설정된 내용을 저장하여, 이후 동작 시에 활용한다.
이하에서는 본 실시예와 같이 촬상부 별로, 또는 디스플레이부 별로 상이한 기능을 설정하여 사용하는 다양한 방법 및 그에 따른 동작을 설명한다.
먼저, 도 30 내지 도 31은 본 발명의 또 다른 실시 예에 따른 멀티 디스플레이 장치의 동작을 설명하기 위한 도면이다.
도 30은 스틸 이미지 촬상 모드와 동영상 촬영 모드를 실행하는 멀티 디스플레이 장치를 도시한 도면이다. 도 30의 (1)에 따르면, 제1 촬상부는 스틸 이미지 촬상 모드로 설정되었고, 제2 촬상부는 동영상 촬영 모드로 설정되었다. 제1 촬상부의 이미지는 제1 디스플레이부(190a)에 표시되고, 제2 촬상부의 이미지는 제2 디스플레이부(190b)에 표시된다. 따라서, 제1 디스플레이부(190a) 하단에는 촬상 버튼(541)이 표시되고, 제2 디스플레이부(190b) 하단에는 동영상 촬영 버튼(543)이 표시된다. 제2 디스플레이부(190b) 상단에는 동영상 촬영 진행 시간(15a)이 표시된다.
도 30의 (2)에 따르면 새와 나무를 피사체로 촬영한다. 새가 나무에 앉아 있는 순간 제1 촬상부는 스틸 이미지를 촬상하고, 제2 촬상부도 동영상 촬영을 진행한다. 14초가 흐른 뒤 새가 나무에서 날아가면, 제1 디스플레이부(190a)는 촬상된 새가 나무에 앉아 있는 이미지를 표시하고, 제2 디스플레이부(190b)는 동영상 촬영이 14초간 진행되고 있음을 표시(15b)하고, 새가 날아가는 이미지를 표시한다.
도 31은 풍경 촬영 기능과 인물 촬영 기능을 실행하는 멀티 디스플레이 장치를 도시한 도면이다. 도 31의 (1)에 따르면, 제1 촬상부는 풍경 촬영 기능이 설정되었고, 제2 촬상부는 인물 촬영 기능이 설정되었다. 제어부는 풍경 촬영 기능이 설정되면 전체 풍경을 촬상하기 위해 제1 촬상부를 줌-아웃시키고, 인물 촬영 기능이 설정되면 인물이 전체 화면으로 촬상되도록 제2 촬상부를 줌-인 시킬 수 있다. 제1 촬상부의 이미지는 제1 디스플레이부(190a)에 표시되고, 제2 촬상부의 이미지는 제2 디스플레이부(190b)에 표시된다. 따라서, 제1 및 제2 디스플레이부(190a, 190b) 하단의 촬상 버튼(545, 547)을 탭하면, 제1 디스플레이부(190a)는 촬상된 풍경 이미지가 표시되고, 제2 디스플레이부(190b)는 촬상된 인물 이미지가 표시된다. 또는, 하나의 촬상 버튼을 탭하여 풍경 이미지와 인물 이미지 두 장의 이미지가 동시에 저장할 수도 있다.
도 30 및 도 31에 도시된 기능은 일 실시 예이며, 이미지에 대한 특수 효과 촬상, 연속 촬상, 셔터 우선 촬상, 조리개 우선 촬상 등 다양한 변형이 가능하다.
이상과 같이 각 촬상부나 각 디스플레이부에 대해 개별적으로 기능을 설정할 수 있는 실시 예는 상술한 파노라마 촬영 또는 3D 촬영 실시 예와 조합되어 구현될 수도 있다.
일 예로, 파노라마 촬영을 수행하는 멀티 디스플레이 장치에서, 제어부는, 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이할 수 있다. 사용자는 설정 화면을 이용하여 각 디스플레이부에 대하여 적용하고자 하는 기능을 선택할 수 있다. 제어부는, 설정 화면을 통해 선택된 기능에 따라 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어한다.
가령, 제1 디스플레이부에 파노라마 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 모노 디스플레이 기능이 설정된 경우라면, 제어부는, 제1 디스플레이부에 파노라마 이미지 컨텐츠를 디스플레이하고, 제2 디스플레이부에는 제1 촬상부 및 제2 촬상부에서 각각 촬상한 개별 이미지 컨텐츠 중 하나를 디스플레이할 수 있다. 또는, 제2 디스플레이부의 화면을 나누어 제1 촬상부 및 제2 촬상부에서 촬상되는 이미지를 모두 디스플레이할 수 있다. 파노라마 이미지 컨텐츠가 디스플레이되고 있는 제1 디스플레이부에서 사용자는 화면을 터치하여 드래그하는 방식으로, 파노라마 이미지 컨텐츠를 이동시키면서 전체 파노라마 이미지를 확인할 수 있다. 또한, 제2 디스플레이부에서는 사용자는 화면에 대한 터치 앤 플릭(touch and flick)에 따라 개별 이미지 컨텐츠들을 변경하면서 일일이 확인할 수 있다.
파노라마 디스플레이 기능이나 모노 디스플레이 기능 이외에도, 흑백 디스플레이 기능, 네거티브 디스플레이 기능, 세피아 기능, 줌인/줌아웃 기능 등과 같은 다양한 특수 효과들이 각 디스플레이부 별로 설정되어 사용될 수 있다.
또는, 촬상부 별로 상이한 기능이 설정될 수도 있다. 가령, 제1 촬상부에는 파노라마 촬영 기능이 설정되고, 제2 촬상부에는 정지 영상 촬영 기능이나 동영상 촬영 기능이 설정되어, 각각 개별적으로 이미지를 획득할 수도 있다.
또한, 본 실시 예는 3D 촬영 실시 예에서도 구현될 수 있다. 제어부는 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이한다. 설정 화면을 통해 선택된 기능에 따라 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어할 수 있다. 구체적인 실시 예로서, 제어부는 사용자의 입력에 따라 제1 디스플레이부에 3D 디스플레이 기능을 설정하고, 제2 디스플레이부에 2D 디스플레이 기능을 설정한다. 제1 디스플레이부에 3D 이미지 컨텐츠를 디스플레이하고, 제2 디스플레이부에 상기 좌안 영상 및 상기 우안 영상 중 적어도 하나를 디스플레이할 수 있다.
도 32는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 툴 킷 모드를 도시한 도면이다.
제1 바디(2) 측의 구성은 도 24에서 설명한 바와 같다. 제2 바디(4)의 일면에는 제2 디스플레이부(190b)가 구비되며, 제2 디스플레이부(190b)의 일 측면에는 적어도 하나의 물리적 버튼이 배치될 수 있다. 상기 물리적 버튼은 푸쉬 버튼 및 터치 버튼 중 적어도 하나를 포함한다. 일 실시예로서, 스피커(163) 및 마이크(162)를 구비한 제1 바디(2)에 배치되는 제1 디스플레이부(190a)는 메인 스크린으로 동작하며, 그렇지 않은 제2 바디(4)에 배치되는 제2 디스플레이부(190b)은 서브 스크린으로 동작할 수 있다. 일 실시예로서 제1 바디(2)는 제1 촬상부(141)를 구비하며, 제2 바디(4)는 제2 촬상부(142)를 구비한다.
도 32는 제1 바디(2)에 대한 제2 바디(4)의 상대 각도가 180도를 초과하는 상태, 즉 두 디스플레이부(190a, 190b)가 안쪽으로 약간 접힌 상태를 도시한다. 본 명세서에서는 이러한 상태를 툴 킷 모드(Tool Kit Mode)라 칭한다. 일 예로서 제1 및 제2 바디(2,4) 간의 상대 각도가 185도 내지 265도 사이인 경우 툴 킷 모드로 인지한다. 툴 킷 모드는 두 디스플레이부(190a, 190b)가 안쪽을 향하도록 약간 접힌 상태로서 멀티 디스플레이 장치(100)가 노트북과 유사한 형태로 사용될 때 유용하다. 일 예로, 어느 하나의 디스플레이부(190a)에 작업 화면을 표시하고, 다른 하나의 디스플레이부(190b)에는 키보드 등의 툴(Tool)을 표시하는 등 다양한 작업 환경을 제공할 수 있다.
도 33 내지 도 35는 본 발명의 일 실시 예에 따른 툴 킷 모드에서 화면 프레임을 설명하는 도면이다.
도 33의 (1)에 따르면 제2 디스플레이부(190b)는 홈 화면을 표시한다. 홈 화면에는 여러가지 메뉴 및 정보가 표시되고, 촬상부 선택 버튼이 있다. 사용자가 촬상부 선택 버튼을 탭하면 하나의 촬상부가 활성화된다. 제1 디스플레이부(190a)는 메뉴, 아이콘, 키보드 등 다른 기능과 관련된 다양한 메뉴 또는 툴을 표시할 수 있다.
도 33의 (2)에 따르면 제2 디스플레이부(190b)는 하나의 촬상부가 활성화되어 촬상부의 촬상 화면을 표시할 수 있다. 제2 디스플레이부(190b)의 좌측에는 세로 형태의 퀵 도크(551)와 선택 메뉴 영역(553)이 표시될 수 있다. 우측에는 세로 형태의 컨트롤 바 및 앨범 영역(555)이 표시될 수 있다. 사용자가 제2 촬상부를 활성화시킨다.
도 33의 (3)에 따르면 제2 디스플레이부(190b)는 가로로 분할하여 두 개의 촬상부 촬상 화면을 표시할 수 있다. 이 경우 해상도를 유지하기 위해 선택 메뉴 영역(553a)의 배경은 공백으로 표시될 수 있다. 사용자가 프레임 선택 버튼을 탭한다.
도 33의 (4)에 따르면 제2 디스플레이부(190b)는 프레임 선택 메뉴(557)를 팝 업 창 형태로 표시할 수 있다. 제2 디스플레이부(190b)에만 촬상부 촬상 화면으로 사용하고 있으므로 세로 분할 형태의 프레임만이 선택 가능하다. 사용자가 세로 분할 형태의 프레임을 선택한다.
도 34의 (1)에 따르면 제2 디스플레이부(190b)는 세로로 분할된 화면이 표시될 수 있다. 사용자가 제스처 등을 이용하여 제2 디스플레이부(190b)에 표시되는 화면을 제1 디스플레이부(190a)로 확장시킨다.
도 34의 (2)에 따르면 제1 디스플레이부(190a)까지 확장된 화면이 표시될 수 있다. 이 경우, 도 32의 (2)에 도시된 선택 메뉴 영역(553)도 제1 디스플레이부(190a)로 이동하면서 제1 디스플레이부(190a)의 좌측 부분에 선택 메뉴 영역(553b)를 구성할 수 있다. 도 33의 (2)에 도시된 컨트롤 바에 함께 존재하는 앨범 영역(555)도 제1 디스플레이부(190a)로 이동하면서 제1 디스플레이부(190a)의 우측 부분에 앨범 영역(561)을 구성할 수 있다. 사용자가 프레임 선택 버튼을 탭한다.
도 34의 (3)에 따르면 제2 디스플레이부(190b)는 프레임 선택 메뉴(557a)를 팝 업 창 형태로 표시할 수 있다. 프레임 선택 메뉴(557a)는 현재 가능한 프레임을 표시할 수 있다. 사용자가 표시된 가로 분할 형태의 프레임을 선택한다.
도 34의 (4)에 따르면 선택된 프레임에 대응하여 제1 디스플레이부(190a)와 제2 디스플레이부(190b)는 두 개의 촬상부 촬상 화면을 각각 표시할 수 있다.
도 35의 (1)에 따르면 제1 디스플레이부(190a)의 선택 메뉴 영역(553b)은 활성화된 촬상부 및 비활성화된 촬상부를 표시할 수 있다. 사용자가 비활성화된 촬상부 선택 버튼을 탭한다.
도 35의 (2)에 따르면 제1 디스플레이부(190a)는 세로로 분할되어 두 개의 촬상부 촬상 화면(574, 576)을 표시하고, 제2 디스플레이부(190b)는 하나의 촬상부 촬상 화면(572)을 표시할 수 있다. 사용자가 제1 디스플레이부(190a)의 영역을 변경하는 명령을 입력한다.
도 35의 (3)에 따르면 사용자의 입력에 대응하여 제1 디스플레이부(190a)의 표시 영역의 크기가 변경될 수 있다. 사용자가 컨트롤 바(555)에 포함된 촬상 버튼을 탭한다. 사용자는 촬상 전에 촬상될 이미지 또는 영역을 선택할 수 있다.
도 35의 (4)에 따르면 촬상된 이미지가 앨범 영역의 하나의 리스트(578)로 추가될 수 있다. 촬상된 이미지는 활성화된 촬상부 이미지 중 어느 하나일 수 있고, 제1 또는 제2 디스플레이부(190a, 190b) 중 어느 하나의 디스플레이부에 표시되는 이미지일 수 있고, 제1 및 제2 디스플레이부(190a, 190b)에 표시된 전체 이미지일 수도 있다.
도 36은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 화상 통화 기능을 설명하는 도면이다.
도 36에 따르면 멀티 디스플레이 장치(100)는 제1, 제2 및 제3 촬상부(141, 142, 146')를 구비할 수 있다. 제1 디스플레이부(190a)는 제3 촬상부에서 촬상된 피사체 이미지(593)를 전체 화면으로 표시할 수 있다. 그리고, 제1 디스플레이부(190a)는 PIP로 제1 또는 제2 촬상부에서 촬상된 사용자 이미지(595)를 표시할 수 있다. 제1 디스플레이부(190a)에 표시되는 피사체 이미지(593) 및 사용자 이미지(595) 중 적어도 하나는 화상 통화의 상대방에게 전송될 수 있다. 제2 디스플레이부(190b)는 화상 통화의 상대방(594)을 전체 화면으로 표시할 수 있다. 각 이미지가 표시되는 영역이나 이미지의 크기는 자유롭게 조정 가능하다.
다른 실시 예로서, 디스플레이부와 같은 면에 하나의 촬상부가 배치될 수 있고, 디스플레이부의 반대면에 두 개의 촬상부가 배치될 수 있다. 이 경우 디스플레이부와 같은 면에 배치된 하나의 촬상부는 사용자를 촬상하고, 디스플레이부 반대면에 배치된 두 개의 촬상부는 피사체를 촬상할 수 있다. 피사체를 촬상한 두 개의 이미지를 이용하여 파노라마 이미지 컨텐츠 또는 3D 이미지 컨텐츠가 생성될 수 있다. 사용자를 촬상한 이미지를 포함하여 생성된 파노라마 이미지 컨텐츠 또는 3D 이미지 컨텐츠는 디스플레이부에 표시될 수 있다. 또한, 사용자를 촬상한 이미지, 생성된 파노라마 이미지 또는 3D 이미지 중 적어도 하나의 이미지는 상대방에게 전송될 수 있다.
도 37은 본 발명의 일 실시 예에 따른 회전형 촬상부를 구비한 멀티 디스플레이 장치의 화상 통화 기능을 설명하는 도면이다.
도 37에 따르면 멀티 디스플레이 장치(100)는 제1, 제2 회전형 촬상부(148, 149)를 구비할 수 있다. 제1 디스플레이부(190a)는 제2 회전형 촬상부(149)에서 촬상된 피사체 이미지(597)를 전체 화면으로 표시할 수 있다. 그리고, 제1 디스플레이부(190a)는 PIP로 제1 회전형 촬상부(148)에서 촬상된 사용자 이미지(599)를 표시할 수 있다. 제1 디스플레이부(190a)에 표시되는 피사체 이미지(597) 및 사용자 이미지(599) 중 적어도 하나는 화상 통화의 상대방에게 전송될 수 있다. 제2 디스플레이부(190b)는 화상 통화의 상대방(598)을 전체 화면으로 표시할 수 있다. 그리고, 제1 및 제2 회전형 촬상부(148, 149)는 회전이 가능하므로 촬상하려는 피사체를 자유롭게 선택 가능하다. 또한, 각 이미지가 표시되는 영역이나 이미지의 크기는 자유롭게 조정 가능하다.
도 38은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 스탠딩 모드를 도시한 도면이다.
도 38은 제1 바디(2)에 대한 제2 바디(4)의 상대 각도가 180도 미만인 상태, 즉 두 디스플레이부(190a, 190b)가 서로 거의 반대방향을 향하도록 바깥쪽으로 거의 접힌 상태를 도시한 것이다. 본 명세서에서는 이러한 상태를 스탠딩 모드(Standing Mode)라 칭한다. 일 예로서 제1 및 제2 바디(2,4) 간의 상대 각도가 30도 내지 90도 사이인 경우, 멀티 디스플레이 장치(100)는 스탠딩 모드로 인지한다. 스탠딩 모드는 두 디스플레이부(190a, 190b)가 바깥쪽을 향하도록 접힌 구조로서, 멀티 디스플레이 장치(100)를 바닥에 삼각형 모양으로 세워 놓을 수 있어서, 충전 시, 멀티 디스플레이 장치(100)를 디지털 시계 혹은 액자로 사용시, 개인 방송, 영화, 동영상 등을 장시간 시청시에 유용하게 사용될 수 있다.
다른 실시 예로서 스탠딩 모드는 2명 이상의 사용자에 의한 협력 혹은 상호작용을 필요로 하는 어플리케이션, 일 예로 화상 회의, 협업 게임(Collaborative Game) 등에 적용될 수 있다. 일부 어플리케이션은 스탠딩 모드에서 전면의 제1 디스플레이부(190a)에만 작업 화면을 표시하며, 후면의 제2 디스플레이부(190b)를 턴-오프 할 수 있다. 일부 어플리케이션은 옵션 메뉴를 사용하여 후면 제2 디스플레이부(190b)를 턴-온 할 수 있다.
도 39 내지 도 40은 본 발명의 일 실시 예에 따른 스탠딩 모드에서 화면 프레임을 설명하는 도면이다.
도 39의 (1)에 따르면 제1 디스플레이부(190a)는 홈 화면을 표시할 수 있다. 홈 화면에는 여러가지 메뉴 및 정보가 표시되고, 촬상부 선택 버튼이 있을 수 있다. 사용자가 촬상부 선택 버튼을 탭하면 하나의 촬상부가 활성화된다.
도 39의 (2)에 따르면 제1 디스플레이부(190a)는 하나의 촬상부가 활성화되어 촬상부의 촬상 화면을 표시할 수 있다. 일반적으로 사용자는 제1 디스플레이부(190a)에 표시되는 화면을 보고 있으므로 제어부는 제2 디스플레이부(190b)와 같은 면에 배치된 제2 촬상부를 활성화시켜 제2 촬상부의 촬상 화면을 제1 디스플레이부(190a)에 표시하는 것이 바람직하다. 제1 디스플레이부(190a)의 좌측에는 세로 형태의 퀵 도크(583)와 선택 메뉴 영역(585)이 표시될 수 있다. 우측에는 세로 형태의 컨트롤 바 및 앨범 영역이 표시될 수 있다. 앨범 영역은 컨트롤 바와 같은 영역에 표시될 수 있고, 하나 또는 두 개의 리스트만을 표시할 수 있다. 사용자가 촬상 버튼을 탭한다.
도 39의 (3)에 따르면 촬상된 이미지는 앨범 영역의 리스트로 추가될 수 있다. 사용자가 프레임 선택 버튼(587)을 탭한다.
도 39의 (4)에 따르면 멀티 디스플레이 장치는 하나의 촬상부만 활성화 되었으므로 화면 분할 기능이 사용될 수 없다. 따라서, 제어부는 화면 분할 기능을 사용할 수 없다는 알림을 팝 업 창(589) 형태로 표시할 수 있다.
도 40의 (1)에 따르면 제1 디스플레이부(190a)의 좌측에는 선택 메뉴 영역이 표시될 수 있다. 선택 메뉴 영역은 제1 디스플레이부(190a)에 표시되는 촬상부 촬상 화면 위로 표시될 수 있다. 사용자는 선택 메뉴 영역의 제1 촬상부 버튼을 탭하여 비활성된 제1 촬상부를 활성화시킨다.
도 40의 (2)에 따르면 제1 디스플레이부(190a)는 제1 촬상부 활성화 입력에 대응하여 제1 촬상부의 촬상 화면을 PIP(591a)로 표시할 수 있다. 따라서, 제1 디스플레이부(190a)의 전체 화면은 제2 촬상부 촬상 화면을 표시할 수 있고, PIP(591a)는 제1 촬상부 촬상 화면을 표시할 수 있다.
도 40의 (3)에 따르면 제2 디스플레이부(190b)에 표시되는 화면을 도시하였다. 제2 디스플레이부(190b)의 전체 화면은 제1 촬상부 촬상 화면을 표시할 수 있고, PIP(591b)는 제2 촬상부 촬상 화면을 표시할 수 있다. 제2 디스플레이부(190b)에도 선택 메뉴 영역, 퀵 도크 또는 컨트롤 바가 표시될 수 있다.
도 41은 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치의 스탠딩 모드를 도시한 도면이다.
도 41은 스탠딩 모드의 다른 실시 예로서, 힌지의 일부분이 바닥에 닿도록 멀티 디스플레이 장치(100)를 세워 둔 상태를 도시하고 있다. 본 명세서에서는 이러한 상태를 세로보기 모드라 칭한다. 세로보기 모드는 제1 및 제2 바디(2, 4) 간의 상대각도가 30도 내지 90도 사이이고, 가속도 센서에 의해 멀티 디스플레이 장치(100)가 세로로 세워져 있다고 판단되는 경우, 세로보기 모드로 인지한다.
구체적으로, 가속도 센서는 멀티 디스플레이 장치의 회전을 감지한다. 가속도 센서는 멀티 디스플레이 장치(100)의 제1 및 제2 디스플레이부(190a, 190b)가 좌우측에 배치되는 세로보기 모드와 제1 및 제2 디스플레이부(190a, 190b)가 상하측에 배치되는 가로보기 모드 간의 전환을 감지한다.
세로보기 모드는 2명 이상의 사용자에게 각각 다른 영상을 제공할 필요가 있는 어플리케이션, 일 예로 화상 회의, 멀티 동영상 플레이어 등에 적용될 수 있다.
도 42는 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 구성을 구체적으로 설명하기 위한 블록도이다.
도시한 멀티 디스플레이 장치(100)는 통신부(110)의 셀룰러 통신 모듈(111), 무선랜 모듈(112) 및 근거리 통신 모듈(113)과 커넥터(114) 중 적어도 하나를 이용하여 외부장치(도시되지 아니함)와 연결될 수 있다. “외부장치”는 다른 장치, 휴대폰, 스마트폰, 태블릿 PC(Personal), 컴퓨터 서버 및 디지털 TV 중 적어도 하나를 포함할 수 있다.
도 42를 참조하면, 멀티 디스플레이 장치(100)는 2개의 디스플레이부(190a, 190b)를 포함한다. 도 42에서는 2개의 디스플레이부에 대해서 도시하고 있지만, 이는 3개 이상으로 확장하여 변형 실시될 수 있다.
본 발명의 일 실시 예인 멀티 디스플레이 장치(100)는 통신부(110), 멀티미디어부(120), 제어부(130), 촬상부(140), 센서부(150), 입/출력부(160), 저장부(170), 전원부(180) 및 제1, 2디스플레이부(190a, 190b)를 포함한다.
통신부(110)는 셀룰러 통신 모듈(111), 무선랜 모듈(112), 근거리 통신 모듈(113), 커넥터(114), GPS(Global Positioning System) 모듈(115) 및 방송 통신 모듈(116)을 포함한다.
셀룰러 통신 모듈(111)은 제어부(130)의 제어에 따라 셀룰러 통신 프로토콜에 따른 무선 액세스 기술을 사용하여, 멀티 디스플레이 장치(100)가 적어도 하나 또는 복수의 안테나(도시되지 아니함)를 통해 외부 장치(특히 셀룰러 시스템의 기지국)와 연결되도록 한다.
또한, 셀룰러 통신 모듈(111)은 멀티 디스플레이 장치(100)에 입력되는 전화번호를 가지는 휴대폰, 스마트폰, 태블릿 PC 또는 다른 장치와 같은 통신 가능한 다른 기기와, 음성 통화, 화상 통화, 단문(Short Messaging Service: SMS) 메시지 또는 멀티미디어(Multimedia Messaging Service: MMS) 메시지를 담은 무선 신호를 송/수신한다.
또한, 통신부(110)는 무선랜 모듈(112)과 근거리 통신 모듈(113) 중 적어도 하나를 포함할 수 있다. 예를 들어, 무선랜 모듈(112)만 포함하거나, 근거리 통신 모듈(113)만 포함하거나 또는 무선랜 모듈(112)과 근거리 통신 모듈(113)을 모두 포함할 수 있다.
무선랜 모듈(112)은 제어부(130)의 제어에 따라 무선 AP(access point)(도시되지 아니함)가 설치된 장소에서 인터넷에 연결될 수 있다. 무선랜 모듈(112)은 미국전기전자학회(IEEE)의 무선랜 규격(IEEE802.11x)을 지원한다.
근거리 통신 모듈(113)은 제어부(130)의 제어에 따라 멀티 디스플레이 장치(100)와 외부 기기 사이에 무선으로 근거리 통신을 할 수 있다. 근거리 통신방식은 블루투스(bluetooth), 적외선 통신(IrDA, infrared data association) 등을 포함할 수 있다.
커넥터(114)는 USB 2.0, USB 3.0, HDMI, IEEE 1394 등 다양한 장치와의 인터페이스를 제공한다.
커넥터(114)는 멀티 디스플레이 장치(100)와 외부장치 또는 전원소스를 연결하기 위한 인터페이스로 이용될 수 있다. 제어부(130)의 제어에 따라 커넥터(114)에 연결된 유선 케이블을 통해 멀티 디스플레이 장치(100)의 저장부(170)에 저장된 데이터를 외부 장치로 전송하거나 또는 외부 장치에서부터 데이터를 수신할 수 있다. 커넥터(114)에 연결된 유선 케이블을 통해 전원소스에서부터 전원이 입력되거나 배터리(도시되지 아니함)를 충전할 수 있다.
GPS 모듈(115)은 지구 궤도상에 있는 복수의 GPS위성들(도시되지 아니함)에서부터 전파를 수신하고, GPS위성들(도시되지 아니함)에서부터 멀티 디스플레이 장치(100)까지 전파도달시간(Time of Arrival) 및 GPS 파라미터들을 이용하여 멀티 디스플레이 장치(100)의 위치를 산출할 수 있다.
방송 통신 모듈(116)은 제어부(130)의 제어에 따라 방송통신 안테나(도시되지 아니함)를 통해 방송국에서부터 송출되는 방송 신호(예, TV방송 신호, 라디오방송 신호 또는 데이터방송 신호) 및 방송부가 정보(예, EPS(Electric Program Guide) 또는 ESG(Electric Service Guide))를 수신할 수 있다.
멀티미디어부(120)는 오디오 재생 모듈(121) 및 비디오 재생 모듈(122)를 포함한다.
오디오 재생 모듈(121)은 제어부(130)의 제어에 따라 저장되거나 또는 수신되는 디지털 오디오 파일(예, 파일 확장자가 mp3, wma, ogg 또는 wav인 파일)을 재생할 수 있다. 비디오 재생 모듈(122)은 디지털 비디오 파일을 재생할 수 있도록 다양한 형식의 코덱을 지원한다. 즉, 재생하려는 비디오 파일의 코덱 형식에 맞도록 기 저장된 코덱에 의해서 비디오 파일을 재생한다. 또한, 멀티미디어부(120)의 오디오재생 모듈(121) 또는 비디오재생 모듈(122)은 제어부(130)에 포함될 수 있다.
제어부(130)는 CPU와, 멀티 디스플레이 장치(100)의 제어를 위한 제어 프로그램이 저장된 롬(Read-Only Memory: ROM) 및 멀티 디스플레이 장치(100)의 외부로부터 입력되는 신호 또는 데이터를 기억하거나, 멀티 디스플레이 장치(100)에서 수행되는 작업을 위한 기억영역으로 사용되는 램(Random Access Memory: RAM)을 포함한다. CPU는 싱글 코어 프로세서, 듀얼 코어 프로세서, 트리플 코어 프로세서 및 쿼드 코어 프로세서 중 적어도 하나를 포함할 수 있다. CPU, 롬 및 램은 내부버스(bus)를 통해 상호 연결된다.
제어부(130)는 통신부(110), 멀티미디어부(120), 촬상부(140), 센서부(150), 입/출력부(160), 저장부(170), 전원부(180), 제1 및 제2 디스플레이부(190a, 190b)를 제어한다.
촬상부(140)는 제1 촬상부(141) 및 제2 촬상부(142) 중 적어도 하나를 포함한다. 도 42에서는 제1 촬상부(141)과 제2 촬상부(142)만을 도시하였으나, 실시 예에 따라서 추가적인 촬상부를 포함할 수 있다.
촬상부(140)는 제어부(130)의 제어에 따라 정지이미지 또는 동영상을 촬영하는 제1 촬상부(141) 및 제2 촬상부(142) 중 적어도 하나를 포함할 수 있다. 경우에 따라, 추가적으로 몇 개의 촬상부를 더 포함할 수 있다. 제1 촬상부(141) 및 제2 촬상부(142)는 멀티 디스플레이 장치(100)의 바디(body)에 구비되거나 혹은 별도의 연결 수단을 사용하여 멀티 디스플레이 장치(100)에 연결될 수 있다. 제1 촬상부(141) 및 제2 촬상부(142) 중 적어도 하나는 촬영에 필요한 광량을 제공하는 보조 광원(예, 플래시(도시되지 아니함))를 포함할 수 있다.
촬상부는 렌즈와 이미지 센서를 포함한다. 촬상부에 사용할 수 있는 렌즈의 종류에는 일반적인 범용 렌즈, 광각 렌즈, 줌 렌즈 등이 있다. 제1 및 제2 촬상부(140a, 140b)는 일반적으로 동일한 렌즈를 구비한 촬상부들로 구성되지만, 경우에 따라, 서로 다른 렌즈를 구비한 촬상부들로 구성될 수 있다.
이미지 센서에는 상보성 금속 산화물 반도체(Complementary Metal Oxide Semiconductor: CMOS)와 전하결합소자(Charge Coupled Device: CCD)가 있다. 제1 및 제2 촬상부(140a, 140b)는 일반적으로 한 종류의 이미지 센서로 구성되지만, 다른 종류의 이미지 센서의 조합으로 구성될 수도 있다. 예를 들어, 제1 및 제2 촬상부(140a, 140b) 모두 CMOS 또는 CCD를 사용할 수 있고, 제1 촬상부(140a)은 CMOS, 제2 촬상부(140b)는 CCD를 사용할 수 있다.
촬상부(140)는 제1 촬상부(141) 및 제2 촬상부(142) 중 적어도 하나를 통해 촬상된 이미지를 제어부(130)로 전달한다. 제어부(130)는 이미지를 분석하여 사용자의 움직임 혹은 형상을 감지(detect)하고, 감지된 움직임 혹은 대응되는 제어 동작을 수행한다. 일 예로서 사용자의 움직임이란 제1 혹은 제2 촬상부(141, 142)를 통해 감지되는 사용자의 손의 움직임을 의미한다. 사용자의 형상이란 제1 혹은 제2 촬상부(141, 142)를 통해 감지되는 사용자의 얼굴 형상을 의미할 수 있다.
또 다른 실시 예로서 멀티 디스플레이 장치(100)는 적외선 감지기와 같은 다른 수단을 사용하여 사용자의 움직임을 감지하고, 상기 움직임에 응답하여 어플리케이션을 실행 혹은 제어할 수 있다.
센서부(150)는 터치 센서(151), 지자기 센서(152), 가속도 센서(153), 힌지 센서(154) 및 근접 센서(155)를 포함한다.
터치 센서(151)는 사용자의 디스플레이부에 대한 터치를 감지할 수 있는 센서이다. 터치 센서(151)는 사용자의 터치를 감지하는 방식에 따라 정전 방식과 압전 방식으로 나뉠 수 있다. 본원 발명의 일 실시 예에 따른 터치 센서(151)는 두 가지 방식으로 각각 구현될 수 있다. 터치 센서(151)는 디스플레이 패널과 함께 디스플레이부를 구성할 수 있다. 이에 대한 구체적인 설명은 별도의 도면을 통해서 이하에서 별도로 설명한다.
터치 센서(151)는 손가락과 같은 신체 또는 감지 가능한 입력 수단으로 터치스크린(190a, 190b)을 눌러서 디스플레이 화면 상에 표시된 지시를 입력할 수 있는 센서를 의미한다. 터치 센서(151)는 용량변화, 저항변화, 또는 광량변화를 이용한다.
지자기 센서(152)는 지자기를 검출하여 방위각을 탐지할 수 있다. 따라서, 멀티 디스플레이 장치(100)의 방향을 인식한다. 가속도 센서(153)은 출력신호를 처리하여 물체의 가속도, 진동, 충격 등의 동적 힘을 측정하는 것으로서 멀티 디스플레이 장치(100)의 움직이는 속도 변화나 힘의 세기를 감지한다. 힌지 센서(154)는 힌지의 각도 또는 움직임 등을 검출할 수 있다. 근접 센서(155)는 사용자의 멀티 디스플레이 장치(100)에 대한 물체의 접근여부를 검출할 수 있다.
도 42에서 도시되지 않았지만, 멀티 디스플레이 장치(100)의 센서부(150)는 중력이 어느 방향으로 작용하는지 검출할 수 있는 중력 센서, 기존의 가속도 센서에 각각 회전을 넣어 총 6축을 인식할 수 있는 자이로 센서, 이미지와 같은 컨텐츠의 가로, 세로 프레임을 자동으로 감지하여 컨텐츠를 자동 회전 및 정렬시킬 수 있는 오리엔테이션 센서, 멀티 디스플레이 장치(100) 주변의 빛의 양을 검출하는 조도 센서, 대기의 압력을 측정할 수 있는 고도 측정 센서, 물체의 색을 검출할 수 있는 RGB 센서, 초음파나 적외선을 이용하여 거리를 측정할 수 있는 거리 측정 센서, 자기장의 세기에 따른 전압 변화를 이용하는 홀 센서 중 적어도 하나를 더 포함할 수 있다.
센서부(150)의 각 센서는 상태를 검출하고, 검출에 대응되는 신호를 생성하여 제어부(130)로 전송할 수 있다. 센서부(150)의 센서는 멀티 디스플레이 장치(100)의 성능에 따라 추가되거나 삭제될 수 있다.
입/출력부(160)는 버튼부(161), 마이크(162), 스피커(163) 및 진동모터(164)를 포함한다.
적어도 하나의 버튼부(161)는 멀티 디스플레이 장치(100)의 바디(body)의 전면, 측면 또는 후면에 푸쉬형 혹은 터치형으로 형성될 수 있으며, 전원/잠금 버튼, 볼륨 조절 버튼, 메뉴 버튼, 홈 버튼, 돌아가기 버튼(back button) 및 검색 버튼 중 적어도 하나를 포함할 수 있다.
마이크(162)는 제어부(130)의 제어에 따라 음성(voice) 또는 사운드(sound)를 입력 받아 전기적인 신호를 생성한다.
스피커(163)는 제어부(130)의 제어에 따라 셀룰러 통신 모듈(111), 무선랜 모듈(112), 근거리 통신 모듈(113), 멀티미디어부(120) 또는 촬상부(140)의 다양한 신호(예, 무선신호, 방송신호, 디지털 오디오 파일, 디지털 동영상 파일 또는 사진 촬영 등)에 대응되는 사운드를 멀티 디스플레이 장치(100) 외부로 출력할 수 있다.
스피커(163)는 멀티 디스플레이 장치(100)가 수행하는 기능에 대응되는 사운드(예, 전화 통화에 대응되는 버튼 조작음, 또는 통화 연결음)를 출력할 수 있다. 스피커(163)는 멀티 디스플레이 장치(100)의 바디의 적절한 위치 또는 위치들에 하나 또는 복수로 형성될 수 있다. 일 예로 스피커(163)는 통화중 사용자의 귀에 근접하기에 적합한 위치에 배치되는 내부 스피커 모듈과, 오디오/비디오 파일의 재생이나 방송의 시청시에 사용되기에 적합한 보다 높은 출력을 가지며 멀티 디스플레이 장치(100)의 바디의 적절한 위치에 배치되는 외부 스피커 모듈을 포함하여 구성될 수 있다.
진동모터(164)는 제어부(130)의 제어에 따라 전기적 신호를 기계적 진동으로 변환할 수 있다. 예를 들어, 진동 모드에 있는 멀티 디스플레이 장치(100)는 다른 장치(도시되지 아니함)로부터 음성통화가 수신되는 경우, 진동모터(164)가 동작한다. 진동모터(164)는 멀티 디스플레이 장치(100)의 바디 내에 하나 또는 복수로 형성될 수 있다. 진동모터(164)는 제1, 2 디스플레이부(190a, 190b) 상에서 감지되는 사용자의 터치 제스처 및 제1, 2 디스플레이부(190a, 190b) 상에서 감지되는 터치의 연속적인 움직임에 응답하여 동작할 수 있다.
저장부(170)는 제어부(130)에 의해서 처리된 각종의 멀티미디어 데이터, 컨텐츠 데이터, 외부 소스로부터 수신된 데이터 등을 저장한다.
구체적으로 살펴보면, 저장부(170)는 제어부(130)의 제어에 따라 셀룰러 통신 모듈(111), 무선랜 모듈(112), 근거리 통신 모듈(113), 커넥터(114), GPS모듈(115), 멀티미디어부(120), 촬상부(140), 센서부(150), 입/출력부(160), 제1, 2 디스플레이부(190a, 190b)의 동작에 대응되게 입/출력되는 신호, 정보 또는 데이터를 저장할 수 있다.
저장부(170)는 멀티 디스플레이 장치(100) 또는 제어부(130)의 제어를 위한 제어 프로그램 및 어플리케이션들을 저장할 수 있다. 이하 "저장부"라는 용어는 롬, 램 또는 멀티 디스플레이 장치(100)에 탈착/장착 가능한 메모리 카드(예, SD 카드, 메모리 스틱)를 포함할 수 있다. 또한 저장부는 비휘발성 메모리, 휘발성메모리, 하드 디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)를 포함할 수 있다.
전원부(180)는 멀티 디스플레이 장치(100)에서 사용되는 전원을 공급한다. 전원부(180)는 충전 가능한 배터리로 구현될 수 있고, 외부 공급 전원을 변환하여 충전 가능한 배터리에 공급하는 전압 변환기를 더 포함할 수 있다.
전원부(180)는 제어부(130)의 전원 관리 제어에 따라 멀티 디스플레이 장치(100)에 최대 성능 모드, 일반 모드, 절전 모드, 대기 모드 등 다양한 모드로 전원을 공급할 수 있다.
제1, 2 디스플레이부(190a, 190b)는 힌지부(미도시)에 의해서 서로 연결될 수 있다. 제1, 2 디스플레이부(190a, 190b)는 제어부(130)의 제어에 의해서 멀티미디어 컨텐츠, 이미지, 동영상, 텍스트 등을 표시한다.
제1 디스플레이부(190a)와 제2 디스플레이부(190b)는 물리적으로 서로 분리되어 있다. 제1 디스플레이부(190a)와 제2 디스플레이부(190b)에 표시되는 디스플레이 화면은 서로 독립적으로 제어할 수 있다. 예를 들어, 제1 디스플레이부(190a)의 해상도와 제2 디스플레이부(190b)의 해상도는 각각 개별적으로 설정할 수 있다. 또한, 제1 디스플레이부(190a)와 제2 디스플레이부(190b)에 표시되는 화면의 확대, 회전, 화면 이동, 화면 분할 등을 각각 개별적으로 실행할 수 있다.
또한, 제1 디스플레이부(190a) 및 제2 디스플레이부(190b)는 가상 통합 프레임 버퍼를 이용해서 단일 디스플레이 화면으로 표시할 수 있다.
제1 및 제2 디스플레이부(190a, 190b)는 액정 디스플레이 패널(Liquid Crystal Display Panel: LCD Panel), 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), 유기발광 소자(Organic Light Emitting Diode, OLED), VFD(Vacuum Fluorescent Display), FED(Field Emission Display), ELD(Electro Luminescence Display) 등과 같은 다양한 디스플레이 유닛으로 구현될 수 있다.
제1 및 제2 디스플레이부(190a, 190b)는 터치입력 기능이 없는 일반적인 디스플레이 패널로 구현될 수 있고, 근접 센서나 터치 센서를 이용한 사용자 조작을 인식할 수 있는 터치 디스플레이 패널로 구현될 수 있다. 터치 디스플레이 패널로 구현되는 경우 사용자의 신체(예, 엄지를 포함하는 손가락) 또는 감지 가능한 입력 수단(예, 스타일러스 펜)을 통해 적어도 하나의 터치 제스처를 입력받을 수 있다.
이러한 사용자 인터페이스는 소정 터치 영역, 소프트 키 및 소프트 메뉴를 포함할 수 있다. 제1, 2 디스플레이부(190a, 190b)는 사용자 인터페이스를 통해 입력되는 적어도 하나의 터치 제스처에 대응되는 전자 신호를 LCD 컨트롤러(미도시)를 통해서 제1, 2 디스플레이부(190a, 190b)로 전송할 수 있다. 또한, 제1, 2 디스플레이부(190a, 190b)는 터치의 연속적인 움직임을 감지하고, 터치의 연속적 혹은 불연속적인 움직임에 대응되는 전자 신호를 LCD 컨트롤러로 전송할 수 있다.
이러한 제1, 2 디스플레이부(190a, 190b)는 예를 들어, 저항막(resistive) 방식, 정전용량(capacitive) 방식, 적외선(infrared) 방식 또는 초음파(acoustic wave) 방식으로 구현될 수 있다.
제1, 2 디스플레이부(190a, 190b)는 터치 센서를 통해서 감지된 사용자 동작에 관한 감지 신호를 디지털 신호(예, X와 Y좌표)로 변환하여 제어부(130)로 전송한다. 제어부(130)는 수신된 디지털 신호를 이용하여 제1, 2 디스플레이부(190a, 190b)를 통해서 입력된 사용자 동작에 대응하는 제어 동작을 수행할 수 있다. 예를 들어, 제어부(130)는 사용자 동작에 응답하여 제1, 2 디스플레이부(190a, 190b)에 표시된 소프트 키가 선택되게 하거나 또는 소프트 키에 대응하는 어플리케이션을 실행할 수 있다.
상술한 사용자 제스처는 제1, 2 디스플레이부(190a, 190b)와 사용자의 신체 또는 터치 가능한 입력 수단과의 직접적인 접촉(contact)에 한정되지 않고, 비접촉에 의한 방식도 포함한다. 제1, 2 디스플레이부(190a, 190b)에서 검출 가능한 사용자 동작의 감도는 멀티 디스플레이 장치(100)의 성능 또는 구조에 따라 변경될 수 있다.
터치 제스처 타입
본 발명의 실시예에서 터치 제스처는 터치스크린에 직접 접촉하여 혹은 근접하게 접근하여 멀티 디스플레이 장치(100)가 감지 가능하게 하는 모든 종류의 사용자 제스처를 포함할 수 있다. 예를 들어, 왼손과 오른손의 손가락(finger)(특히, 검지 손가락), 엄지(thumb) 또는 터치 스크린에 의해 감지 가능한 객체(예를 들어 스타일러스 펜)을 이용하여 터치스크린 상에서 하나의 위치 혹은 연속적인 복수의 위치들을 선택하는 사용자의 동작이다. 이하 표를 참조하여 터치 제스처에 대해 구체적으로 설명한다.
타입(Type) 마크(Mark)

Single
Finger
Gesture
 탭(Tap)
Figure pat00001
터치&홀드(Touch&Hold)
Figure pat00002
더블 탭(Double Tap)
드래그(Drag)
Figure pat00004
드래그&드롭(Drag&Drop)
Figure pat00005
플릭(Flick)
Figure pat00006
표 1은 하나의 손가락을 이용한 제스처 타입에 대해 설명한다.
표 1을 참고하면, 하나의 손가락을 이용한 제스처 타입에는 탭(Tap), 터치&홀드(Touch&Hold), 더블 탭(Double Tap), 드래그(Drag), 드래그&드롭(Drag&Drop), 및 플릭(Flick) 등이 있다. 탭(Tap)은 사용자가 터치 스크린을 살짝 눌렀다 땐 동작을 의미 하고, 터치&홀드(Touch&Hold)는 사용자 장시간 터치를 하는 동작이며, 더블 탭(Double Tap)은 사용자가 빠르게 두 번 탭하는 동작을 의미한다. 그리고, 드래그(Drag)는 한 방향으로 끄는 동작이고, 드래그&드롭(Drag&Drop)은 터치 스크린 상의 임의의 객체를 누른 뒤, 한 위치에서 다른 위치로 끌어당기는 동작이고, 플릭(Flick)은 빠르게 드래그하는 동작이다.
타입(Type) 마크(Mark)

Two
Finger
Gesture
 투 핑거 탭(Two finger Tap)
Figure pat00007
터치&스프레드(Touch&Spread)
Figure pat00008
핀치 아웃(Pinch Out)
Figure pat00009
핀치 인(Pinch In)
Figure pat00010
투 핑거 드레그(Two finger Drag)
Figure pat00011
크로쓰 투 핑거(Cross Two Finger)
Figure pat00012
터치&로테이트(Touch&Rotate)
Figure pat00013
표 2는 두 개의 손가락을 이용한 제스처 타입에 대해 설명한다.
표 2를 참고하면, 두 개의 손가락을 이용한 제스처 타입에는 투 핑거 탭(Two finger Tap), 터치&스프레드(Touch&Spread), 핀치 아웃(Pinch Out), 핀치 인(Pinch In), 투 핑거 드레그(Two finger Drag), 크로쓰 투 핑거(Cross Two Finger), 터치&로테이트(Touch&Rotate) 등이 있다. 투 핑거 탭은 두 손가락이 동시에 탭하는 동작이고, 터치&스프레드는 두 손가락이 동시에 터치 스크린을 누르고, 한쪽 손가락은 움직이지 않고, 다른 한쪽만 직선으로 움직이는 동작이다. 핀치 아웃은 동시에 두 손가락이 터치 스크린을 누른 뒤 서로 반대방향으로 드래그하는 동작이며, 핀치 인은 동시에 두 손가락이 터치 스크린을 누른 뒤 서로 마주보는 방향으로 드래그하는 동작이다. 투 핑거 드래그는 두 손가락이 동일한 방향으로 드래그하는 동작이며, 크로스 투 핑거는 서로 마주 보는 방향으로 동시에 드래그되어, 엇갈려 나가는 동작이다. 마지막으로 터치&로테이트는 한 손가락은 움직이지 않고, 다른 한쪽만 고정된 한 손가락을 중심으로 로테이트하는 터치 동작을 의미한다.
타입(Type) 마크(Mark)
Multi
Finger
Gesture		 쓰리 핑거 터치
Figure pat00014
포 핑거 터치
Figure pat00015
파이브 핑거 터치
Figure pat00016
Palm 손바닥(Parm)
Figure pat00017
표 3은 두 개 이상의 손가락을 이용한 제스처 및 손바닥을 이용한 제스처 타입에 대해 설명한다.
표 3을 참고하면, 두 개 이상의 손가락을 이용한 제스처 타입에는 쓰리 핑거 터치, 포 핑거 터치, 파이브 핑거 터치 등이 있다. 또한, 2개 이상의 손가락을 이용하여 상술한 표 1, 표 2에서와 같이 탭, 드레그, 로테이트 같은 제스처 동작을 수행할 수 있다.
제어부(130)는 상술한 다양한 터치 제스쳐가 인식되면, 그 터치 제스쳐에 대응되는 동작을 수행한다. 가령, 제어부(130)는 저장부(170)에 저장된 어플리케이션, 위젯(widget), 웹 브라우저 등을 실행시켜, 그 실행 화면을 제1 및 제2 디스플레이부(190a, 190b) 중 적어도 하나에 디스플레이한다.
한편, 상술한 실시 예들에서는 멀티 디스플레이 장치(100)의 바디들이 힌지부에 의해 연결되는 것으로 도시 및 설명하였으나, 힌지부 대신 플렉서블한 재질의 연결부로 연결될 수도 있다.
도 43은 다양한 구현 예에 따른 멀티 디스플레이 장치의 세부적인 구성을 설명하기 위한 블록도이다.
도 43에 따르면, 멀티 디스플레이 장치는 통신부(110), 멀티미디어부(120), 제어부(130), 촬상부(140), 센서부(150), 입/출력부(160), 저장부(170), 전원부(180), 멀티디스플레이부(190)를 포함한다. 도 42에서 설명한 구성부와 동일한 구성부의 설명은 생략하고, 디스플레이를 하는 과정에 대해서만 설명하기로 한다.
CPU(131)는 저장부(미도시)에 저장된 데이터를 RAM(135)으로 독출하여 RAM(135)에 저장되어 있는 데이터 중 그래픽 처리가 필요한 데이터를 GPU(133)으로 전달한다. CPU(131)는 GPU(133)에 의해서 그래픽 처리된 데이터를 수신하여 시스템 버스(139)와 연결된 LCD 컨트롤러(미도시)로 전달해서 디스플레이부에 이미지를 표시한다.
CPU(131)는 GPU(133)에 의해서 처리된 이미지 데이터를 RAM(135)의 기 결정된 영역 상에 할당된 가상 프레임 버퍼(Virtual Frame Buffer) 영역에 일시 저장한다. CPU(131)는 디스플레이부의 최대 해상도(예를 들어, 1024×600)를 지원하도록 가상 프레임 버퍼의 영역을 할당한다. 2개의 디스플레이부일 경우에는 1024×1200 크기로 가상 프레임 버퍼의 영역을 할당한다.
CPU(131)는 가상 프레임 버퍼에 일시 저장된 데이터를 GPU(133)로 입력해서 디지털 신호 처리를 수행한다.
GPU(133)는 CPU(131)의 제어 하에서 입력된 데이터에 대한 그래픽 처리를 수행한다. 구체적으로는, GPU(133)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성할 수 있다. 연산부는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성 값을 연산한다. 렌더링부는 연산부에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부에서 생성된 화면은 버스(139)를 통해 제1 및 제2 디스플레이부(190a, 190b)로 전달되어 디스플레이 영역 내에 표시되거나, 저장부(170)에 저장될 수 있다.
CPU(131)는 GPU(133)에 의해서 그래픽 처리된 데이터를 제1 및 제2 디스플레이부(190a, 190b) 중 적어도 하나를 통해 디스플레이하거나, 저장부(170)에 저장하도록 제어할 수도 있으며, 또는 처리된 데이터를 디스플레이 컨트롤러(미도시)에 입력할 수 있다.
GPU(133)는 디코더(decoder), 렌더러(renderer), 스케일러(scaler) 등을 포함할 수 있다. 이에 따라, 저장된 컨텐츠를 디코딩하고, 디코딩된 컨텐츠 데이터를 렌더링하여 프레임을 구성하고, 구성된 프레임의 사이즈를 디스플레이 콘트롤러(미도시)의 제어에 의해 디스플레이 크기에 맞게 스케일링한다. 만약, 제1 및 제2 디스플레이부(190a, 190b) 중 하나에서 디스플레이되는 화면이라면 그 크기에 맞추어 스케일링하고, 두 디스플레이부 모두에서 디스플레이되는 화면이라면 전체 디스플레이 사이즈에 맞추어 스케일링한다. GPU(133)는 처리된 프레임을 디스플레이부에 제공하여 디스플레이한다.
멀티 디스플레이 장치(100)는 복수의 디스플레이부를 구비하고 있으므로, 그 디스플레이부들을 활용하여 다양한 화면을 제공하여 줄 수 있다. 이하에서는 멀티 디스플레이 장치의 기본적인 세부 구성 및 동작들에 대한 다양한 예를 기술한다.
도 44는 복수의 프레임 버퍼를 이용하여 각 디스플레이부의 동작을 제어하는 멀티 디스플레이 장치의 구성을 나타내는 블럭도이다.
도 44에 따르면, 멀티 디스플레이 장치는 제1 및 제2 디스플레이부(190a, 190b), 디스플레이 제어부(175)를 포함한다. 디스플레이 제어부(175)는 도 42의 제어부(130)와 별개인 구성요소로 마련될 수도 있고, 제어부(130) 내에 포함되는 구성요소가 될 수도 있다.
도 44에 따르면, 디스플레이 제어부(175)는 제1 프레임 버퍼(175a-1), 제1 디스플레이 드라이버(175a-2), 제2 프레임 버퍼(175b-1) 및 제2 디스플레이 드라이버(175b-2)를 포함한다.
제1 프레임 버퍼(175a-1)는 제1 디스플레이부(190a)에 디스플레이될 이미지 프레임을 버퍼링하기 위한 구성이고, 제2 프레임 버퍼(175b-1)는 제2 디스플레이부(190b)에 디스플레이될 이미지 프레임을 버퍼링하기 위한 구성이다.
가령, GPU(133)에 의해서 디지털 신호 처리된 이미지 프레임은 제1, 2 프레임버퍼(175a-1, 175b-1)에 비트맵 형태로 저장된다. 이 경우, 각 프레임 버퍼(175a-1, 175b-1)의 버퍼링 영역은 각 디스플레이부 (190a, 190b)에서 지원 가능한 최대 픽셀 크기에 맞게 할당된다. 제1 디스플레이 드라이버(175a-2)는 제1 프레임 버퍼(175a-1)에 저장된 이미지 프레임을 분석해서 제1 이미지 소스 신호로 변환한다. 제1 디스플레이 드라이버(175a-2)는 제1 이미지 소스 신호를 제1 디스플레이부(190a)로 제공하여, 제1 디스플레이부(190a)가 이미지 프레임을 디스플레이하도록 구동시킨다.
마찬가지로, 제2 디스플레이 드라이버(175b-2)는 제2 프레임 버퍼(175b-1)에 저장된 이미지 프레임을 분석해서 제2 이미지 소스 신호로 변환하고, 이를 제2 디스플레이부(190b)에 제공하여 디스플레이시킨다.
도 44에서는 각 디스플레이부(190a, 190b)에 대응되는 제1 프레임 버퍼(175a-1)와 제2 프레임 버퍼(175b-1)가 별도로 마련된 것으로 도시하였으나, 다음의 도 45에서는 다른 실시 예에 따른 하나의 통합 프레임 버퍼가 사용되는 실시예를 도시한다.
도 45는 통합 프레임 버퍼를 이용하여 각 디스플레이부의 동작을 제어하는 멀티 디스플레이 장치의 구성을 나타내는 블럭도이다.
도 45는 통합 프레임 버퍼를 이용하여 각 디스플레이부의 동작을 제어하는 멀티 디스플레이 장치의 구성을 나타내는 블럭도이다. 프레임 버퍼가 통합 프레임 버퍼(175-1) 형태로 구현될 경우, 제1, 2디스플레이부의 최대 해상도보다 큰 크기로 통합 프레임 버퍼(175-1)의 크기를 할당하여 구현할 수 있다.
예를 들어, 제1, 2디스플레이부가 각각 최대 1024*800의 해상도를 디스플레이할 수 있는 경우, 통합 프레임 버퍼(175-1)는 1024*1600의 해상도를 디스플레이할 수 있는 프레임 버퍼 크기로 저장 영역을 할당한다. 통합 프레임 버퍼(175-1)의 제1 영역에는 제1 디스플레이부(190a)에 디스플레이되는 제1 이미지 프레임이 저장되고, 제2 영역에는 제2 디스플레이부(190b)에 디스플레이되는 제2 이미지 프레임이 저장된다.
디스플레이 드라이버(175-2)는 통합 프레임 버퍼(175-1)에 저장된 제1 이미지 프레임과 제2 이미지 프레임의 어드레스를 이용하여 제1 디스플레이부(190a) 또는 제2 디스플레이부(190b)로 제1, 2 이미지 프레임을 제공하여 각각의 디스플레이부를 구동시킨다.
도 46은 도 44에 도시된 2개의 디스플레이부 중 제1 디스플레이부의 구성을 구체적으로 설명하기 위한 도면이다.
도 46은 디스플레이부 구성의 일 예를 설명하기 위한 도면이다. 설명의 편의를 위하여 도 46에서는 제1 디스플레이부만을 도시하였으나, 제2 디스플레이부도 이와 동일한 형태로 구현될 수 있음은 물론이다.
도 46에 따르면, 제1 디스플레이부(190a) 는 타이밍 컨트롤러(231), 게이트 드라이버(232), 데이터 드라이버(233), 전압 구동부(234), 표시패널(235)을 포함할 수 있다.
타이밍 컨트롤러(231)는 외부로부터 터치스크린부의 해상도에 적합한 클럭신호(DCLK)와 수평 동기 신호(Hsync), 수직 동기 신호(Vsync) 등을 입력받아 게이트 제어신호(주사 제어신호), 데이터 제어신호(데이터 신호)를 생성하고, 입력받은 R, G, B 데이터를 재정렬하여 데이터 드라이버(233)에 공급한다.
타이밍 컨트롤러(231)는 위의 게이트 제어신호와 관련하여 게이트 시프트 클럭(Gate Shift Clock: GSC), 게이트 출력 인에이블(Gate Output Enable: GOE), 게이트 시작 펄스(Gate Start Pulse: GSP) 등을 발생시킬 수 있는데, 여기서 GSC는 R, G, B 유기발광 소자(Organic Light Emitting Diode, OLED)와 같은 발광소자에 연결된 박막 트랜지스터(Thin Film Transistor: TFT)가 온/오프(On/Off)되는 시간을 결정하는 신호이고, GOE는 게이트 드라이버(232)의 출력을 제어하는 신호이며, GSP는 하나의 수직동기신호 중에서 화면의 첫 번째 구동라인을 알려주는 신호이다.
또한, 타이밍 컨트롤러(231)는 데이터 제어신호와 관련하여 소스 샘플링 클럭(Source Sampling Clock: SSC), 소스 출력 인에이블(Source Output Enable: SOE), 소스 시작 펄스(Source Start Pulse: SSP) 등을 생성할 수 있다. 여기서 SSC는 데이터 드라이버(233)에서 데이터를 래치(latch)시키기 위한 샘플링 클럭으로 사용되며, 데이터 드라이브 IC의 구동주파수를 결정한다. SOE는 SSC에 의해 래치된 데이터들을 표시패널(235)로 전달하게 된다. SSP는 하나의 수평 동기 기간 중에 데이터의 래치 또는 샘플링 시작을 알리는 신호이다.
게이트 드라이버(232)는 주사신호를 생성하는 구성으로, 주사선(S1, S2, S3,..., Sn)을 통해 표시패널(235)과 연결된다. 게이트 드라이버(232)는 타이밍 컨트롤러(231)에 의해 생성된 게이트 제어 신호에 따라 전압 구동부(234)로부터 제공받은 게이트 온/오프 전압(Vgh/Vgl)을 표시패널(235)로 인가한다. 게이트 온 전압(Vgh)은 표시패널(235)에 단위 프레임 영상의 구현을 위하여 게이트 라인 1(GL1)에서 게이트 라인 N(GLn)까지 순차적으로 제공된다.
데이터 드라이버(233)는 데이터 신호를 생성하는 구성으로, 데이터 선(D1, D2, D3,..., Dm)을 통해 표시패널(235)과 연결된다. 데이터 드라이버(233)는 타이밍 컨트롤러(231)에 의해 생성된 데이터 제어 신호에 따라 스케일링이 완료되고 영상 이미지 프레임의 RGB 데이터를 표시패널(235)에 입력한다. 데이터 드라이버(233)는 타이밍 컨트롤러(231)에서 직렬(serial)로 제공되는 RGB의 영상 데이터를 병렬(parallel)로 변환하고, 디지털 데이터를 아날로그 전압으로 변환하여 하나의 수평 라인 분에 해당되는 영상 데이터를 표시패널(235)에 제공한다. 이 과정은 각 수평라인 별로 순차적으로 이루어진다.
전압 구동부(234)는 게이트 드라이버(232), 데이터 드라이버(233), 표시패널(235) 등에 각각의 구동 전압을 생성하여 전달한다. 즉, 외부로부터의 상용전원, 즉 110V 또는 220V의 교류전압을 제공받아 표시패널(235)에 필요한 전원전압(VDD)을 생성하여 제공하거나, 접지전압(VSS)을 제공할 수 있다. 또한, 게이트 온 전압(Vgh)을 생성하여 게이트 드라이버(232)로 제공할 수 있다. 이를 위해 전압 구동부(234)는 개별적으로 동작하는 복수의 전압 구동 모듈(미도시)을 포함할 수 있다. 여기서, 복수의 전압 구동 모듈(미도시)은 제어부(130)의 제어에 따라 서로 다른 전압을 제공하도록 동작할 수 있으며, 제어부(130)는 기설정된 정보에 따라 복수의 전압 구동 모듈이 서로 다른 구동 전압을 제공하도록 전압 구동부(234)를 제어할 수 있다. 예를 들어, 복수의 전압 구동 모듈 각각은 제어부(130)의 제어에 따라 기설정된 정보에 따라 서로 다른 제1 전압 및 디폴트로 설정된 제2 전압을 제공할 수 있다.
일 실시 예에 따르면, 전압 구동부(234)는 복수 개의 영역으로 구분된 표시패널(235)의 각 영역에 대응되는 복수 개의 전압 구동 모듈을 포함할 수 있다. 이 경우, 제어부(130)는 복수 개의 영역 각각의 화면 정보(또는 입력 영상 정보)에 따라 서로 다른 제1 전압, 즉, ELVDD 전압을 제공하도록 복수 개의 전압 구동 모듈을 제어할 수 있다. 즉, 데이터 드라이버(233)에 입력되는 영상신호를 이용하여 ELVDD 전압의 크기를 제어할 수 있다. 여기서, 화면 정보는, 입력 영상의 휘도 및 계조 정보 중 적어도 하나가 될 수 있다.
표시패널(235)은 서로 교차하여 화소 영역을 정의하기 위한 다수의 게이트 라인(GL1~GLn)과 데이터 라인(DL1~DLn)이 형성되고, 그 교차하는 화소영역(236)에는 OLED와 같은 R, G, B의 발광소자가 형성될 수 있다. 그리고 화소영역(236)의 일 영역, 더 정확하게는 모서리에는 스위칭소자 즉 TFT가 형성된다. 이러한 TFT의 턴-온 동작시 데이터 드라이버(233)로부터 계조 전압이 각각의 R, G, B의 발광소자로 제공된다. 이때 R, G, B의 발광소자들은 계조 전압에 근거하여 제공된 전류량에 상응하여 빛을 제공하게 된다. 즉 R, G, B의 발광소자들은 많은 전류량이 제공되면 그만큼 많은 빛을 제공하게 되는 것이다.
도 47은 도 46에 도시된 디스플레이 패널을 구성하는 R, G, B 화소를 구성하는 회로 구조를 설명하기 위한 도면이다.
도 47을 참고하면, 표시패널(235)은 3개의 R,G,B 화소영역(236)을 포함한다. R, G, B의 화소영역(236)은 스캔 신호(S1), 게이트 온 전압(Vgh)에 의해 동작하는 스위칭소자 (M11, M21, M31), 데이터 라인(DL1~DLn)으로 제공되는 변경된 고계조값을 포함하는 화소값에 근거하여 전류를 출력하는 스위칭소자 (M12, M22, M32), 그리고 타이밍 컨트롤러(231)에서 제공되는 제어 신호에 따라 스위칭소자 (M12, M22, M23)에서 R, G, B의 발광소자로 제공되는 전류량을 조절하는 스위칭소자 (M13, M23, M33)를 포함할 수 있다. 그리고, 이러한 스위칭 소자 (M13, M23, M33)는 유기발광소자(OLED)와 연결되어 OLED로 전류를 공급한다. 여기서, OLED는 형광 또는 인광 유기물 박막에 전류를 흘리면 전기장 발광의 원리를 이용해 자체적으로 빛을 발하는 디스플레이를 말한다. OLED의 애노드(anode)전극은 화소회로에 접속되고, 캐소드(cathode)전극은 ELVSS에 접속된다. 이와 같은 OLED는 화소회로로부터 공급되는 전류에 대응하여 소정 휘도의 빛을 생성한다. 여기서, 스위칭 소자 (M11, M21, M31)의 게이트 전극은 주사선(S1)에 접속되고, 소스 전극 및 드레인 전극 중 어느 하나는 데이터선(D1)에 접속된다. 이처럼 표시패널(235)은 AM-OLED(Active Matrix Organic Light-Emitting Diode) 패널로 구현될 수 있다. 다만, 상술한 실시 예는 본 발명의 일 실시 예에 불과하며, 본 발명이 하나의 라인이 동시에 발광하여 구동하는 방식인 PM OLED(Passive Matrix Organic Light-Emitting Diode)을 배제하지 않음은 물론이다.
도 47의 실시 예에서는 OLED를 설명했지만, 디스플레이부는 액정 디스플레이 패널(Liquid Crystal Display Panel: LCD Panel), 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), VFD(Vacuum Fluorescent Display), FED(Field EmissionDisplay), ELD(Electro Luminescence Display) 등 다양한 디스플레이 기술로 구현될 수 있다.
도 48은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 시스템 계층 구조를 설명하기 위한 도면이다. 멀티 디스플레이 장치는 하드웨어(410) 뿐만 아니라, OS(420), 프레임워크(430), 통화 어플리케이션(441), 멀티미디어 어플리케이션 (442), 카메라 어플리케이션 (443), 브라우저(444), 제스쳐 인식 어플리케이션 (445)과 같은 다양한 소프트웨어를 포함할 수 있다.
하드웨어(410)는 도 42에서 도시된 바와 같이 다양한 구성들을 포함할 수 있다.
운영체제(Operating System: OS, 420)는 하드웨어(410)의 전반적인 동작을 제어하고 하드웨어(410)를 관리하는 기능을 수행한다. 즉, OS(420)는 하드웨어 관리와 메모리, 보안 등의 기본적인 기능을 담당하는 계층이다. OS(420)는 멀티 디스플레이부를 구동시키기 위한 디스플레이 드라이버, 데이터 송수신을 위한 통신 드라이버, 촬상부를 구동시키기 위한 카메라 드라이버, 오디오부를 구동시키기 위한 오디오 드라이버, 전원관리자 등의 모듈을 구동시켜 멀티 디스플레이 장치의 동작을 제어한다.
OS(420)보다 상위 계층으로 프레임워크(frame work) 계층(430)이 존재한다. 프레임워크(430)는 어플리케이션 계층(440)과 OS 계층(420)을 연결하는 역할을 수행한다. 즉, 프레임워크 계층(430)은 로케이션 매니저(location manager), 알림 매니저(notification manager) 및 디스플레이부에 영상을 표시하기 위한 프레임 버퍼(frame buffer)를 포함한다.
프레임워크 계층(430) 상부 계층에는 멀티디스플레이 장치(100)의 다양한 기능을 구현되는 어플리케이션 계층(440)이 존재한다. 예로서, 통화 어플리케이션(441), 멀티미디어 어플리케이션(442), 카메라 어플리케이션(443), 브라우저 어플리케이션(444) 및 제스처 인식 어플리케이션(445) 등 다양한 응용프로그램이 포함될 수 있다.
도 49는 근접 터치를 감지하는 방법을 설명하기 위한 도면이다.
사용자는 근접 센서를 이용한 근접 터치 방식으로 멀티 디스플레이 장치(100)에 제어 명령을 입력시킬 수 있다. 근접 터치는 터치 스크린을 직접 터치하지 않고 공간상의 일정한 유효 인식 범위에서 움직임이 인식되는 경우 하나의 터치 제스처로 인식하는 것을 의미한다.
도 49를 참조하면, 디스플레이부는 디스플레이 패널(290), 근접 터치 인식을 위한 적외선 소스부(291) 및 적외선 센싱부(292)를 포함한다. 적외선 소스부(291)는 디스플레이부의 표면 방향으로 적외선을 조사한다. 구체적으로, 적외선 소스부(291)는 영상 또는 이미지를 표시하는 디스플레이부의 하부에 배치되며, 적외선을 디스플레이부의 표면 방향으로 조사할 수 있다. 디스플레이부의 표면 위로 사용자 객체(50)의 접근을 인식할 수 있는 일정한 영역이 존재한다. 이 영역이 근접 터치를 인식할 수 있는 유효 인식 영역(5)이다.
사용자 객체의 의미는 멀티 디스플레이 장치(100)에 명령을 입력하기 위한 수단을 의미하는 것으로써, 예를 들어, 손과 같은 신체의 일부가 될 수 있다.
사용자 객체(50)가 유효 인식 영역(5) 안으로 근접하면 적외선 센싱부(292)는 사용자 객체(50)의 근접에 의하여 반사되는 적외선을 감지하여 적외선 스캔 이미지를 생성한다. 구체적으로 적외선 센싱부(292)는 어레이 형태로 배치되는 복수의 적외선 센싱 소자를 이용하여, 사용자 객체(50)의 접근에 의하여 반사되는 적외선에 대응되는 적외선 스캔 이미지를 생성할 수 있다. 멀티 디스플레이 장치(100)는 생성된 적외선 스캔 이미지를 이용하여 근접 터치 입력을 감지할 수 있다.
도 50은 다른 방식에 따른 근접 터치를 감지하는 방법을 설명하기 위한 도면이다. 사용자는 특정한 펜을 이용한 근접 터치 방식으로 멀티 디스플레이 장치(100)에 제어 명령을 입력시킬 수 있다.
도 50을 참조하면, 도 49에서 설명한 디스플레이 패널(290a)과 근접 센서 소스부(291a) 및 센싱부(292a)를 포함한다. 특정한 펜을 이용하여 근접 터치를 인식하기 위해서 펜(49)은 코일을 포함할 수 있다. 그리고, 디스플레이부는 정전기 센서부(293)를 포함한다. 정전기 센서부(293)는 수 개의 코일을 포함할 수 있다.
코일을 포함한 펜(49)이 일정 거리(5a) 이내로 근접하면 정전기 유도 현상에 의해 정전기 센서부(293)의 코일에 전류가 유도된다. 전류는 펜(49)와 가까운 코일에 가장 크게 유도되고, 펜(49)과 거리가 멀어질수록 점점 작게 유도된다. 따라서, 제어부는 가장 크게 전류가 유도되는 지점이 펜(49)이 위치한 지점으로 인식하게 된다.
도 50에 도시된 디스플레이부는 적외선 센싱부(292a)를 포함하고 있으므로 펜(49)이 일정 거리 이내로 근접하는 경우 적외선 센싱부(292a) 및 정전기 센서부(293) 모두에서 펜(49)의 근접이 인식될 수 있다. 따라서, 정전기 센서부(293)의 근접 인식을 우선 순위로 하여 이중 인식이 되는 문제를 해결할 수 있다.
도 51은 본 발명의 일 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도이다.
도 51에 따르면 제1 바디에 마련된 제1 촬상부 또는 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행한다(S5110). 각 촬상부에서 촬상된 이미지는 제1 및 제2 디스플레이부에 표시될 수 있다. 촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성한다(S5120). 촬상을 수행하는 단계에서 힌지부를 기준으로 제1 바디 또는 제2 바디가 회전하면서 제1 촬상부 또는 제2 촬상부에 의해 촬상이 이루어질 수 있다. 또는, 제1 촬상부에 의해 생성되는 제1 라이브 뷰를 제1 디스플레이부를 통해 디스플레이하고, 제2 촬상부에 의해 생성되는 제2 라이브 뷰를 제2 디스플레이부를 통해 디스플레이하며, 제1 및 제2 라이브 뷰 간의 중복 영역의 크기가 기 설정된 조건을 충족하면 제1 촬상부 및 제2 촬상부를 각각 제어하여 촬상을 수행할 수도 있다. 파노라마 이미지 컨테츠를 생성하기 위한 구체적인 촬상 방법과 생성 방법은 상술하였으므로 생략한다.
도 52는 본 발명의 다른 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도이다.
도 52에 따르면 제1 및 제2 촬상부를 이용하여 촬상을 수행한다(S5210). 제1 촬상부에서 촬상된 제1 이미지와 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 이미지 컨텐츠를 생성한다(S5220). 하나의 3D 이미지 컨텐츠는 제1 이미지를 좌안 영상으로 처리하고, 제2 이미지를 우안 영상으로 처리하여, 좌안 영상과 우안 영상을 조합하는 방법으로 생성한다.
도 53은 본 발명의 또 다른 실시 예에 따른 멀티 디스플레이 장치의 촬상 방법의 흐름도이다.
도 53에 따르면 제1 및 제2 촬상부 기능을 선택하기 위한 설정 화면을 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이한다(S5310). 제1 및 제2 촬상부의 기능은 일반 촬상, 동영상 촬영, 줌 촬상, 셔터 우선 촬상, 조리개 우선 촬상, 특수 효과 촬상, 연속 촬상 등 다양한 기능이 될 수 있다. 제1 및 제2 촬상부 각각에 선택된 기능을 설정한다(S5320). 촬상부의 개수가 3개 이상인 경우 3개 촬상부 각각에 서로 다른 기능을 설정할 수 있다.
이상과 같이 본 발명의 다양한 실시 예에 따르면, 복수 개의 디스플레이 수단을 갖춘 멀티 디스플레이 장치에서 복수의 촬상부를 이용하여 촬상을 하여 3D 이미지 컨텐츠 또는 파노라마 이미지 컨텐츠를 생성할 수 있다. 또한, 복수 개의 촬상부를 이용하여 다양한 기능의 촬상이 가능하다. 이에 따라, 보다 다양한 촬상부 기능을 활용할 수 있다.
상술한 다양한 실시 예에 따른 멀티 디스플레이 장치의 동작 제어 방법이나, 촬상 방법 등은 프로그램으로 구현되어 멀티 디스플레이 장치에 제공될 수 있다.
일 예로, 멀티 디스플레이 장치의 제1 바디에 마련된 제1 촬상부와 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계, 각 촬상부에서 촬상된 복수의 이미지를 조합하여 하나의 이미지 컨텐츠를 생성하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다. 또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
2 : 제1 바디 4 : 제2 바디
11a, 11b : 뷰 파인더
100 : 멀티 디스플레이 장치
110 : 통신부 120 : 멀티미디어부
130 : 제어부 140 : 촬상부
150 : 센서부 160 : 입/출력부
170 : 저장부 180 : 전원부
185 : 힌지부
140a : 제1 촬상부 140b : 제2 촬상부
190a : 제1 디스플레이부 190b : 제2 디스플레이부
141, 141', 141a : 제1 촬상부 142, 142', 142a : 제2 촬상부
143, 146, 146’ : 제3 촬상부 144 : 제4 촬상부
148, 149 : 회전형 촬상부

Claims (31)

  1. 제1 디스플레이부를 포함하는 제1 바디(body);
    제2 디스플레이부를 포함하는 제2 바디(body);
    상기 제1 및 제2 바디를 연결하는 힌지부;
    상기 제1 바디에 마련된 제1 촬상부;
    상기 제2 바디에 마련된 제2 촬상부; 및
    상기 힌지부를 기준으로 상기 제1 바디 또는 상기 제2 바디가 회전하면서 상기 제1 촬상부 또는 상기 제2 촬상부에 의해 촬상이 이루어지면, 촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 제어부;를 포함하는 멀티 디스플레이 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고,
    상기 제1 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고,
    상기 힌지부를 기준으로 상기 제2 바디가 상기 제1 방향의 반대인 제2 방향으로 회전하면, 상기 제2 촬상부에서 생성되는 라이브 뷰를 상기 제1 디스플레이부에 표시하면서 상기 제2 촬상부를 이용하여 촬상을 수행하여 제2 촬영 범위 내의 이미지들을 캡쳐하며,
    상기 제1 촬영 범위 내에서 캡쳐된 이미지 및 상기 제2 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치.
  4. 제2항 또는 제3항에 있어서,
    상기 제어부는,
    상기 라이브 뷰에서 피사체의 특정 부분이 인식되면 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치.
  5. 제2항 또는 제3항에 있어서,
    상기 제어부는,
    상기 제1 바디 및 상기 제2 바디 사이의 사이각이 기 설정된 각도 조건을 충족하면 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치.
  6. 제2항 또는 제3항에 있어서,
    상기 제어부는,
    상기 회전이 개시되면 기 설정된 시간 주기마다 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치.
  7. 제1항에 있어서,
    상기 제어부는,
    파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고,
    상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 자동 조정하는 것을 특징으로 하는 멀티 디스플레이 장치.
  8. 제1항에 있어서,
    상기 제어부는,
    파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고,
    상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 조정하도록 유도하는 가이드 이미지를 상기 제1 및 제2 디스플레이부에 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치.
  9. 제1항에 있어서,
    상기 제1 촬상부는 상기 제1 바디에서 상기 제1 디스플레이부가 배치된 면과 동일 면에 배치되고,
    상기 제2 촬상부는 상기 제2 바디에서 상기 제2 디스플레이부가 배치된 면과 동일 면에 배치되는 것을 특징으로 하는 멀티 디스플레이 장치.
  10. 제1항에 있어서,
    상기 제1 촬상부는 상기 제1 바디에서 상기 제1 디스플레이부가 배치된 면의 반대측 면에 배치되고,
    상기 제2 촬상부는 상기 제2 바디에서 상기 제2 디스플레이부가 배치된 면의 반대측 면에 배치되는 것을 특징으로 하는 멀티 디스플레이 장치.
  11. 제1항에 있어서,
    상기 제1 촬상부 및 상기 제2 촬상부 중 적어도 하나의 촬상부는 회전이 가능한 것을 특징으로 하는 멀티 디스플레이 장치.
  12. 제1항에 있어서,
    상기 제어부는,
    상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하며,
    상기 설정 화면을 통해 선택된 기능에 따라 상기 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어하는 것을 특징으로 하는 멀티 디스플레이 장치.
  13. 제12항에 있어서,
    상기 제어부는,
    상기 제1 디스플레이부에 파노라마 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 일반 디스플레이 기능이 설정되면,
    상기 제1 디스플레이부에 상기 파노라마 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 제1 촬상부 및 상기 제2 촬상부에서 각각 촬상한 개별 이미지 컨텐츠 중 적어도 하나를 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치.
  14. 제1 디스플레이부를 포함하는 제1 바디(body);
    제2 디스플레이부를 포함하는 제2 바디(body);
    상기 제1 및 제2 바디를 연결하는 힌지부;
    상기 제1 바디에 마련된 제1 촬상부;
    상기 제2 바디에 마련된 제2 촬상부; 및
    상기 제1 촬상부에 의해 생성되는 제1 라이브 뷰를 상기 제1 디스플레이부를 통해 디스플레이하고, 상기 제2 촬상부에 의해 생성되는 제2 라이브 뷰를 상기 제2 디스플레이부를 통해 디스플레이하는 제어부;를 포함하며,
    상기 제어부는, 상기 제1 및 제2 라이브 뷰 간의 중복 영역의 크기가 기 설정된 조건을 충족하면 상기 제1 촬상부 및 상기 제2 촬상부를 각각 제어하여 촬상을 수행하고, 촬상된 이미지들을 조합하여 파노라마 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치.
  15. 제1 디스플레이부를 포함하는 제1 바디(body);
    제2 디스플레이부를 포함하는 제2 바디(body);
    상기 제1 및 제2 바디를 연결하는 힌지부;
    상기 제1 바디에 마련된 제1 촬상부;
    상기 제2 바디에 마련된 제2 촬상부; 및
    상기 제1 촬상부에서 촬상된 제1 이미지와 상기 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 컨텐츠를 생성하는 제어부;를 포함하며,
    상기 제어부는,
    상기 제1 이미지를 좌안 영상으로 처리하고, 상기 제2 이미지를 우안 영상으로 처리하여, 상기 좌안 영상 및 상기 우안 영상을 포함하는 3D 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치.
  16. 제15항에 있어서,
    상기 제어부는,
    상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하며,
    상기 설정 화면을 통해 선택된 기능에 따라 상기 제1 및 제2 디스플레이부의 디스플레이 동작을 개별적으로 제어하는 것을 특징으로 하는 멀티 디스플레이 장치.
  17. 제16항에 있어서,
    상기 제어부는,
    상기 제1 디스플레이부에 3D 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 2D 디스플레이 기능이 설정되면,
    상기 제1 디스플레이부에 상기 3D 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 좌안 영상 및 상기 우안 영상 중 적어도 하나를 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치.
  18. 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서,
    상기 제1 바디에 마련된 제1 촬상부 또는 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계; 및
    촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 단계;를 포함하며,
    상기 촬상을 수행하는 단계는,
    상기 힌지부를 기준으로 상기 제1 바디 또는 상기 제2 바디가 회전하면서 상기 제1 촬상부 또는 상기 제2 촬상부에 의해 촬상이 이루어지는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  19. 제18항에 있어서,
    상기 촬상을 수행하는 단계는,
    상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고,
    상기 파노라마 이미지 컨텐츠를 생성하는 단계는,
    상기 제1 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  20. 제18항에 있어서,
    상기 촬상을 수행하는 단계는,
    상기 힌지부를 기준으로 상기 제1 바디가 제1 방향으로 회전하면, 제1 촬상부에서 생성되는 라이브 뷰를 상기 제2 디스플레이부에 표시하면서 상기 제1 촬상부를 이용하여 촬상을 수행하여, 제1 촬영 범위 내의 이미지들을 캡쳐하고,
    상기 힌지부를 기준으로 상기 제2 바디가 상기 제1 방향의 반대인 제2 방향으로 회전하면, 상기 제2 촬상부에서 생성되는 라이브 뷰를 상기 제1 디스플레이부에 표시하면서 상기 제2 촬상부를 이용하여 촬상을 수행하여 제2 촬영 범위 내의 이미지들을 캡쳐하며,
    상기 파노라마 이미지 컨텐츠를 생성하는 단계는,
    상기 제1 촬영 범위 내에서 캡쳐된 이미지 및 상기 제2 촬영 범위 내에서 캡쳐된 이미지를 전부 연결하여 파노라마 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  21. 제19항 또는 제20항에 있어서,
    상기 촬상을 수행하는 단계는,
    상기 라이브 뷰에서 피사체의 특정 부분이 인식되면 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  22. 제19항 또는 제20항에 있어서,
    상기 촬상을 수행하는 단계는,
    상기 제1 바디 및 상기 제2 바디 사이의 사이각이 기 설정된 각도 조건을 충족하면 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  23. 제19항 또는 제20항에 있어서,
    상기 촬상을 수행하는 단계는,
    상기 회전이 개시되면 기 설정된 시간 주기마다 자동 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  24. 제18항에 있어서,
    상기 촬상을 수행하는 단계는,
    파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고,
    상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 자동 조정하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  25. 제18항에 있어서,
    상기 촬상을 수행하는 단계는,
    파노라마 촬영 모드가 개시되면 촬영 범위 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하고,
    상기 촬영 범위 설정 화면에서 촬영 범위가 설정되면, 설정된 촬영 범위에 따라 상기 제1 촬상부의 촬상 각도 및 상기 제2 촬상부의 촬상 각도를 조정하도록 유도하는 가이드 이미지를 상기 제1 및 제2 디스플레이부에 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  26. 제18항에 있어서,
    상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하는 기능 설정 단계; 및
    상기 설정 화면을 통해 선택된 기능을 상기 제1 및 제2 디스플레이부에 디스플레이하는 단계;를 더 포함하는 멀티 디스플레이 장치의 촬상 방법.
  27. 제26항에 있어서,
    상기 디스플레이하는 단계는,
    상기 제1 디스플레이부에 파노라마 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 일반 디스플레이 기능이 설정되면,
    상기 제1 디스플레이부에 상기 파노라마 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 제1 촬상부 및 상기 제2 촬상부에서 각각 촬상한 개별 이미지 컨텐츠 중 적어도 하나를 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  28. 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서,
    상기 제1 바디에 마련된 제1 촬상부 또는 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계; 및
    촬상된 복수의 이미지를 조합하여 파노라마 이미지 컨텐츠를 생성하는 단계;를 포함하며,
    상기 촬상을 수행하는 단계는,
    상기 제1 촬상부에 의해 생성되는 제1 라이브 뷰를 상기 제1 디스플레이부를 통해 디스플레이하고, 상기 제2 촬상부에 의해 생성되는 제2 라이브 뷰를 상기 제2 디스플레이부를 통해 디스플레이하며, 상기 제1 및 제2 라이브 뷰 간의 중복 영역의 크기가 기 설정된 조건을 충족하면 상기 제1 촬상부 및 상기 제2 촬상부를 각각 제어하여 촬상을 수행하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  29. 제1 디스플레이부를 포함하는 제1 바디, 제2 디스플레이부를 포함하는 제2 바디 및 상기 제1 바디와 제2 바디를 연결하는 힌지부를 포함하는 멀티 디스플레이 장치의 촬상 방법에 있어서,
    상기 제1 바디에 마련된 제1 촬상부 및 상기 제2 바디에 마련된 제2 촬상부를 이용하여 촬상을 수행하는 단계; 및
    상기 제1 촬상부에서 촬상된 제1 이미지와 상기 제2 촬상부에서 촬상된 제2 이미지를 조합하여 하나의 이미지 컨텐츠를 생성하는 단계;를 포함하며,
    상기 하나의 이미지 컨텐츠를 생성하는 단계는,
    상기 제1 이미지를 좌안 영상으로 처리하고, 상기 제2 이미지를 우안 영상으로 처리하여, 상기 좌안 영상 및 상기 우안 영상을 포함하는 3D 이미지 컨텐츠를 생성하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
  30. 제29항에 있어서,
    상기 제1 및 제2 디스플레이부의 기능을 각각 설정하기 위한 설정 화면을 상기 제1 및 제2 디스플레이부 중 적어도 하나를 통해 디스플레이하는 기능 설정 단계; 및
    상기 설정 화면을 통해 선택된 기능을 상기 제1 및 제2 디스플레이부에 디스플레이하는 단계;를 더 포함하는 멀티 디스플레이 장치의 촬상 방법.
  31. 제30항에 있어서,
    상기 디스플레이하는 단계는,
    상기 제1 디스플레이부에 3D 디스플레이 기능이 설정되고, 상기 제2 디스플레이부에 2D 디스플레이 기능이 설정되면,
    상기 제1 디스플레이부에 상기 3D 이미지 컨텐츠를 디스플레이하고, 상기 제2 디스플레이부에 상기 좌안 영상 및 상기 우안 영상 중 적어도 하나를 디스플레이하는 것을 특징으로 하는 멀티 디스플레이 장치의 촬상 방법.
KR1020120112683A 2012-10-10 2012-10-10 멀티 디스플레이 장치 및 그 촬상 방법 KR101951228B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020120112683A KR101951228B1 (ko) 2012-10-10 2012-10-10 멀티 디스플레이 장치 및 그 촬상 방법
EP13188133.6A EP2720191B1 (en) 2012-10-10 2013-10-10 Display device and method of photographing thereof
US14/050,683 US9571734B2 (en) 2012-10-10 2013-10-10 Multi display device and method of photographing thereof
CN201310470325.1A CN103731602B (zh) 2012-10-10 2013-10-10 多显示设备及其拍摄方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120112683A KR101951228B1 (ko) 2012-10-10 2012-10-10 멀티 디스플레이 장치 및 그 촬상 방법

Publications (2)

Publication Number Publication Date
KR20140046344A true KR20140046344A (ko) 2014-04-18
KR101951228B1 KR101951228B1 (ko) 2019-02-22

Family

ID=49513714

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120112683A KR101951228B1 (ko) 2012-10-10 2012-10-10 멀티 디스플레이 장치 및 그 촬상 방법

Country Status (4)

Country Link
US (1) US9571734B2 (ko)
EP (1) EP2720191B1 (ko)
KR (1) KR101951228B1 (ko)
CN (1) CN103731602B (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015199270A1 (ko) * 2014-06-24 2015-12-30 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20160132094A (ko) * 2014-05-12 2016-11-16 인텔 코포레이션 듀얼 디스플레이 시스템
US11262800B2 (en) 2017-09-18 2022-03-01 Samsung Electronics Co., Ltd. Foldable electronic device supporting multiwindow
US11625066B2 (en) 2019-07-19 2023-04-11 Samsung Electronics Co., Ltd Foldable electronic device and photographing method using multiple cameras in foldable electronic device

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6450064B2 (ja) * 2013-03-18 2019-01-09 任天堂株式会社 情報処理装置、動画データのデータ構造、情報処理システム、動画再生プログラム、および、動画の再生方法。
EP2981074B1 (en) * 2013-03-27 2017-11-01 Nec Corporation Display device, display method, and display program
US20150243202A1 (en) * 2014-02-27 2015-08-27 Google Technology Holdings LLC Electronic Device Having Multiple Sides
US9712749B2 (en) * 2014-02-27 2017-07-18 Google Technology Holdings LLC Electronic device having multiple sides
US9538078B2 (en) * 2014-03-02 2017-01-03 Google Inc. User interface for wide angle photography
KR20150126193A (ko) * 2014-05-02 2015-11-11 삼성전자주식회사 복수의 디스플레이를 이용한 컨텐츠 출력 방법 및 그 장치
CN105335364B (zh) * 2014-05-29 2017-03-08 优视科技有限公司 一种实现视图滑动显示加速的方法及装置
JP6332017B2 (ja) * 2014-12-24 2018-05-30 ソニー株式会社 制御方法、制御装置およびプログラム
DE102015105363A1 (de) * 2015-04-09 2016-10-13 Airbus Ds Optronics Gmbh Verfahren zur Darstellung eines Panoramabildes und Panoramabilddarstellungsvorrichtung
CN108366206B (zh) * 2015-06-11 2020-08-18 Oppo广东移动通信有限公司 一种基于旋转摄像头与智能眼镜的拍摄方法及系统
JP6696737B2 (ja) * 2015-06-26 2020-05-20 シャープ株式会社 コンテンツ表示装置及びプログラム
CN105227861A (zh) * 2015-06-29 2016-01-06 深圳市美贝壳科技有限公司 一种自动调整照片显示角度的方法
US11284003B2 (en) * 2015-07-29 2022-03-22 Samsung Electronics Co., Ltd. User terminal apparatus and control method thereof
CN105472212B (zh) * 2015-11-18 2019-08-27 联想(北京)有限公司 一种电子设备及信息处理方法
KR101834536B1 (ko) * 2016-01-12 2018-03-05 한국전자통신연구원 초고화질 영상 회의를 위한 장치 및 방법
DE112017001625B4 (de) 2016-03-31 2021-06-24 Fujifilm Corporation Digitalkamera und Anzeigeverfahren für die Digitalkamera
US10015378B2 (en) * 2016-09-15 2018-07-03 Microsoft Technology Licensing, Llc Kinematic mount for split camera
KR102568386B1 (ko) * 2016-09-30 2023-08-21 삼성디스플레이 주식회사 터치 센서를 포함하는 표시 장치
US10284823B1 (en) * 2016-10-12 2019-05-07 Google Llc Capturing photographs based on rotation of device
KR102575910B1 (ko) * 2016-10-28 2023-09-08 삼성전자주식회사 가이드를 출력하는 전자 장치 및 방법
CN106453962B (zh) * 2016-11-30 2020-01-21 珠海市魅族科技有限公司 双屏智能终端的摄像控制方法
CN106791298A (zh) * 2016-12-01 2017-05-31 广东虹勤通讯技术有限公司 一种具有双摄像头的终端及拍照方法
CN206894705U (zh) * 2017-04-14 2018-01-16 中兴通讯股份有限公司 一种双屏终端
US10481856B2 (en) * 2017-05-15 2019-11-19 Microsoft Technology Licensing, Llc Volume adjustment on hinged multi-screen device
US10339700B2 (en) * 2017-05-15 2019-07-02 Microsoft Technology Licensing, Llc Manipulating virtual objects on hinged multi-screen device
US10264186B2 (en) 2017-06-30 2019-04-16 Microsoft Technology Licensing, Llc Dynamic control of camera resources in a device with multiple displays
US11093197B2 (en) * 2017-07-31 2021-08-17 Stmicroelectronics, Inc. System and method to increase display area utilizing a plurality of discrete displays
US20200351543A1 (en) * 2017-08-30 2020-11-05 Vid Scale, Inc. Tracked video zooming
CN107682634A (zh) * 2017-10-18 2018-02-09 维沃移动通信有限公司 一种人脸图像获取方法及移动终端
CN109144393B (zh) 2018-08-28 2020-08-07 维沃移动通信有限公司 一种图像显示方法及移动终端
CN109743486A (zh) * 2019-01-25 2019-05-10 维沃移动通信（杭州）有限公司 一种移动终端及控制方法
CN109992054B (zh) * 2019-03-30 2021-04-13 联想(北京)有限公司 一种电子设备、连接装置
JP6828967B2 (ja) * 2019-06-20 2021-02-10 Ｎｅｃプラットフォームズ株式会社 情報端末装置
US11137607B2 (en) * 2019-06-28 2021-10-05 Canon Kabushiki Kaisha Image capturing and display apparatus and wearable device
CN110365904B (zh) * 2019-07-25 2020-11-27 珠海格力电器股份有限公司 可折叠屏全景图片拍摄方法、装置、系统以及存储介质
KR20210040680A (ko) * 2019-10-04 2021-04-14 삼성전자주식회사 복수의 카메라들을 포함하고 형태가 변하는 전자 장치 및 이미지 촬영 방법
CN112835493B (zh) 2019-11-22 2022-07-22 华为技术有限公司 截屏显示方法、装置和终端设备
KR20210144990A (ko) * 2020-05-21 2021-12-01 삼성전자주식회사 파노라마 이미지를 제공하는 방법 및 이를 지원하는 전자 장치
TWI802106B (zh) * 2020-12-02 2023-05-11 仁寶電腦工業股份有限公司 電子裝置及其影像擷取方法
US20220239832A1 (en) * 2021-01-28 2022-07-28 Motorola Mobility Llc Image Processing as a Function of Deformable Electronic Device Geometry and Corresponding Devices and Methods
US11706399B2 (en) * 2021-09-27 2023-07-18 Hewlett-Packard Development Company, L.P. Image generation based on altered distances between imaging devices

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090148149A1 (en) * 2004-12-08 2009-06-11 Kyocera Corporation Camera device
WO2012044510A2 (en) * 2010-10-01 2012-04-05 Imerj, Llc User interface with independent drawer control
US20120218202A1 (en) * 2010-10-01 2012-08-30 Sanjiv Sirpal Windows position control for phone applications
US20120242599A1 (en) * 2011-02-10 2012-09-27 Samsung Electronics Co., Ltd. Device including plurality of touch screens and screen change method for the device

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2796768B2 (ja) 1992-11-20 1998-09-10 株式会社ピーエフユー マルチディスプレイ装置
US5522025A (en) 1993-10-25 1996-05-28 Taligent, Inc. Object-oriented window area display system
CA2139094C (en) 1994-12-23 1999-04-13 Abdel Naser Al-Karmi Optical character recognition of handwritten or cursive text
JP3462986B2 (ja) 1998-08-31 2003-11-05 株式会社日立製作所 カメラ付きペン型入力装置
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
JP2001021972A (ja) 1999-07-07 2001-01-26 Minolta Co Ltd ペンシル型のデジタルスチルカメラ
JP2001209470A (ja) 2000-01-26 2001-08-03 Fujitsu Ltd 表示インターフェイス方法及び装置並びにプログラム記憶媒体
US7120317B1 (en) 2001-03-01 2006-10-10 Silicon Motion, Inc. Method and system for a programmable image transformation
JP2002281135A (ja) 2001-03-21 2002-09-27 Nec Viewtechnology Ltd 携帯電話
US7929185B2 (en) 2002-03-25 2011-04-19 Transpacific Systems, Llc System and method for switching screens from overview and preview
US6904737B2 (en) 2002-08-01 2005-06-14 General Mills, Inc. Dispensing apparatus and method of dispensing
JP3914855B2 (ja) 2002-10-15 2007-05-16 パナソニック モバイルコミュニケーションズ株式会社 携帯端末
KR20040035019A (ko) 2002-10-18 2004-04-29 엘지전자 주식회사 휴대용 컴퓨터의 스피커 시스템 및 스피커 구동방법
KR20040091272A (ko) 2003-04-21 2004-10-28 홍충식 더블 폴더 휴대폰
US9092190B2 (en) 2010-10-01 2015-07-28 Z124 Smartpad split screen
KR20040104777A (ko) 2003-06-04 2004-12-13 주식회사 팬택앤큐리텔 듀얼 카메라 장착 단말기
KR20050068127A (ko) 2003-12-29 2005-07-05 엘지전자 주식회사 입체사진 촬영이 가능한 휴대용 단말기
KR100959796B1 (ko) 2004-01-31 2010-05-28 엘지전자 주식회사 부분 윈도우 화면 표시방법
JP3738358B2 (ja) 2004-04-20 2006-01-25 カシオ計算機株式会社 ウィンドウ表示制御装置
JP4177434B2 (ja) 2004-05-06 2008-11-05 隆敏 柳瀬 ウィンドウ表示システム、情報処理システム、クライアント装置、電話機、情報機器、家電機器及び機器
EP1758019A4 (en) 2004-05-06 2010-06-23 Takatoshi Yanase WINDOW DISPLAY SYSTEM, WINDOW DISPLAY METHOD, PROGRAM DEVELOPMENT SUPPORT DEVICE, AND SERVER DEVICE
KR20050109190A (ko) 2004-05-14 2005-11-17 주식회사 팬택 듀얼 카메라를 이용한 와이드 이미지 생성 장치 및 방법
JP2006030379A (ja) 2004-07-13 2006-02-02 Toshiba Corp マルチディスプレイシステム及びコンピュータ
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7561737B2 (en) 2004-09-22 2009-07-14 Microsoft Corporation Mathematical expression recognition
KR100606797B1 (ko) 2004-11-12 2006-08-02 엘지전자 주식회사 듀얼 카메라를 갖는 이동통신 단말기
KR101094769B1 (ko) 2004-12-21 2011-12-16 엘지전자 주식회사 듀얼 카메라를 구비한 이동통신 단말기의 파노라마 영상표시 방법
CN101536494B (zh) 2005-02-08 2017-04-26 奥布隆工业有限公司 用于基于姿势的控制系统的系统和方法
KR20060092621A (ko) 2005-02-18 2006-08-23 최기훈 듀얼액정이 구비되는 전자책 단말기
KR20070014586A (ko) 2005-07-29 2007-02-01 삼성전자주식회사 Ｐｉｐ 표시 제어방법
KR100653965B1 (ko) 2005-08-01 2006-12-05 심재용 휴대용 단말기의 서로 다른 카메라를 이용한 3차원입체영상 처리 장치
KR100773853B1 (ko) 2005-08-22 2007-11-06 캐논 가부시끼가이샤 오브젝트 조작 장치 및 오브젝트 조작방법
KR100742588B1 (ko) 2005-11-14 2007-07-25 주식회사 디엔피시스템 듀얼 모니터의 모니터간 데이터 공유 방법
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US8180114B2 (en) 2006-07-13 2012-05-15 Northrop Grumman Systems Corporation Gesture recognition interface system with vertical display
JP2008033686A (ja) 2006-07-28 2008-02-14 Fujitsu Frontech Ltd 電子ブック
US8516393B2 (en) 2006-12-18 2013-08-20 Robert Pedersen, II Apparatus, system, and method for presenting images in a multiple display environment
KR100803504B1 (ko) 2007-01-16 2008-02-14 (주)케이티에프테크놀로지스 듀얼 카메라를 구비한 휴대용 단말기
CN101286310A (zh) 2007-04-13 2008-10-15 群康科技(深圳)有限公司 显示器屏幕显示控制系统及其操作方法
KR100936816B1 (ko) 2007-05-26 2010-01-14 이문기 카메라와 마크 출력에의한 포인팅 장치
KR20080113832A (ko) 2007-06-26 2008-12-31 (주)이에스비 액정표시장치상의 특정 패턴을 촬영하는 카메라를 내장하여위치를 판독하는 전자펜과 이를 이용한 전자칠판
KR101164738B1 (ko) 2007-08-29 2012-07-12 교세라 가부시키가이샤 전자 기기 및 입력 인터페이스 전환 방법
KR20090065040A (ko) 2007-12-17 2009-06-22 삼성전자주식회사 동작과 터치를 이용한 이중 포인팅 장치 및 방법
KR100942783B1 (ko) 2008-02-27 2010-02-18 웹싱크 주식회사 통합 프레임 버퍼를 사용하는 디지털 멀티비전 시스템
US8866840B2 (en) 2008-09-08 2014-10-21 Qualcomm Incorporated Sending a parameter based on screen size or screen resolution of a multi-panel electronic device to a server
US8803816B2 (en) 2008-09-08 2014-08-12 Qualcomm Incorporated Multi-fold mobile device with configurable interface
US8860765B2 (en) 2008-09-08 2014-10-14 Qualcomm Incorporated Mobile device with an inclinometer
US8860632B2 (en) 2008-09-08 2014-10-14 Qualcomm Incorporated Multi-panel device with configurable interface
US9009984B2 (en) 2008-09-08 2015-04-21 Qualcomm Incorporated Multi-panel electronic device
US8933874B2 (en) 2008-09-08 2015-01-13 Patrik N. Lundqvist Multi-panel electronic device
US8836611B2 (en) 2008-09-08 2014-09-16 Qualcomm Incorporated Multi-panel device with configurable interface
US20100073306A1 (en) 2008-09-25 2010-03-25 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Dual-view touchscreen display system and method of operation
KR101569776B1 (ko) 2009-01-09 2015-11-19 삼성전자주식회사 접히는 표시부를 가지는 휴대 단말기 및 이의 운용 방법
KR101544364B1 (ko) 2009-01-23 2015-08-17 삼성전자주식회사 듀얼 터치 스크린을 구비한 휴대 단말기 및 그 컨텐츠 제어방법
KR101564108B1 (ko) 2009-03-20 2015-10-28 엘지전자 주식회사 듀얼 디스플레이부를 구비한 이동 통신 단말기에서의 아이템 제어 방법 및 이를 적용한 이동 통신 단말기
US8446377B2 (en) 2009-03-24 2013-05-21 Microsoft Corporation Dual screen portable touch sensitive computing system
KR20100115547A (ko) 2009-04-20 2010-10-28 에스케이 텔레콤주식회사 컨텐츠 주밍 방법과 그를 위한 터치 스크린 단말기 및 컴퓨터로 읽을 수 있는 기록매체
JP5256109B2 (ja) 2009-04-23 2013-08-07 株式会社日立製作所 表示装置
KR101556329B1 (ko) 2009-05-11 2015-10-01 에스케이텔레콤 주식회사 단말기에서의 모드별 다중 스피커 제어 방법 및 그 장치
KR101578005B1 (ko) 2009-06-10 2015-12-16 엘지전자 주식회사 이동 단말기 및 이것에 구비된 카메라를 이용한 사용자 동작 입력 방법
JP5212310B2 (ja) 2009-08-17 2013-06-19 株式会社リコー ネットワークシステム、サーバ装置、及びグループウェアプログラム
JP5518868B2 (ja) 2009-09-03 2014-06-11 クゥアルコム・インコーポレイテッド インクリノメータをもつモバイルデバイス
JP5653920B2 (ja) 2009-09-03 2015-01-14 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ グラフィカルユーザインターフェース要素の配置および方向を示すための方法
US8681124B2 (en) 2009-09-22 2014-03-25 Microsoft Corporation Method and system for recognition of user gesture interaction with passive surface video displays
US20110102314A1 (en) 2009-10-30 2011-05-05 Xerox Corporation Dual-screen electronic reader with tilt detection for page navigation
KR101710545B1 (ko) 2009-11-05 2017-02-27 엘지전자 주식회사 이동 단말기 및 이를 이용한 정보 제공 방법
US8724301B2 (en) 2010-01-29 2014-05-13 Mohamed K. Mahmoud Laptop book
US20110191704A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
JP2011221229A (ja) 2010-04-08 2011-11-04 Sharp Corp 表示システム、表示方法、およびディスプレイ
KR101196253B1 (ko) 2010-04-20 2012-11-05 주식회사 유니온앤이씨 기업 정보 관리를 위한 가상 컨텐츠 공급 장치 및 방법
US9009594B2 (en) 2010-06-10 2015-04-14 Microsoft Technology Licensing, Llc Content gestures
US8638303B2 (en) 2010-06-22 2014-01-28 Microsoft Corporation Stylus settings
KR101686866B1 (ko) 2010-06-30 2016-12-15 엘지전자 주식회사 이동 단말기
KR101701839B1 (ko) 2010-07-13 2017-02-02 엘지전자 주식회사 이동 단말기 및 그 제어 방법
KR101718027B1 (ko) 2010-09-09 2017-03-20 엘지전자 주식회사 이동 단말기 및 그의 메모 관리방법
KR101798965B1 (ko) 2010-10-14 2017-11-17 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
EP2469804B1 (en) 2010-11-22 2012-09-12 Research In Motion Limited Multi-display mobile device
JP5085759B2 (ja) 2011-03-31 2012-11-28 株式会社東芝 表示制御装置、電子機器及び制御プログラム
KR101229699B1 (ko) 2011-05-12 2013-02-05 주식회사 케이티 애플리케이션 간의 콘텐츠 이동 방법 및 이를 실행하는 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090148149A1 (en) * 2004-12-08 2009-06-11 Kyocera Corporation Camera device
WO2012044510A2 (en) * 2010-10-01 2012-04-05 Imerj, Llc User interface with independent drawer control
US20120218202A1 (en) * 2010-10-01 2012-08-30 Sanjiv Sirpal Windows position control for phone applications
US20120242599A1 (en) * 2011-02-10 2012-09-27 Samsung Electronics Co., Ltd. Device including plurality of touch screens and screen change method for the device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160132094A (ko) * 2014-05-12 2016-11-16 인텔 코포레이션 듀얼 디스플레이 시스템
WO2015199270A1 (ko) * 2014-06-24 2015-12-30 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10133394B2 (en) 2014-06-24 2018-11-20 Lg Electronics Inc. Mobile terminal and control method thereof
US11262800B2 (en) 2017-09-18 2022-03-01 Samsung Electronics Co., Ltd. Foldable electronic device supporting multiwindow
US11625066B2 (en) 2019-07-19 2023-04-11 Samsung Electronics Co., Ltd Foldable electronic device and photographing method using multiple cameras in foldable electronic device

Also Published As

Publication number Publication date
CN103731602A (zh) 2014-04-16
EP2720191B1 (en) 2019-09-11
US20140098188A1 (en) 2014-04-10
KR101951228B1 (ko) 2019-02-22
EP2720191A1 (en) 2014-04-16
CN103731602B (zh) 2018-05-11
US9571734B2 (en) 2017-02-14

Similar Documents

Publication Publication Date Title
KR101951228B1 (ko) 멀티 디스플레이 장치 및 그 촬상 방법
KR101984683B1 (ko) 멀티 디스플레이 장치 및 그 제어 방법
KR102063952B1 (ko) 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US11360728B2 (en) Head mounted display apparatus and method for displaying a content
US9406281B2 (en) Multi-display device and method of controlling thereof
US10136069B2 (en) Apparatus and method for positioning image area using image sensor location
US9348504B2 (en) Multi-display apparatus and method of controlling the same
KR102114377B1 (ko) 전자 장치에 의해 촬영된 이미지들을 프리뷰하는 방법 및 이를 위한 전자 장치
EP2720140A1 (en) Display apparatus, input pen, display apparatus controlling method and display system
JP2014078236A (ja) マルチディスプレイ装置及びそのディスプレイ制御方法
WO2021104321A1 (zh) 图像显示方法及电子设备
KR20210097765A (ko) 가상 환경에 기반한 객체 구축 방법 및 장치, 컴퓨터 장치 및 판독 가능 저장 매체
US20140327634A1 (en) Portable terminal and method for protecting a displayed object
WO2021218926A1 (zh) 图像显示方法、装置和计算机设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant