KR101462351B1 - 시선일치 영상통화장치 - Google Patents

시선일치 영상통화장치 Download PDF

Info

Publication number
KR101462351B1
KR101462351B1 KR1020130097443A KR20130097443A KR101462351B1 KR 101462351 B1 KR101462351 B1 KR 101462351B1 KR 1020130097443 A KR1020130097443 A KR 1020130097443A KR 20130097443 A KR20130097443 A KR 20130097443A KR 101462351 B1 KR101462351 B1 KR 101462351B1
Authority
KR
South Korea
Prior art keywords
image
transparent display
camera
display
transparent
Prior art date
Application number
KR1020130097443A
Other languages
English (en)
Inventor
최권휴
Original Assignee
영남대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 영남대학교 산학협력단 filed Critical 영남대학교 산학협력단
Priority to KR1020130097443A priority Critical patent/KR101462351B1/ko
Priority to US14/300,610 priority patent/US9277172B2/en
Application granted granted Critical
Publication of KR101462351B1 publication Critical patent/KR101462351B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N7/144—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display camera and display on the same optical axis, e.g. optically multiplexing the camera and display for eye to eye contact

Abstract

본 발명은 영상통화를 하는 경우 상대방과의 시선을 맞추어 실감 있게 통화할 수 있도록 하는 시선일치 영상통화장치에 관한 것으로, 불투명 디스플레이 중앙의 일부분에 투명 디스플레이를 형성하고, 그 후면에 카메라를 형성하여 상대방과의 시선을 맞추어 실감 있게 통화할 수 있도록 함과 동시에 일반적인 화면용도의 경우에도 가독성을 상승시키고, 단말기의 제작 비용을 절감하며, 카메라 촬영 영상에 존재하는 투명 디스플레이 출력 영상의 간섭을 효과적으로 방지할 수 있다.

Description

시선일치 영상통화장치{APPARATUS FOR EYE CONTACT VIDEO CALL}
본 발명은 영상통화장치에 관한 것으로, 더욱 상세하게는 디스플레이를 사용하는 IT기기(데스크탑 PC, 노트북 PC, 스마트폰, 태블릿 PC, 스마트 TV 등)에서 카메라를 디스플레이 내부에 위치시켜, 영상통화를 하는 경우 상대방과의 시선을 맞추어 실감 있게 통화할 수 있도록 하는 시선일치 영상통화장치에 관한 것이다.
최근의 이동 단말기는 영상 촬영과 영상통화 용도로 사용하기 위해 복수의 카메라를 구비하고 있는데, 영상통화 용도로 사용하기 위한 카메라는 구조적으로 디스플레이 영역을 피하여 외측으로 배치되어야 하기 때문에, 영상통화 시 사용자의 영상이 한쪽으로 치우쳐 촬영되는 경향이 있다.
도 1a 및 1b는 종래의 영상통화장치를 나타낸 정면도로서, 도 1a는 일예로 태블릿 PC를 나타낸 도면이고, 도 1b는 PC모니터의 일예를 나타낸 도면이다.
도시된 바와 같이 종래의 영상통화장치는 디스플레이(10) 테두리의 베젤(11)이 형성되고, 상기 베젤(11)의 일측에 카메라(22)가 형성된다.
그러나 이러한 종래의 영상통화장치는 영상통화 시 화면과 카메라 위치의 불일치로, 상대 통화자의 시선이 자신의 눈을 향하지 않아 현실감 있는 영상통화가 불가능하며, 이에 따라 얼굴을 맞대고 통화한다는 느낌을 가질 수 없어 영상통화의 궁극적 목표를 달성할 수 없는 문제점이 있다.
이를 해결하기 위하여, 대한민국 공개특허공보 제10-1998-077854호에는 클럭신호에 동기하여 카메라의 촬영 동작을 단속하는 셔터를 포함하여 상대방의 눈높이와 동일한 위치에서 자연스러운 통신환경을 제공하는 시선 일치 화상 통신 시스템이 개시되어 있다.
그러나 이와 같은 종래의 시선 일치 화상 통신 시스템은, 디스플레이 화면 전체에 투명 디스플레이를 형성하기 때문에 가독성이 떨어져 일반 디스플레이 용도로는 사용하기 어렵고 제조 비용이 상승하는 문제점이 있었다.
또한, 카메라를 개폐하기 위하여 별도의 셔터를 구비해야 하는 문제점이 있었다.
또한, 통화자 단말기 쌍방 모두에 동기신호를 맞추기 위한 장치가 각각 부가되어야 하며, 영상정보와 별도로 동기신호를 주고 받아야 하기 때문에 시스템 구성요소가 증가하고 구조 및 제어가 복잡해지는 문제점이 있었다.
또한, 구성 요소들이 물리적으로 분리되어 있어, 외관상 기존의 디스플레이와 달리 시스템 구축이 복잡하게 되는 문제점이 있었다.
대한민국 공개특허공보 제10-1998-077854호(1998년 11월 16일)
본 발명은 상술한 종래기술의 문제점을 극복하기 위한 것으로서, 불투명 디스플레이 중앙의 일부분에만 투명 디스플레이를 형성한 시선일치 영상통화장치를 제공한다.
또한, 투명디스플레이를 일정주기로 온/오프하면서 카메라로 촬영하는 시선일치 영상통화장치를 제공한다.
또한, 송신단에서 투명 디스플레이가 온된 상태(디스플레이 모드)에서 촬영된 영상프레임을 선택적으로 제거하거나 투명 디스플레이가 오프된 상태(투명유리 모드)의 촬영 영상프레임을 선택하여 전송 영상프레임을 재구성하는 시선일치 영상통화장치를 제공한다.
상기 목적을 달성하기 위해 본 발명에 바람직한 일 실시예에 따른 시선일치 영상통화장치는, 영상을 표시하는 불투명 디스플레이; 상기 불투명 디스플레이의 중앙 일부분에 형성되고, 주기적으로 온/오프되면서 영상을 표시하는 투명 디스플레이; 상기 투명 디스플레이 후면에 형성되고 상기 투명 디스플레이를 관통하여 전면의 영상을 촬영하는 카메라; 상기 카메라에서 촬영한 영상중 상기 투명 디스플레이가 온/오프된 상태에 따라 영상 프레임을 조정하여 출력 영상을 재구성하는 영상신호 처리부; 및 상기 영상신호 처리부에서 재구성된 출력 영상을 송수신하는 통신부;를 포함한다.
상기 투명 디스플레이와 상기 카메라 사이에 단방향으로 빛을 투과시키는 단방향 필름이 더 형성된다.
상기 카메라는; 상기 투명디스플레이가 오프인 상태(투명 유리모드)에만 영상을 촬영한다.
상기 카메라는; 상기 투명 디스플레이의 온/오프 여부와 상관없이 항상 영상을 촬영한다.
상기 카메라는; 상기 투명 디스플레이의 온/오프 주기와 엇갈리게 온/오프되어 영상을 촬영한다.
상기 영상신호 처리부는; 상기 카메라에서 촬영한 영상중 상기 투명 디스플레이가 온된 상태의 간섭 영상 프레임을 선택적으로 제거하여 출력 영상을 재구성한다.
상기 영상신호 처리부는; 상기 카메라에서 촬영한 영상중 상기 투명 디스플레이가 오프된 상태(투명 유리모드)의 영상 프레임만을 선택하여 출력 영상을 재구성한다.
상기 영상신호 처리부는; 상기 선택된 영상 프레임을 인접한 앞,뒤 프레임에 복사하여 삽입하거나 보간하여 출력 영상을 재구성한다.
상기 카메라는; 1 쌍의 좌,우 스테레오 카메라를 포함하고, 상기 디스플레이부의 중앙에 횡으로 일정한 간격을 유지하도록 위치하고 상기 좌,우 카메라의 영역 두 군데를 상기 투명 디스플레이로 구성한다.
상기 투명 디스플레이는; 좌우 투명 디스플레이 영역이 서로 어긋나는 주기로 온/오프 제어되며, 상기 영상신호 처리부는 해당 투명디스플레이가 오프인 상태의 영상 프레임만을 선택하여 3차원 영상을 구성한다.
상기 카메라는; 상기 좌우 카메라가 서로 어긋나는 주기로 촬영하여 3차원 영상을 생성하고, 상기 좌우 카메라 영역에 해당하는 상기 투명 디스플레이는 해당 카메라의 촬영순간에만 각각 오프된다.
상기와 같이 구성된 본 발명에 따른 시선일치 영상통화장치에 의하면, 종래기술의 시선 일치 영상통화장치와 달리, 불투명 디스플레이 중앙의 일부분에만 투명 디스플레이를 형성함으로써 가독성을 상승시키고, 단말기의 제작 비용을 절감할 수 있는 효과가 있다.
또한, 종래기술과 달리, 투명디스플레이를 일정주기로 온/오프하고 카메라는 연속하여 촬영하게 함으로써, 카메라를 개폐하기 위하여 별도의 셔터를 구비할 필요가 없는 효과가 있다.
또한, 카메라는 투명디스플레이의 온/오프 주기와 엇갈리게 온/오프 제어하거나, 카메라 촬영 영상에서 투명 디스플레이가 온된 순간의 영상 프레임을 선택적으로 제거하거나, 투명 디스플레이가 오프된 순간(투명 유리 모드)에서 촬영된 영상프레임만을 선택하여 전송 영상을 재구성하기 때문에 통화자 쌍방간에 동기신호를 별도로 송수신할 필요가 없고, 따라서 이를 검출하는 장치가 필요 없어 장치의 구조 및 제어가 간단해지는 효과가 있다.
또한, 상대방의 영상통화시스템은 기존의 영상통화시스템을 변경 없이 사용할 수 있는 효과가 있다.
도 1a 및 1b는 종래의 영상통화장치를 나타낸 정면도.
도 2a 및 2b, 2c는 본 발명의 바람직한 일 실시예에 따른 시선일치 영상통화장치를 나타낸 정면 및 측단면도.
도 3은 본 발명의 다른 실시예에 따른 시선일치 영상통화장치를 나타낸 정면도.
도 4는 본 발명의 바람직한 일 실시예에 따른 시선일치 영상통화장치를 나타낸 블록 구성도.
도 5는 본 발명의 투명 및 불투명 디스플레이와 카메라의 촬영 주기를 나타낸 그래프.
도 6은 도 4의 작용을 설명하기 위한 제어 흐름도이다.
도 7은 도 6에서의 영상 신호 처리부의 전송 영상 재구성 과정을 나타낸 도면이다.
본 발명은 다양한 변형 및 여러 가지 실시예를 가질 수 있는바, 그 중 특정 실시예를 상세한 설명과 도면의 예시를 통하여 더욱 상세하게 설명하고자 한다. 아울러, 본 발명을 설명함에 있어서 관련된 주지 관용 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 설명을 생략한다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명하기로 한다.
도 2a 및 2b는 본 발명의 바람직한 일 실시예에 따른 시선일치 영상통화장치를 나타낸 정면도로서, 도 2a는 일예로 태블릿 PC를 나타낸 도면이고, 도 2b는 PC모니터의 일예를 나타낸 도면이며, 도 2c는 도 2a의 측단면도이다. 여기서, 도 2a 및 2b에 도시된 장치는 본 발명의 바람직한 일 실시 예일 뿐이므로 이에 한정되는 것이 아니라 통상의 노트북 PC, 스마트 폰 그리고 스마트 TV 등의 다양한 영상통화기기를 포함할 수 있다. 도 2a, 2b 및 도 2c에 도시된 바와 같이, 본 발명의 바람직한 일 실시예에 따른 시선일치 영상통화장치는, 불투명 디스플레이(21a), 투명 디스플레이(21b)를 포함하는 디스플레이부(21)와 상기 디스플레이부(21)의 중앙 후면에 설치된 카메라(22)를 포함한다.
불투명 디스플레이(21a)는 LCD, LED, OLED와 같이 일반적인 영상을 디스플레이하는 통상의 디스플레이소자이다. 또한, 투명/불투명 전환이 가능한 디스플레이소자를 포함할 수 있다.
상기 불투명 디스플레이부(21)는 베젤(26)에 의하여 그 디스플레이 화면의 테두리가 감싸여져 있다.
불투명 디스플레이(21a)는 화면의 전체 영역에 형성되고, 투명 디스플레이(21b)는 상기 불투명 디스플레이(21a)의 중앙 일부분에 형성된다. 특히, 투명 디스플레이(21b)는 후술하는 카메라 렌즈에 대응되는 최소한의 영역만큼 형성될 수 있다. 또한, 투명 디스플레이(21b)도 투명/불투명 전환이 가능한 디스플레이소자를 포함할 수 있다.
카메라(31)는 상기 투명 디스플레이(30) 후면에 형성되고 상기 투명 디스플레이(21b)를 관통하여 전면에 있는 통화하는 사람(상대방 또는 자기 자신)의 영상을 촬영한다.
또한, 본 발명은 상기 투명 디스플레이(21b)와 상기 카메라(22) 사이에 단방향으로 빛을 투과시키는 단방향 필름(25)이 더 형성될 수 있다.
상기 단방향 필름(25)은 투명 디스플레이(21b)를 바라보는 사람은 카메라(22)가 보이지 않고, 카메라(22) 측에서는 통화하는 사람을 촬영할 수 있도록 카메라(22) 방향에서 사람 방향으로만 빛을 투과시키는 것이 바람직하다.
또한, 본 발명의 다른 실시예로서, 3차원 영상 촬영을 지원하는 1쌍의 스테레오 카메라를 디스플레이 중앙 수평선에 일정한 거리를 두고 횡으로 장착한 영상 통화기기를 포함할 수 있다.
도 3에 도시된 바와 같이, 본 발명의 다른 실시예에 따른 시선일치 영상통화장치에서 상기 카메라(22)는, 1 쌍의 좌, 우 스테레오 카메라(22a)(22b)를 포함하고, 상기 디스플레이부(21)의 중앙에 횡으로 일정한 간격을 유지하도록 위치하고 상기 좌, 우 카메라(22a)(22b)의 영역 두 군데를 투명 디스플레이(21b)(21c)로 구성할 수 있다.
상기 투명 디스플레이(21b)(21c)는 좌우 투명 디스플레이 영역이 서로 어긋나는 주기로 온/오프 제어되며, 상기 영상신호 처리부(23)는 해당 투명디스플레이(21b 또는 21c)가 오프인 상태의 영상 프레임만을 선택하여 3차원 영상을 구성한다.
상기 카메라(22a)(22b)는 상기 좌우 카메라(22a)(22b)가 서로 어긋나는 주기로 촬영하여 3차원 영상을 생성하고, 상기 좌우 카메라 영역에 해당하는 투명 디스플레이(21b 또는 21c)는 해당 카메라(22a 또는 22b)의 촬영순간에만 각각 오프된다.
도 4는 본 발명의 바람직한 일 실시예에 따른 시선일치 영상통화장치를 나타낸 블록 구성도이다.
본 발명에서는 투명 디스플레이(21b)가 주기적으로 온/오프 제어될 수 있으며 온/오프 주기를 디스플레이 주기(display cycle)라고 한다. 여기서, 투명 디스플레이(21b)가 "온"이라 하면 영상이 투명 디스플레이에 출력되는 순간(디스플레이모드)을 의미하며 반대로 "오프"라 하면 영상이 투명 디스플레이에 출력되지 않는 순간(투명유리모드)을 의미한다. 주사방식에 따라 해당 화면영역을 동시에 온/오프 제어할 수도 있고, 스캔방식으로 촘촘한 간격으로 순차적으로 온/오프 제어할 수도 있다. 필요에 따라 영상통화시 디스플레이 주기는 일반 디스플레이로 사용시 디스플레이 주기보다 길게 설정할 수도 있다.
도 5는 본 발명에서, 디스플레이 자체 구동회로의 프레임 율보다 낮은 속도로 투명 디스플레이를 온(디스플레이모드)/오프(투명유리모드) 제어하는 경우, 투명 및 불투명 디스플레이와 카메라의 촬영 주기를 나타낸 그래프이다.
도시된 바와 같이, 불투명 디스플레이(21a)는 영상을 표시하고, 투명 디스플레이(21b)는 상기 불투명 디스플레이(21a)의 중앙 일부분에 형성되고, 주기적으로 온/오프되면서 영상을 표시한다.
카메라(22)는 상기 투명 디스플레이(21b) 후면에 형성되고 상기 투명 디스플레이(21b)를 관통하여 전면의 영상을 촬영한다.
통신부(24)는 상기 영상신호 처리부(23)에서 처리된 전송 영상을 송수신한다.
영상신호 처리부(23)는 상기 카메라(22)에서 촬영한 영상 프레임을 받아서, 상기 투명 디스플레이(21b)가 온된 상태(디스플레이모드)의 영상을 제거하거나 또는 오프된 상태(투명유리모드)의 영상을 선택하여 전송 영상을 구성한다.
상기 카메라(22)는 상기 투명디스플레이(21b)가 오프인 순간(투명 유리모드)에만 영상을 촬영하거나 또는 상기 투명 디스플레이(21b)의 온/오프 여부와 상관없이 항상 영상을 촬영할 수 있다. 또한, 상기 투명디스플레이(21b)가 별도의 온/오프로 제어되지 않고 단지 전체 디스플레이 구동회로의 기본적인 프레임율로 동작할 수 있으며 이 경우, 카메라(22)의 이미지 센서(미도시)가 온되는 순간이 디스플레이의 영상 프레임간 빈 시간이 되도록 엇갈리게 카메라(22)의 프레임 주기를 설정할 수 있다.
따라서, 상기 통신부(24)는 상기 영상신호 처리부(23)에서 처리된 상기 투명 디스플레이(21b)가 오프된 순간(투명유리모드)의 영상프레임으로 재구성된 영상을 전송할 수 있다.
본 발명에서 상기 카메라(22)는 초소형 카메라가 적용될 수 있으며, 카메라(22)가 위치하는 투명 디스플레이(21b) 화면의 중앙부분에 카메라 렌즈 크기만큼만 투명 디스플레이(21b)를 사용하고 나머지 부분은 기존 불투명 디스플레이(21a)를 사용한다. 가로/세로 모드 변환 가능성이 없는 디스플레이에 한하여 통화자의 눈높이에 맞게 카메라의 위치를 정 중앙보다 위 또는 아래로 적절히 위치시킬 수 있다.
다른 구현 예로는, 영역 구분없이 불투명/투명 디스플레이 모드전환이 가능한 하나의 디스플레이를 전체영역에 사용하여, 영상통화 시에 한하여 중앙의 카메라 렌즈에 해당하는 부분만을 불투명모드/투명유리모드 간 온/오프 제어하고, 영상통화용도 외에는 전체를 불투명 디스플레이 모드로 사용할 수 있다.
이때, 본 발명은 불투명 디스플레이(21b)와 투명 디스플레이(21a)는 기본적인 구조가 동일하고 그것을 이루는 소자(전극, TFT, Substrate, 발광소자 등)을 투명소자를 쓰느냐, 불투명 소자를 쓰느냐로 투명과 불투명 패널(미도시)을 달리 구성할 수 있다. 따라서 불투명 디스플레이 패널의 일부 영역을 투명디스플레이로 구성하는 이른바, 모노리딕 국부 투명 디스플레이를 제조할 수 있다. 따라서, 이러한 구성에 따라 초소형 카메라의 렌즈 크기만큼만 투명하게 할 수 있다.
한편, 투명 디스플레이(21b)의 특성상, 통화자는 투명 디스플레이(21b) 안쪽의 카메라(22)가 보이게 되어 통화 화면에서 투명/불투명 영역간 화면의 부조화 현상이 발생할 수 있는데, 본 발명은 이를 해결하기 위해 카메라(22)와 투명 디스플레이(21b) 패널 사이에 단방항 빛 투과 필름(25)(예, 취조실 거울 필름 또는 단방향 빛 차단 쇼윈도 필름 등)을 삽입하여, 통화자는 투명 디스플레이(21b) 안쪽의 카메라(22)가 보이지 않게 하고, 카메라(22)는 투명 디스플레이(21b)의 바깥쪽 통화자의 촬영이 가능하도록 할 수 있다.
도 6은 도 4의 작용을 설명하기 위한 제어 흐름도로서 디스플레이 제어, 영상 촬영 및 전송 과정을 나타낸다.
상기와 같이 구성된 본 발명의 작용을 더욱 상세히 설명하면 다음과 같다.
도 6에 도시된 바와 같이, 통화자 단말기에서 영상통화가 개시되면(S101), 디스플레이(21)에 상대방 영상이 출력되며, 중앙의 투명 디스플레이(21b) 영역은 주기적으로 온/오프 되면서 온인 순간에만 상대방 영상의 해당 영역을 출력한다(S102).
상기 투명 디스플레이(21b) 후면에 형성된 카메라(22)는 상기 투명 디스플레이(21b)를 관통하여 전면의 영상을 촬영한다(S103). 이때, 상기 카메라(22)는 상기 투명디스플레이(21b)의 온/오프 여부와 상관없이 항상 영상을 촬영한다.
영상신호 처리부(23)는 상기 카메라(22)에서 촬영된 영상 프레임을 받아 상기 투명 디스플레이(21b)가 온된 상태의 영상 프레임을 제거하거나 또는 오프된 상태의 영상 프레임을 선택하여 전송 영상을 구성한다(S104).
도 7은 상기 투명 디스플레이(21b)가 오프된 순간(투명유리모드)에 해당하는 상기 카메라(22)의 영상프레임만을 선택하여 전송할 영상을 재구성하는 경우의 영상신호 처리부(23)의 처리 과정도이다.
상기 투명 디스플레이(21b)가 오프된 순간(투명유리모드)에 해당하는 카메라 촬영 영상 프레임길이를 T, 온된 순간(디스플레이모드)에 해당하는 카메라 촬영 영상 프레임길이를 D라 할 때, 매 투명유리모드 순간의 T 개의 프레임 중 앞뒤 몇 개의 프레임을 제외한 S개의 프레임을 선택한 후, 선택된 앞뒤 프레임 블록들을 반복하거나 간단한 보간을 통하여, 선택되지 않은 T+D-S개의 카메라 영상프레임을 대체한다.
이때, 변수 T는 자연수, D는 정수이며, S는 T보다 같거나 작은 자연수이다. S는 상기 투명 디스플레이(21b)의 온/오프 전환에 필요한 물리적 시간을 고려하여 그 값을 정할 수 있다.
T=1, D=0, S=1이 되도록 상기 카메라(22) 촬영프레임 주기와 상기 투명 디스플레이(21b) 온/오프 주기를 엇갈리게 일치시키는 경우에는 추가적인 영상프레임 재구성과정을 생략하여 전송할 수 있다.
이후, 통신부(24)는 상기 영상신호 처리부(22)에서 처리된 전송 영상을 상대방 단말기로 송신하고, 영상전송이 종료될 때까지 상기 과정을 반복 수행한다(S105~S106).
따라서, 본 발명에 의하면, 불투명 디스플레이 중앙의 일부분에 투명 디스플레이를 형성하고, 그 후면에 카메라를 형성하여 상대방과의 시선을 맞추어 실감 있게 통화할 수 있도록 함과 동시에 일반적인 화면용도의 경우에도 가독성을 상승시키고, 단말기의 제작 비용을 절감하며, 카메라 촬영 영상에 존재하는 투명 디스플레이 출력 영상의 간섭을 효과적으로 방지할 수 있다.
본 명세서에 기재된 본 발명의 실시예와 도면에 도시된 구성은 본 발명의 바람직한 실시예에 관한 것으로, 발명의 기술적 사상을 모두 포괄하는 것은 아니므로, 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다. 따라서, 본 발명은 상술한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형실시가 가능한 것은 물론이고, 그와 같은 변경은 본 발명의 청구범위 기재의 권리범위 내에 있게 된다.
20 : 디스플레이부
21a : 불투명 디스플레이
21b, 21c : 투명 디스플레이
22, 22a, 22b : 카메라
24 : 통신부
23 : 영상신호 처리부

Claims (11)

  1. 영상을 표시하는 불투명 디스플레이; 상기 불투명 디스플레이의 중앙 일부분에 형성되고, 주기적으로 온/오프되면서 영상을 표시하는 투명 디스플레이; 및 상기 투명 디스플레이와 카메라 사이에 단방향으로 빛을 투과시키는 단방향 필름을 포함하는 디스플레이부;
    상기 투명 디스플레이 후면에 형성되고 상기 투명 디스플레이를 관통하여 전면의 영상을 촬영하는 카메라;
    상기 카메라에서 촬영한 영상 중 상기 투명 디스플레이가 온/오프된 상태에 따라 영상 프레임을 조정하여 출력 영상을 재구성하는 영상신호 처리부; 및
    상기 영상신호 처리부에서 재구성된 출력 영상을 송수신하는 통신부;
    를 포함하는 시선일치 영상통화장치.
  2. 삭제
  3. 제 1항에 있어서,
    상기 카메라는;
    상기 투명디스플레이가 오프인 상태(투명 유리모드)에만 영상을 촬영하는 시선일치 영상통화장치.
  4. 제 1항에 있어서,
    상기 카메라는;
    상기 투명 디스플레이의 온/오프 여부와 상관없이 항상 영상을 촬영하는 시선일치 영상통화장치.
  5. 제 1항에 있어서,
    상기 카메라는;
    상기 투명 디스플레이의 온/오프 주기와 엇갈리게 온/오프되어 영상을 촬영 시선일치 영상통화장치.
  6. 제 1항에 있어서,
    상기 영상신호 처리부는;
    상기 카메라에서 촬영한 영상 중 상기 투명 디스플레이가 온된 상태의 간섭 영상 프레임을 선택적으로 제거하여 출력 영상을 재구성하는 시선일치 영상통화장치.
  7. 제 1항에 있어서,
    상기 영상신호 처리부는;
    상기 카메라에서 촬영한 영상 중 상기 투명 디스플레이가 오프된 상태(투명 유리모드)의 영상 프레임만을 선택하여 출력 영상을 재구성하는 시선일치 영상통화장치.
  8. 제 6항 또는 제 7항에 있어서,
    상기 영상신호 처리부는;
    상기 선택된 영상 프레임을 인접한 앞, 뒤 프레임에 복사하여 삽입하거나 보간하여 출력 영상을 재구성하는 시선일치 영상통화장치.
  9. 제 1항에 있어서,
    상기 카메라는;
    1 쌍의 좌, 우 스테레오 카메라를 포함하고, 상기 디스플레이부의 중앙에 횡으로 일정한 간격을 유지하도록 위치하고 상기 좌, 우 카메라의 영역 두 군데를 상기 투명 디스플레이로 구성하는 시선일치 영상통화장치.
  10. 제 9항에 있어서,
    상기 투명 디스플레이는;
    좌우 투명 디스플레이 영역이 서로 어긋나는 주기로 온/오프 제어되며, 상기 영상신호 처리부는 해당 투명디스플레이가 오프인 상태의 영상 프레임만을 선택하여 3차원 영상을 구성하는 시선일치 영상통화장치.
  11. 제 9항에 있어서,
    상기 카메라는;
    상기 좌우 카메라가 서로 어긋나는 주기로 촬영하여 3차원 영상을 생성하고, 상기 좌우 카메라 영역에 해당하는 상기 투명 디스플레이는 해당 카메라의 촬영순간에만 각각 오프되는 시선일치 영상통화장치.
KR1020130097443A 2013-08-16 2013-08-16 시선일치 영상통화장치 KR101462351B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130097443A KR101462351B1 (ko) 2013-08-16 2013-08-16 시선일치 영상통화장치
US14/300,610 US9277172B2 (en) 2013-08-16 2014-06-10 Apparatus for eye contact video call

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130097443A KR101462351B1 (ko) 2013-08-16 2013-08-16 시선일치 영상통화장치

Publications (1)

Publication Number Publication Date
KR101462351B1 true KR101462351B1 (ko) 2014-11-14

Family

ID=52290427

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130097443A KR101462351B1 (ko) 2013-08-16 2013-08-16 시선일치 영상통화장치

Country Status (2)

Country Link
US (1) US9277172B2 (ko)
KR (1) KR101462351B1 (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170096565A (ko) * 2016-02-16 2017-08-24 삼성전자주식회사 전자 장치
KR20190006689A (ko) * 2017-07-11 2019-01-21 엘지이노텍 주식회사 광학 기기
WO2020071611A1 (ko) * 2018-10-05 2020-04-09 삼성디스플레이 주식회사 표시 장치
WO2020145444A1 (ko) * 2019-01-11 2020-07-16 엘지전자 주식회사 이동 단말기
WO2021091090A1 (en) * 2019-11-06 2021-05-14 Samsung Electronics Co., Ltd. Lens assembly and electronic device including the same
US11270613B2 (en) 2018-05-10 2022-03-08 Samsung Display Co., Ltd. Display apparatus and method of manufacturing the same
WO2022220423A1 (ko) * 2021-04-16 2022-10-20 삼성전자 주식회사 전자 장치 및 전자 장치의 이미지 촬영 방법
WO2022220583A1 (ko) * 2021-04-14 2022-10-20 삼성전자 주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법
WO2022220530A1 (ko) * 2021-04-12 2022-10-20 삼성전자 주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9754526B2 (en) 2015-10-30 2017-09-05 Essential Products, Inc. Mobile device with display overlaid with at least a light sensor
US9870024B2 (en) 2015-10-30 2018-01-16 Essential Products, Inc. Camera integrated into a display
US9767728B2 (en) 2015-10-30 2017-09-19 Essential Products, Inc. Light sensor beneath a dual-mode display
US9864400B2 (en) 2015-10-30 2018-01-09 Essential Products, Inc. Camera integrated into a display
US10102789B2 (en) * 2015-10-30 2018-10-16 Essential Products, Inc. Mobile device with display overlaid with at least a light sensor
US9823694B2 (en) 2015-10-30 2017-11-21 Essential Products, Inc. Camera integrated into a display
US10331260B2 (en) 2015-10-30 2019-06-25 Essential Products, Inc. Variable transparency layers for electronic devices
WO2017147614A1 (en) 2016-02-26 2017-08-31 Essential Products, Inc. Image capture with a camera integrated display
JP2018124457A (ja) * 2017-02-01 2018-08-09 国立大学法人静岡大学 顔画像処理装置
CN106878564A (zh) * 2017-03-07 2017-06-20 广东欧珀移动通信有限公司 一种显示屏的控制方法及装置、显示屏和移动终端
CN109116656B (zh) * 2018-09-03 2021-06-29 Oppo广东移动通信有限公司 电子设备、电致变色部控制方法及存储介质
US10838468B2 (en) * 2019-01-28 2020-11-17 EMC IP Holding Company LLC Mounting a camera behind a transparent organic light emitting diode (TOLED) display
US11575865B2 (en) 2019-07-26 2023-02-07 Samsung Electronics Co., Ltd. Processing images captured by a camera behind a display
KR20220091496A (ko) * 2019-11-12 2022-06-30 소니 세미컨덕터 솔루션즈 가부시키가이샤 전자 기기
WO2021106513A1 (ja) * 2019-11-29 2021-06-03 ソニーセミコンダクタソリューションズ株式会社 電子機器
KR20210081568A (ko) * 2019-12-24 2021-07-02 엘지디스플레이 주식회사 유기발광 표시장치
US20230113359A1 (en) * 2020-10-23 2023-04-13 Pathway Innovations And Technologies, Inc. Full color spectrum blending and digital color filtering for transparent display screens
US20220360755A1 (en) * 2020-10-23 2022-11-10 Ji Shen Interactive display with integrated camera for capturing audio and visual information
US11721001B2 (en) * 2021-02-16 2023-08-08 Samsung Electronics Co., Ltd. Multiple point spread function based image reconstruction for a camera behind a display
US11722796B2 (en) 2021-02-26 2023-08-08 Samsung Electronics Co., Ltd. Self-regularizing inverse filter for image deblurring
US20220368835A1 (en) * 2021-03-03 2022-11-17 Ji Shen Display with integrated camera
TW202235956A (zh) * 2021-03-05 2022-09-16 大立光電股份有限公司 頭戴裝置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027419A (ja) * 2000-07-05 2002-01-25 Hitachi Ltd 画像端末装置及びそれを用いる通信システム
KR20130083153A (ko) * 2012-01-12 2013-07-22 삼성전자주식회사 이미지 촬영 및 화상 통화 장치와 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8154582B2 (en) * 2007-10-19 2012-04-10 Eastman Kodak Company Display device with capture capabilities
US8643691B2 (en) * 2008-05-12 2014-02-04 Microsoft Corporation Gaze accurate video conferencing
US20110134205A1 (en) * 2009-12-08 2011-06-09 Susanne Arney Imaging terminal
WO2012008972A1 (en) * 2010-07-16 2012-01-19 Hewlett-Packard Development Company, L.P. Methods and systems for establishing eye contact and accurate gaze in remote collaboration
US9160966B2 (en) * 2011-05-11 2015-10-13 Microsoft Technology Licensing, Llc Imaging through a display screen

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027419A (ja) * 2000-07-05 2002-01-25 Hitachi Ltd 画像端末装置及びそれを用いる通信システム
KR20130083153A (ko) * 2012-01-12 2013-07-22 삼성전자주식회사 이미지 촬영 및 화상 통화 장치와 방법

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170096565A (ko) * 2016-02-16 2017-08-24 삼성전자주식회사 전자 장치
KR102631887B1 (ko) 2016-02-16 2024-02-01 삼성전자주식회사 전자 장치
KR20190006689A (ko) * 2017-07-11 2019-01-21 엘지이노텍 주식회사 광학 기기
KR102350059B1 (ko) * 2017-07-11 2022-01-11 엘지이노텍 주식회사 광학 기기
US11270613B2 (en) 2018-05-10 2022-03-08 Samsung Display Co., Ltd. Display apparatus and method of manufacturing the same
US11721260B2 (en) 2018-05-10 2023-08-08 Samsung Display Co., Ltd. Display apparatus and method of manufacturing the same
US11706953B2 (en) 2018-10-05 2023-07-18 Samsung Display Co., Ltd. Display device
WO2020071611A1 (ko) * 2018-10-05 2020-04-09 삼성디스플레이 주식회사 표시 장치
WO2020145444A1 (ko) * 2019-01-11 2020-07-16 엘지전자 주식회사 이동 단말기
US11856120B2 (en) 2019-01-11 2023-12-26 Lg Electronics Inc. Mobile terminal
WO2021091090A1 (en) * 2019-11-06 2021-05-14 Samsung Electronics Co., Ltd. Lens assembly and electronic device including the same
US11726301B2 (en) 2019-11-06 2023-08-15 Samsung Electronics Co., Ltd. Lens assembly and electronic device including the same
EP4007933A4 (en) * 2019-11-06 2022-09-14 Samsung Electronics Co., Ltd. LENS ASSEMBLY AND ELECTRONIC DEVICE INCLUDING IT
WO2022220530A1 (ko) * 2021-04-12 2022-10-20 삼성전자 주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법
WO2022220583A1 (ko) * 2021-04-14 2022-10-20 삼성전자 주식회사 카메라를 포함하는 전자 장치, 그 전자 장치에서의 동작 방법
WO2022220423A1 (ko) * 2021-04-16 2022-10-20 삼성전자 주식회사 전자 장치 및 전자 장치의 이미지 촬영 방법

Also Published As

Publication number Publication date
US9277172B2 (en) 2016-03-01
US20150049165A1 (en) 2015-02-19

Similar Documents

Publication Publication Date Title
KR101462351B1 (ko) 시선일치 영상통화장치
US7525565B2 (en) 3D video conferencing
EP2383995B1 (en) Display system, method and computer program for capturing images using multiple integrated image sensors
US20110279689A1 (en) Integrated Display Camera Using Oscillating Display Elements
WO2012013156A1 (zh) 显示屏幕以及使用该显示屏幕的终端设备
JP2008118589A (ja) テレビ電話装置
US20110285891A1 (en) Integrated Display Camera Using Masked Display Elements
US20110285861A1 (en) Integrated Display Camera Using A Pinhole Image Capturing Device
CN104639754A (zh) 用手机拍摄和显示三维影像的方法和三维影像手机
EP2394195A2 (en) Method of stereoscopic 3d image capture and viewing
CN101588511A (zh) 一种立体摄像装置及方法
JP4338500B2 (ja) 撮像装置
KR20040104777A (ko) 듀얼 카메라 장착 단말기
WO2014119965A1 (ko) 사이드 바이 사이드 스테레오 영상 촬영 방법 및 이를 위한 단안식 카메라
KR20120040622A (ko) 영상 통신 방법 및 장치
JP2007295187A (ja) 投影装置
CN106921818A (zh) 一种视频通讯终端、方法及系统
US10110848B2 (en) Imaging and display system and method
CN102253591A (zh) 基于led光通信的统一帧序控制的3d投影显示系统
CN103379189A (zh) 一种3d照相手机及其使用方法
CN201805478U (zh) 获取三维图像的宽带网络手机
KR200341237Y1 (ko) 이동통신 단말기의 입체영상 촬영 및 디스플레이 장치
JPH01286592A (ja) 視線一致テレビ電話装置
CN110618534B (zh) 一种立体显示眼镜
JP2014057219A (ja) 表示制御装置、撮像装置、制御方法、プログラム、及び記録媒体

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171101

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20181101

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191014

Year of fee payment: 6