KR101274471B1 - 영상통화 중 감정 전달 시스템 및 방법 - Google Patents

Abstract

본 발명은 영상통화 중 감정 전달 시스템 및 방법에 관한 것이며, 영상통화 중 카메라부로 촬영된 사용자의 영상데이터의 얼굴표정이 기 저장된 특정 얼굴표정과 일치하는지 판단하여 일치하면 해당 특정 얼굴표정에 대응하는 아이콘을 추출하여 상대방 단말기에 전송한다. 본 발명에 따르면, 단말기의 사용자는 영상통화 중에 별도의 입력과정 없이 자신의 얼굴표정에 대응하는 아이콘을 상대방 단말기에 전송함으로써 보다 간편하고 효과적으로 자신의 감정을 상대방에게 전달할 수 있고 상대방과의 영상통화에 흥미를 유발하게 할 수 있다.

영상통화, 얼굴표정, 아이콘, 모니터링, 영상데이터, 감정 전달

Description

영상통화 중 감정 전달 시스템 및 방법{System and method for emotion transmitting during video communication}

본 발명은 영상통화 중 감정 전달 시스템 및 방법에 관한 것이며, 더욱 상세하게는 영상통화 중 단말기 사용자의 특정 얼굴표정에 대응하는 아이콘을 추출하고, 추출한 아이콘을 상대방 단말기에 전송하는 영상통화 중 감정 전달 시스템 및 방법에 관한 것이다.

음성통화 위주의 통화패턴에서 발신 단말기의 보급이 확대되면서 영상통화의 빈도수가 날로 증가되고 있는 추세이다. 발신 단말기는 영상통화 중 상대방의 영상을 화면에 표시하고, 상대방의 음성을 출력하기 때문에 단순히 음성만으로 통화를 하는 것에 비하여 자신의 감정상태를 상대방에게 용이하게 전달할 수 있고 흥미를 유발할 수 있다는 이점이 있다.

하지만 여전히 영상통화 중 자신의 감정상태를 표정이나 목소리만으로 상대방에게 전달해야 하므로 자신의 다양한 감정상태를 발신 단말기를 통하여 전달하는 데는 한계가 있다.

따라서 본 발명은 상술한 문제를 해결하기 위해서 보다 다양하고 흥미로운 방법으로 영상통화 중에 자신의 감정상태를 상대방에서 효과적으로 전달할 수 있는 영상통화 중 감정 전달 시스템 및 방법을 제공하기 위한 것이다.

상기와 같은 목적을 달성하기 위한 본 발명의 영상통화 중 감정 전달 시스템은, 발신 단말기로부터 수신한 영상데이터를 전송하고, 아이콘을 수신하여 착신 단말기로 전송하는 네트워크와, 상기 네트워크를 통해 영상통화 중인 상기 발신 단말기의 사용자를 촬영한 영상데이터를 수신하고, 상기 수신한 영상데이터에 상기 제1 저장부에 저장된 특정 얼굴표정이 포함되는지 모니터링하고, 상기 모니터링 중 상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하고, 추출한 아이콘을 상기 네트워크를 통해 상기 착신 단말기에 전송하는 아이콘 제공서버를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템에 있어서, 상기 아이콘 제공서버는 상기 발신 단말기 또는 상기 착신 단말기로부터 아이콘 표현 정보를 수신하여 저장하고, 상기 아이콘 표현정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템에 있어서, 상기 아이콘 제공서버는 상기 발신 단말기 또는 상기 착신 단말기의 MIN(Mobile Identification Number)을 이용하여 상기 아이콘 표현 정보를 참조하는 것을 특징으로 한다.

상기와 같은 목적을 달성하기 위한 본 발명의 영상통화 중 감정 전달 시스템의 아이콘 제공서버는, 네트워크를 통해 통신을 수행하는 제1 송수신부와, 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장하는 제1 저장부와, 상기 네트워크를 통해 영상통화 중인 발신 단말기의 사용자를 촬영한 영상데이터를 수신하고, 상기 수신한 영상데이터에 상기 제1 저장부에 저장된 특정 얼굴표정이 포함되는지 모니터링하고, 상기 모니터링 중 상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하고, 추출한 아이콘을 상기 네트워크를 통해 착신 단말기에 전송하는 제1 제어부를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 아이콘 제공서버에 있어서, 상기 제1 제어부는, 상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 발신 단말기 또는 상기 착신 단말기로부터 수신하여 저장한 아이콘 표현 정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 아이콘 제공서버에 있어서, 상기 제1 제어부는 상기 발신 단말기 또는 상기 착신 단말기의 MIN을 이용하여 상기 아이콘 표현 정보를 참조하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 아이콘 제공서버에 있어서, 상기 제1 저장부에서 추출한 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지 또는 햅틱 컨텐츠 중 적어도 하나인 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 아이콘 제공서버에 있어서, 상기 제1 저장부에서 추출한 아이콘은 이모티콘, 플래시콘, 파비콘, 아바타 또는 픽토그램 중 적어도 하나인 것을 특징으로 한다.

상기와 같은 목적을 달성하기 위한 본 발명의 영상통화 중 감정 전달 시스템의 단말기는, 상대방 단말기와 네트워크를 통해 통신을 수행하는 제2 송수신부와, 영상통화 시 사용자를 촬영하는 카메라부와, 상기 사용자의 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장하는 제2 저장부와, 상기 제2 송수신부를 통한 영상통화 중 상기 사용자가 특정 얼굴표정을 취하는지를 모니터링하고, 상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 특정 얼굴표정에 대응하는 상기 아이콘을 상기 제2 저장부에서 추출하고, 상기 추출한 아이콘을 상기 제2 송수신부를 통해 상기 네트워크를 거쳐 상기 상대방 단말기에 전송하는 제2 제어부를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 저장부는, 상기 사용자로부터 입력받은 상기 사용자의 아이콘 표현 정보를 더 저장하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 제어부는, 상기 사용자가 특정 얼굴표정을 취하면, 상기 아이콘 표현 정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 제어부는, 상기 사용자가 특정 얼굴표정을 취하면, 상기 제2 송수신부를 통해 상기 네 트워크 내에 위치한 상기 발신 단말기 또는 상기 착신 단말기의 상기 아이콘 표현 정보를 저장한 아이콘 제공서버와의 메시지 송수신을 하여 상기 아이콘 표현 정보를 수신한 후 이를 참조하여 상기 아이콘을 추출하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 제어부는, 상기 발신 단말기 또는 상기 착신 단말기의 MIN을 이용하여 상기 아이콘 표현 정보를 수신하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 저장부에서 추출한 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지 또는 햅틱 컨텐츠 중 적어도 하나인 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 시스템의 단말기에 있어서, 상기 제2 저장부에서 추출한 아이콘은 이모티콘, 플래시콘, 파비콘, 아바타 또는 픽토그램 중 적어도 하나인 것을 특징으로 한다.

상기와 같은 목적을 달성하기 위한 본 발명의 영상통화 중 감정 전달 방법은, 아이콘 제공서버가 발신 단말기로부터 영상통화 중인 사용자를 촬영한 영상데이터를 수신하여 상기 수신한 영상데이터에 포함된 사용자의 얼굴표정을 모니터링하는 모니터링 단계와, 상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 아이콘 제공서버가 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하는 추출단계와, 상기 아이콘 제공서버가 상기 추출한 아이콘을 착신 단말기에 전송하는 전송단계를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 모니터링 단계 이전 에, 상기 아이콘 제공서버는 상기 사용자가 취한 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 제1 저장부에 저장하는 저장단계를 더 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 모니터링 단계에서, 상기 아이콘 제공서버는 상기 수신한 영상데이터에 포함된 상기 사용자의 얼굴표정을 인식하는 인식단계와, 상기 아이콘 제공서버는 상기 인식한 사용자의 얼굴표정이 상기 저장된 특정 얼굴표정과 일치하는지 판단하는 판단단계를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 아이콘 제공서버는 상기 추출한 사용자의 얼굴표정과 상기 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 상기 제1 저장부에 저장된 오차 범위 내에서 전체 픽셀이 일치하면 동일한 것으로 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 아이콘 제공서버는 상기 촬영한 영상데이터를 상기 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여 상기 특정 얼굴표정이 상기 영상데이터 중에 포함되어 있는지 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 아이콘 제공서버는 상기 촬영한 영상데이터에서 상기 얼굴표정을 추출하여 상기 추출한 얼굴표정과 상기 적어도 하나의 특정 얼굴표정을 비교하여, 상기 추출한 얼굴표정과 일치하는 상기 특정 얼굴표정이 있는지 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 제8항 내지 제13항 중에 어느 한 항에 있어서, 상기 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 중에 적어도 하나인 것을 특징으로 한다.

상기와 같은 목적을 달성하기 위한 본 발명의 영상통화 중 감정 전달 방법은, 네트워크를 통해 상대방 단말기와 영상통화 중인 단말기가 상기 단말기의 사용자가 특정 얼굴표정을 취하는지를 모니터링하는 모니터링 단계와, 상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 단말기는 상기 특정 얼굴표정에 대응하는 아이콘을 제2 저장부에서 추출하는 추출단계와, 상기 단말기는 상기 추출한 아이콘을 상기 네트워크를 통해 상기 상대방 단말기에 전송하는 전송단계를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 모니터링 단계 이전에, 상기 단말기는 상기 사용자가 취한 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장부에 저장하는 저장단계를 더 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 모니터링 단계에서, 상기 단말기는 영상통화 중 촬영한 영상데이터에서 상기 사용자의 얼굴표정을 인식하는 인식단계와, 상기 단말기는 인식한 사용자의 얼굴표정이 상기 저장된 특정 얼굴표정과 일치하는지 판단하는 판단단계를 포함하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 단말기는 상기 추출한 사용자의 얼굴표정과 상기 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 상기 제2 저장부에 저장된 오차 범위 내에서 전체 픽셀이 일치하면 동일한 것으로 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 단말기는 상기 촬영한 영상데이터를 상기 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여 상기 특정 얼굴표정이 상기 영상데이터 중에 포함되어 있는지 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 상기 판단단계에서, 상기 단말기는 상기 촬영한 영상데이터에서 상기 얼굴표정을 추출하여 상기 추출한 얼굴표정과 상기 적어도 하나의 특정 얼굴표정을 비교하여, 상기 추출한 얼굴표정과 일치하는 상기 특정 얼굴표정이 있는지 판단하는 것을 특징으로 한다.

본 발명의 영상통화 중 감정 전달 방법에 있어서, 제15항 내지 제20항 중에 어느 한 항에 있어서, 상기 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 중에 적어도 하나인 것을 특징으로 한다.

본 발명에 따른 영상통화 중 감정 전달 시스템 및 방법은 영상통화 중 카메라부가 사용자를 촬영한 영상데이터의 얼굴표정이 기 저장된 특정 얼굴표정과 일치하는지 판단하여, 일치하면 해당 특정 얼굴표정에 대응하는 아이콘을 추출하고, 추출한 아이콘을 상대방 단말기에 전송함으로써 단말기 사용자가 영상 및 음성 외에도 아이콘을 이용하여 자신의 감정을 간편하고 효과적으로 표현할 수 있다.

또한, 특정 얼굴표정에 대응하는 아이콘을 사용자가 임의로 지정할 수 있으므로 단말기 사용자의 개성을 추구하고 보다 흥미롭게 영상통화를 실행할 수 있는 효과가 있다.

이하, 첨부 도면을 참조하여 본 발명의 실시예를 보다 상세하게 설명하고자 한다.

본 발명의 일 실시예에 의한 영상통화 중 감정 전달 시스템은 도 1을 참조하면 다음과 같다. 도 1은 본 발명의 일 실시예에 의한 영상통화 중 감정 전달 시스템을 대략적으로 보여주는 블록도이다.

본 발명의 일 실시예에 의한 영상통화 중 감정 전달 시스템(100)은 발신 단말기(10), 네트워크(30), 착신 단말기(40) 및 아이콘 제공서버(50)를 포함하여 구성된다.

발신 단말기(10) 및 착신 단말기(40)는 네트워크(30)를 매개로 통신을 수행하며 영상통화가 가능한 단말기이다.

네트워크(30)는 데이터 및 메시지 송수신을 위한 통신망을 의미한다. 본 실시예의 네트워크(30)는 발신 단말기(10) 및 착신 단말기(40)를 서로 매개하며, 망 내에 호제어기(31)와 홈위치등록기(33)를 포함하여 구성된다.

호제어기(31)는 발신 단말기(10)와 착신 단말기(40)의 영상통화를 위해 채널을 할당한다. 즉, 호제어기(31)는 발신 단말기(10)가 전송한 영상 호를 수신하고, 착신 단말기(40)를 페이징하여 착신을 요청하고 호 수락을 입력받으면 영상 호 경로를 설정하고, 영상통화를 실행한다.

홈위치등록기(33)는 가입자의 단말기 정보, 가입 정보, 위치 정보 및 인증 기능 등을 지닌 이동 가입자 데이터베이스이다. 본 발명에서 홈위치등록기(33)는 발신 단말기(10) 및 착신 단말기(40)의 가입자 정보를 관리한다.

호제어기(31)는 홈위치등록기(33)의 가입자 정보를 이용하여 착신 단말기(40)로의 라우팅 정보를 획득하고, 착신 단말기(40)에 착신을 요청한다. 이후 착신 단말기(40)가 착신 요청에 대하여 호를 수락하면, 발신 단말기(10), 네트워크(30) 및 착신 단말기(40) 사이에 영상 호 경로가 설정되고 영상통화가 실행된다.

네트워크(30)는 발신 단말기(10) 또는 아이콘 제공서버(50)로부터 아이콘을 수신하여 착신 단말기(40)에 전송한다.

아이콘 제공서버(50)는 네트워크(30)를 통해 영상통화 중인 발신 단말기(10)의 사용자를 촬영한 영상데이터를 수신하고 수신한 영상데이터에 기 저장된 특정 얼굴표정이 포함되어 있는지 모니터링한다. 아이콘 제공서버(50)는 모니터링 중 수신한 영상데이터에 특정 얼굴표정이 포함되면 특정 얼굴표정에 대응하는 아이콘을 추출하고, 추출한 아이콘을 네트워크(30)를 거쳐 착신 단말기(40)로 전송한다.

본 발명에서의 아이콘은 '웃는 얼굴', '화난 얼굴' 및 '슬픈 얼굴'과 같은 인간의 감정에 따른 얼굴표정을 표현할 수 있도록 제작되어 착신 단말기(40)의 화면에 디스플레이되는 이모티콘, 플래시콘, 웹싸이트에 대응되는 파비콘, 아바타, 시각디자인인 픽토그램 등을 의미한다.

본 발명의 아이콘 제공서버(50)는 발신 단말기(10) 또는 착신 단말기(40)로부터 전송받은 아이콘 표현 정보를 저장할 수 있다. 여기에서의 아이콘 표현 정보는 발신 단말기(10) 또는 착신 단말기(40) 사용자가 자신의 기호에 맞는 아이콘의 세트를 선택하고 단말기(10, 40)에 입력하여 아이콘 제공서버(50)로 전송한 특정 종류의 아이콘을 나타내는 코드 등을 의미한다.

이때, 아이콘 제공서버(50)는 영상데이터에 기 저장된 특정 얼굴표정이 포함되어 있는 경우 기저장한 아이콘 표현 정보를 참조하여 특정 얼굴표정에 대응하는 아이콘을 추출하는데 활용할 수 있다.

예를 들어, 발신 단말기(10) 사용자가 스포츠의 일종인 야구를 좋아하는 사람으로서 발신 단말기(10)를 이용하여 본 발명의 부가서비스 등에 가입하여 야구와 관련한 감정 표현을 하도록 아이콘 표현 정보를 입력하여 아이콘 제공서버(50)에 아이콘 표현 정보가 저장되었다고 가정하면, 본 발명에서 아이콘 제공서버(40)는 내부에 저장된 아이콘 표현 정보를 특정 아이콘을 추출하는데 활용할 수 있는 것이다. 이때, 특정 얼굴표정이 웃는 얼굴표정이라면 '홈런'을 나타내는 정지영상, 동영상, 애니메이션, 이미지, 연속이미지, 햅틱 컨텐츠 등의 아이콘을 추출하여 착신 단말기(40)로 전송할 수 있다.

또 다른 예에서 아이콘 제공서버(40)는 착신 단말기(40)로부터 아이콘 표현 정보를 수신하여 저장하고 있다가, 발신 단말기(10)로부터 수신한 영상데이터에 기 저장된 특정 얼굴표정이 포함되어 있으면, 착신 단말기(40)가 전송한 아이콘 표현 정보에 맞는 아이콘을 추출하고 착신 단말기(40)로 전송할 수도 있다.

아이콘 제공서버(40)가 아이콘 표현 정보 참조할 때에는, 예를 들어, 발신 단말기(10) 또는 착신 단말기(40)의 MIN(Mobile Identification Number)을 이용하여, 발신 단말기(10) 또는 착신 단말기(40)에 대응되는 아이콘 표현 정보를 검색하 고, 이를 참조하여 아이콘을 추출할 수 있다.

본 발명의 일 실시예에 의한 아이콘 제공서버(50)는 도 1 및 도 2를 참조하면 다음과 같다. 도 2는 도 1의 아이콘 제공서버를 보여주는 블록도이다.

본 발명의 일 실시예에 의한 아이콘 제공서버(50)는 제1 송수신부(51), 제1 저장부(53) 및 제1 제어부(55)를 포함하여 구성된다.

제1 송수신부(51)는 네트워크(30)를 통해 통신을 수행한다.

제1 저장부(53)는 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장한다. 이때, 아이콘은 사용자가 임의로 설정하거나 디폴트로 기 설정되어 있을 수도 있다. 제1 저장부(53)에 저장되는 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지, 햅틱 등의 컨텐츠로 이루어진 아이콘일 수 있다. 또한, 본 실시예에서 저장되는 아이콘은 이모티콘, 플래시콘, 웹싸이트에 대응되는 파비콘, 아바타, 시각디자인인 픽토그램 등 감정을 표현할 수 있는 어떠한 컨텐츠의 아이콘 중 적어도 하나가 될 수 있다. 이하, 같다.

또한 특정 얼굴표정은 발신 단말기(10) 사용자가 카메라부(17)를 통하여 촬영한 영상데이터에서 얼굴표정만 추출한 것으로 제1 저장부(53)에 아이콘에 각각 대응되도록 저장된다. 예컨대, 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 등을 포함할 수 있다.

제1 제어부(55)는 네트워크(30)를 통해 영상통화 중인 발신 단말기(10) 사용자를 촬영한 영상데이터를 수신한다. 그리고 제1 제어부(55)는 수신한 영상데이터를 모니터링하여 영상데이터의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정 과 일치하는지 판단한다. 그리고 제1 제어부(55)는 수신한 영상데이터의 얼굴표정이 특정 얼굴표정과 일치하면 특정 얼굴표정에 대응하는 아이콘을 제1 저장부(53)에서 추출하고, 추출한 아이콘을 네트워크(30)를 통해 착신 단말기(40)로 전송한다.

본 발명의 다른 실시예에서, 제1 저장부(53)는 발신 단말기(10) 또는 착신 단말기(40)의 아이콘 표현 정보를 저장할 수 있다. 이때, 아이콘 표현 정보는 발신 단말기(10) 또는 착신 단말기(40)로부터 사용자의 입력에 따라 수신된 사용자 기호에 따른 아이콘 세트의 코드 등이다.

이 경우, 영상데이터의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하는 경우, 제1 제어부(55)는 제1 저장부(53)에 저장된 아이콘 표현 정보를 참조하여 아이콘을 추출하는데 활용할 수 있다. 제1 제어부(55)가 아이콘 표현 정보를 참조하는 경우에는, 예를 들어, 발신 단말기(10) 또는 착신 단말기(40)의 MIN 정보를 이용하여 대응되는 아이콘 표현 정보를 제1 저장부(53)에서 검색할 수 있다.

제1 제어부(55)가 영상데이터의 얼굴표정을 모니터링할 때에는, 촬영한 영상데이터에서 사용자의 얼굴표정을 인식하고, 인식한 사용자의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하는지 판단한다.

이때 사용자를 촬영한 영상데이터는 사용자의 얼굴 표정 외에도 배경 등이 더 포함될 수 있다. 따라서 제1 제어부(55)는 영상데이터의 얼굴표정과 특정 얼굴표정의 정확한 비교를 위하여 영상데이터 전체와 특정 얼굴표정을 비교하지 않고, 영상데이터의 얼굴표정과 특정 얼굴표정을 비교하는 것이 바람직하다.

영상데이터의 얼굴표정과 특정 얼굴표정을 비교하여 일치하는 경우 제1 제어부(55)는 특정 얼굴표정에 대응하는 아이콘을 제1 저장부(53)에서 추출하고, 추출한 아이콘을 네트워크(30)를 통해 착신 단말기(40)에 전송한다. 한편, 제1 제어부(21)는 발신 단말기(10)의 사용자를 촬영한 영상데이터의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하지 않는 경우 지속적으로 네트워크(30)를 거쳐 발신 단말기(10)로부터 영상데이터를 수신한다.

이때 제1 제어부(55)는 수신한 영상데이터의 얼굴표정이 제1 저장부(53)에 기 저장된 특정 얼굴표정과 일치하는지 판단할 때, 100% 정확한 경우에 일치하는 것으로 판단할 수도 있고, 오차범위를 고려하여 일치하는지의 여부를 판단할 수도 있다.

예컨대, 오차범위가 전체 픽셀(Pixel)의 10% 이내라고 가정하면 제1 제어부(55)는 영상데이터의 얼굴표정이 특정 얼굴표정에 비하여 전체 픽셀의 10% 이내의 범위로 다른 경우에는 영상데이터의 얼굴표정이 특정 얼굴표정과 일치하는 것으로 판단할 수 있다. 이러한 오차범위는 사용자에 의해 기 저장되거나 디폴트로 설정된 값일 수 있다.

이후, 착신 단말기(40)는 수신한 아이콘을 출력한다.

본 발명의 일 실시예에 의한 발신 단말기는 도 1 내지 도 3을 참조하면 다음과 같다. 도 3은 도 1의 발신 단말기를 보여주는 블록도이다.

본 발명의 일 실시예에 의한 발신 단말기(10)는 제2 송수신부(11), 카메라 부(17), 제2 저장부(19) 및 제2 제어부(21)를 포함하여 구성되고, 입력부(13) 및 출력부(15)를 더 포함하여 구성된다.

제2 송수신부(11)는 네트워크(30)를 매개로 착신 단말기(40)와 통신을 수행한다. 송수신부(11)는 송신되는 신호의 주파수를 상승변환 및 증폭하는 RF(Radio Frequency) 송신기와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 RF 수신기 등을 더 포함할 수 있다.

입력부(13)는 발신 단말기(10)의 조작을 위한 복수의 키를 제공하며, 발신 단말기(10) 사용자의 키선택에 따른 선택신호를 발생한다. 또한 입력부(13)는 사용자로부터 영상통화를 실행하기 위한 선택신호를 입력받고, 영상통화 중에 아이콘을 전송할 것인지에 대한 선택신호도 입력받는다. 입력부(13)는 키패드, 터치패드와 같은 포인팅 장치, 터치스크린 등의 입력장치가 사용될 수 있다.

출력부(15)는 영상출력부와 음성출력부를 포함할 수 있다. 영상출력부는 발신 단말기(10)가 착신 단말기(40)와 영상통화를 수행하는 동안 발신 단말기(10) 및 착신 단말기(40)가 촬영한 영상을 출력한다. 음성출력부는 발신 단말기(10)가 착신 단말기(40)와 영상통화를 수행하는 동안 사용자들의 음성을 출력한다. 이때 영상 출력부로는 LCD나 터치스크린이 사용될 수 있고, 음성 출력부로는 스피커가 사용될 수 있다. 터치스크린은 표시장치와 입력장치로서의 역할을 동시에 수행한다.

카메라부(17)는 적어도 하나의 카메라를 구비하고 발신 단말기(10)에 내장되어 있는 것이 바람직하다. 카메라부(17)는 카메라 렌즈를 포함하며, 카메라 렌즈를 통해 발신 단말기(10) 사용자를 촬영한다.

제2 저장부(19)는 제2 제어부(21)의 제어에 의해 발신 단말기(10)의 동작 제어시 필요한 어플리케이션 프로그램과, 그 프로그램 수행 중에 발생되는 데이터를 저장하며, 하나 이상의 휘발성 메모리 소자와 비휘발성 메모리 소자로 이루어진다.

제2 제어부(21)는 발신 단말기(10)의 전반적인 동작을 제어한다. 즉 제어부(21)는 입력부(13)를 통하여 영상통화를 선택하는 사용자의 선택신호를 수신하면 착신 단말기(40)에 호 요청을 전송하고, 카메라부(17)를 구동한다. 그리고 제2 제어부(21)는 카메라부(17)가 실시간으로 촬영한 영상데이터를 네트워크(30)를 거쳐 착신 단말기(40)에 전송하여 영상통화를 실행한다.

이후 제2 제어부(21)는 영상통화 중에 촬영한 영상데이터를 네트워크(30)를 거쳐 아이콘 제공서버(50)에 전송한다.

본 발명의 일 실시예에 의한 영상통화 중 감정 전달 방법은 도 1 내지 도 4를 참조하면 다음과 같다. 도 4는 본 발명의 일 실시예에 의한 영상통화 중 감정 전달 방법에 따른 흐름도이다.

먼저 S41과정에서 아이콘 제공서버(50)는 적어도 하나의 특정 얼굴표정에 대응하는 아이콘을 입력받아 저장한다.

다음으로 S43과정에서 발신 단말기(10)는 호제어기(31)에 영상 호를 전송한다. 호제어기(31)가 영상 호를 수신하면 호제어기(31)는 홈위치등록기(33)의 발신 단말기(10) 및 착신 단말기(40)의 가입자 정보(위치 정보 및 서비스 정보)를 이용하여 착신 단말기(40)로의 라우팅 정보를 획득한다.

다음으로 S45과정에서 호제어기(31)는 착신 단말기(40)를 페이징하여 착신을 요청한다.

다음으로 S47과정에서 착신 단말기(40)가 호제어기(31)로부터 수신한 착신 요청에 대하여 호를 수락하면, S49과정에서 발신 단말기(10), 호제어기(31) 및 착신 단말기(40) 사이에 영상 호 경로가 설정된다.

이후 S51과정에서 설정된 영상 호 경로를 통하여 발신 단말기(10)와 착신 단말기(40)는 영상통화를 실행하게 된다.

영상통화가 실행되면, 발신 단말기(10)는 카메라부(17)를 구동하여 영상통화 중인 사용자를 촬영한다. 이때, 카메라부(17)는 사용자를 촬영한 영상데이터를 실시간으로 생성한다. 한편, 영상통화가 실행되면 착신 단말기(40)도 카메라부(47)를 구동하여 사용자를 촬영하고, 촬영한 영상데이터를 발신 단말기(10)로 전송한다.

다음으로 S53과정에서 발신 단말기(10)는 사용자를 촬영한 영상데이터를 아이콘 제공서버(50)로 전송한다.

다음으로 S55과정에서 아이콘 제공서버(50)는 수신한 영상데이터에 제1 저장부(53)에 저장된 특정 얼굴표정이 포함되어 있는지 모니터링한다. 구체적으로, S55과정에서 아이콘 제공서버(50)는 수신한 영상데이터에 포함된 사용자의 얼굴표정을 인식한다.

다음으로 S57과정에서 아이콘 제공서버(50)는 인식한 사용자의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하는지 판단한다.

여기에서 아이콘 제공서버(50)가 영상데이터의 얼굴표정과 특정 얼굴표정이 일치하는지 판단할 때에는 실시간으로 수신되는 영상데이터를 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여, 특정 얼굴표정이 영상데이터에 포함되어 있는지 판단한다. 이때, 영상데이터에 포함되는 얼굴표정 이외의 배경 등은 비교 대상에서 제외되는 것이 바람직하다.

이때 아이콘 제공서버(50)는 촬영한 영상데이터의 얼굴표정과 저장된 특정 얼굴표정이 정확하게 일치하는 경우 동일한 것으로 판단할 수 있다.

또한 아이콘 제공서버(50)는 영상데이터의 얼굴표정과 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 전체 픽셀이 오차 범위 내에서 일치하면 동일한 것으로 판단할 수 있다. 오차범위는 사용자에 의해 기 저장되거나 발신 단말기(10)에 디폴트로 설정된 값일 수 있다. 예컨대, 오차범위가 전체 픽셀(Pixel)의 10% 이내라고 가정하면 아이콘 제공서버(50)는 영상데이터의 얼굴표정이 특정 얼굴표정에 비하여 전체 픽셀의 10% 이내의 범위로 다른 경우에는 영상데이터의 얼굴표정이 특정 얼굴표정과 동일한 것으로 판단할 수 있다.

한편, S57과정에서 아이콘 제공서버(50)가 카메라부(17)로 촬영한 영상데이터의 얼굴표정이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하는지 판단 할 때에는, 영상데이터에서 얼굴표정을 추출하고, 추출한 얼굴표정을 특정 얼굴표정과 비교하여 판단할 수도 있다. 이때에도, 아이콘 제공서버(50)는 완전히 동일하지 않더라도 오차 범위 내에서 일치하면 동일한 것으로 판단할 수 있다.

다음으로 S57단계에서의 판단 결과 영상데이터의 얼굴표정과 일치하는 특정 얼굴표정이 있으면, S59단계에서 해당 특정 얼굴표정에 대응하는 아이콘을 제1 저장부(53)에서 추출한다.

S59단계에서 아이콘을 추출할 때에는 아이콘 제공서버(50) 내부에 저장된 발신 단말기(10) 또는 착신 단말기(40)에 대응되는 아이콘 표현 정보를 참조하여, 그에 따른 아이콘을 선택하고 추출할 수 있다.

한편, S57과정에서 판단 결과 영상데이터의 얼굴표정과 일치하는 특정 얼굴표정이 없으면 아이콘 제공서버(50)는 지속적으로 발신 단말기(10)로부터 영상데이터를 수신한다.

다음으로 S61과정에서 아이콘 제공서버(50)는 추출한 아이콘을 호제어기(31)로 전송하고, S63과정에서 호제어기(31)는 수신한 아이콘을 착신 단말기(40)로 전송한다.

다음으로 S65과정에서 착신 단말기(40)는 수신된 아이콘을 출력한다.

본 발명의 일 실시예에 의한 영상통화 중 감정 전달 방법은 도 1 내지 도 5를 참조하면 다음과 같다. 도 5의 (a) 및 (b)는 본 발명의 실시예에 의한 발신 단말기 및 착신 단말기의 화면 예시도이다.

도 5의 (a) 및 (b)를 참조하면, 발신 단말기(10)는 착신 단말기(40)와 영상통화를 실행한다. 영상통화가 실행되면 발신 단말기(10)의 출력부(15)는 영화통화를 하는 대상인 착신 단말기(40)에서 촬영한 영상데이터를 출력하고, '영상통화 중'이라는 메시지가 출력되어 사용자에게 영상통화 중임을 안내할 수 있다.

한편, 도 5의 (a)에 도시되지는 않았으나 발신 단말기(10)는 착신 단말기(10)에서 촬영한 영상데이터를 출력하면서, 발신 단말기(10)에서 촬영한 영상데이터를 동시에 출력할 수도 있다. 이때, 발신 및 착신 단말기(10, 30)에서 촬영한 영상데이터가 출력되는 크기는 사용자 또는 디폴트 값으로 미리 설정되는 것이 바람직하다.

도 5의 (a)와 같이 발신 단말기(10)의 카메라부(17)를 통하여 '웃는 표정'이 포함된 영상데이터가 촬영되면, 도 5의 (b)에 도시된 바와 같이 착신 단말기(40) 에는 '웃는 표정'에 대응되는 아이콘(60)이 출력된다.

이때, '웃는 표정'에 대응되는 아이콘(60)이 착신 단말기(40)에 출력되는 과정은 다음과 같다.

발신 단말기(10)가 영상통화 중에 카메라부(17)로 사용자를 지속적으로 촬영한 영상데이터를 호제어기(31)를 거쳐 아이콘 제공서버(50)로 전송한다.

아이콘 제공서버(50)는 수신한 영상데이터를 모니터링하여 '웃는 표정'이 제1 저장부(53)에 저장된 특정 얼굴표정과 일치하는지 판단한다.

아이콘 제공서버(50)는 영상데이터의 '웃는 표정'에 대한 얼굴표정이 특정 얼굴표정과 일치하면 해당 특정 얼굴표정에 대응하는 아이콘(60)을 제1 저장부(53)에서 추출하여 호제어기(31)를 통해 착신 단말기(40)에 전송한다.

본 발명의 다른 일 실시예에 의한 단말기는 도 1, 도 3 및 도 6을 참조하면 다음과 같다. 도 3은 본 발명의 다른 일 실시예에 의한 발신 단말기를 보여주는 블록도이다. 도 6은 본 발명의 다른 일 실시예에 의한 영상통화 중 감정 전달 방법에 따른 흐름도이다.

본 발명의 다른 일 실시예에 의한 발신 단말기(10)는 제2 송수신부(11), 카메라부(17), 제2 저장부(19) 및 제2 제어부(21)를 포함하여 구성되고, 입력부(13) 및 출력부(15)를 더 포함하여 구성된다.

본 발명의 발신 단말기(10)의 제2 송수신부(11), 입력부(13), 출력부(15) 및 카메라부(17)의 구성은 일 실시예에 의한 발신 단말기(10)와 동일하므로 상세한 설명은 생략한다.

제2 저장부(19)는 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장한다. 이때, 아이콘은 발신 단말기(10)의 제2 저장부(19)에 기 저장되어 있거나, 사용자가 인터넷 등을 이용하여 다운로드 받을 수 있다.

여기에서 특정 얼굴표정은 발신 단말기(10) 사용자가 카메라부(17)를 통하여 촬영한 영상데이터에서 얼굴표정만 추출한 것으로 제2 저장부(19)에 저장된 적어도 하나의 아이콘에 각각 대응되도록 저장된다. 이때, 제2 저장부(19)에 저장되는 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지, 햅틱 컨텐츠 또는 기타 감정을 표현하기에 적합한 어떠한 컨텐츠의 아이콘일 수 있다. 또한, 제2 저장부(19)에 저장되는 아이콘은, 예를 들어, 이모티콘, 플래시콘, 웹싸이트의 아이콘인 파비콘, 아바타, 픽토그램과 같은 시각디자인 등 감정을 표현하기에 적합한 어떠한 컨텐츠로 중 적어도 하나로 이루어질 수 있다. 그리고, 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 등을 포함할 수 있다.

제2 제어부(21)는 제2 송수신부(11)를 통한 영상통화 중 사용자가 특정 얼굴표정을 취하는지를 모니터링한다. 그리고 제2 제어부(21)는 모니터링 중 사용자가 특정 얼굴표정을 취하면, 특정 얼굴표정에 대응하는 아이콘을 제2 저장부(19)에서 추출한다. 이때, 제2 저장부(19)에는 발신 단말기(10) 사용자가 입력한 아이콘 표현 정보가 저장되어 있을 수 있으며, 이러한 경우 제2 제어부(21)는 기 저장된 아이콘 표현 정보를 참조하여 아이콘을 추출하게 된다.

제2 제어부(21)는 추출한 아이콘을 제2 송수신부(11)를 통해 호제어기(31)로 전송하고, 호제어기(31)로부터 착신 단말기(40)가 수신하도록 한다.

이때, 제2 제어부(21)는 본 발명의 일 실시예에 의한 아이콘 제공서버(50)가 영상데이터를 모니터링하여 영상데이터의 얼굴표정이 기 저장된 특정 얼굴표정과 일치하는지 판단하는 방법과 동일한 방법으로 촬영한 영상데이터가 제2 저장부(19)에 저장된 특정 얼굴표정과 일치하는지 판단한다.

구체적으로, 본 발명의 다른 일 실시예에 의한 영상통화 중 감정 전달 방법을 살펴보면, 도 6에 도시된 바와 같이, S71과정에서 발신 단말기(10)는 입력부(13)를 통해 수신하는 사용자의 선택신호를 통하여 적어도 하나의 특정 얼굴표정에 대응하는 아이콘을 입력받아 저장한다.

다음으로 S73과정에서 발신 단말기(10)는 호제어기(31)에 영상 호를 전송한다. 호제어기(31)가 영상 호를 수신하면 호제어기(31)는 홈위치등록기(33)의 발신 단말기(10) 및 착신 단말기(40)의 가입자 정보(위치 정보 및 부가 서비스 정보)를 이용하여 착신 단말기(40)로의 라우팅 정보를 획득한다.

다음으로 S75과정에서 호제어기(31)는 착신 단말기(40)를 페이징하여 착신을 요청한다.

다음으로 S77과정에서 착신 단말기(40)가 호제어기(31)로부터 수신한 착신 요청에 대하여 호를 수락하면, S79과정에서 발신 단말기(10), 호제어기(31) 및 착신 단말기(40) 사이에 영상 호 경로가 설정된다.

이후 S81과정에서 설정된 영상 호 경로를 통하여 발신 단말기(10)와 착신 단말기(40)는 영상통화를 실행하게 된다.

영상통화가 실행되면, 발신 단말기(10)는 카메라부(17)를 구동하여 영상통화 중인 사용자를 촬영한다. 이때, 카메라부(17)는 사용자를 촬영한 영상데이터를 실시간으로 생성한다. 한편, 영상통화가 실행되면 착신 단말기(40)도 카메라부(47)를 구동하여 사용자를 촬영하고, 촬영한 영상데이터를 발신 단말기(10)로 전송한다.

다음으로 발신 단말기(10)는 발신 단말기(10)의 사용자가 특정 얼굴표정을 취하는지를 모니터링한다. 구체적으로, S83과정에서 발신 단말기(10)는 영상통화 중인 사용자를 카메라부(17)로 촬영한 영상데이터에 포함된 사용자의 얼굴표정을 인식한다.

다음으로 S85과정에서 발신 단말기(10)는 인식한 사용자의 얼굴표정이 저장부(19)에 저장된 특정 얼굴표정과 일치하는지 판단한다.

여기에서 발신 단말기(10)가 영상데이터의 얼굴표정과 특정 얼굴표정이 일치하는지 판단할 때에는 실시간으로 생성되는 영상데이터를 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여, 특정 얼굴표정이 영상데이터에 포함되어 있는지 판단한다. 이때, 영상데이터에 포함되는 얼굴표정 이외의 배경 등은 비교 대상에서 제외되는 것이 바람직하다.

이때 발신 단말기(10)는 촬영한 영상데이터의 얼굴표정과 저장된 특정 얼굴 표정이 정확하게 일치하는 경우 동일한 것으로 판단할 수 있다.

또한 발신 단말기(10)는 영상데이터의 얼굴표정과 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 전체 픽셀이 오차 범위 내에서 일치하면 동일한 것으로 판단할 수 있다. 오차범위는 사용자에 의해 기 저장되거나 발신 단말기(10)에 디폴트로 설정된 값일 수 있다. 예컨대, 오차범위가 전체 픽셀(Pixel)의 10% 이내라고 가정하면 발신 단말기(10)는 영상데이터의 얼굴표정이 특정 얼굴표정에 비하여 전체 픽셀의 10% 이내의 범위로 다른 경우에는 영상데이터의 얼굴표정이 특정 얼굴표정과 동일한 것으로 판단할 수 있다.

한편, S85과정에서 발신 단말기(10)는 카메라부(17)로 촬영한 영상데이터의 얼굴표정이 저장부(19)에 저장된 특정 얼굴표정과 일치하는지 판단 할 때에는, 영상데이터에서 얼굴표정을 추출하고, 추출한 얼굴표정을 특정 얼굴표정과 비교하여 판단할 수도 있다. 이때에도, 발신 단말기(10)는 완전히 동일하지 않더라도 오차 범위 내에서 일치하면 동일한 것으로 판단할 수 있다.

그리고 S87단계에서 해당 특정 얼굴표정에 대응하는 아이콘을 저장부(19)에서 추출한다. 이때, 발신 단말기(10) 내부에 저장된 아이콘 표현 정보를 참조하여 아이콘을 추출할 수 있음은 상기한 바와 같다.

한편, S85과정에서 판단 결과 영상데이터의 얼굴표정과 일치하는 특정 얼굴표정이 없으면 발신 단말기(10)의 카메라부(17)는 지속적으로 사용자를 촬영한다.

다음으로 S89과정에서 발신 단말기(10)는 추출한 아이콘을 호제어기(31)를 통해 착신 단말기(40)로 전송한다.

이때, 도시되지는 않았으나 S89과정에서 추출한 아이콘을 전송하기 전에 발신 단말기(10)는 추출한 아이콘이 착신 단말기(40)에 출력되는 위치 및 크기를 지정하는 메시지를 생성할 수 있다. 이후 S89과정에서 발신 단말기(10)는 추출한 아이콘과 생성된 메시지를 함께 착신 단말기(40)에 전송할 수 있다.

다음으로 S91과정에서 착신 단말기(40)는 수신된 아이콘을 출력한다. 이때, 착신 단말기(40)에 출력되는 아이콘은 발신 단말기(10)로부터 수신한 메시지에 지정된 위치에 수신한 메시지에 지정된 크기로 출력되거나, 착신 단말기(40)가 설정한 위치 및 크기로 출력될 수도 있다.

한편, 본 명세서와 도면에 개시된 본 발명의 실시예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.

본 발명은 영상통화 중 감정 전달 시스템 및 방법에 관한 것으로, 사용자가 영상통화를 실행하던 중 발신 단말기의 사용자를 촬영한 얼굴표정에 대응하는 아이콘을 착신 단말기에 전송하여 출력하도록 함으로써 영상통화를 실행중인 사용자의 감정 표현을 뚜렷하게 할 수 있어 발신 단말기를 사용하는 사용자의 편이를 증대한다. 또한 영상통화 서비스를 제공하는 서비스 사업자는 영상통화 서비스를 제공받는 사용자의 감정 표현을 명확히 할 수 있는 서비스를 사용자에게 제공함으로써 서 비스의 질을 향상시킬 수 있다.

도 1은 본 발명의 일 실시예에 의한 영상통화 중 감정 전달 시스템을 대략적으로 보여주는 블록도이다.

도 2는 도 1의 아이콘 제공서버를 보여주는 블록도이다.

도 3은 도 1의 발신 단말기를 보여주는 블록도이다.

도 4는 본 발명의 일 실시예에 의한 영상통화 중 감정 전달 방법에 따른 흐름도이다.

도 5의 (a) 및 (b)는 본 발명의 실시예에 의한 발신 단말기 및 착신 단말기의 화면 예시도이다.

도 6은 본 발명의 다른 일 실시예에 의한 영상통화 중 감정 전달 방법에 따른 흐름도이다.

* 도면의 주요 부분에 대한 부호의 설명 *

10 : 발신 단말기 11 : 제2 송수신부

13 : 입력부 15, 45 : 출력부

17, 47 : 카메라부 19 : 제2 저장부

21 :제2 제어부 30 : 네트워크

31 : 호제어기 33 : 홈위치등록기

40 : 착신 단말기 50 : 아이콘 제공서버

51 : 제1 송수신부 53 : 제1 저장부

55 : 제1 제어부

100 : 영상통화 중 감정 전달 시스템

Claims (29)

1. 발신 단말기로부터 수신한 영상데이터를 전송하고, 아이콘을 수신하여 착신 단말기로 전송하는 네트워크와;

   상기 네트워크를 통해 영상통화 중인 상기 발신 단말기의 사용자를 촬영한 영상데이터를 수신하고, 상기 수신한 영상데이터에 제1 저장부에 저장된 특정 얼굴표정이 포함되는지 모니터링하고, 상기 모니터링 중 상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하고, 추출한 아이콘을 상기 네트워크를 통해 상기 착신 단말기에 전송하는 아이콘 제공서버를 포함하며,

   상기 아이콘 제공서버는

   상기 발신 단말기 또는 상기 착신 단말기로부터 아이콘 표현 정보를 수신하여 저장하고, 상기 아이콘 표현정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템.
2. 삭제
3. 제1항에 있어서,

   상기 아이콘 제공서버는 상기 발신 단말기 또는 상기 착신 단말기의 MIN(Mobile Identification Number)을 이용하여 상기 아이콘 표현 정보를 참조하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템.
4. 네트워크를 통해 통신을 수행하는 제1 송수신부와;

   적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장하는 제1 저장부와;

   상기 네트워크를 통해 영상통화 중인 발신 단말기의 사용자를 촬영한 영상데이터를 수신하고, 상기 수신한 영상데이터에 상기 제1 저장부에 저장된 특정 얼굴표정이 포함되는지 모니터링하고, 상기 모니터링 중 상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하고, 추출한 아이콘을 상기 네트워크를 통해 착신 단말기에 전송하는 제1 제어부를 포함하며,

   상기 제1 제어부는

   상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 발신 단말기 또는 상기 착신 단말기로부터 수신하여 저장한 아이콘 표현 정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 아이콘 제공서버.
5. 삭제
6. 제4항에 있어서, 상기 제1 제어부는

   상기 발신 단말기 또는 상기 착신 단말기의 MIN을 이용하여 상기 아이콘 표현 정보를 참조하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 아이콘 제공서버.
7. 제4항 또는 제6항 중 어느 한 항에 있어서,

   상기 제1 저장부에서 추출한 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지 또는 햅틱 컨텐츠 중 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 아이콘 제공서버.
8. 제4항 또는 제6항 중 어느 한 항에 있어서,

   상기 제1 저장부에서 추출한 아이콘은 이모티콘, 플래시콘, 파비콘, 아바타 또는 픽토그램 중 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 아이콘 제공서버.
9. 상대방 단말기와 네트워크를 통해 통신을 수행하는 제2 송수신부와;

   영상통화 시 사용자를 촬영하는 카메라부와;

   상기 사용자의 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장하는 제2 저장부와;

   상기 제2 송수신부를 통한 영상통화 중 상기 사용자가 특정 얼굴표정을 취하는지를 모니터링하고, 상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 특정 얼굴표정에 대응하는 상기 아이콘을 상기 제2 저장부에서 추출하고, 상기 추출한 아이콘을 상기 제2 송수신부를 통해 상기 네트워크를 거쳐 상기 상대방 단말기에 전송하는 제2 제어부를 포함하며,

   상기 제2 제어부는

   상기 사용자가 특정 얼굴표정을 취하면, 상기 제2 송수신부를 통해 상기 네트워크 내에 위치하고, 적어도 하나의 특정 얼굴표정에 대응하는 아이콘 표현 정보를 저장한 아이콘 제공서버로부터 해당되는 아이콘 표현 정보를 수신한 후 이를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
10. 제9항에 있어서, 상기 제2 저장부는

    상기 사용자로부터 입력받은 상기 사용자의 아이콘 표현 정보를 더 저장하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
11. 제10항에 있어서, 상기 제2 제어부는

    상기 사용자가 특정 얼굴표정을 취하면, 상기 아이콘 표현 정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
12. 삭제
13. 제9항에 있어서, 상기 제2 제어부는

    상기 상대방 단말기의 MIN을 이용하여 상기 아이콘 제공서버로부터 상기 아이콘 표현 정보를 수신하는 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
14. 제9항에 있어서,

    상기 제2 저장부에서 추출한 아이콘은 정지영상, 동영상, 애니메이션, 이미지, 연속이미지 또는 햅틱 컨텐츠 중 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
15. 제9항에 있어서,

    상기 제2 저장부에서 추출한 아이콘은 이모티콘, 플래시콘, 파비콘, 아바타 또는 픽토그램 중 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 시스템의 단말기.
16. 아이콘 제공서버가 발신 단말기로부터 영상통화 중인 사용자를 촬영한 영상데이터를 수신하여 상기 수신한 영상데이터에 포함된 사용자의 얼굴표정을 모니터링하는 모니터링 단계와;

    상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 아이콘 제공서버가 상기 특정 얼굴표정에 대응하는 아이콘을 제1 저장부에서 추출하는 추출단계와;

    상기 아이콘 제공서버가 상기 추출한 아이콘을 착신 단말기에 전송하는 전송단계를 포함하며,

    상기 추출단계는

    상기 영상데이터에 특정 얼굴표정이 포함되면, 상기 발신 단말기 또는 상기 착신 단말기로부터 수신하여 저장한 아이콘 표현 정보를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
17. 제16항에 있어서, 상기 모니터링 단계 이전에,

    상기 아이콘 제공서버는 상기 사용자가 취한 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 제1 저장부에 저장하는 저장단계를 더 포함하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
18. 제17항에 있어서, 상기 모니터링 단계에서,

    상기 아이콘 제공서버는 상기 수신한 영상데이터에 포함된 상기 사용자의 얼굴표정을 인식하는 인식단계와;

    상기 아이콘 제공서버는 상기 인식한 사용자의 얼굴표정이 상기 저장된 특정 얼굴표정과 일치하는지 판단하는 판단단계를 포함하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
19. 제18항에 있어서, 상기 판단단계에서,

    상기 아이콘 제공서버는 상기 영상데이터에 포함된 사용자의 얼굴표정과 상기 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 상기 제1 저장부에 저장된 오차 범위 내에서 전체 픽셀이 일치하면 동일한 것으로 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
20. 제19항에 있어서, 상기 판단단계에서,

    상기 아이콘 제공서버는 상기 촬영한 영상데이터를 상기 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여 상기 특정 얼굴표정이 상기 영상데이터 중에 포함되어 있는지 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
21. 제19항에 있어서, 상기 판단단계에서,

    상기 아이콘 제공서버는 상기 촬영한 영상데이터에서 상기 얼굴표정을 추출하여 상기 추출한 얼굴표정과 상기 적어도 하나의 특정 얼굴표정을 비교하여, 상기 추출한 얼굴표정과 일치하는 상기 특정 얼굴표정이 있는지 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
22. 제16항 내지 제21항 중에 어느 한 항에 있어서,

    상기 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 중에 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 방법.
23. 네트워크를 통해 상대방 단말기와 영상통화 중인 단말기가 상기 단말기의 사용자가 특정 얼굴표정을 취하는지를 모니터링하는 모니터링 단계와;

    상기 모니터링 중 상기 사용자가 특정 얼굴표정을 취하면, 상기 단말기는 상기 특정 얼굴표정에 대응하는 아이콘을 제2 저장부에서 추출하는 추출단계와;

    상기 단말기는 상기 추출한 아이콘을 상기 네트워크를 통해 상기 상대방 단말기에 전송하는 전송단계를 포함하며,

    상기 추출단계는

    상기 사용자가 특정 얼굴표정을 취하면, 상기 제2 송수신부를 통해 상기 네트워크 내에 위치하고, 적어도 하나의 특정 얼굴표정에 대응하는 아이콘 표현 정보를 저장한 아이콘 제공서버로부터 해당되는 아이콘 표현 정보를 수신한 후 이를 참조하여 상기 아이콘을 추출하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
24. 제23항에 있어서, 상기 모니터링 단계 이전에,

    상기 단말기는 상기 사용자가 취한 적어도 하나의 특정 얼굴표정 및 그에 대응하는 아이콘을 저장부에 저장하는 저장단계를 더 포함하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
25. 제24항에 있어서, 상기 모니터링 단계에서,

    상기 단말기는 영상통화 중 촬영한 영상데이터에서 상기 사용자의 얼굴표정을 인식하는 인식단계와;

    상기 단말기는 인식한 사용자의 얼굴표정이 상기 저장된 특정 얼굴표정과 일치하는지 판단하는 판단단계를 포함하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
26. 제25항에 있어서, 상기 판단단계에서,

    상기 단말기는 상기 사용자의 특정 얼굴표정과 상기 저장된 특정 얼굴표정의 전체 픽셀을 비교하여 상기 제2 저장부에 저장된 오차 범위 내에서 전체 픽셀이 일치하면 동일한 것으로 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
27. 제26항에 있어서, 상기 판단단계에서,

    상기 단말기는 상기 촬영한 영상데이터를 상기 적어도 하나의 특정 얼굴표정과 하나씩 매칭하여 상기 특정 얼굴표정이 상기 영상데이터 중에 포함되어 있는지 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
28. 제26항에 있어서, 상기 판단단계에서,

    상기 단말기는 상기 촬영한 영상데이터에서 상기 얼굴표정을 추출하여 상기 추출한 얼굴표정과 상기 적어도 하나의 특정 얼굴표정을 비교하여, 상기 추출한 얼굴표정과 일치하는 상기 특정 얼굴표정이 있는지 판단하는 것을 특징으로 하는 영상통화 중 감정 전달 방법.
29. 제23항 내지 제28항 중에 어느 한 항에 있어서,

    상기 특정 얼굴표정은 윙크를 포함한 눈 깜박임, 웃는 얼굴, 입 벌림, 입 닫음, 특정 입술 모양 중에 적어도 하나인 것을 특징으로 하는 영상통화 중 감정 전달 방법.

Images