KR101433171B1 - 화상통화 단말기 및 방법 - Google Patents

화상통화 단말기 및 방법 Download PDF

Info

Publication number
KR101433171B1
KR101433171B1 KR1020070058932A KR20070058932A KR101433171B1 KR 101433171 B1 KR101433171 B1 KR 101433171B1 KR 1020070058932 A KR1020070058932 A KR 1020070058932A KR 20070058932 A KR20070058932 A KR 20070058932A KR 101433171 B1 KR101433171 B1 KR 101433171B1
Authority
KR
South Korea
Prior art keywords
video
information
additional information
image
terminal
Prior art date
Application number
KR1020070058932A
Other languages
English (en)
Other versions
KR20080110324A (ko
Inventor
김홍준
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070058932A priority Critical patent/KR101433171B1/ko
Publication of KR20080110324A publication Critical patent/KR20080110324A/ko
Application granted granted Critical
Publication of KR101433171B1 publication Critical patent/KR101433171B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Abstract

본 발명은 송화자의 영상에 부가정보를 중첩하여 표시하는 화상통화 단말기 및 방법에 관한 것이다. 본 발명은 화상통화 호를 형성하고, 송화자의 영상 및 음성정보를 획득하고, 획득된 영상의 모션정보 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하고, 획득된 영상 및 음성정보와 추출된 부가정보를 수화자 단말기로 송신하여, 송화자의 영상 위에 추출된 부가정보를 표시되게하는 영상중첩정보를 함께 송신한다. 즉, 수화자 단말기에 획득된 영상 위에 추출된 부가정보를 중첩하여 표시하는 화상통화 단말기 및 방법을 제공한다.
화상통화, 영상, 부가정보, 중첩, 검출

Description

화상통화 단말기 및 방법{Video call terminal and method}
도 1은 본 발명의 실시예에 따른 화상통화 단말기를 이용한 화상통화 시스템을 보여주는 개략도이다.
도 2는 도 1의 화상통화 단말기의 구성을 보여주는 블록도이다.
도 3 및 도 4는 본 발명의 제 1 실시예에 따른 화상통화 방법에 따른 흐름도이다.
도 5 및 도 6은 본 발명의 제 2 실시예에 따른 화상통화 방법에 따른 흐름도이다.
도 7 및 도 8은 본 발명의 제 3 실시예에 다른 화상통화 방법에 다른 흐름도이다.
도 9 및 도 10은 본 발명의 화상통화 방법에 따른 화면예시도이다.
본 발명은 화상통화 기술에 관한 것으로, 더욱 상세하게는 화상통화내용에 따라 부가정보를 함께 제공하는 화상통화 단말기 및 방법에 관한 것이다.
최근의 통신 단말기는 고유의 음성통화 기능 외에 정보를 고속으로 송수신할 수 있는 기능을 갖추고 있다. 고속 정보통신이 현실화되면서 통신 단말기를 통한 화상통화 기술이 주목을 받고 있다. 기존의 유무선 통신망에서는 정보의 전송 속도, 실제 망과의 호환 문제 등으로 인하여 화상통화 관련 기능에 대한 고려가 미흡하였다. 하지만 정보전송기술이 WCDMA(Wideband Code Division Multiple Access), HSDPA(High-Speed Downlink Packet Access) 등으로 점점 발달하면서, 화상통화 단말기는 점차 상용화 단계에 이르고 있다.
그러나 아직은 화상통화 단말기의 화상통화 기술이 상용화 초기에 있다보니 화면을 통하여 통화자의 영상을 보면서 음성통화를 수행하는 데 그치고 있다.
따라서, 본 발명의 제 1 목적은 화상통화시 송화자의 영상과 화상통화내용에 따른 부가정보를 함께 제공하는 데 있다.
본 발명의 제 2 목적은 송화자의 영상과 음성을 이용하여 능동적인 화상통화영상을 제공하는 데 있다.
본 발명의 제 3 목적은 화상통화자에게 화상통화의 재미와 즐거움을 제공하는 데 있다.
상기 목적을 달성하기 위하여, 본 발명은 화상통화 호를 형성하는 과정과, 송화자의 영상 및 음성정보를 획득하는 과정과, 상기 획득된 영상의 모션정보 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 과정과, 상기 획득된 영상 및 음성정보와 상기 추출된 부가정보를 수화자 단말기로 송신하는 과정을 포함하며, 상기 송신과정은 상기 송화자의 영상 위에 상기 추출된 부가정보가 표시되게 하는 영상중첩정보를 함께 송신하는 것을 포함하는 송화자 단말기의 화상통화 방법을 제공한다.
한편 본 발명은 또한, 화상통화시 송화자의 영상 및 음성정보를 획득하는 과정과, 상기 획득된 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 과정과, 상기 획득된 영상 및 음성정보에 상기 추출된 부가정보를 결합한 화상정보를 수화자 단말기로 송신하는 과정을 포함하는 송화자 단말기의 화상통화 방법을 제공한다.
한편 본 발명은 또한, 화상통화시 송화자 단말기는 송화자의 영상 및 음성정보를 획득하는 과정과, 상기 획득된 영상 및 음성정보를 수화자 단말기로 전송하는 과정과, 상기 수화자 단말기는 상기 송화자 단말기에서 수신된 상기 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 과정과; 상기 수화자 단말기는 상기 영상 및 음성정보에 추출된 부가정보를 결합하여 표시부에 표시하는 과정을 포함하는 화상통화 단말기의 화상통화 방법을 제공한다.
이하, 첨부 도면을 참조하여 본 발명의 실시예를 보다 상세하게 설명하고자 한다.
화상통화 단말기
도 1은 본 발명의 실시예에 따른 화상통화 단말기(10a, 10b)를 이용한 화상통화 시스템(100)을 보여주는 개략도이다. 도 2는 본 발명의 실시예에 따른 화상통화 단말기(10)의 구성을 보여주는 블록도이다.
도 1 및 도 2를 참조하면, 본 실시예에 따른 화상통화 시스템(100)은 복수의 화상통화 단말기(10a, 10b)와, 화상통화를 위해 복수의 화상통화 단말기(10a, 10b) 를 서로 연결하는 유무선 통신망(20)을 포함하여 구성된다. 이때 화상통화 단말기(10a, 10b)는 화상통화정보를 송신하는 송화자의 화상통화 단말기(10a; 이하, '송화자 단말기'라 한다)와, 송화자 단말기(10a)에서 송신된 화상통화정보를 수신하는 수화자의 화상통화 단말기(10b; 이하, '수화자 단말기'라 한다)를 포함한다. 화상통화 단말기(10a, 10b)는 화상통화정보를 송신할 때는 송화자 단말기(10a)로 동작하고, 화성통화정보를 수신할 때는 수화자 단말기(10b)로 동작한다. 한편 본 실시예에서는 두 대의 화상통화 단말기(10a, 10b)가 유무선 통신망(20)으로 연결된 예를 개시하였지만, 다자간 화상통화를 위해 세대 이상의 화상통화 단말기(10)가 연결될 수 있음은 물론이다.
본 실시예에 따른 화상통화 단말기(10a, 10b)는 화상통화를 위한 통신부를 구비한 통신 단말기에 적용될 수 있다. 이러한 통신 단말기는 화상전화기, 휴대폰, 스마트 폰(smart phone), IMT-2000(International Mobile Telecommunication 2000) 단말기, WCDMA 단말기, UMTS(Universal Mobile Telecommunication Service) 단말기, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), DMB(Digital Multimedia Broadcasting) 등의 이동방송 수신기, 개인용 컴퓨터(Personal Computer), 데스크톱 컴퓨터(desktop computer), 노트북(notebook) 등을 포함한다.
본 실시예에 따른 화상통화 단말기(10)는, 도 2에 도시된 바와 같이, 통신부로 무선통신부(12)를 구비하며, 제어부(11), 입력부(13), 메모리부(14), 화상통화정보 획득부(15, 16) 및 표시부(17)를 포함하여 구성된다.
제어부(11)는 화상통화 단말기(10)의 전반적인 제어 동작을 수행하는 마이크로프로세서(microprocessor)이다. 특히 제어부(11)는 화상통화시 부가정보(14a)의 제공 및 표시 여부를 제어한다.
무선통신부(12)는 화상통화 단말기(10)의 통신을 수행한다. 특히 무선통신부(12)는 화상통화를 수행하기 위한 화상통화정보를 송수신한다. 즉 무선통신부(12)는 사용자의 화상통화정보를 송신하고, 상대방의 화상통화정보를 수신한다. 이때 화상통화정보는 송화자의 영상정보와 음성정보를 포함한다.
입력부(13)는 화상통화 단말기(10)의 조작을 위한 복수의 키를 제공하며, 사용자의 키선택에 따른 선택정보를 발생하여 제어부(11)로 전송한다. 입력부(13)로는 키패드, 터치패드와 같은 포인팅 장치, 터치스크린 등의 입력장치가 사용될 수 있다.
메모리부(14)는 화상통화 단말기(10)의 동작 제어시 필요한 프로그램과, 프로그램 수행 중에 발생되는 정보를 저장한다. 특히 메모리부(14)는 부가정보(14)를 저장하며, 화상통화시 부가정보(14a)의 제공을 위한 프로그램을 저장한다. 부가정보(14a)는 송화자의 특정모션이나 특정음성에 대응되는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함한다. 부가정보(14a)에 대한 구체적인 설명은 후술하도록 하겠다.
화성통화정보 획득부(15, 16)는 송화자의 화상통화정보를 획득한다. 즉 화상통화정보 획득부(15, 16)는 송화자의 영상정보를 획득하는 카메라부(15)와, 송화자의 음성정보를 획득하는 음성처리부(16)를 포함하여 구성된다.
카메라부(15)는 무선통신부(12)를 통해 송신하기 위한 송화자의 영상정보를 획득한다. 즉 카메라부(15)는 입력부(13)를 통한 화상통화의 승낙에 따라 송화자의 영상을 촬영하여 영상정보를 획득한다. 카메라부(15)는 이미지 센서, 신호처리부 및 영상처리부를 포함하여 구성된다. 이미지 센서는 송화자의 광신호를 아날로그 신호로 변환한다. 신호처리부는 아날로그 신호를 디지털 신호로 변환한다. 그리고 영상처리부는 신호처리부를 통해 입력되는 영상신호를 처리하여 영상정보를 획득하며, 획득된 영상정보를 무선통신부(12)나 표시부(17)를 통해 출력하거나 메모리부(14)에 저장한다. 또한 영상처리부는 무선통신부(12)를 통해 입력되는 영상정보를 처리하여 표시부(17)를 통해 출력하거나 메모리부(14)에 저장한다.
음성처리부(16)는 제어부(11)의 제어에 따라 마이크(16a)로 입력되는 음성을 디저털화하여 음성정보를 획득하고, 무선통신부(12)를 통해 수신된 음성정보를 복조하여 스피커(16b)를 통해 출력한다.
그리고 표시부(17)는 화상통화시 송수신되는 영상정보를 실시간으로 표시한다. 특히 표시부(17)는 화상통화시 송화자의 영상과 화상통화정보에 따른 부가정보를 함께 표시한다. 이때 표시부(17)로는 LCD(Liquid Crystal Display)나 터치 스크린(touch screen)이 사용될 수 있다. 터치 스크린은 표시장치와 입력장치으로서의 역할을 동시에 수행한다.
특히 제어부(11)는 부가정보 추출부(11a), 영상 생성부(11b) 및 화상통화 제어부(11c)를 포함하여 구성된다. 부가정보 추출부(11a)는 화상통화정보 획득부(15, 17)에서 획득된 화상통화정보에서 특정모션이나 특정음성을 검출하고, 검출된 특정 모션이나 특정음성에 대응되는 부가정보(14a)를 메모리부(14)에서 추출한다. 영상 생성부(11b)는 획득된 송화자의 영상 위에 추출된 부가정보를 중첩하여 복합영상을 생성한다. 그리고 화상통화 제어부(11c)는 획득된 통화자의 음성정보와 생성된 복합영상정보를 무선통신부(12)를 통하여 수화자 단말기(10b)로 송신한다.
부가정보(14a)는 송화자의 영상 중 특정모션에 대응되는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함한다. 이때 특정모션에 대응되는 부가정보(14a)는 디폴트(default)로 제공되거나 사용자 설정에 의해 제공될 수 있다. 특정모션은 송화자의 특정동작이나 송화자의 특정상태일 수 있다. 특정동작은 화상통화 중 촬영되는 송화자의 동영상 중의 특정 동영상이며, 특정상태는 송화자의 동영상 중의 특정 정지영상을 의미한다. 예컨대, 송화자가 손(또는 팔)을 이용하여 하트 모양을 만들 경우, 부가정보 추출부(11a)는 이를 검출하여 하트 모양에 대응되는 부가정보(14a)를 추출한다. 이때 부가정보(14a)는 "사랑해"와 같은 텍스트 또는 "하트 애니메이션"일 수 있다.
또한 부가정보(14a)는 송화자의 음성 중 특정음성에 대응되는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함한다. 이때 특정음성에 대응되는 부가정보(14a)는, 특정모션에 대응되는 부가정보(14a)와 동일하게, 디폴트로 제공되거나 사용자 설정에 의해 제공될 수 있다. 특정음성은 단어 또는 문장일 수 있다. 예컨대, 송화자의 음성 중 "사랑"이라는 단어가 마이크(16a)를 통하여 입력되면, 부가정보 추출부(11a)는 "사랑"이라는 특정음성을 검출하고, 검출된 특정음성에 대응되는 부가정보(14a)를 추출한다. 이때 부가정보(14a)는 "사랑 해"와 같은 텍스트 또는 "하트 애니메이션"일 수 있다.
이때 수화자 단말기(10b)의 무선통신부(12)는 송화자 단말기(10a)로부터 수신한 송화자의 음성정보 및 복합영상정보를 수신한다. 수화자 단말기(10b)의 화상통화 제어부(11c)는 수신된 송화자의 음성정보는 스피커(160b)로 출력하고, 수신된 복합영상정보는 표시부(17)에 표시한다.
한편 본 실시예에서는 송화자 단말기(10a)측에서 복합영상을 생성하여 수화자 단말기(10b)로 송신하는 예를 개시하였지만 이에 한정되는 것은 아니다. 예컨대 수화자 단말기(10b)측에서 복합영상을 생성하여 표시할 수 있다. 즉 수화자 단말기(10b)는 송화자 단말기(10a)로부터 송화자의 영상과 음성정보를 수신한다. 수화자 단말기(10b)는 수신된 영상 및 음성정보 중에서 하나에 대응되는 부가정보(14a)를 추출한다. 수화자 단말기(10b)는 수신된 영상에 추출된 부가정보(14a)를 중첩하여 복합영상을 생성한 후, 수신된 음성정보는 스피커(16b)로 출력하고 생성된 복합영상은 표시부(17)에 표시할 수 있다.
또는 수화자 단말기(10b)는 복합영상 생성에 필요한 정보를 송화자 단말기(10a)로부터 수신하여 복합영상을 생성하여 표시할 수 있다. 즉 송화자 단말기(10a)는 획득된 화상통화정보와, 추출된 부가정보(14b)를 수화자 단말기(10b)로 송신한다. 이때 송화자 단말기(10a)는 획득된 영상 위에 추출된 부가정보(14a)를 중첩되게 표시하는 영상중첩정보를 함께 송신한다. 그리고 수화자 단말기(10b)는 수신된 영상중첩정보를 토대로 수신된 송화자의 영상 위에 부가정보(14a)를 중첩한 복합영상을 생성하여 표시부(17)에 표시하고, 수신된 송화자의 음성정보는 스피 커(16b)를 통하여 출력한다. 또한 송화자 단말기(10a)는 표시부(17)에 상대편의 영상과 함께 자신의 영상을 함께 표시할 수 있다. 즉 송화자 단말기(10a)는 수화자 단말기(10b)에 송신할 복합영상을 표시부(17)에 표시할 수 있다.
또는 수화자 단말기(10b)는 부가정보 추출에 필요한 안내정보를 송화자 단말기(10a)로부터 수신하여 부가정보(14a)를 추출할 수 있다. 즉 송화자 단말기(10a)는 획득된 영상 및 음성정보와, 획득된 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보(14a)의 추출에 필요한 안내정보를 수화자 단말기(10b)로 송신한다. 수화자 단말기(10b)는 수신된 안내정보에 해당하는 부가정보(14a)를 메모리부(14)에서 추출한다. 그리고 수화자 단말기(10b)는 수신된 영상에 추출된 부가정보(14a)를 중첩하여 복합영상을 생성한 후, 수신된 음성정보는 스피커(16b)로 출력하고 생성된 복합영상은 표시부(17)에 표시할 수 있다.
그리고 본 실시예에서는 부가정보(14a)로 송화자의 영상 위에 중첩되어 표시되는 정보를 예시하였지만 이에 한정되는 것은 아니다. 예컨대, 송화자의 음성 입력 없이 송화자의 특정모션이 검출되면, 송화자 단말기(10a)는 검출된 특정모션에 대응되는 부가정보(14a)로 음성정보를 수화자 단말기(10b)로 송신할 수 있다. 즉 송화자가 손(또는 팔)으로 만든 하트 모양이 감지되면, 부가정보 추출부(11a)는 하트 모양에 대응되는 음성정보를 포함하는 부가정보(14a)를 추출한다. 이때 부가정보(14a)는 "사랑해"와 같은 텍스트 또는 "하트 애니메이션"과, "사랑해"라는 음성정보를 포함한다.
그 외 부가정보(14a)로 음악, 진동, 플래쉬 등이 사용될 수 있다.
제 1 실시예에 따른 화상통화 방법
도 1 및 도 2의 송화자 단말기(10a)와 수화자 단말기(10b)를 통해 수행되는 제 1 실시예에 따른 화상통화 방법에 대해서 도 3 및 도 4를 통해 설명하면 다음과 같다. 여기서 도 3은 화상통화시 송화자 단말기(10a)에서의 화상통화 방법에 따른 흐름도이다. 그리고 도 4는 화상통화시 수화자 단말기(10b)에서의 화상통화 방법에 따른 흐름도이다.
도 1 내지 도 4를 참조하면, 송화자 단말기(10a)와 수화자 단말기(10b) 사이에 화상통화를 위한 호가 연결되면(S21), 송화자 단말기(10a)는 송화자의 영상 및 음성정보를 획득한다(S23). 즉 송화자 단말기(10a)의 카메라부(15)는 송화자의 영상을 촬영하여 영상정보를 획득한다. 그리고 송화자 단말기(10a)의 음성처리부(16)는 마이크(16a)를 통해 입력되는 송화자의 음성을 처리하여 음성정보를 획득한다.
다음으로 송화자 단말기(10a)의 부가정보 추출부(11a)는 획득된 정보에 대응되는 부가정보(14a)가 있는 지를 판단한다(S25). S25과정에서의 판단 결과 부가정보(14a)가 없는 경우, 송화자 단말기(10a)의 화상통화 제어부(11c)는 무선통신부(12)를 통하여 획득된 정보를 수화자 단말기(10b)로 송신한다(S27).
S25과정의 판단 결과 부가정보(14a)가 있는 경우, 송화자 단말기(10a)의 부가정보 추출부(11a)는 메모리부(14)에서 해당되는 부가정보(14a)를 추출한다(S29). 이어서 송화자 단말기(10a)의 화상통화 제어부(11c)는 무선통신부(12)를 통하여 획득된 정보와 부가정보(14a)를 수화자 단말기(10b)로 송신한다. 이때 송화자 단말기(10a)의 화상통화 제어부(11c)는 송화자의 영상 위에 추출된 부가정보(14a)를 중 첩되게 표시하는 영상중첩정보를 함께 송신할 수 있다.
다음으로 송화자 단말기(10a)의 영상 생성부(11b)는 획득된 송화자의 영상 위에 추출된 부가정보를 중첩하여 복합영상을 생성한다(S31). 이어서 송화자 단말기(10a)의 화상통화 제어부(11c)는 획득된 송화자의 음성정보와 생성된 복합영상정보를 무선통신부(12)를 통하여 수화자 단말기(10b)로 송신한다(S33).
다음으로 수화자 단말기(10b)는 획득된 음성정보와 생성된 복합영상정보를 무선통신부(12)를 통하여 수신한다(S35). 그리고 수화자 단말기(10b)는 수신된 복합영상정보를 표시하고 음성정보를 출력한다(S37). 즉 수화자 단말기(10b)의 화상통화 제어부(11c)는 수신된 복합영상정보를 표시부(17)에 표시하고, 수신된 송화자의 음성정보는 스피커(16b)를 통하여 출력한다.
한편 도시되진 않았지만, 수화자 단말기(10b)는 S27과정에서 송화자 단말기(10a)에서 송신된 화상통화정보를 무선통신부(12)를 통하여 수신한다. 이 경우 수화자 단말기(10b)의 화상통화 제어부(11c)는 송화자의 영상정보를 표시부(17)에 표시하고, 스피커(16b)를 통하여 수신된 송화자의 음성정보를 통하여 출력한다.
이어서 송화자 단말기(10a)의 화상통화 제어부(11c)는 화상통화 종료 여부를 판단한다(S39). 화상통화가 종료되지 않을 경우, 송화자 단말기(10a)와 수화자 단말기(10b)는 화상통화를 위한 S23과정 내지 S37과정을 반복적으로 수행한다. 한편 S39과정이 송화자 단말기(10a)에서 진행되는 예를 개시하였지만, 수화자 단말기(10b)에서 진행될 수 있음은 물론이다.
한편 제 1 실시예에 따른 화상통화 방법에서는 송화자 단말기(10a)에서 복합 영상을 생성하는 예를 개시하였지만, 아래의 제 2 및 제 3 실시예에 따른 화상통화 방법에 개시된 바와 수화자 단말기(10b)에서 복합영상을 생성할 수도 있다.
제 2 실시예에 따른 화상통화 방법
도 1 및 도 2의 송화자 단말기(10a)와 수화자 단말기(10b)를 통해 수행되는 제 2 실시예에 따른 화상통화 방법에 대해서 도 5 및 도 6을 통해 설명하면 다음과 같다. 여기서 도 5는 화상통화시 송화자 단말기(10a)에서의 화상통화 방법에 따른 흐름도이다. 그리고 도 6은 화상통화시 수화자 단말기(10b)에서의 화상통화 방법에 따른 흐름도이다.
도 1, 도 2, 도 5 및 도 6을 참조하면, 제 2 실시예에 따른 화상통화 방법의 S41과정 내지 S49과정은 제 1 실시예에 따른 S21과정 내지 S29과정과 동일하게 진행되기 때문에, 상세한 설명은 생략한다.
다음으로 송화자 단말기(10a)의 화상통화 제어부(11c)는 무선통신부(12)를 통하여 획득된 정보와 부가정보를 수화자 단말기(10b)로 송신한다(S51). 이때 화상통화 제어부(11c)는 송화자의 영상 위에 추출된 부가정보를 중첩되게 표시하는 영상중첩정보를 함께 송신할 수 있다.
다음으로 수화자 단말기(10b)는 S31과정에서 획득된 정보와 부가정보를 무선통신부(12)를 통하여 수신한다(S53). 그리고 수화자 단말기(10b)는 수신된 송화자의 영상 위에 부가정보(14a)를 표시하고 음성정보를 출력한다(S55). 즉 수화자 단말기(10b)의 영상 생성부(11b)는 수신된 송화자의 영상 위에 부가정보를 중첩한 복합영상을 생성하면, 화상통화 제어부(11c)는 생성된 복합영상을 표시부(17)에 표시 하고, 수신된 송화자의 음성정보는 스피커(16b)를 통하여 출력한다. 이때 영상 생성부(11b)는 수신된 영상중첩정보를 토대로 복합영상을 생성할 수 있다.
한편 도시되진 않았지만, 수화자 단말기(10b)는 S47과정에서 송화자 단말기(10a)에서 송신된 화상통화정보를 무선통신부(12)를 통하여 수신한다. 이 경우 수화자 단말기(10b)의 화상통화 제어부(11c)는 송화자의 영상정보를 표시부(17)에 표시하고, 스피커(16b)를 통하여 수신된 송화자의 음성정보를 출력한다.
이어서 송화자 단말기(10a)의 화상통화 제어부(11c)는 화상통화 종료 여부를 판단한다(S57). 화상통화가 종료되지 않을 경우, 송화자 단말기(10a)와 수화자 단말기(10b)는 화상통화를 위한 S43과정 내지 S55과정을 반복적으로 수행한다. 한편 S37과정이 송화자 단말기(10a)에서 진행되는 예를 개시하였지만, 수화자 단말기(10b)에서 진행될 수 있음은 물론이다.
제 3 실시예에 따른 화상통화 방법
도 1 및 도 2의 송화자 단말기(10a)와 수화자 단말기(10b)를 통해 수행되는 제 3 실시예에 따른 화상통화 방법에 대해서 도 7 및 도 8을 통해 설명하면 다음과 같다. 여기서 도 7은 화상통화시 송화자 단말기(10a)에서의 화상통화 방법에 따른 흐름도이다. 그리고 도 8은 화상통화시 수화자 단말기(10b)에서의 화상통화 방법에 따른 흐름도이다.
도 1, 도 2, 도 7 및 도 8을 참조하면, 제 3 실시예에 따른 화상통화 방법은 송화자 단말기(10a)와 수화자 단말기(10b) 사이에 화상통화를 위한 호가 연결되면(S71), 송화자 단말기(10a)는 송화자의 영상 및 음성정보를 획득한다(S73).
다음으로 송화자 단말기(10a)의 화상통화 제어부(11c)는 무선통신부(12)를 통하여 획득된 정보를 수화자 단말기(10b)로 송신한다(S75).
다음으로 수화자 단말기(10b)는 획득된 영상 및 음성 정보를 무선통신부(12)를 통하여 수신한다(S77).
다음으로 수화자 단말기(10b)의 부가정보 추출부(11a)는 수신된 영상 및 음성정보에 대응되는 부가정보(14a)가 있는 지를 판단한다(S79). S79과정에서의 판단 결과 부가정보(14a)가 없는 경우, 수화자 단말기(10b)의 화상통화 제어부(11c)는 수신된 영상정보는 표시부(17)에 표시하고, 스피커(16b)를 통하여 수신된 음성정보를 출력한다(S81).
S79과정의 판단 결과 부가정보(14a)가 있는 경우, 수화자 단말기(10b)의 부가정보 추출부(11a)는 메모리부(14)에서 해당되는 부가정보(14a)를 추출한다(S83). 이어서 수화자 단말기(10b)의 영상 생성부(11b)는 수신된 영상 위에 추출된 부가정보를 중첩하여 복합영상을 생성한다(S85). 즉 제 1 실시예에 따른 화상통화 방법에서는 송화자 단말기(10a)에서 복합영상을 생성하였지만, 제 3 실시예에 따른 화상통화 방법에서는 수화자 단말기(10b)에서 복합영상을 생성한다.
그리고 수화자 단말기(10b)의 화상통화 제어부(11c)는 생성된 복합영상을 표시부(17)에 표시하고, 수신된 송화자의 음성정보는 스피커(16b)를 통하여 출력한다(S87).
이어서 송화자 단말기(10a)의 화상통화 제어부(11c)는 화상통화 종료 여부를 판단한다(S89). 화상통화가 종료되지 않을 경우, 송화자 단말기(10a)와 수화자 단 말기(10b)는 화상통화를 위한 S73과정 내지 S87과정을 반복적으로 수행한다. 한편 S89과정이 송화자 단말기(10a)에서 진행되는 예를 개시하였지만, 수화자 단말기(10b)에서 진행될 수 있음은 물론이다.
한편 제 3 실시예에서는 수화자 단말기(10b)는 수신된 영상 및 음성정보에 대응되는 부가정보(14a)를 직접 추출하는 예를 개시하였지만 이에 한정되는 것은 아니다. 예컨대, 수화자 단말기(10b)는 부가정보(14a) 추출에 필요한 안내정보를 송화자 단말기(10a)로부터 수신하여 부가정보(14a)를 추출할 수 있다. 즉 송화자 단말기(10a)는 획득된 영상 및 음성정보와, 획득된 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보(14a)의 추출에 필요한 안내정보를 수화자 단말기(10b)로 송신한다. 수화자 단말기(10b)는 수신된 안내정보에 해당하는 부가정보(14a)를 메모리부(14)에서 추출한다. 그리고 수화자 단말기(10b)는 수신된 영상에 추출된 부가정보(14a)를 중첩하여 복합영상을 생성한 후, 수신된 음성정보는 스피커(16b)로 출력하고 생성된 복합영상은 표시부(17)에 표시할 수 있다. 이때 안내정보는 송화자 단말기(10a)의 부가정보 추출부(11a)에서 생성할 수 있다.
화면예시도
본 발명의 실시예에 따른 화상통화 방법에 대해서 도 9 및 도 10의 화면예시도를 참조하여 설명하면 다음과 같다. 여기서 도 9는 송화자의 특정모션(63)에 따른 화성통화 방법에 따른 화면예시도이다. 도 10은 송화자의 특정음성(65)에 따른 화상통화 방법에 따른 화면예시도이다.
도 1, 도 2 및 도 9를 참조하면, 송화자 단말기(10a)의 카메라부(15)가 양손 을 이용하여 만든 하트 모양을 포함하는 송화자의 영상(61)을 촬영하여 영상정보를 획득하면, 송화자 단말기(10a)의 부가정보 추출부(11a)는 획득된 영상정보에서 양손으로 만든 하트 모양의 특정모션(63)을 검출한다. 부가정보 추출부(11a)는 검출된 특정모션(63)에 대응되는 부가정보(14a)를 메모리부(14)에서 추출한다. 이때 부가정보(14a)는 텍스트 문장인 "사랑해"이다.
송화자 단말기(10a)의 영상 생성부(11c)는 획득된 영상(61) 위에 추출된 부가정보(14a)가 중첩된 복합영상(65)을 생성한다. 송화자 단말기(10a)의 화성통화 제어부(11c)는 복합영상정보를 수화자 단말기(10b)로 송신한다.
그리고 수화자 단말기(10b)는 송화자 단말기(10a)로부터 수신한 복합영상(65)을 표시부(17)에 표시한다. 물론 송화자 단말기(10a)로부터 음성정보를 함께 수신한 경우, 수화자 단말기(10b)는 음성정보를 스피커(16b)를 통하여 출력한다.
이때 본 화면예시도에서는 송화자의 특정모션(63)에 따른 화성통화 방법으로 제 1 실시예를 개시하였지만, 제 2 및 제 3 실시예에도 그대로 적용될 수 있음은 물론이다. 예컨대 본 화면예시도에서는 송화자 단말기(10a)에서 복합영상(65)을 생성하는 예를 개시하였지만, 수화자 단말기(10b)에서 복합영상(65)을 생성할 수 있음은 물론이다.
도 1, 도 2 및 도 10을 참조하면, 송화자 단말기(10a)의 카메라부(15)는 송화자의 영상(66)을 촬영하여 영상정보를 획득하고, 음성처리부(16)는 마이크(16a)를 통해 입력되는 송화자의 음성(67)을 처리하여 음성정보를 획득한다.
이때 송화자의 음성정보 중 "사랑"이라는 단어가 마이크(16a)를 통하여 입력 되면, 송화자 단말기(10a)의 부가정보 추출부(11a)는 획득된 음성정보에서 "사랑"이라는 특정음성을 검출하고, 검출된 특정음성에 대응되는 부가정보(14a)를 추출한다. 이때 부가정보(14a)는 하트 애니메이션일 수 있다. 예컨대 하트 애니메이션은 작은 하트부터 큰 하트를 순차적으로 중첩되게 표시한다. 아울러 송화자 단말기(10a)의 부가정보 추출부(11a)는 획득된 영상정보에서 양손으로 만든 "하트 모양"이라는 특정모션(68)을 검출한다.
송화자 단말기(10a)의 영상 생성부(11b)는 획득된 영상(66) 위에 추출된 부가정보(14a)가 중첩된 복합영상(69)을 생성한다. 이때 영상 생성부(11b)는 "하트 애니메이션"의 하트가 양손으로 만든 "하트 모양"에서 나오는 형태로 복합영상(69)을 생성한다. 송화자 단말기(10a)의 화성통화 제어부(11c)는 획득된 음성정보와 복합영상정보를 수화자 단말기(10b)로 송신한다.
그리고 수화자 단말기(10b)는 수신된 복합영상(69)을 표시부(17)에 표시하고, 수신된 송화자 음성정보는 스피커(16b)를 통하여 출력한다. 따라서 수화자는 수화자 단말기(10b)를 통하여 송화자의 영상(66)과 더불어 하트 애니메이션과 같은 부가정보(14a)를 표시부(17)를 통해 볼 수 있다.
이때 본 화면예시도에서는 송화자의 특정음성(65)에 따른 화성통화 방법으로 제 2 실시예를 개시하였지만, 제 1 및 제 3 실시예에도 그대로 적용될 수 있음은 물론이다.
한편, 본 명세서와 도면에 개시된 본 발명의 실시예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아 니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.
본 발명은 화상통화시 송화자의 영상 위에 화상통화정보에 따른 부가정보를 함께 표시한다. 이때 부가정보는 송화자의 화성통화정보와 관련되기 때문에, 본 발명은 송화자의 영상과 음성을 이용하여 능동적인 화상통화영상을 제공하고, 화상통화자에게 화상통화의 재미와 즐거움을 제공한다.

Claims (24)

  1. 화상통화호를 형성하는 과정과;
    송화자의 영상 및 음성정보를 획득하는 과정과;
    상기 획득된 영상의 모션정보 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 과정과;
    상기 획득된 영상 및 음성정보와 상기 추출된 부가정보를 수화자 단말기로 송신하는 과정을 포함하며,
    상기 송신하는 과정은 상기 송화자의 영상 위에 상기 추출된 부가정보가 표시되게 하는 영상중첩정보를 함께 송신하는 것을 특징으로 송화자 단말기의 화상통화 방법.
  2. 제 1항에 있어서, 상기 추출 과정은,
    상기 획득된 영상 중 특정모션이나 상기 획득된 음성 중 특정음성을 검출하는 과정과;
    상기 검출된 특정모션이나 특정음성에 대응되는 상기 부가정보를 추출하는 과정;을 포함하는 것을 특징으로 하는 송화자 단말기의 화상통화 방법.
  3. 제 2항에 있어서, 상기 부가정보는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함하는 것을 특징으로 하는 송화자 단말기의 화상통화 방법.
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 송화자 단말기와 화상통화를 위한 호를 연결하는 과정과;
    상기 송화자 단말기에서 전송된 영상 및 음성정보와, 상기 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보 추출에 필요한 안내정보를 수신하는 과정과;
    상기 안내정보에 해당하는 상기 부가정보를 추출하는 과정과;
    상기 수신된 영상 위에 상기 추출된 부가정보를 중첩하여 복합영상을 생성하는 과정과;
    상기 수신된 음성정보는 스피커로 출력하고, 상기 생성된 복합영상을 표시부에 표시하는 과정;을 포함하는 것을 특징으로 하는 화상통화 단말기의 화상통화 방법.
  12. 제 11항에 있어서, 상기 부가정보는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 화상통화 방법.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 화상통화를 위한 호를 연결하고, 송화자의 영상, 부가정보가 중첩된 복합영상 및 음성정보를 수신하는 무선통신부와;
    상기 수신한 송화자의 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 부가정보 추출부와;
    무선통신부에서 수신한 상기 송화자의 영상 위에 상기 추출된 부가정보를 중첩하여 복합영상을 생성하는 영상 생성부와;
    상기 영상 생성부에서 생성된 복합영상 및 음성을 상기 무선통신부를 통해 송화자에게 전송하고, 송화자로부터 수신되는 부가정보가 중첩된 복합영상 및 음성정보, 영상, 부가정보의 수신을 제어하는 화상통화 제어부와;
    상기 제어부의 제어 하에 복합영상을 표시하는 표시부와,
    상기 제어부의 제어하에 부가정보 추출에 필요한 안내음성 및 수신한 음성정보를 재생하는 스피커;를 포함하고
    상기 제어부는,
    상기 송화자의 영상 및 음성정보와 추출된 부가정보를 수신한 경우, 상기 영상 생성부를 통하여 생성한 복합 영상을 표시하도록 제어하는 것을 특징으로 하는 화상통화 단말기.
  20. 제 19항에 있어서, 상기 부가정보 추출부는
    상기 수신한 송화자의 영상 중 특정모션과 상기 수신된 음성 중 특정음성을 검출하고, 상기 검출된 특정모션이나 특정음성에 대응되는 상기 부가정보를 추출하는 것을 특징으로 하는 화상통화 단말기.
  21. 제 20항에 있어서, 상기 부가정보는 텍스트, 동영상, 정지영상, 애니메이션 또는 아이콘 중에서 적어도 하나를 포함하는 것을 특징으로 하는 화상통화 단말기.
  22. 삭제
  23. 화상통화를 위한 호를 연결하는 무선통신부와;
    송화자의 영상 및 음성정보를 획득하는 화상통화정보 획득부와;
    상기 획득된 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보를 추출하는 데 필요한 안내정보를 생성하는 부가정보 추출부와;
    상기 획득된 영상 및 음성정보와 상기 안내정보를 상기 무선통신부를 통하여 수화자 단말기로 송신하는 화상통화 제어부;를 포함하는 것을 특징으로 하는 화상통화 단말기.
  24. 화상통화를 위한 호를 연결하고, 송화자의 영상 및 음성정보와, 상기 영상 및 음성정보 중 적어도 하나에 대응되는 부가정보 추출에 필요한 안내정보를 수신하는 무선통신부와;
    상기 수신된 안내정보에 해당하는 부가정보를 추출하는 부가정보 추출부와;
    상기 수신된 영상 위에 상기 추출된 부가정보를 중첩하여 복합영상을 생성하는 영상 생성부;를 포함하는 것을 특징으로 하는 화상통화 단말기.
KR1020070058932A 2007-06-15 2007-06-15 화상통화 단말기 및 방법 KR101433171B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070058932A KR101433171B1 (ko) 2007-06-15 2007-06-15 화상통화 단말기 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070058932A KR101433171B1 (ko) 2007-06-15 2007-06-15 화상통화 단말기 및 방법

Publications (2)

Publication Number Publication Date
KR20080110324A KR20080110324A (ko) 2008-12-18
KR101433171B1 true KR101433171B1 (ko) 2014-08-22

Family

ID=40369250

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070058932A KR101433171B1 (ko) 2007-06-15 2007-06-15 화상통화 단말기 및 방법

Country Status (1)

Country Link
KR (1) KR101433171B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8374646B2 (en) 2009-10-05 2013-02-12 Sony Corporation Mobile device visual input system and methods
KR101862128B1 (ko) 2012-02-23 2018-05-29 삼성전자 주식회사 얼굴을 포함하는 영상 처리 방법 및 장치
CN105100946A (zh) * 2015-07-17 2015-11-25 小米科技有限责任公司 视频通讯方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080057030A (ko) * 2006-12-19 2008-06-24 엘지전자 주식회사 이모티콘을 이용한 화상통화장치 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080057030A (ko) * 2006-12-19 2008-06-24 엘지전자 주식회사 이모티콘을 이용한 화상통화장치 및 방법

Also Published As

Publication number Publication date
KR20080110324A (ko) 2008-12-18

Similar Documents

Publication Publication Date Title
KR100663528B1 (ko) 휴대용 단말기에서 팝업 표시방법
KR100678206B1 (ko) 휴대단말기의 화상통화모드에서 감정표시 방법
KR100701856B1 (ko) 이동통신 단말기에서 메시지의 배경효과 제공 방법
CA2415059A1 (en) Advanced set top terminal having a video call feature
CN101073247A (zh) 用于响应于所提供的情绪数据来提供与呼叫关联的容貌图像的方法和设备
JP2008048062A (ja) 携帯端末装置
CN111601174A (zh) 一种字幕添加方法及装置
KR101561826B1 (ko) 데이터 입력 방법 및 이동통신단말기
KR101433171B1 (ko) 화상통화 단말기 및 방법
EP1705882A1 (en) Mobile terminal and method for outputting image with associated background sound
JP4776363B2 (ja) 通信端末装置及び通信システム
KR100735415B1 (ko) 휴대단말기의 다자간 화상통화수행방법
KR100689521B1 (ko) 이동통신 단말기에서 아바타 표시방법
KR100849293B1 (ko) 슬라이드 타입 휴대단말기에서 키 입력 장치 및 방법
JP4296976B2 (ja) 通信端末装置
KR101364844B1 (ko) 화상통화기능을 갖는 이동통신단말기 및 그 제어방법
JP4986741B2 (ja) 電子機器及びそのメニュー画面表示方法
KR100610898B1 (ko) 음성메모 입력시 지정한 이미지 표시 기능을 갖는 이동통신단말기 및 그 방법
JP4600643B2 (ja) 文字表示機能を有するテレビ電話装置及びテレビ電話装置における音声の文字変換表示方法
JP2015115926A (ja) 携帯端末装置、読唇通信方法、及びプログラム
KR100735430B1 (ko) 이동통신 단말기에서 메뉴를 표시하는 방법
KR100651387B1 (ko) 이동통신 단말기에서 데이터 입력 방법
KR100678119B1 (ko) 이동통신 단말기에서 음악파일 재생방법
KR100701620B1 (ko) 워터마킹을 위한 이동통신 단말기 및 방법
CN101185320A (zh) 图像显示系统、终端设备、图像显示方法以及程序

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180727

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190730

Year of fee payment: 6