KR100910192B1 - 전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체 - Google Patents

전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체 Download PDF

Info

Publication number
KR100910192B1
KR100910192B1 KR1020030002393A KR20030002393A KR100910192B1 KR 100910192 B1 KR100910192 B1 KR 100910192B1 KR 1020030002393 A KR1020030002393 A KR 1020030002393A KR 20030002393 A KR20030002393 A KR 20030002393A KR 100910192 B1 KR100910192 B1 KR 100910192B1
Authority
KR
South Korea
Prior art keywords
portrait
face part
portraits
face
information
Prior art date
Application number
KR1020030002393A
Other languages
English (en)
Other versions
KR20030063137A (ko
Inventor
다니구치시게키
야마모토미츠히코
기쿠치미사오
가게히로시
다케다아키히로
다나카겐이치
Original Assignee
후지쯔 가부시끼가이샤
미쓰비시덴키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후지쯔 가부시끼가이샤, 미쓰비시덴키 가부시키가이샤 filed Critical 후지쯔 가부시끼가이샤
Publication of KR20030063137A publication Critical patent/KR20030063137A/ko
Application granted granted Critical
Publication of KR100910192B1 publication Critical patent/KR100910192B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00137—Transmission
    • H04N1/0014—Transmission via e-mail
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/107—Computer-aided management of electronic mailing [e-mailing]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/57—Arrangements for indicating or recording the number of the calling subscriber at the called subscriber's set
    • H04M1/575—Means for retrieving and displaying personal data about calling party
    • H04M1/576—Means for retrieving and displaying personal data about calling party associated with a pictorial or graphical representation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00167—Processing or editing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209—Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Resources & Organizations (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Telephone Function (AREA)
  • Processing Or Creating Images (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Image Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Image Analysis (AREA)
  • Telephone Set Structure (AREA)
  • Information Transfer Between Computers (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

본 발명은 사용자간에 고도한 커뮤니케이션을 실현하는 새로운 휴대 단말의 제공을 목적으로 한다.
통신 기능을 가진 때에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화(似顔繪)를 취급하도록 하는 구성을 채용하여, 어떠한 표정의 초상화를 생성하는 것인가에 관해서 나타내는 표정 지정 정보를 취득하는 수단과, 이 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 수단과, 처리 대상의 초상화가 갖는 얼굴 파트를 이 취득된 초상화 얼굴 파트와 교환하는 수단을 구비하도록 구성한다. 이 구성에 의해, 수신측으로서 동작할 때에, 몇 번의 착신에도 응답하지 않은 착호측의 사용자에 대하여, 발호측의 사용자의 화난 표정을 전달할 수 있게 되거나, 송신측으로서 동작할 때에, 메일의 송신처의 사용자에 대하여, 메일 송신측의 사용자의 웃는 얼굴 표정을 전달할 수 있게 된다.

Description

전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체{ELECTRONIC APPARATUS AND COMPUTER-READABLE RECORDING MEDIUM RECORDED PROGRAM FOR PROCESSING ELECTRONIC APPARATUS}
도 1은 본 발명의 휴대 전화의 장치 구성도.
도 2는 본 발명의 휴대 전화가 구비하는 초상화 작성 기능의 설명도.
도 3은 본 발명의 일실시예를 도시하는 도면.
도 4는 초상화 보존부의 설명도.
도 5는 얼굴 파트 보존부의 설명도.
도 6은 착신 이력 보존부의 설명도.
도 7은 표정 지정 정보 보존부의 설명도.
도 8은 수신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 9는 수신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 10은 초상화 작성 처리의 설명도.
도 11은 본 발명의 다른 실시예를 도시하는 도면.
도 12는 송신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 13은 수신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 14는 본 발명의 다른 실시예를 도시하는 도면.
도 15는 송신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 16은 본 발명의 다른 실시예를 도시하는 도면.
도 17은 송신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 18은 수신측 휴대 전화가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 19는 본 발명의 일실시예를 도시하는 도면.
도 20은 초상화 합성부가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 21은 초상화 합성부가 실행하는 처리 흐름의 일예를 도시하는 도면.
도 22는 관계 추측부가 실행하는 처리 흐름의 일예를 도시하는 도면.
<도면의 주요 부분에 대한 부호의 설명>
1 : 휴대 전화
10 : 카메라
11 : 디스플레이
20 : 송신측 휴대 전화
21 : 초상화 작성부
22 : 초상화 송신부
23 : 발호부
24 : 초상화 보존부
25 : 메일 작성부
26 : 메일 송신부
27 : 표정 지정 정보 취득부
28 : 얼굴 파트 보존부
29 : 초상화 변경부
30 : 수신측 휴대 전화
31 : 초상화 수신부
32 : 초상화 보존부
33 : 얼굴 파트 보존부
34 : 착신 이력 보존부
35 : 표정 지정 정보 보존부
36 : 초상화 변경부
37 : 초상화 출력부
38 : 착호부
39 : 메일 수신부
40 : 메일 서버
본 발명은 휴대 전화 등과 같은 휴대 단말에 관한 것으로, 특히 사용자간에 고도한 커뮤니케이션을 실현하는 휴대 단말에 관한 것이다.
최근, 카메라 부착형 휴대 전화가 시장에 제공되고 있다. 이러한 휴대 전화에서는 종래의 휴대 전화에서는 실현하지 못했던 고도한 커뮤니케이션을 실현할 수 있는 가능성이 있어, 그와 같은 기술이 구축되면, 휴대 전화의 한층 더 많은 보급을 기대할 수 있다.
카메라 부착형 휴대 전화가 시장에 제공되고 있다.
지금까지 시장에 투입된 카메라 부착형 휴대 전화에서는, 촬영한 얼굴 화상 등과 같은 화상을 메일 첨부 등의 수단을 이용하여 상대방의 휴대 전화에 송신하거나, 촬영한 얼굴 화상 등과 같은 화상을 축소하거나 일부 절취하여 대수(待受) 화상(대수 화면에 표시하는 화상)으로서 이용하도록 하고 있다.
그러나, 이러한 종래의 휴대 전화를 이용하고 있던 것에는, 사용자간에 고도한 커뮤니케이션을 실현할 수 없다고 하는 문제점이 있다.
확실히, 촬영한 얼굴 화상을 메일 첨부 등의 수단을 이용하여 상대방의 휴대 전화에 송신하도록 하면, 자신의 표정을 상대방에게 전할 수 있게 됨으로써, 사용자간에 새로운 커뮤니케이션을 실현할 수 있게 된다.
그러나, 촬영한 얼굴 화상의 데이터량은 통상의 경우 8 KB 정도이며, 휴대 전화가 빈약한 회선에 있어서는 대단히 큰 것이기 때문에, 리얼타임성이 요구되는 커뮤니케이션에 대해서는 실현할 수 없다고 하는 문제점이 있다.
또한, 그와 같은 큰 데이터량의 얼굴 화상을 송신하면, 메일 서버에 큰 부담을 주게 되기 때문에, 휴대 전화 회사에 따라서는 송신을 금지하고 있는 곳도 있어, 이와 같은 경우에는 얼굴 화상을 이용한 커뮤니케이션에 대해서는 전혀 실현할 수 없다고 하는 문제점이 있다.
또한, 촬영한 얼굴 화상을 대수 화상으로서 이용할 종래 기술에서는 종래부터 행해지고 있는 일러스트나 얼굴 사진 화상의 대수 영상화와 차이가 없어, 휴대 전화에 카메라를 부착한 것을 활용한 구성이 되지 못한다고 하는 문제점이 있다.
본 발명은 이러한 사정에 감안하여 이루어진 것으로, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화(似顔繪)를 이용하여, 사용자간에 고도한 커뮤니케이션을 실현할 수 있도록 하는 새로운 휴대 단말의 제공을 목적으로 한다.
(a) 초상화의 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 구성
이 목적을 달성하기 위해서, 본 발명의 휴대 단말에서는 통신 기능을 가진 때에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하도록 하는 구성을 채용하여, 수신측으로서 동작하거나 송신측으로서 동작할 때에, 어떠한 표정의 초상화를 생성할 지에 대해서 나타내는 표정 지정 정보를 취득하는 수단과, 이 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 수단과, 처리 대상의 초상화가 갖는 얼굴 파트를 이 취득된 초상화 얼굴 파트와 교환하는 수단을 포함하도록 구성한다.
또한, 이 목적을 달성하기 위해서, 본 발명의 휴대 단말에서는 통신 기능을 가진 때에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하도록 하는 구성을 채용하여, ① 송신측으로서 동작할 때에, 어떠한 표정의 초상화를 생성할 것인가에 대해서 나타내는 표정 지정 정보를 취득하는 수단과, 이 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 수단과, 이 취득된 초상화 얼굴 파트를 초상화 출력처인 휴대 단말에 송신하는 수단을 구비하도록 구성하여, 이 송신측의 구성을 받고, ② 수신측으로서 동작할 때에, 다른 휴대 단말로부터 송신되어 오는 초상화 얼굴 파트를 수신하는 수단과, 처리 대상의 초상화가 갖는 얼굴 파트를 이 수신된 초상화 얼굴 파트와 교환하는 수단을 구비하도록 구성한다.
이와 같이 구성되는 본 발명의 휴대 단말에서는 어떠한 표정의 초상화를 생성할 지에 관해서 나타내는 표정 지정 정보를 취득하면, 미리 준비해 놓은 초상화 얼굴 파트 중으로부터, 이 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하여, 처리 대상의 초상화가 갖는 얼굴 파트를 이 취득된 초상화 얼굴 파트와 교환함으로써, 처리 대상의 초상화의 표정을 변경하도록 처리한다.
이 기능을 가짐으로써, 본 발명의 휴대 단말에 따르면, 수신측으로서 동작할 때에, 예컨대 몇 번의 착신에도 응답하지 않는 착호측 사용자에 대하여 발호측 사용자의 화난 표정을 전달할 수 있게 되거나, 송신측으로서 동작할 때에, 예컨대 메일 송신처 사용자에 대하여 메일 송신측 사용자의 웃는 얼굴의 표정을 전달할 수 있게 된다.
이와 같이 하여, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 이 초상화의 표정을 변화시킬 수 있도록 하는 구성을 채용함으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
(b) 초상화의 합성 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 구성
이 목적을 달성하기 위해서, 본 발명의 휴대 단말에서는 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하도록 하는 구성을 채용하여, 합성 대상이 되는 복수의 초상화를 결정하는 수단과, 이 결정된 합성 대상의 초상화의 합성 방법에 대해서 나타내는 합성 정보를 취득하는 수단과, 이 취득된 합성 정보에 따라서, 결정된 합성 대상의 초상화를 합성하는 수단을 구비하도록 구성한다.
이와 같이 구성되는 본 발명의 휴대 단말에서는 합성 대상이 되는 복수의 초상화를 결정하면, 예컨대 눈과 입에 대해서는 초상화 A의 것을 선택하고, 윤곽과 코에 대해서는 초상화 B의 것을 선택하도록, 이 결정된 합성 대상의 초상화의 합성 방법에 관해서 나타내는 합성 정보를 취득하여, 이 취득된 합성 정보에 따라서, 결정된 합성 대상의 초상화를 합성하도록 처리한다.
이 기능을 가짐으로써, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 예컨대 A 씨와 B 씨 사이에 태어나는 아이의 얼굴을 생성할 수 있도록 실행할 수 있음으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
(c) 초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 구성
이 목적을 달성하기 위해서, 본 발명의 휴대 단말에서는 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하도록 하는 구성을 채용하여, 비교 대상이 되는 복수의 초상화를 결정하는 수단과, 이 결정된 초상화가 갖는 얼굴 파트의 위치 정보에 따라서, 비교 대상이 되는 초상화 사이의 유사도를 산출하는 수단과, 이 산출된 유사도를 출력하거나, 그 유사도에 의해 특정되는 초상화 본인 사이의 관계를 획득하여 그것을 출력하는 수단을 구비하도록 구성한다.
이와 같이 구성되는 본 발명의 휴대 단말에서는 비교 대상이 되는 복수의 초상화를 결정하면, 이 결정된 초상화가 갖는 얼굴 파트의 위치 정보에 따라서, 비교 대상이 되는 초상화 사이의 유사도를 산출하여, 이 산출된 유사도에 따라서, 예컨대 부모 자식 레벨로 닮았다든지, 형제 레벨로 닮았다든지 하는 초상화 본인 사이의 관계를 획득하여 그것을 출력하도록 처리한다.
이 기능을 가짐으로써, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 예컨대 A 씨와 B 씨 사이의 관계를 추측할 수 있도록 실행할 수 있음으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
이하, 휴대 전화에 적용한 실시예에 따라서 본 발명을 상세히 설명한다.
도 1에, 본 발명의 휴대 전화(1)의 장치 구성을 도시한다.
이 도 1에 도시된 바와 같이, 본 발명의 휴대 전화(1)는 장치 구성적으로는 카메라(10)와, 디스플레이(11)와, 마이크(12)와, 스피커(13)와, 하드웨어 및 소프트웨어로 구성되는 화상 처리 기구(14)와, 하드웨어 및 소프트웨어로 구성되는 음성 처리 기구(15)와, 하드웨어 및 소프트웨어로 구성되는 상호 통신 기구(16)와, 안테나(17)를 구비한다.
이 화상 처리 기구(14)는 도 1중에 도시된 바와 같이, 초상화 작성 기능을 갖고 있다. 이 초상화 작성 기능은 카메라(10)가 촬영한 얼굴 화상을 입력으로 하고, 예컨대 그 얼굴 화상을 2치화하여 종축과 횡축으로 사영(射影)하여, 그 사영 화상 및 움직임으로부터, ① 얼굴 전체의 위치 정보(어떤 위치에 어떠한 크기를 갖고 얼굴의 윤곽이 존재하고 있는지를 나타내는 위치 정보)와, ② 얼굴 파트(눈, 코, 입, 머리카락 등)의 위치 정보(어떤 위치에 어떠한 크기를 갖고 그 얼굴 파트가 존재하고 있는지를 나타내는 위치 정보)와, ③ 얼굴 전체의 색과, ④ 머리카락의 색을 추출함으로써, 도 2에 도시된 바와 같이, 얼굴 파트의 위치가 특정되어 있는 초상화(얼굴 전체의 색이나 머리카락의 색은 하나의 색으로 통일되어 있음)를 작성하도록 처리한다.
여기서, 이 때 작성되는 초상화는 필요에 따라서 규정 크기로 정규화되게 된다. 또한, 이러한 사영 화상을 이용할 것이 아니라, 다른 알고리즘에 따라서, 얼굴 파트의 위치가 특정되어 있는 초상화를 작성하도록 하더라도 좋다.
이와 같이 하여, 본 발명의 휴대 전화(1)에서는 카메라(10)에 의해 촬영되는 얼굴 화상을 이용하여 사용자간의 커뮤니케이션을 실현하는 것이 아니고, 그 얼굴 화상으로부터 작성되는 초상화를 이용하여 사용자간의 커뮤니케이션을 실현하기 위해 처리하는 것이다.
이제부터, 얼굴 화상을 이용하여 사용자간의 커뮤니케이션의 실현을 도모하는 경우에 비해, 매우 적은 하드웨어량으로, 또한 매우 고속으로 사용자간의 커뮤니케이션 실현을 도모할 수 있게 된다.
(a) 초상화의 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 일실시예
도 3에, 초상화의 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 일실시예를 도시한다.
도 3중에, 20은 송신측 휴대 전화이고, 30은 수신측 휴대 전화이며, 40은 메일 서버이다.
이 실시예에 따르는 경우, 송신측 휴대 전화(20)는 카메라(10)가 촬영하는 얼굴 화상으로부터 전술한 알고리즘에 따라서 초상화(속성 정보도 포함함)를 작성하는 초상화 작성부(21)와, 초상화 작성부(21)가 작성한 초상화의 정보를 메일 서버(40)를 통해 수신측 휴대 전화(30)에 다운로드하는 초상화 송신부(22)와, 수신측 휴대 전화(30)에 대하여 발호하는 발호부(23)를 구비한다.
한편, 이 실시예에 따르는 경우, 수신측 휴대 전화(30)는 메일 서버(40)로부터 다운로드되는 초상화의 정보를 수신하는 초상화 수신부(31)와, 다운로드된 초상화의 정보를 보존하는 초상화 보존부(32)와, 초상화의 표정을 바꾸기 위해서 준비되는 초상화의 얼굴 파트를 보존하는 얼굴 파트 보존부(33)와, 송신측 휴대 전화(20)로부터의 착신 이력을 보존하는 착신 이력 보존부(34)와, 어떠한 표정의 초상화로 변경할 지에 관해서 지시하는 표정 지정 정보를 보존하는 표정 지정 정보 보존부(35)와, 초상화 보존부(32)가 보존하는 초상화를 변경하는 초상화 변경부(36)와, 초상화 변경부(36)가 변경한 초상화를 디스플레이(11)에 출력하는 초상화 출력부(37)와, 송신측 휴대 전화(20)로부터의 발호를 착신하는 착호부(38)를 구비한다.
여기서, 본 발명을 실현하기 위해 준비되는 송신측 휴대 전화(20) 및 수신측 휴대 전화(30)가 갖는 기능은, 구체적으로 컴퓨터 프로그램을 실현할 수 있는 것으로, 이 컴퓨터 프로그램은 반도체 메모리 등의 기록 매체에 기록하여 제공할 수 있다.
이 초상화 보존부(32)는 도 4에 도시된 바와 같이, 다운로드원이 되는 송신측 휴대 전화(20)의 전화 번호와 대응시키면서, 다운로드된 초상화(바람직하게는 규정 크기로 정규화되어 있음)와, 이 초상화의 속성 정보(얼굴 전체의 위치나 얼굴 파트의 위치나 얼굴 전체의 색이나 머리카락의 색)를 보존한다고 하는 구성을 채용한다.
또한, 얼굴 파트 보존부(33)는 도 5에 도시된 바와 같이, 「약간 화난 표정」이라든가, 「많이 화난 표정」이라든가, 「놀랐을 때의 표정」과 같은 것에 관해서 기술하는 표정 지정 정보와 대응시켜, 그 표정 지정 정보가 기술하는 표정을 실현하기 위한 얼굴 파트(단, 얼굴 전체에 대해서는 보존하지 않음)를 보존한다고 하는 구성을 채용한다.
즉, 화난 표정인 경우에는 눈이 올라가는 동시에, 입이 ㅅ자로 변형되기 때문에, 「화남」에 대해서 기술하는 표정 지정 정보에 대응지어, 표준 표정일 때보다도 올라간 눈 파트를 보존하는 동시에, 표준 표정일 때보다도 ㅅ자로 변형된 입 파트를 보존한다고 하는 구성을 채용하는 것이다.
여기서, 얼굴 파트 보존부(33)에 보존되는 얼굴 파트에 관하여는 정규화된 초상화의 크기에 맞춘 크기를 갖고 있다. 그리고, 메일 서버(40)로부터 다운로드되는 초상화에 공통적인 것으로서 이용하게 되기 때문에, 메일 서버(40) 등을 통해 미리 다운로드해 둔다고 하는 구성을 채용하고 있다.
착신 이력 보존부(34)는 도 6에 도시된 바와 같이, 발호원이 되는 송신측 휴대 전화(20)의 전화 번호와 대응시키면서, 발호의 착신 시각과, 그 때 부재였던가, 그렇지 않으면 응답한 것인가에 대해 나타내는 정보로 이루어지는 착신 이력 정보를 보존한다고 하는 구성을 채용한다.
표정 지정 정보 보존부(35)는 도 7에 도시된 바와 같이, 착호시에 부재였던 횟수와 대응시키면서, 그것에 대응지어지는 표정 지정 정보를 보존한다고 하는 구성을 채용함으로써, 착호시에 부재 횟수에 대응지어, 그 때에 출력하는 초상화의 표정이 어떠한 것인가와 같은 것에 대해 나타내는 정보를 보존한다고 하는 구성을 채용한다.
도 8 및 도 9에, 본 발명을 실현하기 위해 수신측 휴대 전화(30)가 실행하는 처리 흐름의 일예를 도시한다.
다음에, 이 처리 흐름에 따라서, 도 3과 같이 구성되는 실시예의 처리에 관해서 설명한다.
수신측 휴대 전화(30)는 메일 서버(40)를 통해 송신측 휴대 전화(20)로부터, 그 송신측 휴대 전화(20)를 소유하는 사용자의 초상화의 다운로드 요구가 발행되면, 도 8의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 메일 서버(40)로부터, 다운로드 대상의 초상화와, 이 초상화의 속성 정보(얼굴 전체의 위치나 얼굴 파트의 위치나 얼굴 전체의 색이나 머리카락의 색)를 취득한다.
이어서, 단계 2에서, 메일 서버(40)로부터, 이 취득된 초상화의 정보의 다운로드원이 되는 송신측 휴대 전화(20)의 전화 번호를 취득하고, 이어지는 단계 3에서, 이 취득된 전화 번호와 대응시키면서, 이 취득된 초상화 정보를 초상화 보존부(32)에 등록한다.
이와 같이 하여, 수신측 휴대 전화(30)는 메일 서버(40)를 통해 송신측 휴대 전화(20)로부터, 이 송신측 휴대 전화(20)를 소유하는 사용자의 초상화의 다운로드 요구가 발행되면, 초상화 보존부(32)에 대하여, 다운로드원이 되는 송신측 휴대 전화(20)의 전화 번호와 대응시키면서, 다운로드되는 초상화와, 이 초상화의 속성 정보를 등록하도록 처리하는 것이다.
한편, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터의 발호를 착신하면, 도 9의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 발호원이 되는 송신측 휴대 전화(20)의 전화 번호를 취득한다.
계속해서, 단계 2에서, 이 취득된 전화 번호를 키로 하여 초상화 보존부(32)를 참조함으로써, 이 취득된 전화 번호가 지시하는 초상화와, 이 초상화의 속성 정보를 취득한다. 즉, 발호원이 되는 송신측 휴대 전화(20)를 소유하는 사용자의 초상화 정보를 취득하는 것이다.
계속해서, 단계 3에서, 취득된 전화 번호를 키로 하여 착신 이력 보존부(34)를 참조함으로써, 이 취득된 전화 번호가 지시하는 착신 이력을 취득하고, 이에 따라서, 예컨대 2시간과 같은 규정 시간 내에 있어서의 부재 횟수가 몇 번이었는지를 취득한다. 즉, 전화를 걸었는 데 부재였던 횟수를 취득하는 것이다.
이어서, 단계 4에서, 이 취득된 부재 횟수를 키로 하여 표정 지정 정보 보존부(35)를 참조함으로써, 이 취득된 부재 횟수가 지시하는 표정 지정 정보를 취득한다.
표정 지정 정보 보존부(35)에는, 예컨대 부재 횟수가 1 번일 때에는 「약간 웃는 얼굴 표정」, 부재 횟수가 2 번∼5 번일 때에는 「약간 화난 표정」, 부재 횟수가 6 번 이상일 때에는 「많이 화난 표정」이라고 하는 바와 같이, 부재 횟수와 그에 대응되는 표정 지정 정보와의 대응 관계가 보존되어 있기 때문에, 그 대응 관계를 참조함으로써, 취득된 부재 횟수가 지시하는 표정 지정 정보를 취득하는 것이다.
계속해서, 단계 5에서, 이 취득된 표정 지정 정보를 키로 하여 얼굴 파트 보존부(33)를 참조함으로써, 이 취득된 표정 지정 정보가 지시하는 얼굴 파트를 취득한다.
얼굴 파트 보존부(33)에는 「약간 웃는 얼굴 표정」을 실현하기 위한 얼굴 파트, 「약간 화난 표정」을 실현하기 위한 얼굴 파트, 「많이 화난 표정」을 실현하기 위한 얼굴 파트라고 하는 바와 같이, 표정 지정 정보에 대응시켜, 그 표정 지정 정보가 기술하는 표정을 실현하기 위한 얼굴 파트가 보존되어 있기 때문에, 그 대응 관계를 참조함으로써, 취득된 표정 지정 정보가 기술하는 표정을 실현하기 위한 얼굴 파트를 취득하는 것이다.
계속해서, 단계 6에서, 단계 2에서 취득된 초상화가 갖는 얼굴 파트를 이 취득된 얼굴 파트와 교환함으로써, 디스플레이(11)에 출력하는 초상화를 작성한다.
즉, 단계 2에서 취득된 초상화가 갖는 얼굴 파트의 위치에 대해서는 초상화 보존부(32)로부터 취득할 수 있기 때문에, 도 10에 도시된 바와 같이, 그 위치에 취득된 얼굴 파트를 붙임으로써, 디스플레이(11)에 출력하는 초상화를 작성하는 것이다.
계속해서, 단계 7에서, 이 작성된 초상화를 디스플레이(11)에 출력하고 처리를 종료한다.
이와 같이 하여, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터의 발호를 착신하면, 지금까지 부재였던 횟수에 따라서, 발호원인 사용자의 초상화를 변경하면서 디스플레이(11)에 출력하도록 처리하는 것이다.
이 초상화의 출력을 수신하여, 수신측 휴대 전화(30)의 사용자는 발호원인 사용자의 감정을 알 수 있게 되며, 이에 따라 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
도 11에, 초상화의 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 다른 실시예를 도시한다.
도 3에 나타내는 실시예에서는 착호시에, 수신측 휴대 전화(30)가 미리 취득해 놓은 발호원 사용자의 초상화를 그 때까지의 부재 횟수에 따라서 변경하여 출력한다고 하는 구성을 채용했지만, 이 도 11에 나타내는 실시예에서는 송신측 휴대 전화(20)로부터 수신측 휴대 전화(30)로 송신되는 메일에 첨부되는 초상화를, 수신측 휴대 전화(30)가 송신측 휴대 전화(20)의 사용자가 지정하는 표정 지정 정보에 따라서 변경한다고 하는 구성을 채용하고 있다.
이 실시예에 따르는 경우, 송신측 휴대 전화(20)는 카메라(10)가 촬영하는 얼굴 화상으로부터 전술한 알고리즘에 따라서 초상화를 작성하는 초상화 작성부(21)와, 초상화 작성부(21)가 작성한 초상화 정보를 보존하는 초상화 보존부(24)와, 초상화 보존부(24)가 보존하는 초상화를 첨부하면서 메일을 작성하는 메일 작성부(25)와, 메일 작성부(25)가 작성한 메일을 메일 서버(40)를 통해 수신측 휴대 전화(30)에 송신하는 메일 송신부(26)와, 사용자와 대화함으로써 전술한 표정 지정 정보를 취득하는 표정 지정 정보 취득부(27)와, 표정 지정 정보 취득부(27)가 취득한 표정 지정 정보를 착신 신호에 매립하면서, 수신측 휴대 전화(30)에 대하여 메일 착신을 발호하는 발호부(23)를 구비한다.
한편, 이 실시예에 따르는 경우, 수신측 휴대 전화(30)는 메일 서버(40)를 통하여, 송신되어 오는 메일을 수신하는 메일 수신부(39)와, 초상화의 표정을 바꾸기 위해서 준비되는 초상화의 얼굴 파트를 보존하는 얼굴 파트 보존부(33)와, 메일 수신부(39)가 수신한 메일에 첨부되는 초상화를 변경하는 초상화 변경부(36)와, 초상화 변경부(36)가 변경한 초상화를 디스플레이(11)에 출력하는 초상화 출력부(37)와, 송신측 휴대 전화(20)로부터의 메일 착신을 알리는 발호를 착신하는 동시에, 그 착신 신호에 매립된 표정 지정 정보를 추출하여 초상화 변경부(36)에 통지하는 착호부(38)를 구비한다.
여기서, 본 발명을 실현하기 위해 준비되는 송신측 휴대 전화(20) 및 수신측 휴대 전화(30)가 갖는 기능은 구체적으로 컴퓨터 프로그램을 실현할 수 있는 것으 로, 이 컴퓨터 프로그램은 반도체 메모리 등의 기록 매체에 기록하여 제공할 수 있다.
도 12에, 본 발명을 실현하기 위해 송신측 휴대 전화(20)가 실행하는 처리 흐름의 일예를 도시하고, 도 13에, 본 발명을 실현하기 위해 수신측 휴대 전화(30)가 실행하는 처리 흐름의 일예를 도시한다.
다음에, 이 처리 흐름에 따라서, 도 11과 같이 구성되는 실시예의 처리에 관해서 설명한다.
송신측 휴대 전화(20)는 사용자로부터 메일의 송신 요구가 발행되면, 도 12의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 초상화 보존부(24)로부터 그 사용자의 초상화를 판독하여, 그것을 첨부하는 형태로 메일을 작성한다.
이어서, 단계 2에서, 사용자와 대화함으로써, 메일에 첨부하는 초상화에 대한 표정 지정 정보(상기한 바와 같이, 어떠한 표정의 초상화로 변경할 것인가에 관해서 기술하게 됨)를 취득한다.
계속해서, 단계 3에서, 작성한 메일을 그것에 첨부하는 초상화의 속성 정보(얼굴 전체의 위치나 얼굴 파트의 위치나 얼굴 전체의 색이나 머리카락의 색)와 함께, 메일 서버(40)에 송신한다. 예컨대, 초상화의 속성 정보를 메일의 헤더에 매립하는 등에 의해, 첨부하는 초상화의 속성 정보를 메일과 함께 메일 서버(40)에 송신하는 것이다.
이어서, 단계 4에서, 메일 송신처가 되는 수신측 휴대 전화(30)에 대하여, 메일의 착신을 통지하는 동시에, 이 때 취득된 표정 지정 정보를 착신 신호의 헤더에 매립하는 등에 의해 메일 송신처가 되는 수신측 휴대 전화(30)에 통지한다.
이와 같이 하여, 송신측 휴대 전화(20)는 사용자로부터 메일의 송신 요구가 발행되면, 그 사용자의 초상화를 첨부하는 형태로 메일을 작성하여, 초상화의 속성 정보와 함께 메일 서버(40)에 송신하는 동시에, 대화 처리에 따라서 표정 지정 정보를 취득하여, 그것을 착신 신호에 매립하는 등에 의해 메일 송신처가 되는 수신측 휴대 전화(30)에 통지하도록 처리하는 것이다.
한편, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터 메일의 송신을 알리는 발호를 착신하면, 도 13의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 착신 신호에 매립되어 있는 메일 송신원이 되는 송신측 휴대 전화(20)가 지정하는 표정 지정 정보를 취득한다.
이어서, 단계 2에서, 메일 서버(40)로부터, 착신된 메일(초상화가 첨부되어 있음)을 수신하고, 이어지는 단계 3에서, 취득된 표정 지정 정보를 키로 하여 얼굴 파트 보존부(33)를 참조함으로써, 이 취득된 표정 지정 정보가 지시하는 얼굴 파트를 취득한다.
계속해서, 단계 4에서, 수신된 메일에 첨부되는 초상화가 갖는 얼굴 파트를 이 취득된 얼굴 파트와 교환함으로써, 디스플레이(11)에 출력하는 초상화를 작성한다.
즉, 메일에 첨부되는 초상화가 갖는 얼굴 파트의 위치에 대해서는 메일의 헤더 등을 이용하여 통지되어 오기 때문에, 도 10에 도시된 바와 같이, 그 위치에, 취득된 얼굴 파트를 붙임으로써, 디스플레이(11)에 출력하는 초상화를 작성하는 것이다.
계속해서, 단계 5에서, 이 작성된 초상화를 디스플레이(11)에 출력하여 처리를 종료한다.
이와 같이 하여, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터 메일 착신의 발호를 착신하면, 송신측 휴대 전화(20)로부터 지정되는 표정 지정 정보에 따라서, 메일에 첨부되는 메일 송신원 사용자의 초상화를 변경하면서 디스플레이(11)에 출력하도록 처리하는 것이다.
이 초상화의 출력을 수신하여, 수신측 휴대 전화(30)의 사용자는 메일 송신원 사용자의 감정을 알 수 있게 되고, 이에 따라 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
여기서, 송신측 휴대 전화(20)는 취득된 표정 지정 정보를 착신 신호에 매립함으로써 수신측 휴대 전화(30)에 통지하는 것으로 설명했지만, 초상화의 속성 정보와 같이, 메일의 헤더 등에 매립함으로써 수신측 휴대 전화(30)에 통지하도록 하더라도 좋다.
도 14에, 초상화의 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 다른 실시예를 도시한다.
도 11에 도시되는 실시예에서는 수신측 휴대 전화(30) 측에서 송신측 휴대 전화(20)의 사용자의 초상화를 변경한다고 하는 구성을 채용했지만, 이 도 14에 도시되는 실시예에서는 송신측 휴대 전화(20) 측에서 송신측 휴대 전화(20)의 사용자의 초상화를 변경하여, 그것을 메일에 첨부하여 수신측 휴대 전화(30)에 송신한다고 하는 구성을 채용하고 있다.
이 실시예에 따르는 경우, 송신측 휴대 전화(20)는 카메라(10)가 촬영하는 얼굴 화상으로부터 전술한 알고리즘에 따라서 초상화를 작성하는 초상화 작성부(21)와, 초상화 작성부(21)가 작성한 초상화의 정보를 보존하는 초상화 보존부(24)와, 초상화의 표정을 바꾸기 위해서 준비되는 초상화의 얼굴 파트를 보존하는 얼굴 파트 보존부(28)와, 사용자와 대화함으로써 전술한 표정 지정 정보를 취득하는 표정 지정 정보 취득부(27)와, 초상화 작성부(21)에 보존되는 초상화를 변경하는 초상화 변경부(29)와, 초상화 변경부(29)가 변경한 초상화를 첨부하면서 메일을 작성하는 메일 작성부(25)와, 메일 작성부(25)가 작성한 메일을 메일 서버(40)를 통해 수신측 휴대 전화(30)에 송신하는 메일 송신부(26)와, 수신측 휴대 전화(30)에 대하여 메일 착신을 발호하는 발호부(23)를 구비한다.
한편, 이 실시예에 따르는 경우, 수신측 휴대 전화(30)는 메일 서버(40)를 통해 송신되어 오는 메일을 수신하는 메일 수신부(39)와, 메일 수신부(39)가 수신한 메일에 첨부되는 초상화를 디스플레이(11)에 출력하는 초상화 출력부(37)와, 송신측 휴대 전화(20)로부터의 메일 착신을 알리는 발호를 착신하는 착호부(38)를 구비한다.
여기서, 본 발명을 실현하기 위해 준비되는 송신측 휴대 전화(20) 및 수신측 휴대 전화(30)가 갖는 기능은, 구체적으로 컴퓨터 프로그램을 실현할 수 있는 것으로, 이 컴퓨터 프로그램은 반도체 메모리 등의 기록 매체에 기록하여 제공할 수 있다.
도 15에, 본 발명을 실현하기 위해 송신측 휴대 전화(20)가 실행하는 처리 흐름의 일예를 도시한다.
다음에, 이 처리 흐름에 따라서, 도 14와 같이 구성되는 실시예의 처리에 관해서 설명한다.
송신측 휴대 전화(20)는 사용자로부터 메일의 송신 요구가 발행되면, 도 15의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 초상화 보존부(24)로부터 그 사용자의 초상화를 판독한다.
계속해서, 단계 2에서, 사용자와 대화함으로써, 이 판독된 초상화에 대한 표정 지정 정보(상기한 바와 같이, 어떠한 표정의 초상화로 변경하는 것인가에 관해서 기술하게 됨)를 취득한다.
이어서, 단계 3에서, 이 취득된 표정 지정 정보를 키로 하여 얼굴 파트 보존부(28)를 참조함으로써, 이 취득된 표정 지정 정보가 지시하는 얼굴 파트를 취득한다. 계속해서, 단계 4에서, 판독된 초상화가 갖는 얼굴 파트를 이 취득된 얼굴 파트와 교환함으로써, 판독된 초상화를 변경한다.
계속해서, 단계 5에서, 이 변경된 초상화를 첨부하는 형태로 메일을 작성하고, 이어지는 단계 6에서, 작성된 메일을 메일 서버(40)에 송신한다. 이 때, 송신측 휴대 전화(20) 측에서 초상화를 변경하고 있기 때문에, 메일 서버(40)에 대해서는 초상화의 속성 정보에 관해서 송신할 필요는 없다.
이어서, 단계 7에서, 메일 송신처가 되는 수신측 휴대 전화(30)에 대하여, 메일의 착신을 통지하고 처리를 종료한다.
이 메일의 송신을 수신하여, 수신측 휴대 전화(30)는 메일 서버(40)로부터 착신된 메일(표정이 변경된 초상화가 첨부되어 있음)을 수신하여, 디스플레이(11)에 출력한다.
이 초상화의 출력을 수신하여, 수신측 휴대 전화(30)의 사용자는 메일 송신원 사용자의 감정을 알 수 있게 되고, 이에 따라 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
도 16에, 초상화 변경 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 다른 실시예를 도시한다.
도 3에 나타내는 실시예에서는 수신측 휴대 전화(30) 측에 얼굴 파트 보존부(33)를 구비함으로써, 수신측 휴대 전화(30) 측에서 송신측 휴대 전화(20) 사용자의 초상화를 변경한다고 하는 구성을 채용했지만, 이 도 16에 나타내는 실시예에서는 송신측 휴대 전화(20) 측에 얼굴 파트 보존부(28)를 구비하며, 이 얼굴 파트 보존부(28)로부터 판독된 얼굴 파트를 수신측 휴대 전화(30)에 송신함으로써, 수신측 휴대 전화(30) 측에서 송신측 휴대 전화(20) 사용자의 초상화를 변경한다고 하는 구성을 채용하고 있다.
이 실시예에 따르는 경우, 송신측 휴대 전화(20)는 초상화의 표정을 바꾸기 위해서 준비되는 초상화의 얼굴 파트를 보존하는 얼굴 파트 보존부(28)와, 사용자와 대화함으로써 전술한 표정 지정 정보를 취득하는 표정 지정 정보 취득부(27)와, 얼굴 파트 보존부(28)로부터 판독된 얼굴 파트를 첨부하면서 메일을 작성하는 메일 작성부(25)와, 메일 작성부(25)가 작성한 메일을 메일 서버(40)를 통해 수신측 휴대 전화(30)에 송신하는 메일 송신부(26)와, 수신측 휴대 전화(30)에 대하여 메일 착신을 발호하는 발호부(23)를 구비한다.
한편, 이 실시예에 따르는 경우, 수신측 휴대 전화(30)는 메일 서버(40)를 통해 송신되어 오는 메일을 수신하는 메일 수신부(39)와, 메일 서버(40)를 통해 송신측 휴대 전화(20)로부터 다운로드된 초상화의 정보를 보존하는 초상화 보존부(32)와, 초상화 보존부(32)가 보존하는 초상화를 변경하는 초상화 변경부(36)와, 초상화 변경부(36)가 변경한 초상화를 디스플레이(11)에 출력하는 초상화 출력부(37)와, 송신측 휴대 전화(20)로부터의 메일 착신을 알리는 발호를 착신하는 착호부(38)를 구비한다.
여기서, 본 발명을 실현하기 위해 준비되는 송신측 휴대 전화(20) 및 수신측 휴대 전화(30)가 갖는 기능은, 구체적으로 컴퓨터 프로그램을 실현할 수 있는 것으로, 이 컴퓨터 프로그램은 반도체 메모리 등의 기록 매체에 기록하여 제공할 수 있다.
도 17에, 본 발명을 실현하기 위해 송신측 휴대 전화(20)가 실행하는 처리 흐름의 일예를 도시하고, 도 18에, 본 발명을 실현하기 위해 수신측 휴대 전화(30)가 실행하는 처리 흐름의 일예를 도시한다.
다음에, 이 처리 흐름에 따라서, 도 16과 같이 구성되는 실시예의 처리에 관해서 설명한다.
송신측 휴대 전화(20)는 사용자로부터 메일의 송신 요구가 발행되면, 도 17의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 사용자와 대화함으로써, 수신측 휴대 전화(30) 측에서 출력하는 초상화에 대한 표정 지정 정보(상기한 바와 같이, 어떠한 표정의 초상화에 변경하는 것인가에 관해서 기술하게 됨)를 취득한다.
계속해서, 단계 2에서, 이 취득된 표정 지정 정보를 키로 하여 얼굴 파트 보존부(28)를 참조함으로써, 이 취득된 표정 지정 정보가 지시하는 얼굴 파트를 취득한다.
이어서, 단계 3에서, 이 취득된 얼굴 파트를 첨부하는 형태로 메일을 작성하고, 이어지는 단계 4에서, 이 작성된 메일을 메일 서버(40)에 송신한다.
계속해서, 단계 5에서, 메일 송신처가 되는 수신측 휴대 전화(30)에 대하여, 메일의 착신을 통지하고 처리를 종료한다.
이와 같이 하여, 송신측 휴대 전화(20)는 사용자로부터 메일의 송신 요구가 발행되면, 사용자로부터 표정 지정 정보를 취득하여, 그것이 지시하는 얼굴 파트를 취득하고, 이 취득된 얼굴 파트를 첨부하는 형태로 메일을 작성하며, 메일 서버(40)에 송신하도록 처리하는 것이다.
한편, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터 메일의 송신을 알리는 발호를 착호하면, 도 18의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 메일 서버(40)로부터, 착신된 메일(얼굴 파트가 첨부되어 있음)을 수신한다.
계속해서, 단계 2에서, 이 수신된 메일로부터 첨부되어 있는 얼굴 파트를 추출한다. 이어서, 단계 3에서, 메일 송신원이 되는 송신측 휴대 전화(20)의 전화 번 호를 취득한다.
이어서, 단계 4에서, 이 취득된 전화 번호를 키로 하여 초상화 보존부(32)를 참조함으로써, 이 취득된 전화 번호가 지시하는 초상화와, 이 초상화의 속성 정보를 취득한다. 즉, 메일 송신원이 되는 송신측 휴대 전화(20)를 소유하는 사용자의 초상화 정보를 취득하는 것이다.
계속해서, 단계 5에서, 이 취득된 초상화가 갖는 얼굴 파트를 메일로부터 추출한 얼굴 파트와 교환함으로써, 디스플레이(11)에 출력하는 초상화를 작성하고, 이어지는 단계 6에서, 이 작성된 초상화를 디스플레이(11)에 출력하여 처리를 종료한다.
이와 같이 하여, 수신측 휴대 전화(30)는 송신측 휴대 전화(20)로부터 메일 착신의 발호를 착신하면, 메일에 첨부되는 얼굴 파트를 이용하여, 메일 송신원 사용자의 초상화를 변경하면서 디스플레이(11)에 출력하도록 처리하는 것이다.
이 초상화의 출력을 수신하여, 수신측 휴대 전화(30)의 사용자는 메일 송신원 사용자의 감정을 알 수 있게 되며, 이에 따라 사용자간에 고도한 커뮤니케이션을 실현되게 된다.
(b) 초상화의 합성 기능·초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 일실시예
도 19에, 초상화의 합성 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 동시에, 초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현한다고 하는 구성을 채용하는 본 발명에 따른 휴대 전화(1)의 일실시예를 도시한다.
이 도 19에 도시된 바와 같이, 초상화의 합성 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 동시에, 초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현한다고 하는 구성을 채용하는 경우에는, 본 발명의 휴대 전화(1)는 카메라(10)와, 디스플레이(11)와, 카메라(10)가 촬영하는 얼굴 화상으로부터 전술한 알고리즘에 따라서 초상화(속성 정보를 포함함)를 작성하는 초상화 작성부(100)와, 초상화 작성부(100)가 작성한 초상화의 정보를 보존하는 초상화 보존부(101)와, 초상화 작성부(100)가 작성한 초상화나 초상화 보존부(101)에 보존되는 초상화를 디스플레이(11)에 출력하는 초상화 출력부(102)와, 두 개의 초상화를 합성하는 처리를 행하는 초상화 합성부(103)와, 두 개의 초상화로부터 이 초상화 본인 사이의 관계를 추측하는 처리를 행하는 관계 추측부(104)를 구비한다.
여기서, 본 발명을 실현하기 위해 준비되는 휴대 전화(1)가 갖는 기능은, 구체적으로 컴퓨터 프로그램을 실현할 수 있는 것으로, 이 컴퓨터 프로그램은 반도체 메모리 등의 기록 매체에 기록하여 제공할 수 있다.
도 20 및 도 21에, 초상화의 합성 기능을 이용하여 사용자간의 커뮤니케이션을 실현하기 위해서 초상화 합성부(103)가 실행하는 처리 흐름의 일예를 도시하고, 도 22에, 초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현하기 위해서 관계 추측부(104)가 실행하는 처리 흐름의 일예를 도시한다.
다음에, 이들 처리 흐름에 따라서, 초상화의 합성 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 처리와, 초상화를 이용한 관계 추측 기능을 이용하여 사용자간의 커뮤니케이션을 실현하는 처리에 관하여 설명한다.
처음에, 초상화 합성부(103)가 실행하는 처리에 관해서 설명한다.
초상화 합성부(103)는 사용자로부터 초상화의 합성 요구가 발행되면, 도 20 및 도 21의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 사용자와 대화함으로써, 합성 대상이 되는 두 개의 초상화를 선택한다. 즉, 초상화 작성부(100)가 작성한 초상화나 초상화 보존부(101)에 보존되는 초상화 중으로부터, 합성 대상이 되는 두 개의 초상화를 선택하는 것이다.
이어서, 단계 2에서, 사용자와 대화함으로써, 합성 방법의 종별을 선택한다.
합성 방법의 종별로서, ① 초상화 A로부터는 눈과 입을 이용하고, 초상화 B에서는 얼굴 전체와 그 밖의 얼굴 파트를 이용한다고 하는 형식으로 합성 방법을 지정하는 합성 방법 종별과, ② 얼굴 전체/얼굴 파트마다, 난수를 이용하여 어느 쪽 초상화의 것을 이용할 것인가를 지정함으로써, 합성 방법을 지정하게 하는 합성 방법 종별과, ③ 초상화 A에서는 얼굴 전체/각 얼굴 파트의 위치 정보를 이용하고, 초상화 B에서는 얼굴 전체/각 얼굴 파트의 형상을 이용한다고 하는 형식으로 합성 방법을 지정하게 하는 합성 방법 종별과, ④ 초상화 A의 얼굴 파트와 초상화 B의 얼굴 파트의 중간치를 이용한다고 하는 형식으로 합성 방법을 지정하게 하는 합성 방법 종별을 준비하고 있을 때에는, 사용자와 대화함으로써, 이들 중 어떤 합성 방법 종별을 이용할 것인가를 선택하는 것이다.
계속해서, 단계 3에서, 전술한 ①의 합성 방법 종별이 선택된 것인가의 여부를 판단하여, 전술한 ①의 합성 방법 종별이 선택되었다고 판단된 때에는, 단계 4로 진행하고, 사용자와 대화함으로써, 어느 쪽 초상화의 얼굴 전체를 이용할 것인가와, 각 얼굴 파트마다 어느 쪽 초상화의 얼굴 파트를 이용할 것인가를 결정한다.
그리고, 계속되는 단계 5에서, 이 결정된 합성 방법에 따라서, 합성 대상이 되는 두 개의 초상화를 합성하여, 초상화 출력부(102)를 통해 디스플레이(11)에 출력한다.
한편, 단계 3에서 전술한 ①의 합성 방법 종별이 선택되지 않았다고 판단된 때에는 단계 6으로 진행하고, 전술한 ②의 합성 방법 종별이 선택된 것인가의 여부를 판단하여, 전술한 ②의 합성 방법 종별이 선택되었다고 판단된 때에는, 단계 7로 진행하며, 얼굴 전체/각 얼굴 파트마다, 1이나 2를 난수적으로 발생시킴으로써, 어느 쪽 초상화의 것을 이용할 것인가를 결정한다.
그리고, 계속되는 단계 8에서, 이 결정된 합성 방법에 따라서, 합성 대상이 되는 두 개의 초상화를 합성하여, 초상화 출력부(102)를 통해 디스플레이(11)에 출력한다.
한편, 단계 6에서 전술한 ②의 합성 방법 종별이 선택되지 않았다고 판단된 때에는 단계 9로 진행하고, 전술한 ③의 합성 방법 종별이 선택된 것인가의 여부를 판단하여, 전술한 ③의 합성 방법 종별이 선택되었다고 판단된 때에는 단계 10으로 진행하고, 사용자와 대화함으로써, 얼굴 전체/각 얼굴 파트의 위치 정보로서 어느 쪽 초상화의 것을 이용하고, 얼굴 전체/각 얼굴 파트의 형상으로서 어느 쪽 초상화의 것을 이용할 것인가를 결정한다.
그리고, 계속되는 단계 11에서, 이 결정된 합성 방법에 따라서, 합성 대상이 되는 두 개의 초상화를 합성하여, 초상화 출력부(102)를 통해 디스플레이(11)에 출력한다.
한편, 단계 9에서 전술한 ③의 합성 방법 종별이 선택되지 않았다고 판단된 때, 즉 전술한 ④의 합성 방법 종별이 선택되었음을 판단할 때에는 단계 12로 진행하고, 얼굴 전체/각 얼굴 파트마다, 두 개의 형상이나 위치에 관해서 중간치를 산출함으로써, 합성하는 초상화에 첨부하는 얼굴 전체/각 얼굴 파트를 결정한다.
그리고, 계속되는 단계 13에서, 이 결정된 합성 방법에 따라서, 합성 대상이 되는 두 개의 초상화를 합성하여, 초상화 출력부(102)를 통해 디스플레이(11)에 출력한다.
이와 같이 하여, 초상화 합성부(103)는 사용자로부터 초상화의 합성 요구가 발행되면, 합성 대상이 되는 두 개의 초상화를 선택하여, 이 두 개의 초상화를 지정되는 합성 방법에 따라서 합성하여 디스플레이(11)에 출력하도록 처리하는 것이다.
이 기능을 가짐으로써, 본 발명의 휴대 전화(1)에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 예컨대 A 씨와 B 씨 사이에 태어나는 아이의 얼굴을 생성할 수 있음으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
여기서, 합성 대상이 되는 초상화로서 두 개 이상 선택하여, 같은 방식의 합성 처리를 행하는 것도 가능하다.
다음에, 관계 추측부(104)가 실행하는 처리에 관해서 설명한다.
관계 추측부(104)는 사용자로부터 두 사람 관계의 추측 요구가 발행되면, 도 22의 처리 흐름에 도시된 바와 같이, 우선 처음에, 단계 1에서, 사용자와 대화함으로써, 추측 대상이 되는 두 개의 초상화를 선택한다. 즉, 초상화 작성부(100)가 작성한 초상화나 초상화 보존부(101)에 보존되는 초상화 중으로부터, 추측 대상이 되는 두 개의 초상화를 선택하는 것이다.
계속해서, 단계 2에서, 초상화 작성부(100)나 초상화 보존부(101)로부터, 이 선택된 두 개의 초상화의 속성 정보(얼굴 전체의 위치나 얼굴 파트의 위치나 얼굴 전체의 색이나 머리카락의 색)를 취득한다.
이어서, 단계 3에서, 이 취득된 초상화의 속성 정보로부터, 각각의 초상화가 갖는 특징(어떠한 특징을 이용할 것인가에 관하여는 미리 설정되어 있음)의 값을 산출하고, 이 산출된 특징치의 차분치나 비율치로 정의되는 관계 추측용 파라미터값을 산출한다.
예컨대, 양 눈 사이의 거리라든가, 양 눈과 입으로 구성되는 3 각형의 크기라든가, 양 귀를 연결한 직선과 양 눈을 연결한 직선 사이의 거리라든가, 눈의 크기라든가, 눈의 크기와 귀의 크기의 비율치와 같은 특징치를 산출하고, 이 산출된 특징치의 차분치나 비율치로 정의되는 관계 추측용의 파라미터값을 산출하는 것이다.
계속해서, 단계 4에서, 이 산출된 파라미터값을 미리 준비된 유사도 산출식에 대입함으로써, 추측 대상으로서 선택된 두 개의 초상화 사이의 유사도를 산출한다.
이어서, 단계 5에서, 이 산출된 유사도에 대응시킬 수 있는 관계를 특정한다. 예컨대, 유사도가 이 범위에 들어 있을 때에는, 추측 대상으로서 선택된 두 개의 초상화의 본인은 부모 자식 레벨로 닮았다든지, 형제 레벨로 닮았다든지, 사촌 형제 레벨로 닮았다든지, 전혀 닮지 않았다와 같은 방식으로 정의되어 있기 때문에, 그것을 이용하여, 이 산출된 유사도에 대응시킬 수 있는 두 사람간의 관계를 특정하는 것이다.
이어서, 단계 6에서, 이 특정된 관계를 디스플레이(11)에 출력하고 처리를 종료한다.
이와 같이 하여, 관계 추측부(104)는 사용자로부터 두 사람 관계의 추측 요구가 발행되면, 추측 대상이 되는 두 개의 초상화를 선택하여, 각각의 초상화가 갖는 특징치를 산출하고, 이에 따라 관계 추측용 파라미터값을 산출하여 그것을 유사도 산출식에 대입함으로써, 선택된 초상화 본인 사이의 관계를 추정하여 디스플레이(11)에 출력하도록 처리하는 것이다.
이 기능을 가짐으로써, 본 발명의 휴대 전화(1)에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하여, 예컨대 A 씨와 B 씨 사이의 관계를 추측할 수 있기 때문에, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
여기서, 부모 자식 레벨로 닮았다든지와 같은 표현 형식으로 두사람의 관계를 출력하는 것이 아니라, 산출된 유사도 그 자체를 출력하도록 하더라도 좋다.
도시된 실시예에 따라서 본 발명을 설명했지만, 본 발명은 이것에 한정되는 것은 아니다. 예컨대, 실시예에서는 휴대 전화에 적용한 것을 구체예로 하여 본 발명을 설명했지만, 본 발명은 그 적용이 휴대 전화에 한정되는 것이 아니다.
(부기 1) 통신 기능을 갖는 동시에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말로서, 어떠한 표정의 초상화를 생성하는 것인가에 관해서 나타내는 표정 지정 정보를 취득하는 수단과, 상기 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 수단과, 처리 대상의 초상화가 갖는 얼굴 파트를 상기 취득된 초상화 얼굴 파트와 교환하는 수단을 포함하는 것을 특징으로 하는 휴대 단말.
(부기 2) 통신 기능을 갖는 동시에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말로서, 어떠한 표정의 초상화를 생성하는 것인가에 관해서 나타내는 표정 지정 정보를 취득하는 수단과, 상기 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 수단과, 상기 취득된 초상화 얼굴 파트를 초상화 출력처인 휴대 단말에 송신하는 수단을 포함하는 것을 특징으로 하는 휴대 단말.
(부기 3) 통신 기능을 갖는 동시에, 초상화로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말로서, 다른 휴대 단말로부터 송신되어 오는 초상화 얼굴 파트를 수신하는 수단과, 처리 대상의 초상화가 갖는 얼굴 파트를 상기 수신된 초상화 얼굴 파트와 교환하는 수단을 포함하는 것을 특징으로 하는 휴대 단말.
(부기 4) 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말로서, 합성 대상이 되는 복수의 초상화를 결정하는 수단과, 상기 결정된 합성 대상의 초상화의 합성 방법에 관해서 나타내는 합성 정보를 취득하는 수단과, 상기 취득된 합성 정보에 따라서 상기 결정된 합성 대상의 초상화를 합성하는 수단을 포함하는 것을 특징으로 하는 휴대 단말.
(부기 5) 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말로서, 비교 대상이 되는 복수의 초상화를 결정하는 수단과, 상기 결정된 초상화가 갖는 얼굴 파트의 위치 정보에 따라서, 비교 대상이 되는 초상화 사이의 유사도를 산출하는 수단과, 상기 산출한 유사도를 출력하거나, 그 유사도에 의해 특정되는 초상화 본인 사이의 관계를 획득하여 그것을 출력하는 수단을 포함하는 것을 특징으로 하는 휴대 단말.
(부기 6) 통신 기능을 갖는 동시에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말에서 이용되는 프로그램으로서, 어떠한 표정의 초상화를 생성하는 것인가에 관해서 나타내는 표정 지정 정보를 취득하는 처리와, 상기 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 처리와, 처리 대상의 초상화가 갖는 얼굴 파트를 상기 취득된 초상화 얼굴 파트와 교환하는 처리를 컴퓨터에 실행시키기 위한 휴대 단말 처리용 프로그램.
(부기 7) 통신 기능을 갖는 동시에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말에서 이용되는 프로그램으로서, 어떠한 표정의 초상화를 생성하는 것인가에 관해서 나타내는 표정 지정 정보를 취득하는 처리와, 상기 취득된 표정 지정 정보가 지시하는 초상화 얼굴 파트를 취득하는 처리와, 상기 취득된 초상화 얼굴 파트를 초상화 출력처인 휴대 단말에 송신하는 처리를 컴퓨터에 실행시키기 위한 휴대 단말 처리용 프로그램.
(부기 8) 통신 기능을 갖는 동시에, 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말에서 이용되는 프로그램으로서, 다른 휴대 단말로부터 송신되어 오는 초상화 얼굴 파트를 수신하는 처리와, 처리 대상의 초상화가 갖는 얼굴 파트를 상기 수신된 초상화 얼굴 파트와 교환하는 처리를 컴퓨터에 실행시키기 위한 휴대 단말 처리용 프로그램.
(부기 9) 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말에서 이용되는 프로그램으로서, 합성 대상이 되는 복수의 초상화를 결정하는 처리와, 상기 결정된 합성 대상의 초상화의 합성 방법에 관해서 나타내는 합성 정보를 취득하는 처리와, 상기 취득된 합성 정보에 따라서, 상기 결정된 합성 대상의 초상화를 합성하는 처리를 컴퓨터에 실행시키기 위한 휴대 단말 처리용 프로그램.
(부기 10) 얼굴 화상으로부터 생성된 얼굴 파트의 위치가 특정되어 있는 초상화를 취급하는 휴대 단말에서 이용되는 프로그램으로서, 비교 대상이 되는 복수의 초상화를 결정하는 처리와, 상기 결정된 초상화가 갖는 얼굴 파트의 위치 정보에 따라서, 비교 대상이 되는 초상화 사이의 유사도를 산출하는 처리와, 상기 산출한 유사도를 출력하거나, 그 유사도에 의해 특정되는 초상화 본인 사이의 관계를 획득하여 그것을 출력하는 처리를 컴퓨터에 실행시키기 위한 휴대 단말 처리용 프로그램.
이상 설명한 바와 같이, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 이 초상화의 표정을 변화시킬 수 있도록 하는 구성을 채용함으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
그리고, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 예컨대 A 씨와 B 씨 사이에 태어나는 아이의 얼굴을 생성할 수 있게 실행함으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.
그리고, 본 발명의 휴대 단말에 따르면, 얼굴 화상으로부터 생성된 데이터량이 삭감된 초상화를 이용하면서, 예컨대 A 씨와 B 씨 사이의 관계를 추측할 수 있도록 함으로써, 사용자간에 고도한 커뮤니케이션을 실현할 수 있게 된다.

Claims (10)

  1. 얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    어떠한 표정의 초상화를 생성할 지에 대해서 나타내는 표정 지정 정보를 취득하고, 취득한 표정 지정 정보를 보존하는 표정 지정 정보 보존 수단과,
    상기 초상화가 갖는 얼굴 파트와 교환된 얼굴 파트를 보존하는 얼굴 파트 보존 수단과,
    상기 표정 지정 정보 보존 수단에 보존된 표정 지정 정보가 나타내는 얼굴 파트를 상기 얼굴 파트 보존 수단으로부터 취득하는 얼굴 파트 취득 수단과,
    상기 얼굴 파트의 위치 정보에 기초하여 상기 초상화 보존 수단에 의해 보존된 초상화가 갖는 얼굴 파트를 상기 얼굴 파트 취득 수단에 의해 취득된 얼굴 파트와 교환하는 것에 의해 상기 초상화를 변경하는 초상화 변경 수단
    을 포함하는 전자기기.
  2. 제1항에 있어서, 상기 얼굴 파트 취득 수단에 의해 취득된 얼굴 파트를 초상화 출력처인 전자기기에 송신하는 송신 수단을 포함하는 것을 특징으로 하는 전자기기.
  3. 제1항 또는 제2항에 있어서, 다른 전자기기로부터 송신되어 오는 얼굴 파트를 수신하는 수신 수단과,
    초상화의 얼굴 파트를 상기 수신 수단에 의해 수신된 얼굴 파트와 교환하는 것에 의해 상기 초상화를 변경하는 얼굴 파트 교환 수단을 포함하는 것을 특징으로 하는 전자기기.
  4. 얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    상기 초상화 보존 수단에 보존된 초상화 중에서 복수의 초상화의 선택을 접수하고, 선택된 복수의 초상화를 합성 대상이 되는 복수의 초상화로서 결정하는 초상화 결정 수단과,
    상기 초상화 결정 수단에 의해 결정된 합성 대상의 초상화의 합성 방법을 나타내는 합성 정보의 선택을 접수하고, 선택된 합성 정보를 취득하는 합성 정보 취득 수단과,
    상기 합성 정보 취득 수단에 의해 취득된 합성 정보 및 상기 얼굴 파트의 위치 정보에 따라서, 상기 초상화 결정 수단에 의해 결정된 합성 대상의 초상화를 합성하는 초상화 합성 수단
    을 포함하는 것을 특징으로 하는 전자기기.
  5. 얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    상기 초상화 보존 수단에 보존된 초상화 중에서 복수의 초상화의 선택을 접수하고, 선택된 복수의 초상화를 비교 대상이 되는 복수의 초상화로서 결정하는 초상화 결정 수단과,
    상기 초상화 결정 수단에 의해 결정된 비교 대상이 되는 초상화 사이의 유사도를 상기 얼굴 파트의 위치 정보에 기초하여 산출하는 유사도 산출 수단과,
    상기 유사도 산출 수단에 의해 산출된 유사도 또는 상기 유사도에 의해 특정되는 초상화 본인과의 관계 중 어느 한쪽, 또는 상기 유사도 및 상기 초상화 본인과의 관계의 양쪽 모두를 출력하는 출력 수단
    을 포함하는 전자기기.
  6. 컴퓨터를,
    얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    어떠한 표정의 초상화를 생성할 지에 대해서 나타내는 표정 지정 정보를 취득하고, 취득한 표정 지정 정보를 보존하는 표정 지정 정보 보존 수단과,
    상기 초상화가 갖는 얼굴 파트와 교환된 얼굴 파트를 보존하는 얼굴 파트 보존 수단과,
    상기 표정 지정 정보 보존 수단에 보존된 표정 지정 정보가 나타내는 얼굴 파트를 상기 얼굴 파트 보존 수단으로부터 취득하는 얼굴 파트 취득 수단과,
    상기 얼굴 파트의 위치 정보에 기초하여 상기 초상화 보존 수단에 의해 보존된 초상화가 갖는 얼굴 파트를 상기 얼굴 파트 취득 수단에 의해 취득된 얼굴 파트와 교환하는 것에 의해 상기 초상화를 변경하는 초상화 변경 수단
    으로서 기능시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  7. 제6항에 있어서, 컴퓨터를,
    상기 얼굴 파트 취득 수단에 의해 취득된 얼굴 파트를 초상화 출력처인 전자기기에 송신하는 송신 수단으로서 더 기능시키는 것을 특징으로 하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  8. 제6항 또는 제7항에 있어서, 컴퓨터를,
    다른 전자기기로부터 송신되어 오는 얼굴 파트를 수신하는 수신 수단과,
    초상화의 얼굴 파트를 상기 수신 수단에 의해 수신된 얼굴 파트와 교환하는 것에 의해 상기 초상화를 변경하는 얼굴 파트 교환 수단으로서 더 기능시키는 것을 특징으로 하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  9. 컴퓨터를,
    얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    상시 초상화 보존 수단에 보존된 초상화 중에서 복수의 초상화의 선택을 접수하고, 선택된 복수의 초상화를 합성 대상이 되는 복수의 초상화로서 결정하는 초상화 결정 수단과,
    상기 초상화 결정 수단에 의해 결정된 합성 대상의 초상화의 합성 방법을 나타내는 합성 정보의 선택을 접수하고, 선택된 합성 정보를 취득하는 합성 정보 취득 수단과,
    상기 합성 정보 취득 수단에 의해 취득된 합성 정보 및 상기 얼굴 파트의 위치 정보에 따라서 상기 초상화 결정 수단에 의해 결정된 합성 대상의 초상화를 합성하는 초상화 합성 수단으로서 기능시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
  10. 컴퓨터를,
    얼굴 파트의 위치가 특정되어 있는 초상화와 해당 얼굴 파트의 위치 정보를 보존하는 초상화 보존 수단과,
    상기 초상화 보존 수단에 보존된 초상화 중에서 복수의 초상화의 선택을 접수하고, 선택된 복수의 초상화를 비교 대상이 되는 복수의 초상화로서 결정하는 초상화 결정 수단과,
    상기 초상화 결정 수단에 의해 결정된 비교 대상이 되는 초상화 사이의 유사도를 상기 얼굴 파트의 위치 정보에 기초하여 산출하는 유사도 산출 수단과,
    상기 유사도 산출 수단에 의해 산출된 유사도 또는 상기 유사도에 의해 특정되는 초상화 본인과의 관계 중 어느 한쪽, 또는 상기 유사도 및 상기 초상화 본인과의 관계 양쪽 모두를 출력하는 출력 수단으로서 기능시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
KR1020030002393A 2002-01-17 2003-01-14 전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체 KR100910192B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002008193A JP3911527B2 (ja) 2002-01-17 2002-01-17 携帯端末、携帯端末処理用プログラム及び携帯端末システム
JPJP-P-2002-00008193 2002-01-17

Publications (2)

Publication Number Publication Date
KR20030063137A KR20030063137A (ko) 2003-07-28
KR100910192B1 true KR100910192B1 (ko) 2009-07-30

Family

ID=19191394

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030002393A KR100910192B1 (ko) 2002-01-17 2003-01-14 전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체

Country Status (6)

Country Link
US (2) US7639266B2 (ko)
EP (3) EP2562689A1 (ko)
JP (1) JP3911527B2 (ko)
KR (1) KR100910192B1 (ko)
CN (1) CN1198478C (ko)
ES (1) ES2406984T3 (ko)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2382289B (en) 2001-09-28 2005-07-06 Canon Kk Method and apparatus for generating models of individuals
US7356453B2 (en) 2001-11-14 2008-04-08 Columbia Insurance Company Computerized pattern texturing
JP3911527B2 (ja) * 2002-01-17 2007-05-09 富士通株式会社 携帯端末、携帯端末処理用プログラム及び携帯端末システム
GB2389289B (en) * 2002-04-30 2005-09-14 Canon Kk Method and apparatus for generating models of individuals
US7085590B2 (en) * 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
KR100594005B1 (ko) * 2004-04-14 2006-06-30 삼성전자주식회사 이동통신 단말기용 육성 시뮬레이션 방법 및 장치
US8880613B2 (en) * 2004-05-27 2014-11-04 Randy L. Canis System and method for managing mail messages
US7308253B2 (en) * 2004-06-30 2007-12-11 Avaya Technology Corp. Log-based ringtone service
US7343150B2 (en) * 2004-06-30 2008-03-11 Avaya Technology Corp. Log-based ringtones
JP4871552B2 (ja) * 2004-09-10 2012-02-08 パナソニック株式会社 情報処理端末
JP4604629B2 (ja) * 2004-09-24 2011-01-05 ソニー株式会社 通信装置および方法、並びにプログラム
US20060098027A1 (en) * 2004-11-09 2006-05-11 Rice Myra L Method and apparatus for providing call-related personal images responsive to supplied mood data
KR100678209B1 (ko) * 2005-07-08 2007-02-02 삼성전자주식회사 휴대단말기의 이미지 제어방법
JP2007174069A (ja) * 2005-12-20 2007-07-05 Canon Inc 画像通信装置、画像通信方法、プログラム及び記憶媒体
JP2007265092A (ja) * 2006-03-29 2007-10-11 Five D:Kk 携帯電話メールにおけるマイキャラクター使用装置及び使用方法
JP4753801B2 (ja) * 2006-06-07 2011-08-24 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び携帯端末装置
CN100527170C (zh) * 2006-09-20 2009-08-12 清华大学 一种复杂表情仿真系统及其实现方法
KR101364044B1 (ko) * 2007-04-13 2014-02-17 삼성전자주식회사 이동통신 단말기 및 그의 호에 따른 영상 표시 방법
US20090282367A1 (en) * 2008-05-06 2009-11-12 Randy Canis Method and system for electronic communication management
JP2010157119A (ja) * 2008-12-26 2010-07-15 Fujitsu Ltd 監視装置、監視方法、及び監視プログラム
WO2010090259A1 (ja) * 2009-02-05 2010-08-12 Sairyo Kazuo 似顔絵イラスト作成システム、キャラクタ作成システム及び作成似顔絵イラスト表示システム
JP2012198653A (ja) * 2011-03-18 2012-10-18 J-Top's Co Ltd 似顔絵作成システム
US9437011B2 (en) * 2012-06-11 2016-09-06 Samsung Electronics Co., Ltd. Method and apparatus for estimating a pose of a head for a person
US10063596B2 (en) * 2012-10-10 2018-08-28 Sharp Laboratories Of America, Inc. Devices for managing data associated with an audio communication
KR20140050365A (ko) * 2012-10-19 2014-04-29 삼성전자주식회사 전자 장치에서 공감 정보를 제공하기 위한 장치 및 방법
JP6269469B2 (ja) * 2014-12-22 2018-01-31 カシオ計算機株式会社 画像生成装置、画像生成方法及びプログラム
CN107613102B (zh) * 2017-08-30 2019-05-17 维沃移动通信有限公司 一种会话信息输入方法及移动终端
US10915606B2 (en) 2018-07-17 2021-02-09 Grupiks Llc Audiovisual media composition system and method
CN113518211A (zh) * 2020-04-10 2021-10-19 中强光电股份有限公司 投影系统以及投影操作方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH088816A (ja) * 1994-06-21 1996-01-12 Casio Comput Co Ltd 通信システム並びに該システムを利用した送信装置、受信装置、送受信装置
JP2001306467A (ja) 2000-04-19 2001-11-02 Hudson Soft Co Ltd 情報伝達方法

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3206166B2 (ja) * 1992-12-25 2001-09-04 カシオ計算機株式会社 画像表示制御装置および画像表示制御方法
US5638502A (en) * 1992-12-25 1997-06-10 Casio Computer Co., Ltd. Device for creating a new object image relating to plural object images
US5517610A (en) * 1993-06-01 1996-05-14 Brother Kogyo Kabushiki Kaisha Portrait drawing apparatus having facial expression designating function
US5572656A (en) * 1993-06-01 1996-11-05 Brother Kogyo Kabushiki Kaisha Portrait drawing apparatus having image data input function
US5835616A (en) * 1994-02-18 1998-11-10 University Of Central Florida Face detection using templates
US5611037A (en) * 1994-03-22 1997-03-11 Casio Computer Co., Ltd. Method and apparatus for generating image
US5805981A (en) * 1994-06-06 1998-09-08 Casio Computer Co., Ltd. Communication terminal and communication system with image display and image storage section
JP3799633B2 (ja) * 1995-06-16 2006-07-19 セイコーエプソン株式会社 顔画像処理方法および顔画像処理装置
JPH09135447A (ja) * 1995-11-07 1997-05-20 Tsushin Hoso Kiko 知的符号化／復号方法、特徴点表示方法およびインタラクティブ知的符号化支援装置
US5774591A (en) * 1995-12-15 1998-06-30 Xerox Corporation Apparatus and method for recognizing facial expressions and facial gestures in a sequence of images
US5793365A (en) * 1996-01-02 1998-08-11 Sun Microsystems, Inc. System and method providing a computer user interface enabling access to distributed workgroup members
JP2918499B2 (ja) * 1996-09-17 1999-07-12 株式会社エイ・ティ・アール人間情報通信研究所 顔画像情報変換方法および顔画像情報変換装置
US6345109B1 (en) 1996-12-05 2002-02-05 Matsushita Electric Industrial Co., Ltd. Face recognition-matching system effective to images obtained in different imaging conditions
US6661906B1 (en) * 1996-12-19 2003-12-09 Omron Corporation Image creating apparatus
US6731302B1 (en) * 1998-04-29 2004-05-04 Iq Biometrix, Inc. Method and apparatus for creating facial images
KR100812903B1 (ko) * 1998-05-19 2008-03-11 가부시키가이샤 소니 컴퓨터 엔터테인먼트 화상 처리 장치와 방법 및 프로그램 기록 매체
EP0989750A3 (de) 1998-09-24 2003-10-29 Siemens Aktiengesellschaft Videoanrufbeantworter und Betriebsverfahren für einen Videoanrufbeantworter
JP3062080U (ja) 1999-02-24 1999-09-28 嘉朗 秋山 画面付き電話装置
US7039221B1 (en) * 1999-04-09 2006-05-02 Tumey David M Facial image verification utilizing smart-card with integrated video camera
US6791583B2 (en) * 2000-03-09 2004-09-14 Sun Microsystems, Inc. System and method for providing spatially distributed device interaction
GB2362534B (en) 2000-05-19 2002-12-31 Motorola Israel Ltd Method and system for communicating between computers
US6943794B2 (en) * 2000-06-13 2005-09-13 Minolta Co., Ltd. Communication system and communication method using animation and server as well as terminal device used therefor
US6950104B1 (en) * 2000-08-30 2005-09-27 Microsoft Corporation Methods and systems for animating facial features, and methods and systems for expression transformation
JP4310916B2 (ja) * 2000-11-08 2009-08-12 コニカミノルタホールディングス株式会社 映像表示装置
JP2002175538A (ja) * 2000-12-08 2002-06-21 Mitsubishi Electric Corp 似顔絵生成装置及び似顔絵生成方法及び似顔絵生成プログラムを記録した記録媒体及び通信用端末及び通信用端末による通信方法
US7224851B2 (en) * 2001-12-04 2007-05-29 Fujifilm Corporation Method and apparatus for registering modification pattern of transmission image and method and apparatus for reproducing the same
DE60224776T2 (de) * 2001-12-20 2009-01-22 Matsushita Electric Industrial Co., Ltd., Kadoma-shi Virtuelles Bildtelefon
JP3911527B2 (ja) * 2002-01-17 2007-05-09 富士通株式会社 携帯端末、携帯端末処理用プログラム及び携帯端末システム
US20040085259A1 (en) * 2002-11-04 2004-05-06 Mark Tarlton Avatar control using a communication device
US7154510B2 (en) * 2002-11-14 2006-12-26 Eastman Kodak Company System and method for modifying a portrait image in response to a stimulus

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH088816A (ja) * 1994-06-21 1996-01-12 Casio Comput Co Ltd 通信システム並びに該システムを利用した送信装置、受信装置、送受信装置
JP2001306467A (ja) 2000-04-19 2001-11-02 Hudson Soft Co Ltd 情報伝達方法

Also Published As

Publication number Publication date
EP1330124B1 (en) 2013-05-01
EP1330124A2 (en) 2003-07-23
EP2562721A1 (en) 2013-02-27
EP1330124A3 (en) 2003-11-05
JP3911527B2 (ja) 2007-05-09
US20040233221A1 (en) 2004-11-25
EP2562689A1 (en) 2013-02-27
US7639266B2 (en) 2009-12-29
CN1433240A (zh) 2003-07-30
CN1198478C (zh) 2005-04-20
ES2406984T3 (es) 2013-06-11
KR20030063137A (ko) 2003-07-28
US20030146921A1 (en) 2003-08-07
JP2003209513A (ja) 2003-07-25
US7496215B2 (en) 2009-02-24

Similar Documents

Publication Publication Date Title
KR100910192B1 (ko) 전자기기 및 전자기기 처리용 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체
EP2127341B1 (en) A communication network and devices for text to speech and text to facial animation conversion
JP4597510B2 (ja) メッセージ表示方法および装置
JP4241484B2 (ja) 携帯端末装置、着信応答メッセージ送信方法およびサーバ装置
EP1473937A1 (en) Communication apparatus
EP1480425A1 (en) Portable terminal and program for generating an avatar based on voice analysis
KR100681900B1 (ko) 화상 통화를 위한 감정표현 애니메이션 서비스 시스템 및방법과 이를 위한 이동 통신 단말
JP2006350986A (ja) 顔写真付きメールを送受信できる携帯電話機
JP2004201191A (ja) 画像処理送信システム、携帯電話、画像処理送信方法、および、画像処理送信プログラム
JP2007280074A (ja) 携帯端末および制御方法
US20070036128A1 (en) Communication terminal and communication method
JP2002101207A (ja) 通信端末、その情報通信方法および情報通信システム
JP2002171497A (ja) 画像合成システムおよび電話装置
JP2005293335A (ja) 携帯端末装置
JP4074449B2 (ja) 通信装置
JP2004015158A (ja) 携帯電話通信システム
JP2002232691A (ja) 画像印刷システム
JP2002152332A (ja) 通話方法および通話装置ならびに通話システム
JP2004328069A (ja) テレビ電話端末および画像生成方法
KR20060012728A (ko) 휴대 전화용 데이터 오브젝트의 연동 방법 및 장치
JP2004040615A (ja) 通信端末及び画像送信方法
JP2004048359A (ja) 電子メール処理サーバ
KR20200059544A (ko) 단말 장치 및 이를 이용한 메시지 표시 방법
JPH0511620U (ja) 写真付電報
GB2480173A (en) A data structure for representing an animated model of a head/face wherein hair overlies a flat peripheral region of a partial 3D map

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120629

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20130705

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee