KR100600537B1

KR100600537B1 - 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템

Info

Publication number: KR100600537B1
Application number: KR1020030098585A
Authority: KR
Inventors: 박우출; 이상학; 김용호; 조수형; 김대환
Original assignee: 전자부품연구원
Priority date: 2003-12-29
Filing date: 2003-12-29
Publication date: 2006-07-13
Also published as: KR20050067595A

Abstract

본 발명은 4가지 바이오 센서를 이용하여 생체 신호를 디지털 TV 시스템에 전송하여 감정 상태에 따른 컨텐츠나 광고를 시청할 수 있도록 하는 디지털 TV 시스템에 관한 것이다.

본 발명의 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템은 사용자의 생체 신호를 입력받는 단계; 상기 생체 신호의 특징을 추출하는 단계; 상기 추출된 특징으로부터 사용자의 감정 상태를 추정하는 단계; 상기 추정된 사용자의 감정 상태에 따른 컨텐츠 또는 광고를 생성하는 단계 및 사용자의 디지털 TV 시스템에 상기 컨텐츠 또는 광고를 디스플레이하는 단계로 이루어짐에 기술적 특징이 있다.

따라서, 본 발명의 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템은 생체 신호 센서구를 통해 감지된 생체 신호를 이용하므로써 사용자의 감정 상태에 따른 컨텐츠나 광고를 시청할 수 있는 효과가 있다.

감정인식 컴퓨팅, 컨텐츠, 메타데이터, 디지털 TV 시스템, 감정 상태

Description

타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템{Method for targeting contents and advertisement service and system thereof}

도 1은 본 발명에 따른 전체 시스템 구성도이다.

도 2는 본 발명에 따른 XML 스키마 문서를 이용한 저장과 네비게이션 기능도이다.

도 3은 본 발명에 따른 감정인식 컨텐츠, 광고 생성 엔진 구성도이다.

도 4는 본 발명에 따른 컨텐츠 광고 에이전트이다.

도 5는 본 발명에 따른 생체 신호에 따른 상태도이다.

도 6은 본 발명에 따른 감정 상태 추정 방식이다.

<도면의 주요부분에 대한 부호의 설명>

100 : 디지털 TV 시스템 110 : 생체 신호 센서구

200 : XML 메타데이터 210 : SAX

220 : XML 질의

230 : JAVA를 위한 XML, SQL 유틸리티

240 : 데이터베이스 250 : 질의 결과 XML 문서 생성

300 : 감정인식 컨텐츠 광고생성 엔진

310 : 사용자 감정상태 메타데이터 320 : 컨텐츠 메타데이터

330 : 감정 상태 분류

340 : 사용자 감정 상태 컨텐츠, 광고리스트 생성

350 : 감정 상태 에이전트 360 : 디지털 TV 시스템

400 : 컨텐츠 광고 에이전트 410 : 컨텐츠

420 : 광고 500 : 생체신호 상태도

600 : 생체신호 610 : 특징 추출

620 : 패턴 인식/학습기 630 : 추정

본 발명은 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템에 관한 것으로, 보다 자세하게는 사용자 생체 신호를 디지털 TV 시스템에서 사용하여 사용자의 현재 감정 상태에 따른 컨텐츠나 광고를 시청할 수 있는 디지털 TV 시스템에 관한 것이다.

현재의 아날로그 방송이 디지털로 바뀌고, 위성 방송이 가세되어 우리가 시청하는 채널은 200여 개로 늘어나, 언제 무슨 프로그램이 방영되는지를 일일이 기억하고 보기란 거의 불가능하다. 사용자가 원하는 방송을 시청하기 위해서는 방송 채널들을 일일이 리모콘으로 검색해야 하거나, 특정 기업이나 인물을 다룬 프로그램들만을 찾아 시청하기 위해 방송 안내책자를 뒤적여야 했다.

게다가 종래의 디지털 TV 시스템은 사용자의 감정 상태를 인식할 수 있는 장치나 방법이 없기 때문이다. 감정 인식 방식은 음성 채팅시 텍스트 입력을 통하여 10가지 종류의 감정 판단이나, 사용자가 감정 상태를 입력하여 아바타의 감정 상태를 표시하는 방법이 전부이다.

종래기술인 공개특허 제2003-0063640호는 사용자의 생리 신호를 단시간 동안 모니터링 하여 사용자의 정서 상태를 인식하는 정서 인식 장치 및 방법에 관한 것이었다. 상기 종래기술에서는 손목 시계 형태와 같이 신체에 착용 가능한 센서로 비침습적인 생리 신호를 취득하고 이를 근거로 하여 사용자의 정서 상태를 인식하였다. 그러나 상기와 같은 종래기술은 단시간 동안 한번의 모니터링을 통해 정서 상태를 인식하기 때문에, 변화되는 사용자의 정서 상태를 파악하기 어렵다는 문제점이 있다.

또 다른 종래기술인 공개특허 제2003-0077012호는 하나 또는 그 이상의 사용자를 위한 효율적인 대화식 컴퓨팅 환경을 제공하기 위해, 변화하는 작동 환경 하에서 멀티모드 입력 데이터에 따라 초점 탐지, 모호성 해명 및 기분 분류를 수행하기 위한 방법을 제공하였다. 그러나 상기와 같은 종래기술은 키보드, 포인터, 센서 등의 멀티모드를 통합 하여 입력하는 모호성을 해소하기 위해 기준 모호성 해명을 거쳐 사용자 의도를 판정해야 하는 복잡함이 있으며, 기분을 판단하기 위한 방법인 정면 얼굴 포즈를 인식하기 위해서는 별도의 하드웨어가 구비되어야 한다는 문제점 이 있었다.

따라서, 본 발명은 상기와 같은 종래 기술의 문제점을 해결하기 위한 것으로, 4가지 바이오 센서를 이용하여 생체 신호를 디지털 TV 시스템에 전송하여 감정 상태에 따른 컨텐츠나 광고를 시청할 수 있도록 하는 디지털 TV 시스템을 제공함에 본 발명의 목적이 있다.

본 발명의 상기 목적은 사용자의 생체 신호를 입력받는 단계; 상기 생체 신호의 특징을 추출하는 단계; 상기 추출된 특징으로부터 사용자의 감정 상태를 추정하는 단계; 상기 추정된 사용자의 감정 상태에 따른 컨텐츠 또는 광고를 생성하는 단계 및 사용자의 디지털 TV 시스템에 상기 컨텐츠 또는 광고를 디스플레이하는 단계으로 이루어진 감정인식 컴퓨팅 기법을 사용한 타게팅 컨텐츠 및 광고 서비스 방법에 의해 달성된다.

또한, 본 발명의 다른 목적은 사용자 생체신호를 감지하기 위한 생체 신호 센서구; 상기 생체 신호를 통해 사용자의 감정을 판단하는 디지털 TV 및 상기 판단된 사용자의 감정에 따라 컨텐츠 또는 광고를 디지털 TV에 디스플레이하는 컨텐츠 광고 에이전트로 이루어진 타게팅 컨텐츠 및 광고 시스템에 의해 달성된다.

이하 도면을 참조하여 본 발명에 대하여 상세히 설명한다.

도 1은 본 발명에 따른 전체 시스템 구성도이다. 도 1을 살펴보면 사용자는 생체 신호 센서구(110)를 착용하여 TV를 시청하게 된다. 사용자에게 발생한 생체 신호는 무선으로 디지털 TV 시스템(100)에 전달되며, 상기 디지털 TV 시스템(100)에서는 전달된 상기 생체 신호의 감정을 판단하게 된다. 상기 생체 신호 센서구(110)는 장갑 형태 또는 흉부에 위치한 센서가 바람직하다.

상기 생체 신호 센서구(110)는 적외선 통신, RF 통신을 이용하여 무선으로 상기 디지털 TV 시스템(100)과 연결된다. 상기 디지털 TV 시스템(100) 내에는 패턴 인식/학습기와 감정 센싱 디바이스가 내장되어 있어 입력된 생체 신호의 감정 패턴을 인식할 수 있으며 특징을 추출할 수 있다. 또한, 상기 디지털 TV 시스템(100)에는 인간의 감정을 센싱, 인식, 이해하는 기능이 있어 인간의 감정과 교류할 수 있으며, 감정 메커니즘을 가지게 됨으로써 감정을 표현, 유지, 사용할 수 있다.

도 2는 본 발명에 따른 XML 스키마 문서를 이용한 저장과 네비게이션 기능도이다. 상기 디지털 TV 시스템(100)의 지능화 기능은 XML(Extensible Markup Language) 메타데이터(200)를 이용하여 구현되었으며, XML 문서는 SAX(Simple API for XML)를 이용하여 데이터베이스와 연동된다.

사용자의 현재 감정상태와 관련된 XML 질의를 던지면, JAVA를 위한 XML, SQL 유틸리티를 이용하여 데이터베이스와 연동하게 된다. 상기 XML 스키마 문서의 저장과 검색은 엘리먼트 단위의 검색 및 어휘 검색이 가능하고, 검색된 결과는 CLOB 형태로 데이터베이스에 저장된다. 데이터베이스와 연동되어 검색된 XML 질의 결과는 XML 문서로 생성(250)된다.

도 3은 본 발명에 따른 감정인식 컨텐츠 광고 생성 엔진 구성도이다. 도 3을 살펴보면 감정인식 컨텐츠 광고 생성 엔진(300) 내의 사용자의 감정 상태 메타데이터(310)와 컨텐츠 메타데이터(320)를 이용하여 감정 상태(330)를 기쁨, 슬픔, 노여움, 정신적 사랑, 육체적 사랑, 우울함, 평온 등의 상태로 분류하게 된다. 감정 상태 에이전트(350)는 상기 분류된 감정 상태에 따라서 디지털 TV 시스템(360) 내에 컨텐츠 또는 광고 리스트를 생성(340)하게 된다.

도 4는 본 발명에 따른 컨텐츠 광고 에이전트이다. 도 4를 살펴보면, 도 3에 의해 분류된 감정 상태에 따라 컨텐츠 광고 에이전트(400)가 사용자의 현재 감정 상태에 따른 컨텐츠(410)나 광고(420)를 디지털 TV 시스템(360)을 통해 디스플레이한다. 상기 컨텐츠(410)는 MPEG-7 컨텐츠 메타데이터 규격에 따라 XML 파일로 저장되어 있다.

도 5는 본 발명에 따른 생체 신호에 따른 상태도이다. 도 5를 살펴보면 노여움과 슬플 때 감정상태에 대한 BVP(Blood Volume Pulse), 전기피부반응(GSR, Galvanic Skin Response), 근전도(EMG, Electromyogram), 호흡(Respiration)에 관한 신호들의 상태도(500)를 나타낸다. 상기 생체 신호 센서구(110)를 통해 BVP, 전기피부반응, 근전도, 호흡 중 적어도 한 가지 이상을 통해 생체 신호를 입력받게 된다. 상기 센서들은 사용자의 위치 변화에 강인성을 가지며, 가볍고 이동성의 특징이 있다.

BVP의 센서는 신체 말단의 혈압 압력을 감지하기 위하여 혈관 속의 적혈구에 적외선의 흡수량을 측정하여 정맥기능을 진단하는 방법으로 정맥 재충전시간을 측 정하는 광혈량계(Photoplethysmography)를 사용한다. 광혈량계는 피부에 의하여 빛이 반사되는 정도를 측정한다.

전기피부반응의 센서는 두 개의 전극 사이의 피부 전도성을 측정하게 된다. 두 전극들은 피부를 통하여 미세한 전압을 흐르게 하며, 작은 금속판으로 이루어져 있다. 피부 전도성은 땀샘 활동과 피부 땀구멍 크기에 관련된 함수이다. 각 개인의 피부 전도성은 성, 다이어트 정도, 피부 종류나 상태에 따라 변화한다. 땀샘 활동은 신경활동에 의하여 부분적으로 조절되어 진다. 사람이 놀라거나, 걱정을 하게 되면 피부의 전도성이 급격히 증가하게 되며, 놀란 후에는 피부 전도성이 원래 상태대로 감소하게 된다.

땀샘관이 가득 차 있을 경우에는 포화 현상에 의하여 더 이상의 피부 전도성의 증가는 이루어지지 않는다. 흥분이나 놀람에 의하여 땀샘관에 땀이 증가함에 따라 피부 전도성이 증가하게 된다.

근전도에 관한 센서는 근육 근전도의 활동 전위를 측정하며, 신호를 확대하여 인코더(Encoder)에 신호를 보낸다. 실험을 통한 데이터는 대부분 0~400 마이크로볼트(microvolt) 영역에 20~500Hz 필터를 사용한다.

호흡에 관한 센서는 흉부에 위치하여 가슴의 흉판을 모니터링하게 된다. 호흡 센서는 가슴 주위를 벨트로 둘러싸서, 변화량을 전압의 변화로 측정하여 기록하게 된다.

도 6은 본 발명에 따른 감정 상태 추정 방식이다. 도 6을 살펴보면 상기 생체 신호 센서구(110)를 통하여 측정된 생체 신호(600)들을 상기 디지털 TV 시스템(100)으로 전송하면 특징을 추출(610)한다. 감정 센싱 디바이스를 통해 추출된 특징은 패턴 인식/학습기(620)에 의해 패턴이 분류되며, 현재 사용자의 감정 상태가 어떤지 추정(630)하게 된다. 이는 일정 시간동안 반복적으로 일어나고, 상기 추정(630)된 사용자의 감정 상태는 계속적으로 상기 디지털 TV 시스템(100)으로 보내진다.

따라서, 본 발명의 타게팅 컨텐츠 및 광고 서비스 방법 및 그 시스템은 생체 신호 센서구를 통해 감지된 생체 신호를 이용함으로써 사용자의 감정 상태에 따른 컨텐츠나 광고를 시청할 수 있는 효과가 있다.

Claims

삭제
사용자의 생체 신호를 입력받는 단계;

상기 생체 신호의 특징을 추출하는 단계;

상기 추출된 특징으로부터 사용자의 감정 상태를 추정하는 단계;

상기 추정된 사용자의 감정 상태에 따른 컨텐츠 또는 광고를 생성하는 단계; 및

사용자의 디지털 TV 시스템에 상기 컨텐츠 또는 광고를 디스플레이하는 단계

를 포함하며,

상기 생체 신호는 BVP, 전기피부반응, 근전도 및 호흡 중 적어도 어느 하나인

타게팅 컨텐츠 및 광고 서비스 방법.
사용자의 생체 신호를 입력받는 단계;

상기 생체 신호의 특징을 추출하는 단계;

상기 추출된 특징으로부터 사용자의 감정 상태를 추정하는 단계;

상기 추정된 사용자의 감정 상태에 따른 컨텐츠 또는 광고를 생성하는 단계; 및

사용자의 디지털 TV 시스템에 상기 컨텐츠 또는 광고를 디스플레이하는 단계

를 포함하며,

상기 컨텐츠 또는 광고를 생성하는 단계는

1) 컨텐츠 메타데이터와 사용자 감정 상태 메타데이터를 이용하여 사용자의 감정 상태를 분류하는 단계; 및

2) 상기 분류된 감정 상태에 따라서 컨텐츠 또는 광고를 생성하는 단계

를 포함하는 타게팅 컨텐츠 및 광고 서비스 방법.
제 3항에 있어서,

상기 분류된 감정 상태는 기쁨, 슬픔, 노여움, 정신적 사랑, 육체적 사랑, 우울함 또는 평온임을 특징으로 하는 타게팅 컨텐츠 및 광고 서비스 방법.
제 3항에 있어서,

상기 컨텐츠 메타데이터와 사용자 감정 상태 메타데이터는 XML 스키마 문서 파일 형태임을 특징으로 하는 타게팅 컨텐츠 및 광고 서비스 방법.
삭제
사용자 생체신호를 감지하기 위한 생체 신호 센서구;

상기 생체 신호를 통해 사용자의 감정을 판단하는 디지털 TV; 및

상기 판단된 사용자의 감정에 따라 컨텐츠 또는 광고를 디지털 TV에 디스플레이하는 컨텐츠 광고 에이전트를 포함하며,

상기 생체 신호 센서구는 센서 장갑 및 흉부에 위치한 센서구 가운데 적어도 어느 하나를 포함하는

타게팅 컨텐츠 및 광고 서비스 장치.
사용자 생체신호를 감지하기 위한 생체 신호 센서구;

상기 생체 신호를 통해 사용자의 감정을 판단하는 디지털 TV; 및

상기 판단된 사용자의 감정에 따라 컨텐츠 또는 광고를 디지털 TV에 디스플레이하는 컨텐츠 광고 에이전트를 포함하며,

상기 생체 신호 센서구는 감지한 생체 신호를 무선 통신으로 디지털 TV에 전송하는 것을 특징으로 하는

타게팅 컨텐츠 및 광고 서비스 장치.
사용자 생체신호를 감지하기 위한 생체 신호 센서구;

상기 생체 신호를 통해 사용자의 감정을 판단하는 디지털 TV; 및

상기 판단된 사용자의 감정에 따라 컨텐츠 또는 광고를 디지털 TV에 디스플레이하는 컨텐츠 광고 에이전트를 포함하며,

상기 디지털 TV는 상기 생체 신호를 통해 사용자의 감정 상태를 분류하는 감정인식 컨텐츠 광고 생성 엔진 및 감정 센싱 디바이스 패턴 인식/학습기를 포함하는

타게팅 컨텐츠 및 광고 서비스 장치.
제 9항에 있어서,

상기 감정인식 컨텐츠 광고 생성 엔진은 감정 상태 메타데이터와 컨텐츠 메 타데이터를 이용하여 사용자의 감정 상태를 분류함을 특징으로 하는 타게팅 컨텐츠 및 광고 서비스 장치.