KR101203182B1 - 감성형 콘텐츠 커뮤니티 서비스 시스템 - Google Patents
감성형 콘텐츠 커뮤니티 서비스 시스템 Download PDFInfo
- Publication number
- KR101203182B1 KR101203182B1 KR1020100132837A KR20100132837A KR101203182B1 KR 101203182 B1 KR101203182 B1 KR 101203182B1 KR 1020100132837 A KR1020100132837 A KR 1020100132837A KR 20100132837 A KR20100132837 A KR 20100132837A KR 101203182 B1 KR101203182 B1 KR 101203182B1
- Authority
- KR
- South Korea
- Prior art keywords
- emotional
- user
- content
- biosignal
- sensing device
- Prior art date
Links
- 230000002996 emotional effect Effects 0.000 title claims abstract description 194
- 230000008451 emotion Effects 0.000 claims abstract description 23
- 230000007613 environmental effect Effects 0.000 claims abstract description 18
- 238000000034 method Methods 0.000 claims description 13
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000010200 validation analysis Methods 0.000 description 2
- 230000037007 arousal Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008909 emotion recognition Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Primary Health Care (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Health & Medical Sciences (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Information Transfer Between Computers (AREA)
Abstract
본 발명은 모바일 환경 사용자의 생체신호 및 외부 환경 신호를 이용하여 다차원 감성추론을 실시하고, 추론된 사용자 감성상태 정보에 최적인 감성형 콘텐츠를 다중 사용자가 참여하는 커뮤니티 내에서 공유채널 형태로 전송하여 재생하는 사용자 감성상태 기반 콘텐츠 커뮤니티 서비스 시스템에 관한 것이다.
이를 위해 본 발명의 감성형 콘텐츠 커뮤니티 서비스 시스템은 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스, 상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스, 상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈, 상기 감성추론 엔진 모듈로부터 제공받은 사용자의 감성 상태에 대해 정확성 여부를 피드백하는 사용자 단말을 포함한다.
이를 위해 본 발명의 감성형 콘텐츠 커뮤니티 서비스 시스템은 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스, 상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스, 상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈, 상기 감성추론 엔진 모듈로부터 제공받은 사용자의 감성 상태에 대해 정확성 여부를 피드백하는 사용자 단말을 포함한다.
Description
본 발명은 모바일 환경 사용자의 생체신호 및 외부 환경 신호를 이용하여 다차원 감성추론을 실시하고, 추론된 사용자 감성상태 정보에 최적인 감성형 콘텐츠를 다중 사용자가 참여하는 커뮤니티 내에서 공유채널 형태로 전송하여 재생하는 사용자 감성상태 기반 콘텐츠 커뮤니티 서비스 시스템에 관한 것이다.
현재의 아날로그 방송이 디지털로 바뀌고, 위성 방송이 가세되어 우리가 시청하는 채널은 200여 개로 늘어나, 언제 무슨 프로그램이 방영되는지를 일일이 기억하고 보기란 거의 불가능하다. 사용자가 원하는 방송을 시청하기 위해서는 방송 채널들을 일일이 리모콘으로 검색해야 하거나, 특정 기업이나 인물을 다룬 프로그램들만을 찾아 시청하기 위해 방송 안내 책자를 뒤적여야 했다. 게다가 종래의 디지털 TV 시스템은 사용자의 감정 상태를 인식할 수 있는 장치나 방법이 없기 때문이다. 감정 인식 방식은 음성 채팅시 텍스트 입력을 통하여 10가지 종류의 감정 판단이나, 사용자가 감정 상태를 입력하여 아바타의 감정 상태를 표시하는 방법이 전부이다.
현재 사용자의 생체신호(ex. 심박수, 피부온도)를 이용한 모바일 서비스는 운동량 분석 및 체크를 통한 최적 운동법 추천 서비스가 제안되고 있으며, 뇌파 생체신호를 이용하여 디바이스를 제어하는 서비스 관련 제품들이 출시되고 있는 상황이다.
하지만 사용자 감성상태에 기반을 둔 서비스는 사용자가 직접 현재 감성상태를 직접 입력하는 방식을 취하고 있다. 즉 사용자의 감성상태(쾌, 불쾌, 우울 등)를 생체신호 센싱 디바이스에 의해 측정된 신호를 기반으로 한 감성추론 결과가 아니라 사용자가 느끼는 감성상태를 수동으로 입력하여 관련 서비스를 받는 형태이다.
사용자의 감성상태에 기반을 둔 감성형 서비스로 연구 개발되는 분야는 사용자 생체신호 센싱 기술과 다양한 생체신호를 기반으로 한 감성추론 기술이 연구되고 있다. 특히 뇌파(EEG)를 이용한 서비스 분야는 뇌파 기반 장치 제어와 게임 등이 출시되고 있다. 하지만 사용자 감성상태에 기반을 두어 최적화된 감성형 콘텐츠를 이용하여 다중 사용자가 참여하는 커뮤니티 내에서 공유채널 형태로 감성상태 및 콘텐츠를 추천하고 공유하는 감성상태 기반 콘텐츠 커뮤니티 서비스 형태는 제안되어 있지 않다.
본 발명이 해결하려는 과제는 모바일 환경에서 생체신호(맥파(PPG), 피부온도(SKT), 피부저항도(GSR))인 사용자 생체 데이터와 온도, 습도, 조도인 외부 환경 데이터를 이용하여 2차원 감성분류 모델에 기반을 둔 모바일 단말용 다차원 감성추론 엔진을 개발하는 방안을 제안함에 있다.
본 발명이 해결하려는 다른 과제는 생체신호 센싱 디바이스, 외부환경 센싱 디바이스, 다차원 감성추론 엔진 모듈을 내장한 모바일 디바이스, IPTV 셋탑박스, VOD 서버, 감성콘텐츠 채널 서버를 포함하는 감성형 콘텐츠 커뮤니티 환경에서 사용자 감성상태에 따른 다중 도메인(사용자 로컬, VOD) 기반 미디어 콘텐츠 추천, 공유 및 재생 서비스 모델을 제안함에 있다.
이를 위해 본 발명의 감성형 콘텐츠 커뮤니티 서비스 시스템은 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스, 상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스, 상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈, 상기 감성추론 엔진 모듈로부터 제공받은 사용자의 감성 상태에 대해 정확성 여부를 피드백하는 사용자 단말을 포함한다.
이를 위해 본 발명의 감성형 콘텐츠 커뮤니티 서비스 시스템은 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스, 상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스, 상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈이 내장된 모바일 디바이스, 상기 모바일 디바이스로부터 사용자의 감성상태를 제공받는 사용자 단말, 상기 사용자 단말로부터 요청받은 상기 사용자의 감성상태에 기반을 둔 콘텐츠 정보를 제공하는 감성 콘텐츠 채널 서버를 포함한다.
본 발명은 모바일 단말, IPTV 사용자가 현재 자신의 감성상태에 적합한 미디어 콘텐츠를 감상하기 위하여 서비스 커뮤니티 내 다른 사용자와 VOD 서버에서 추천하는 미디어 콘텐츠를 공유 채널 형태로 제공받아 스트리밍 재생하는 감성형 미디어 콘텐츠 서비스를 제안하고 있다. 모바일 단말 내장형 다차원 감성추론 엔진을 통해 사용자의 실시간 다차원 감성상태를 확인할 수 있으며, 감성상태 정보 응용서비스로서 감성형 IPTV 서비스 커뮤니티 내 사용자끼리 감성상태 기반 다중도메인 콘텐츠 수집 및 공유 채널 생성을 통한 사용자 간 감성상태 정보 및 감성상태 기반 추천 미디어 콘텐츠 전송 재생할 수 있다는 장점이 있다.
도 1은 본 발명의 일실시 예에 따른 다차원 감성상태 추론 정보 기반 감성형 콘텐츠 커뮤니티 서비스 시스템을 구성하고 있는 감성추론 엔진 모듈에서 수행되는 동작을 개략적으로 도시한 도면이며,
도 2는 본 발명의 일실시 예에 따른 감성추론 엔진 모듈에서 수행되는 동작을 도시한 흐름도이며,
도 3은 본 발명의 일실시 예에 따른 감성추론 엔진 모듈과 복수의 센싱 디바이스를 포함한 전체적인 시스템을 도시하고 있으며,
도 4는 본 발명의 일실시 예에 따른 다차원 감성추론 기반 감성형 콘텐츠 커뮤니티 서비스 시스템을 도시하고 있으며,
도 5는 사용자의 다차원 감성상태 정보 기반 감성형 IPTV 미디어 콘텐츠 서비스 화면이다.
도 2는 본 발명의 일실시 예에 따른 감성추론 엔진 모듈에서 수행되는 동작을 도시한 흐름도이며,
도 3은 본 발명의 일실시 예에 따른 감성추론 엔진 모듈과 복수의 센싱 디바이스를 포함한 전체적인 시스템을 도시하고 있으며,
도 4는 본 발명의 일실시 예에 따른 다차원 감성추론 기반 감성형 콘텐츠 커뮤니티 서비스 시스템을 도시하고 있으며,
도 5는 사용자의 다차원 감성상태 정보 기반 감성형 IPTV 미디어 콘텐츠 서비스 화면이다.
전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시 예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명의 이러한 실시 예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.
다차원 감성추론 엔진은 사람의 감성을 분류하는 모델 중 1차원(독립차원)적 분류인 긍정(Positive), 평상(Neutral), 부정(Negative) 감성상태 분류에서 쾌-불쾌, 각성-이완 상태를 각각 x, y 축으로 하는 2차원 감성분류 모델에 따른 4개의 감성도메인으로 구성된 다차원 감성상태를 분류하는 기능을 수행한다. 또한 감성서비스 제공 모바일 단말 사용자의 감성변화에 따른 생체신호에 기반을 둔 감성추론 데이터가 분류되고 축적된 개인 감성 룰 베이스 테이블(Rule Base Table)을 이용한 모바일 사용자 감성추론을 통해 결과의 정확성을 높이는 감성추론 개인화를 수행한다.
다차원 감성추론 모델은 생체신호 센싱 디바이스를 통해 감지된 맥파(PPG), 피부저항도(GSR), 피부온도(SKT)의 사용자 내부 데이터와 외부 환경(CONTEXT) 센싱 디바이스를 통해 감지된 온도, 습도, 조도의 사용자 외부 데이터를 융합한 감성추론 모델을 사용한다. 또한 다차원 감성추론 결과에 대해 사용자 피드백을 수행하여 감성추론 학습 과정을 통해 구축된 개인 감성 룰 베이스 셋(Rule Base Set)을 이용하여 공통된 감성 변이 자극 이벤트(Event)에 대해 사용자 별로 다르게 나타나는 생체신호 변화를 분석하고 개인별로 각기 다른 감성추론 룰 베이스(Rule Base)를 적용하여 감성추론을 최적화하는 개인화 감성추론 기능을 포함한다.
도 1은 본 발명의 일실시 예에 따른 다차원 감성상태 추론 정보 기반 감성형 콘텐츠 커뮤니티 서비스 시스템을 구성하고 있는 감성추론 엔진 모듈에서 수행되는 동작을 개략적으로 도시한 도면이다. 이하 도 1을 이용하여 본 발명의 일실시 예에 따른 감성추론 엔진 모듈에서 수행되는 동작에 대해 알아보기로 한다.
도 1에 의하면, 감성추론 엔지 모듈(104)은 생체신호 센싱 디바이스(100)와 외부 환경 센싱 디바이스(102)로부터 필요한 정보를 수신하며, 사용자 단말(106)로 해당 정보를 제공한다. 사용자 단말(106)은 스마트 폰, IPTV 등을 포함한다.
감성추론 엔진 모듈(104)은 쾌-불쾌, 각성-이완의 2차원 축으로 구성된 4개의 감성 도메인 분류를 수행하는 다차원 감성 추론 알고리즘이 적용된다.
이를 위해 감성추론 엔진 모듈(104)은 생체신호 센싱 디바이스(100)와 외부 환경 센싱 디바이스(102)로부터 사용자의 생체신호와 외부 환경을 수신한다. 상술한 바와 같이 생체신호 센싱 디바이스(100)에서 센싱하는 생체신호는 맥파, 피부저항도, 피부온도를 포함하며, 외부 환경 센싱 디바이스(102)에서 센싱하는 외부 환경은 온도, 습도, 조도를 포함한다.
생체신호 센싱 디바이스(100)와 외부 환경 센싱 디바이스(102)는 유무선망으로 감성추론 엔진 모듈(104)로 센싱한 정보를 전송한다. 일예로 유무선망은 블루투스, 와이파이 무선 통신 네트워크, 유선 통신 네트워크 중 어느 하나를 포함한다. 감성추론 엔진 모듈(104)은 추론한 결과를 사용자 단말(106)로 제공하며, 필요한 경우 사용자 단말(106)로부터 추론한 결과에 대한 피드백을 제공받는다. 이와 같이 감성추론 엔진 모듈(104)은 입력된 센싱 정보와 추론한 결과에 대한 피드백을 이용하여 감성추론 학습 기능 및 개인 감성 룰 베이스 셋을 구축한다.
도 2는 본 발명의 일실시 예에 따른 감성추론 엔진 모듈에서 수행되는 동작을 도시한 흐름도이다. 이하 도 2를 이용하여 본 발명의 일실시 예에 따른 감성추론 엔진 모듈에서 수행되는 동작에 대해 상세하게 알아보기로 한다.
상술한 바와 같이 외부 환경 정보 입력 기능을 수행하는 감성추론 엔진 모듈과 연결된 외부 환경 정보 입력부는 지그비(Zigbee) 방식의 무선통신을 이용하여 온도, 습도, 조도 환경 인자 센싱 기능을 수행하는 Ubiquitous Sensor Network(USN) 노드(센서 노드)로부터 전송되는 외부 환경을 수신하여 분석하는 기능을 수행한다.
외부 환경 센서 노드는 USB 포트 연결 방식 USN Gateway를 통한 WiFi 연결 방식을 통하여 외부 환경과 관련된 센싱 데이터 패킷을 수신한다. 외부 환경 정보 입력부는 수신한 외부 환경 센싱 데이터 패킷의 유효성 검사를 수행하고, 데이터 패킷으로부터 온도, 습도, 조도 데이터를 획득하여 감성추론 엔진 모듈로 전송한다.
감성추론 엔진 모듈은 ①생체신호, 외부 환경 센싱 데이터 패킷 입력, ②데이터 변화량 분석, ③생체반응별 개인 감성추론 룰 베이스 테이블 검색, ④다차원 감성 매핑을 통한 추론, ⑤감성추론 결과 피드백 과정을 순차적으로 수행하도록 구현된다.
S200단계에서 감성추론 엔진 모듈과 연결된 생체 신호 센싱 데이터 수신 모듈과 외부 환경 센싱 데이터 수신 모듈은 수신된 생체 신호 센싱 데이터와 외부 환경 센싱 데이터에 대한 유효성 검사를 수행한다. 유효성 검사가 완료된 생체 신호 센싱 데이터와 외부 환경 센싱 데이터는 감성추론 엔진 모듈로 제공된다.
S202단계에서 감성추론 엔진 모듈은 사용자의 감성변화 이벤트 전/후의 생체신호에 대한 변화량(ESV)을 측정하고 정규화한다.
S204단계에서 감성추론 엔진 모듈은 외부 환경 센싱 데이터인 온도, 습도, 조도 값을 추출하여 측정변수 계산을 수행한다.
S206단계에서 감성추론 엔진 모듈은 해당 개인 룰 베이스 테이블이 존재하지 않는 경우에는 새로운 개인 룰 베이스 테이블을 생성하며, 해당 개인 룰 베이스 테이블이 존재하는 경우에는 개인 룰 베이스 테이블을 검색하여 필요한 정보를 획득한다.
S208단계에서 감성추론 엔진 모듈은 사용자의 생체신호 변화와 외부 환경 데이터에 기반을 두어 개인 룰 베이스 셋을 적용한 감성 상태 매핑을 통한 다차원 감성상태 추론을 수행한다. 상술한 바와 같이 다차원은 쾌, 불쾌, 각성, 이완 상태를 각각 x, y 축으로 하는 2차원 감성분류 모델에 따른 4개의 감성도메인으로 구성된 다차원 감성상태를 분류를 기능을 수행한다.
S210단계에서 감성추론 엔진 모듈은 실시간으로 추출된 다차원 감성추론 상태 결과 값을 사용자의 감성서비스 어플리케이션 상에 GUI 방식으로 피드백 한다. 피드백에 의해 제공된 정보는 추출한 감성추론 상태 결과 값에 대한 정확성 여부에 관한 정보이다.
S212단계에서 감성추론 엔진 모듈은 사용자의 감성추론에 대한 피드백을 통해 확인된 다차원 감성추론 결과 및 생체신호, 환경 정보를 개인 룰 베이스 테이블에 저장한다.
S214단계에서 감성추론 엔진 모듈은 감성추론 엔진 소프트웨어 프레임워크 중 상위 애플리케이션 레이어 내의 감성추론 관리 어플리케이션을 통한 감성추론 엔진 기능 파라미터를 획득 및 설정한다.
도 3은 본 발명의 일실시 예에 따른 감성추론 엔진 모듈과 복수의 센싱 디바이스를 포함한 전체적인 시스템을 도시하고 있다.
도 4는 본 발명의 일실시 예에 따른 다차원 감성추론 기반 감성형 콘텐츠 커뮤니티 서비스 시스템을 도시하고 있다. 이하 도 4를 이용하여 본 발명의 일실시 예에 다차원 감성추론 기반 감성형 콘텐츠 커뮤니티 서비스 시스템에 대해 상세하게 알아보기로 한다.
본 발명에서 제안하는 감성형 콘텐츠 서비스 기술은 실시간으로 추론된 사용자의 다차원 감성상태에 적합한 다중도메인(사용자 로컬 디바이스, VOD 서버) 기반 미디어 콘텐츠를 검색하여 감성 콘텐츠 채널을 생성한다. 또한, 모바일 단말, IPTV 사용자는 감성콘텐츠 채널을 공유/추천한다.
도 4에 의하면, 감성형 콘텐츠 커뮤니티 서비스를 제공하는 환경은 생체신호 센싱 디바이스, 외부환경(온도, 습도, 조도) 센싱 디바이스, USN 게이트웨이, 모바일 단말에 최적화된 다차원 감성추론 엔진 모듈이 내장된 모바일 디바이스, IPTV 셋탑박스(STB), 감성콘텐츠 채널 관리 서버, VOD 서버를 포함한다.
생체신호 센싱 디바이스에서 측정된 생체신호(맥파 PPG, 피부온도 SKT, 피부저항도 GSR) 데이터 스트림은 블루투스 무선 인터페이스를 통해 감성추론 엔진 모듈로 전송된다. 외부 환경 센싱 디바이스에서 센싱한 온도, 습도, 조도의 센싱 데이터 스트림은 USN-to-IP 게이트웨이를 통해 WiFi 무선 인터페이스를 통해 감성추론 엔진 모듈로 전송된다.
감성추론 엔진 모듈은 실시간으로 입력되는 생체신호 데이터 스트림과 외부환경 데이터 스트림을 이용하여 다차원 감성추론을 수행한다. 추론되는 감성추론 정보는 2차원 감성분류 모델 적용에 따라 쾌-각성, 불쾌-각성, 쾌-이완, 불쾌-이완의 4가지 형태로 분류된다. 4개의 상태로 추론된 사용자 다차원 감성상태 정보는 감성형 미디어 콘텐츠 서비스 제공을 위한 모바일 단말과 IPTV 셋탑박스(STB)로 전송된다. 이에 대해 상세하게 알아보면 다음과 같다.
1) 감성추론 엔진 모듈이 포함된 모바일 디바이스는 추론한 다차원 감성추론 결과를 사용자1과 대응되는 모바일 단말이나 IPTV로 제공한다. 이하에서는 모바일 단말이나 IPTV를 사용자 단말이라고 한다.
2) 사용자1과 대응되는 IPTV STB는 다른 사용자(일예로 사용자2, 사용자3)의 IPTV STB와 감성콘텐츠 채널 서버로 감성 상태 정보를 전송한다. 사용자2 또는 사용자3은 커뮤니티 내의 사용자1의 감성상태를 확인할 수 있게 된다. 사용자2 또는 사용자3은 저장된 로컬 콘텐츠 중 사용자1의 감성상태에 적합한 로컬 콘텐츠 선택 및 공유 재생 설정을 통한 감성콘텐츠 공유 채널 리스트 발행한다.
3) 사용자1의 IPTV STB는 감성 콘텐츠 채널 서버로 감성콘텐츠 채널 가이드를 요청한다.
4) 감성 콘텐츠 채널 서버는 다른 사용자 IPTV STB로 사용자 로컬 도메인 내 IPTV STB의 감성콘텐츠 공유 채널 리스트를 요청하고 수집한다. 다른 사용자 IPTV STB는 제공받은 사용자1의 감성상태에 기반을 둔 감성콘텐츠를 감성 콘텐츠 채널 서버로 제공한다.
5) 감성 콘텐츠 채널 서버는 VOD 서버로 VOD 도메인의 감성콘텐츠 추천 리스트를 요청하고 수집한다.
6) 감성 콘텐츠 서버는 다른 사용자로부터 제공받은 감성콘텐츠 공유 채널 리스트와 VOD 서버로부터 제공받은 감성 콘텐츠 공유 채널 리스트를 이용하여 감성콘텐츠 공유 채널 가이드를 생성한다.
7) 사용자1은 제공받은 감성콘텐츠 공유 채널 가이드에서 감상할 감성콘텐츠 공유 채널 선택을 선택한다.
8) 사용자1의 IPTV STB는 선택된 감성콘텐츠 공유 채널을 이용하여 감성콘텐츠 스트리밍 및 재생한다. 이 경우 사용자2, 사용자3의 IPTV STB는 단대단 스트리밍을 이용하여 저장된 로컬 콘텐츠를 사용자1의 IPTV STB로 제공한다. VOD 서버는 저장된 VOD 콘텐츠를 사용자1의 IPTV STB로 제공한다.
도 5는 사용자의 다차원 감성상태 정보 기반 감성형 IPTV 미디어 콘텐츠 서비스 화면이다. 사용자는 IPTV 화면을 통해 자신의 감성상태를 확인할 수 있으며, 다중 도메인(서비스 커뮤니티 내 다른 사용자 IPTV STB, VOD 서버) 내에 존재하면서 공유 설정된 콘텐츠 리스트와 사용자의 감성상태에 최적인 추천 콘텐츠로 구성된 공유 채널에 포함된 추천 감성형 콘텐츠 리스트를 확인할 수 있다.
서비스 요청 사용자는 공유 채널 내 콘텐츠 리스트 중 콘텐츠 하나를 선택하고 'PLAY' 버튼을 누르게 되면 요청한 감성형 콘텐츠가 스트리밍 되어 재생된다. 즉 선택한 콘텐츠가 서비스 커뮤니티 내 다른 사용자 IPTV STB 내 로컬 콘텐츠이면, 다른 사용자 IPTV STB에서 콘텐츠 요청자의 IPTV STB로 해당 콘텐츠가 전송된다. 선택한 콘텐츠가 VOD 서버에 저장된 VOD 콘텐츠이면, VOD 서버에서 콘텐츠 요청자의 IPTV STB로 해당 콘텐츠가 전송된다.
본 발명은 도면에 도시된 일실시 예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.
100: 생체 신호 센싱 디바이스 102: 외부 환경 센싱 디바이스
104: 감성추론 엔진 모듈 106: 사용자 단말
104: 감성추론 엔진 모듈 106: 사용자 단말
Claims (8)
- 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스;
상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스;
상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈;
상기 감성추론 엔진 모듈로부터 제공받은 사용자의 감성 상태에 대해 정확성 여부에 관한 정보를 GUI 방식으로 상기 감성추론 엔진 모듈로 피드백하는 사용자 단말을 포함하며,
감성추론 엔진 모듈은,
상기 사용자 단말로부터 수신된 피드백 정보를 이용하여 생체신호와 환경정보에 대한 감성 상태를 저장하고 있는 개인 감성 룰 베이스 테이블을 업데이트함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 1항에 있어서, 상기 감성추론 엔진 모듈은,
각 사용자별 생체 신호와 외부 환경에 대한 감성 상태에 대한 정보를 테이블 형태로 저장하고 있음을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 2항에 있어서, 상기 감성추론 엔진 모듈은,
상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호, 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보 및 저장된 각 사용자별 생체 신호와 외부 환경에 대한 감성 상태에 대한 정보를 이용하여 상기 사용자의 감성 상태를 추론함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 3항에 있어서, 상기 감성추론 엔진 모듈은,
쾌-불쾌, 각성-이완 상태를 각각 x, y 축으로 하는 2차원 감성분류 모델에 따른 4개의 감성도메인으로 구성된 다차원 감성상태 중 어느 하나로 상기 사용자의 감성상태를 분류함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 사용자의 생체 신호를 측정하여 제공하는 생체신호 센싱 디바이스;
상기 사용자와 인접한 공간의 환경 정보를 측정하여 제공하는 외부 환경 센싱 디바이스;
상기 생체신호 센싱 디바이스로부터 제공받은 생체 신호와 상기 외부 환경 센싱 디바이스로부터 제공받은 환경 정보를 이용하여 상기 사용자의 감성 상태를 추론하는 감성추론 엔진 모듈이 내장된 모바일 디바이스;
상기 모바일 디바이스로부터 사용자의 감성상태를 제공받고, 제공받은 사용자의 감성 상태에 대한 정확성 여부에 관한 정보를 GUI 방식으로 상기 모바일 디바이스의 감성추론 엔진 모듈로 피드백하는 사용자 단말;
상기 사용자 단말로부터 요청받은 상기 사용자의 감성상태에 기반을 둔 콘텐츠 정보를 제공하는 감성 콘텐츠 채널 서버;를 포함하며,
상기 감성추론 엔진 모듈은,
상기 사용자 단말로부터 수신된 피드백 정보를 이용하여 생체신호와 환경정보에 대한 감성 상태를 저장하고 있는 개인 룰 베이스 테이블을 업데이트함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 5항에 있어서, 복수의 VOD 콘텐츠를 저장하고 있으며, 상기 감성 콘텐츠 채널 서버로부터 요청받은 상기 사용자의 감성상태에 기반을 둔 추천 콘텐츠를 제공하는 VOD 서버를 포함함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 6항에 있어서, 제공받은 상기 사용자의 감성상태에 기반을 둔 추천 콘텐츠를 제공하며, 상기 사용자의 감성상태를 별도의 표시부에 표시하는 커뮤니티를 형성하고 있는 별도의 사용자 단말을 포함함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
- 제 7항에 있어서, 상기 사용자 단말은,
사용자의 감정 상태, 상기 커뮤니티를 형성하고 있는 별도의 사용자 단말에서 저장하고 있는 콘텐츠 리스트, 상기 VOD 서버에서 저장하고 있는 콘텐츠 리스트, 상기 사용자 단말이 제공한 추천 콘텐츠 리스트, 상기 VOD 서버가 제공한 추천 콘텐츠 리스트를 표시함을 특징으로 하는 감성형 콘텐츠 커뮤니티 서비스 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100132837A KR101203182B1 (ko) | 2010-12-22 | 2010-12-22 | 감성형 콘텐츠 커뮤니티 서비스 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100132837A KR101203182B1 (ko) | 2010-12-22 | 2010-12-22 | 감성형 콘텐츠 커뮤니티 서비스 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20120071202A KR20120071202A (ko) | 2012-07-02 |
KR101203182B1 true KR101203182B1 (ko) | 2012-11-20 |
Family
ID=46706305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100132837A KR101203182B1 (ko) | 2010-12-22 | 2010-12-22 | 감성형 콘텐츠 커뮤니티 서비스 시스템 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101203182B1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016089047A1 (ko) * | 2014-12-01 | 2016-06-09 | 삼성전자 주식회사 | 컨텐트를 제공하는 방법 및 디바이스 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20170018107A (ko) | 2013-05-16 | 2017-02-15 | 주식회사 퓨처플레이 | 복수의 디바이스를 매칭시키는 방법, 그리고 상기 매칭이 가능하게끔 하여 주는 디바이스 및 서버 시스템 |
US10263989B2 (en) | 2013-05-16 | 2019-04-16 | Futureplay Inc. | Method for matching multiple devices, and device and server system for enabling matching |
KR101585083B1 (ko) * | 2014-05-22 | 2016-01-22 | 허다혜 | 시니어를 위한 스마트 기기 기반 공간 정보 중심 클라우드 시스템 및 이를 이용하여 콘텐츠를 제공하기 위한 방법 |
KR102324735B1 (ko) * | 2015-01-19 | 2021-11-10 | 삼성전자주식회사 | 생체 정보를 이용하여 적응적 제어가 가능한 웨어러블 장치, 이를 포함하는 시스템, 및 이의 동작 방법 |
KR102145780B1 (ko) * | 2019-02-22 | 2020-08-19 | 인포보스 주식회사 | 인공지능을 이용한 감성분석에 기반한 기기제어 방법 및 장치 |
KR20230086526A (ko) * | 2021-12-08 | 2023-06-15 | 삼성전자주식회사 | 사용자의 감정에 기반하여 콘텐트를 제공하기 위한 전자 장치 및 방법 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006350476A (ja) * | 2005-06-13 | 2006-12-28 | Sony Computer Entertainment Inc | コンテンツ配信装置およびシステム |
-
2010
- 2010-12-22 KR KR1020100132837A patent/KR101203182B1/ko active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006350476A (ja) * | 2005-06-13 | 2006-12-28 | Sony Computer Entertainment Inc | コンテンツ配信装置およびシステム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016089047A1 (ko) * | 2014-12-01 | 2016-06-09 | 삼성전자 주식회사 | 컨텐트를 제공하는 방법 및 디바이스 |
Also Published As
Publication number | Publication date |
---|---|
KR20120071202A (ko) | 2012-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101203182B1 (ko) | 감성형 콘텐츠 커뮤니티 서비스 시스템 | |
US11831647B2 (en) | Methods and systems for establishing communication with users based on biometric data | |
Nirjon et al. | Musicalheart: A hearty way of listening to music | |
Rubin | Uses and gratifications | |
US20110271303A1 (en) | Information providing method, content display terminal, portable terminal, server device, information providing system and program | |
US20150178511A1 (en) | Methods and systems for sharing psychological or physiological conditions of a user | |
KR20090130323A (ko) | 사용자 프로파일의 생성을 위한 방법 및 장치 | |
CN105898487A (zh) | 一种面向智能机器人的交互方法和装置 | |
US20120072938A1 (en) | System and method for providing a service or content based on emotional information | |
US9542567B2 (en) | Methods and systems for enabling media guidance application operations based on biometric data | |
CN108304458A (zh) | 根据用户情绪的多媒体内容推送方法和系统 | |
WO2002023397A1 (fr) | Systeme agent, procede et dispositif servant a generer des informations et support d'enregistrement de donnees | |
Assuncao et al. | Considering emotions and contextual factors in music recommendation: a systematic literature review | |
KR20110065860A (ko) | 상황과 문맥 정보에 기반한 사용자 맞춤형 콘텐츠를 생성하는 방법 및 장치 | |
KR101156739B1 (ko) | 사용자 맞춤형 유아이 및 사용자 맞춤형 건강 콘텐츠를 제공하는 아이피티브이 서비스 제공 시스템 및 방법 | |
Alja'Afreh | A qoe model for digital twin systems in the era of the tactile internet | |
US20180018899A1 (en) | Information processing apparatus for presenting content, method for controlling the same, and control program | |
CN115866339A (zh) | 电视节目推荐方法、装置、智能设备及可读存储介质 | |
Kuyucu | TV broadcasting in Turkey. The Turkish television audience in the frame of uses and gratification approach | |
JP2002304616A (ja) | 楽曲選定支援方法、プログラム、記録媒体 | |
CN106250533A (zh) | 一种面向智能机器人的富媒体播放数据处理方法和装置 | |
Sun | TikTok: The era of short videos | |
WO2014203716A1 (ja) | サーバ装置、端末装置及び処理方法 | |
WO2023179765A1 (zh) | 多媒体推荐方法及其装置 | |
WO2008103546A1 (en) | Method and apparatus for personalisation of applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20150626 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20161114 Year of fee payment: 5 |