KR20160010238A - 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 - Google Patents
화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 Download PDFInfo
- Publication number
- KR20160010238A KR20160010238A KR1020140091391A KR20140091391A KR20160010238A KR 20160010238 A KR20160010238 A KR 20160010238A KR 1020140091391 A KR1020140091391 A KR 1020140091391A KR 20140091391 A KR20140091391 A KR 20140091391A KR 20160010238 A KR20160010238 A KR 20160010238A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- emotion
- unit
- emotional
- illumination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
- 238000000034 method Methods 0.000 title abstract description 12
- 230000035945 sensitivity Effects 0.000 title description 2
- 230000008451 emotion Effects 0.000 claims abstract description 57
- 230000002996 emotional effect Effects 0.000 claims abstract description 32
- 238000005286 illumination Methods 0.000 claims description 35
- 230000001953 sensory effect Effects 0.000 claims description 16
- 238000000605 extraction Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 abstract description 5
- 238000003384 imaging method Methods 0.000 abstract 1
- 238000003331 infrared imaging Methods 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 7
- 230000036760 body temperature Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000008909 emotion recognition Effects 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 208000003443 Unconsciousness Diseases 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000035876 healing Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/105—Controlling the light source in response to determined parameters
Landscapes
- Circuit Arrangement For Electric Light Sources In General (AREA)
Abstract
본 발명은 화상(일반)기기 및 적외선 화상기기을 이용하는 감성수집부와 사용자의 감성 및 감성 상태 변화를 분석하는 감성추론부 각 사용자의 감성 등에 부합하는(사용자가 선호하는) 스마트 조명 능동적으로 제공(추천)하는 조명관리부를 통해 개인 감성 및 상황 변화에 따른 맞춤형 감성 조명 시스템 및 그 방법이다.
Description
본 발명은 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법에 관한 것으로 화상 및 적외선 화상을 이용하여 일반화상과 열화상을 분석 후 사람의 감성을 인식하는 방법으로 상황 변화에 따른 맞춤형 감성 조명 서비스 시스템 상기 방법을 실현시키기 위한 것이다. 더욱 상세하게는, 화상카메라 및 스마트기기를 이용한 안면인식을 통한 감성추론 값과 적외선카메라를 이용한 감성추론값을 병합하여 최종적으로 감성 상태를 결정하고 매칭테이블에 적용하여 감성조명장치를 제어하는 것이다.
최근 ICT 분야에서 가장 활발히 논의되고 있는 IoT(Internet of Things)이 가져다 줄 혜택으로 인해 개개인의 삶이 크게 바뀔 것이라는 큰 기대감이 한층 고조되는 가운데 IT기술 개발의 차별화를 위해 인간의 기본 감성에 기반한 제품성능으로 고객 만족에 주목 받고 있다.
현재 디지털 컨버전스(digital convergence)환경에서는 사용자 자율 반응형 서비스를 위한 주변 환경 정보인 실감과 인간의 감성을 융합하여 상호 교환을 통한 새로운 홈 서비스 공간의 필요성이 대두되고 있으며, 이를 위해 기술적으로도 디지털 홈에서 그린 홈으로 그리고, 감성 홈으로 진화를 위한 연구가 진행되고 있다.
이와 관련된 감성 처리 기술은, 컴퓨터가 인간의 감성을 인지하고 감성 신호의 피드백에 따라 각각의 상황에 적절하게 인간의 감성을 처리할 수 있는 지능을 부여하고자 하는 것으로, 궁극적으로는 인간과 컴퓨터의 효율적인 상호 작용을 목적으로 하며 주요 요소 기술로는 감성 인식 기술과 감성 추론 및 표현 기술 등으로 구분할 수 있다.
또한 상기 감성 처리 기술은 상기 주요 요소 기술 별로 연구가 진행되고 있으며, 요소 기술들의 일부가 상용화에 적용한 사례(뇌공학과 얼굴인식, 생체 인식 등 여러 방면의 연구)가 있다.
이에 현대 사회의 실생활에 많이 사용되는 조명을 단순히 빛을 밝기만을 조절하는 것에서 인간의 감성을 조절하는 분야로도 확산되고 있으며, 조명을 이용한 다양한 응용분야 중 감성조명 분야에서는 인간의 감성과 조명에 대한 다양한 실험으로 얻어낸 데이터를 기반으로 인간의 감성에 적합한 정교한 조명 색상을 구현하려 노력하고 있다.
하지만 현재 감성 조명 시스템 개발 환경에서 개별적으로 감성에 대한 정의나 인식, 추론, 표현에 대해 정의하여 처리함으로써 인간의 감성을 무자각, 무의식 환경에서 인지하여 감성을 추론하고 적합한 조명을 구현하지 못하는 문제가 있다.
이러한 발명은 상기와 같은 문제점을 해결하고 상기와 같은 요구에 부응하기 위하여 제안된 것으로, 감성조명시스템의 감성교환을 정확하고 효율적으로 수행하여 화상 및 적외선카메라를 이용한 얼굴이미지를 FGP(Facial Grid Parameter) 기술을 이용하여 1차적으로 1. anger, 2. happiness, 3. sadness, 4. fear, 5. grief, 6. surprise의 감성기호를 추출하고, 적외선 카메라에서 취득한 영상을 통해 2차적으로 14가지의 감성기호를 추출하여 감성을 세분화하여 추출하고 1차와 2차의 결과를 조합하여 감성의 정확도를 향상시키고자 한다. 추출된 감성과 조명의 매칭테이블에 설정된 밝기, 색상 등의 제어값을 조명제어부에 전달하는데 하는데 그 목적이 있다.
상기의 목적을 달성하기 위한 본 발명은, 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법으로, 일반화상기기와 적외선 화상기기를 통해 사용자 및 사용자의 주변 환경을 센싱하여 적어도 하나 이상의 감성 정보를 수집하는 감성 정보 수집부; 감성치유 및 극대화에 적합한 조명,음악,의상등의 데이터베이스 구축를 구축하여 수집된 감성 정보와 매칭하여 적절한 결과값을 추출하는 데이터 처리부; 추출된 조명등의 제어값을 이용하여 조명을 제어하는 조명장치부로 구성한다.
화상 및 적외선카메라 통해 수집된 감성정보를 이용하여 감성추론 플랫폼 구조를 통해 감성인식 및 감성교환, 추론 및 표현 등 감성인식과 제어에 관련된 기능을 활용하여 감성 조명 응용 서비스 개발이 용이하며, 개개인의 감성정보를 수집한 데이터를 활용한 마스터 데이터 표준화를 통해 스마트 홈 산업의 부가가치 향상과 마케팅/고객관리 기술로 융합하는 개인 맞춤형 감성 서비스를 할 수 있다.
도 1은 본 실시예에 따른 화상 및 적외선카메라를 이용한 감성조명시스템을 개략적으로 나타낸 블록 구성도.
도 2은 본 실시예에 따른 화상 및 적외선카메라를 이용한 감성조명시스템에 대한 상세 구성도.
도 3은 도 1 및 도 2에 도시된 화상 및 적외선카메라를 이용한 감성조명시스템에 대한 일실시예 흐름도.
도 2은 본 실시예에 따른 화상 및 적외선카메라를 이용한 감성조명시스템에 대한 상세 구성도.
도 3은 도 1 및 도 2에 도시된 화상 및 적외선카메라를 이용한 감성조명시스템에 대한 일실시예 흐름도.
상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되어 있는 상세한 설명을 통하여 보다 명확해 질 것이며, 첨부된 도면들을 함께 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 화상 및 적외선카메라를 이용한 감성조명시스템 및 그 방법에 대한 개약도이다.
도 1에 도시된 바와 같이 감성추론플랫폼(P10)는 감성 정보 수집부(P100), 감성추론부(P101), 감성추론저장관리부(P102)을 포함한다.
감성 정보 수집부(P100)는 화상 및 적외선을 이용하여 사용자 및 사용자 주변 환경을 통해 적어도 하나 이상의 감성 및 상황 정보를 수집하여 감성추론부(P101)에 제공한다.
감성추론부(P101)은 감성정보 수집부(P100)로부터 수집된 감성 및 상황 정보를 수신하며, 감정 정보를 판별하고 생성한 감성 정보는 감성추론 저장관리부에 저장하며, 감성 정보를 기반으로 사용자 감성에 맞게 조명 정보를 생성한 정보를 조명관리부(P110)에 제공한다.
조명관리부(P110)은 감성추론부(P101)과 감성추론저장관리부(P102)로부터 조명 변환 정보를 수신하여 조명 통제한다.
도2는 본 발명에 따른 화상 및 적외선카메라를 이용한 감성조명시스템 및 그 방법에 대한 상세 구성도 이다.
도 2에 도시된 바와 같이 감성 정보 수집부(100)은 안면정보수집부(P100A)와체온 정보 수집부(100B)를 포함한다.
안면정보수집부(P100A)는 사용자의 감성 및 상황 정보를 인지하기 위해 일반화상기기의 센서를 이용하여 사용자의 안면 표정 등의 다양한 감성 정보를 인지한다.
체온정보수집부(P100B)는 사용자의 감성 및 상황 정보를 인지하기 위해 적외선 화상기기의 센서를 이용하여 사용자의 체온정보를 인지한다.
감성추론부(P101)은 감성추출부(P101A)와 메타데이터 생성부(P101B), 조명정보변환부(P101C), 조명정보관리부(P101D)를 포함한다.
감성추출부(P101A)는 안면정보수집부(P100A)과 체온정보수집부(P100B)로부터 제공받은 사용자 감성 및 상황 정보를 감성 제어 알고리즈를 통해 분석/평가하고 저장한다..
메타데이터 생성부(P101B)는 사용자의 감성정보에 적합한 감성제어를 위해 안면감성정보 및 열화상 감성정보을 관리한다.
조명정보변환부(P101C)는 감성추출부(P101A)에서 추출 및 감정 정보를 조명 제어 서비스 환경에 맞게 재구성한다.
조명정보관리부(P101D) 조명정보변환부(P101C)로부터 사용자의 감정정보에 따라 상응하는 조명 정보를 제공하고 감성추론저장관리부(P102)와 조명관리부(P110)에 조명제어 정보를 제공한다.
감성 추론저장관리부(P102)는 감성추출정보 저장부(P102A)와 조명제어저장부(P102B)를 포함한다.
감성추출정보 저장부(P102A)는 감성추출부(P101A)에서 제공 받은 정보를 저장 관리한다.
조명제어저장부(P102B)는 조명정보관리부(P101D)에서 제공 받은 정보를 저장 관리한다.
조명관리부(P110)는 조명을 제어할 있다.
도3는 도 1 및 도 2에 도시된 화상 및 적외선카메라를 이용한 감성조명시스템 및 그 방법에 대한 일시시예 흐름도 이다.
먼저, 화상인식(P301)은 일반화상과 적외선화상으로 일반화면과 열화상화면을 인지 정보는 감성 정보 수집(P302)에 제공한다.
감성정보수집(P302)는 감성 추론 플랫폼 환경에 맞게 구축된 각각의 일반화상과 적외선 카메라을 이용한 센싱 디바이스인 감성정보를 수집한다.
수집결과(P302), 각각의 안면형태에 따른 감성추론(P303)과 체온에 따른 감성추론(P304)에서 수집된 사용자의 감성정보를 분석한다.
안면형태에 따른 감성추론(P303)과 체온에 따른 감성추론(P304)에서 추론된 감성추론정보는 감성추론(P305)에 수집되어 사용자 감성을 평가한다.
감성평가된 사용자 정보는 타입별로 감성 정보 변화(P306)에서 조명 제어 정보에 맞게 변환된다.
감성DB(P307)는 타입별로 감성 정보 변화(P306)과 감성조명선택(P308), 감성추론(P305)의 정보는 저장 관리한다.
조명제어정보에 변환된 정보는 감성조명선택(P308)에서 조명 색, 조도 등을 자동/반자동으로선택한다.
감성조명선택(P308)에서 제공된 조명제어 정보는 필요조명 SET TOPBOX 전송(P309)하여 실내외 조명을 제어한다.
10 : 감성 추론 플랫폼
100 : 감성 정보 수집부
101 : 감성 추론부
102 : 감성 추론 저장 관리부
110 : 조명 관리부
100 : 감성 정보 수집부
101 : 감성 추론부
102 : 감성 추론 저장 관리부
110 : 조명 관리부
Claims (1)
-
화상 및 적외선카메라를 이용한 감성조명시스템 장치에 있어서, 화상과 적외선를 통해 사용자 감성을 적어도 하나 이상의 수집하는 감성 정보수집부; 상기 수집된 감성 정보를 바탕으로 사용자에게 적합한지를 추출하는 감성추론 플랫폼 엔진으로 상기 감성 정보 수집부로부터 수집된 감성 정보를 기반으로 메타데이터 정보를 이용하여 감성추출부 생성하는 감성 추출정보를 저장하는 감성 추출 정보 저장부; 생성된 감성추출정보와 조명 정보 관리부를 기반으로 조명 정보로 변환시키고, 사용자에게 적합한 조명을 통제하는 조명 관리부.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140091391A KR20160010238A (ko) | 2014-07-19 | 2014-07-19 | 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140091391A KR20160010238A (ko) | 2014-07-19 | 2014-07-19 | 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20160010238A true KR20160010238A (ko) | 2016-01-27 |
Family
ID=55309523
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020140091391A Ceased KR20160010238A (ko) | 2014-07-19 | 2014-07-19 | 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20160010238A (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018063094A3 (en) * | 2016-09-29 | 2018-10-04 | Creative Technology Ltd | An apparatus for controlling lighting behavior of one or more lighting elements and a method therefor |
| CN111901943A (zh) * | 2020-08-06 | 2020-11-06 | 复旦大学 | 一种情感交互的照明系统 |
| CN112734600A (zh) * | 2018-11-02 | 2021-04-30 | 中国计量大学 | 一种基于手机app的酒店个性化智能照明方法 |
-
2014
- 2014-07-19 KR KR1020140091391A patent/KR20160010238A/ko not_active Ceased
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2018063094A3 (en) * | 2016-09-29 | 2018-10-04 | Creative Technology Ltd | An apparatus for controlling lighting behavior of one or more lighting elements and a method therefor |
| CN112734600A (zh) * | 2018-11-02 | 2021-04-30 | 中国计量大学 | 一种基于手机app的酒店个性化智能照明方法 |
| CN112734600B (zh) * | 2018-11-02 | 2023-09-22 | 中国计量大学 | 一种基于手机app的酒店个性化智能照明方法 |
| CN111901943A (zh) * | 2020-08-06 | 2020-11-06 | 复旦大学 | 一种情感交互的照明系统 |
| CN111901943B (zh) * | 2020-08-06 | 2021-09-21 | 复旦大学 | 一种情感交互的照明系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11587272B2 (en) | Intelligent interactive and augmented reality cloud platform | |
| US12461595B2 (en) | System and method for embedded cognitive state metric system | |
| US20200229283A1 (en) | Determining a Lighting Configuration Based on Context | |
| Maxhuni et al. | Stress modelling and prediction in presence of scarce data | |
| US8842882B2 (en) | Individualizing generic communications | |
| US20180047196A1 (en) | Intelligent augmented reality (iar) platform-based communication system | |
| CN110337698A (zh) | 智能服务终端和平台系统及其方法 | |
| KR20160010238A (ko) | 화상 및 적외선 카메라를 이용한 감성조명시스템 및 그 방법 | |
| CN115905688A (zh) | 一种基于人工智能和智能家居的参考信息生成方法 | |
| JP2017033413A (ja) | ロボット撮影システムおよび画像管理方法 | |
| US20160189554A1 (en) | Education service system | |
| Mazeika et al. | How would the viewer feel? estimating wellbeing from video scenarios | |
| Mujirishvili et al. | “I Don’t Want to Become a Number’’: Examining Different Stakeholder Perspectives on a Video-Based Monitoring System for Senior Care with Inherent Privacy Protection (by Design). | |
| Navarro-Tuch et al. | Emotional domotics: a system and experimental model development for UX implementations | |
| Lima et al. | ST-Gait++: Leveraging spatio-temporal convolutions for gait-based emotion recognition on videos | |
| Talavera et al. | Sentiment recognition in egocentric photostreams | |
| WO2020136215A1 (en) | Method and system for more efficient wellbeing estimation and improvement | |
| Stavropoulos et al. | Multimodal sensing and intelligent fusion for remote dementia care and support | |
| Guerdelli et al. | IMEmo: an interpersonal relation multi-emotion dataset | |
| Doctor et al. | Introduction to the thematic issue on Affect Aware Ubiquitious Computing | |
| Navarro-Tuch et al. | Emotional domotics: Inhabitable home automation system for emotion modulation through facial analysis | |
| US20210142047A1 (en) | Salient feature extraction using neural networks with temporal modeling for real time incorporation (sentri) autism aide | |
| KR102638673B1 (ko) | 키워드와 유저 경험을 통한 어셋, 콘텐츠, 또는 템플릿을추천하기 위한 방법 및 이를 위한 장치 | |
| Kim et al. | Mediating individual affective experience through the emotional photo frame | |
| Kaur et al. | A Systematic Review on Facial Emotion Recognition System Datasets |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20140719 |
|
| PA0201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20160106 Patent event code: PE09021S01D |
|
| PG1501 | Laying open of application | ||
| E601 | Decision to refuse application | ||
| PE0601 | Decision on rejection of patent |
Patent event date: 20160701 Comment text: Decision to Refuse Application Patent event code: PE06012S01D Patent event date: 20160106 Comment text: Notification of reason for refusal Patent event code: PE06011S01I |
|
| E601 | Decision to refuse application | ||
| PE0601 | Decision on rejection of patent |
Patent event date: 20160804 Comment text: Decision to Refuse Application Patent event code: PE06012S01D Patent event date: 20160106 Comment text: Notification of reason for refusal Patent event code: PE06011S01I |