KR101664561B1 - 조명장치, 조명시스템 및 조명제어방법 - Google Patents

조명장치, 조명시스템 및 조명제어방법 Download PDF

Info

Publication number
KR101664561B1
KR101664561B1 KR1020140135231A KR20140135231A KR101664561B1 KR 101664561 B1 KR101664561 B1 KR 101664561B1 KR 1020140135231 A KR1020140135231 A KR 1020140135231A KR 20140135231 A KR20140135231 A KR 20140135231A KR 101664561 B1 KR101664561 B1 KR 101664561B1
Authority
KR
South Korea
Prior art keywords
illumination
content
delete delete
information
video signal
Prior art date
Application number
KR1020140135231A
Other languages
English (en)
Other versions
KR20140135926A (ko
Inventor
신기원
Original Assignee
엘지이노텍 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지이노텍 주식회사 filed Critical 엘지이노텍 주식회사
Priority to KR1020140135231A priority Critical patent/KR101664561B1/ko
Publication of KR20140135926A publication Critical patent/KR20140135926A/ko
Application granted granted Critical
Publication of KR101664561B1 publication Critical patent/KR101664561B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters

Landscapes

  • Circuit Arrangement For Electric Light Sources In General (AREA)

Abstract

실시예는 조명제어장치, 조명장치, 조명시스템 및 조명제어방법에 관한 것이다.
실시예에 따른 조명제어장치는 외부로부터 콘텐츠를 수신하는 콘텐츠 수신장치와, 상기 콘텐츠 수신장치로부터 상기 콘텐츠의 정보를 제공받아 적어도 두개의 조명을 제어하는 제어부를 포함할 수 있다. 상기 제어부는 상기 콘텐츠의 정보에 연동하여 상기 조명의 점멸순서를 제어할 수 있다. 상기 콘텐츠의 정보는 상기 콘텐츠의 진동수, 템포 및 소리 강도 중 적어도 어느 하나를 포함할 수 있다.

Description

조명장치, 조명시스템 및 조명제어방법{LIGHTING APPARATUS, LIGHTING SYSTEM AND CONTROLING METHOD OF LIGHTING APPARATUS}
본 발명은 조명장치에 관한 것으로, 특히 방송신호에 연동하여 조명의 동작 상태를 제어하는 조명장치, 이를 포함하는 조명 시스템 및 그의 동작 방법에 관한 것이다.
조명장치는 다양한 용도로 사용되고 있는데, 특히 실내 인테리어의 일반 조명, 특정 분위기를 연출하기 위한 무대 조명, 광고 조명 및 경관 조명 등의 용도로 사용되고 있다.
상기 조명장치에는 LED(Light Emitting Diode) 소자를 포함하며, 이는 일반 램프 조명장치에 비해 적은 소모 전력으로 구동된다. 특히, LED 조명장치는 다수 배열설치된 LED의 점멸 순서, 발광 색상 및 밝기 등의 제어에 의해 다양한 연출을 수행할 수 있다.
상기와 같은 조명장치는, 경과 조명으로써 건물 외벽, 공원, 가로등, 다리 난간 또는 공연장에 설치될 수 있는데, 적용되는 용도나 대상 또는 위치에 따라 그 크기 및 적용 시스템이 각각 달리질 수 있다.
즉, 건물 외벽용은 건물 외벽에 띠 형태로 단순히 점멸 기능이나 단색 또는 조합된 색상으로 단순 표출되어서 사용하고, 공원이나 가로등, 다리 난간 등은 대상물의 형태에 따라 불규칙적으로 조명을 설치하여 점멸이나 색상을 변경하여 사용된다.
또한, 공연장은 무대 주변이나 무대에 띠 형태로 단순 점멸이나 색상을 표출하여 공연장의 화려함을 효과로 주로 사용될 수 있다.
그러나, 이러한 종래의 조명장치는 메모리 되어 있는 단순한 형태의 점멸이나 색상을 표출하는 기능에 국한되어 있다.
따라서, 조명장치가 단순 점멸이나 단순한 형태의 색상을 표출하는 것이 아니라, 주변 환경에 연동하여 점멸 형태나 표출 색상, 점멸 순서 등을 변화시킬 수 있는 방법이 모색된다.
본 발명에 따른 실시 예에서는, 주변 환경에 대응하여 조명장치의 동작상태를 변화시킬 수 있는 조명장치, 이를 포함하는 조명 시스템 및 그의 동작 방법을 제공하도록 한다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 제안되는 실시 예가 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
실시예에 따른 조명제어장치는 외부로부터 콘텐츠를 수신하는 콘텐츠 수신장치와, 상기 콘텐츠 수신장치로부터 상기 콘텐츠의 정보를 제공받아 적어도 두개의 조명을 제어하는 제어부를 포함하고, 상기 제어부는 상기 콘텐츠의 정보에 연동하여 상기 조명의 점멸순서를 제어하며, 상기 콘텐츠의 정보는 상기 콘텐츠의 진동수, 템포 및 소리 강도 중 적어도 어느 하나를 포함할 수 있다.
또한 실시예에 따른 조명장치는 외부로부터 콘텐츠를 수신하는 콘텐츠 수신장치와, 적어도 두개의 조명과, 상기 콘텐츠 수신장치로부터 상기 콘텐츠의 정보를 제공받아 상기 조명을 제어하는 제어부를 포함하고, 상기 제어부는 상기 콘텐츠의 정보에 연동하여 상기 조명의 점멸순서를 제어하며, 상기 콘텐츠의 정보는 상기 콘텐츠의 진동수, 템포 및 소리 강도 중 적어도 어느 하나를 포함할 수 있다.
또한 실시예에 따른 조명시스템은 외부로부터 콘텐츠를 수신하는 콘텐츠 수신장치와, 적어도 하나의 조명을 포함하는 조명장치와, 상기 콘텐츠의 정보에 연동하여, 상기 조명의 휘도, 점멸순서 및 색상 중 적어도 하나를 제어하는 제어부를 포함하며, 상기 조명장치는 상기 콘텐츠 수신장치와 물리적으로 분리되고, 상기 콘텐츠 수신장치와 일체로 형성되지 않을 수 있다.
또한 실시예에 따른 조명제어방법은 외부로부터 콘텐츠를 수신하는 단계, 상기 콘텐츠의 진동수, 템포 및 강도 중 적어도 어느 하나와 연동하여 적어도 하나의 조명의 점멸순서를 제어하는 단계를 포함할 수 있다.
또한 실시예에 따른 조명장치는 외부와의 통신을 통해 콘텐츠를 수신하는 통신부; 상기 통신부를 통해 수신된 콘텐츠를 분석하여, 상기 분석 결과에 따른 콘텐츠의 출력 조건을 출력하는 콘텐츠 분석부; 상기 콘텐츠의 출력 조건에 대응되는 조명의 구동 조건 정보를 저장하는 저장부; 상기 콘텐츠 분석부를 통해 출력되는 출력 조건을 수신하고, 상기 저장된 조명의 구동 조건 정보를 이용하여 상기 콘텐츠의 출력 조건에 연동하여 상기 조명이 구동되도록 제어하는 제어부; 및 상기 제어부의 제어신호에 따라 상기 조명을 구동시키기 위한 구동 신호를 출력하는 조명 구동부를 포함한다.
또한, 조명시스템은 외부로부터 전송되는 콘텐츠를 수신하는 콘텐츠 수신부; 및 상기 콘텐츠 수신부로부터 상기 수신된 콘텐츠를 제공받고, 상기 제공받은 콘텐츠의 출력 조건에 연동하여 적어도 하나의 조명을 구동시키는 조명장치를 포함하며, 상기 조명장치는, 상기 콘텐츠의 출력 조건에 연동하여 상기 조명의 밝기, 점멸 순서 및 발광 색상 중 적어도 어느 하나를 조정한다.
또한, 조명 동작 방법은 외부로부터 전송되는 콘텐츠를 수신하는 단계; 상기 수신된 콘텐츠를 분석하여, 상기 콘텐츠의 출력 조건을 파악하는 단계; 및 상기 파악한 출력 조건에 따라 적어도 하나의 조명을 구동시키는 단계를 포함한다.
본 발명에 따른 실시 예에 의하면, 콘텐츠에 포함된 영상이나 음성, 자막신호에 연동하여 조명의 동작 상태를 조정함으로써, 다양한 영상 변화나 음성 변화에 실시간으로 반응할 수 있는 사실감 있는 조명 표출 효과를 제공할 수 있다.
즉, 조명을 영상 및 음성에 동기화하여 동작시킴으로써, 역동적인 조명 효과를 제공할 수 있어 사용자 만족도를 향상시킬 수 있다.
도 1은 본 발명의 실시 예에 따른 조명 시스템을 설명하는 개략 구성도이다.
도 2는 도 1에 도시된 콘텐츠 수신장치를 설명하는 상세 구성도이다.
도 3은 도 1에 도시된 조명장치를 설명하는 상세 구성도이다.
도 4 내지 8은 본 발명의 실시 예에 따른 조명 구동 조건을 설명하는 도면이다.
도 9 내지 14는 본 발명의 실시 예에 따른 조명 동작 방법을 단계별로 설명하기 위한 흐름도이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 투명 디스플레이 장치에 대해 상세히 설명한다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해될 수 있다.
본 발명에 따른 실시 예에서는, 콘텐츠에 포함된 영상이나 음성, 자막신호에 연동하여 조명의 동작 상태를 조정함으로써, 다양한 영상 변화나 음성 변화에 실시간으로 반응할 수 있는 사실감 있는 조명 표출 효과를 제공하도록 한다. 즉, 조명을 영상 및 음성에 동기화하여 동작시킴으로써, 역동적인 조명 효과를 제공할 수 있도록 한다.
도 1은 본 발명의 실시 예에 따른 조명 시스템을 설명하는 개략 구성도이다.
도 1을 참조하면, 조명 시스템은 콘텐츠를 수신하는 콘텐츠 수신장치(100)와, 상기 콘텐츠 수신장치(100)와 통신하여 상기 수신한 콘텐츠를 제공받고, 상기 제공받은 콘텐츠에 연동하여 적어도 하나의 조명을 구동시키는 조명장치(200)를 포함한다.
콘텐츠 수신장치(100)는 외부로부터 전송되는 콘텐츠를 수신한다. 상기 콘텐츠는 영상신호, 음성신호 및 다양한 부가정보 신호를 포함할 수 있다.
콘텐츠 수신장치(100)는 상기 콘텐츠가 수신되면, 이에 포함된 영상이나 음성을 출력하며, 상기 출력되는 영상이나 음성을 상기 조명장치(200)로 전송한다. 이때, 상기 콘텐츠 수신장치(100)는 상기 출력되는 영상이나 음성을 그대로 상기 조명장치(200)에 제공할 수 있으며, 이와 다르게 상기 영상이나 음성을 분석하여 출력 조건을 파악하고, 상기 파악한 출력 조건에 대응되는 정보만을 상기 조명장치(200)에 제공할 수 있다.
콘텐츠 수신장치(100)는 TV, 라이오, 개인용 컴퓨터, 노트북, 터블릿, 스마트폰, 휴대폰, MP3 플레이어, DVD 플레이어, PDA, PMP, 셋-탑 박스 및 게임기기 중 어느 하나로 구현될 수 있다. 즉, 상기 콘텐츠 수신장치(100)는 콘텐츠(영상이나 음성 중 적어도 하나)를 수신할 수 있는 어떠한 장치로 구현 가능하다.
조명장치(200)는 적어도 하나의 조명을 포함하며, 그에 따라 상기 콘텐츠 수신장치(100)를 통해 전송되는 콘텐츠 또는 콘텐츠의 출력 조건을 수신하고, 그에 따라 상기 수신한 콘텐츠 또는 콘텐츠의 출력 조건을 이용하여 적어도 하나의 조명에 대한 동작 조건을 결정하여 상기 조명을 동작시킨다.
상기 콘텐츠 수신장치(100)와 조명장치(200)는 상호 양방향 통신을 수행할 수 있다. 이때, 콘텐츠 수신장치(100)와 조명장치(200)는 와이-파이, 블루투스, 지그비, 적외선 DMX512 및 DALI 중 적어도 어느 하나의 통신 방식을 이용하여 상호 데이터 통신을 수행할 수 있다.
이하, 첨부된 도면을 참조하여 상기 조명 시스템에 대하여 보다 구체적으로 설명하기로 한다.
도 2는 도 1에 도시된 콘텐츠 수신장치를 설명하는 상세 구성도이고, 도 3은 도 1에 도시된 조명장치를 설명하는 상세 구성도이다.
이때, 상기 콘텐츠 수신장치(100)는 상기 설명한 바와 같이 영상이나 음성 중 적어도 하나를 수신할 수 있는 장치라면 모두 이에 포함될 수 있으나, 이하에서는 설명의 편의를 위해 콘텐츠 수신장치(100)가 TV로 구현된다고 가정하여 설명하기로 한다.
도 2를 참조하면, 콘텐츠 수신장치(100)는 튜너부(110), 복조부(120), 외부장치 인터페이스부(130), 네트워크 인터페이스부(135), 저장부(140), 통신부(150), 제어부(170), 디스플레이(180) 및 오디오 출력부(185)를 포함할 수 있다.
튜너(110)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 또한, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다.
또한, 튜너(110)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.
복조부(120)는 튜너(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 예를 들어, 튜너(110)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(120)는 8-VSB(7-Vestigal Side Band) 복조를 수행한다. 또한, 복조부(120)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(120)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.
복조부(120)에서 출력한 스트림 신호는 제어부(170)로 입력될 수 있다. 제어부(170)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(180)에 영상을 출력하고, 오디오 출력부(185)로 음성을 출력한다.
외부장치 인터페이스부(130)는, 접속된 외부 장치와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(130)는, A/V 입출력부(미도시)를 포함할 수 있다.
외부장치 인터페이스부(130)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치와 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(130)는 접속된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 제어부(170)로 전달한다.
A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 콘텐츠 수신장치(100)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다.
네트워크 인터페이스부(135)는, 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(135)는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다.
저장부(140)는, 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.
또한, 저장부(140)는 외부장치 인터페이스부(130)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(140)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.
저장부(140)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(100)는, 저장부(140) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다.
통신부(150)는 상기 튜너부(110), 네트워크 인터페이스부(135) 및 외부장치 인터페이스부(130)를 통해 수신된 콘텐츠를 연결된 조명장치(200)로 전송한다.
특히, 통신부(150)는 조명장치(200)와 무선통신을 수행할 수 있다. 통신부(150)는 와이-파이, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 조명장치(200)와 통신을 수행할 수 있다.
그 외, 제어부(170)는, 콘텐츠 수신장치(100) 내의 전반적인 동작을 제어할 수 있다
특히, 제어부(170)는 콘텐츠가 수신되면, 상기 수신된 콘텐츠가 조명장치(200)로 제공되도록 하고, 상기 제공한 콘텐츠에 연동하여 적어도 하나의 조명이 구동되도록 한다.
이때, 제어부(170)는 실시 예에 따라 상기 콘텐츠를 분석하여 콘텐츠의 출력 조건을 파악하고, 상기 파악한 콘텐츠의 출력 조건을 조명장치(200)로 전송할 수도 있다.
이에 대해서는, 하기를 통해 보다 구체적으로 설명하기로 한다.
도 3을 참조하면, 조명장치(200)는 조명(210), 조명 구동부(220), 통신부(230), 신호 분석부(240), 저장부(250) 및 제어부(260)를 포함한다.
조명(210)은 후술할 조명 구동부(220)를 통해 입력되는 조명 구동 신호에 응답하여, 빛을 발광한다. 조명(210)은 LED(Light Emitting Diode), OLED(Organic Light Emitting Diode), 백색 LED, RGB LED 등으로 구현 가능하다.
조명 구동부(220)는 후술할 제어부(260)의 제어신호에 따라 상기 조명(210)에 구동신호를 공급한다.
즉, 조명 구동부(220)는 상기 제어부(260)의 제어신호에 따른 밝기로 상기 조명(210)이 구동되도록 상기 조명(210)에 구동신호를 공급할 수 있다.
또한, 조명 구동부(220)는 특정 위치에 존재하는 조명(210)만이 구동되도록, 다수의 조명(210) 중 특정 위치에 존재하는 조명(210)에만 상기 구동신호를 공급할 수 있다.
통신부(230)는 콘텐츠 수신장치(100)와 통신을 수행하여, 상기 콘텐츠 수신장치(100)로부터 콘텐츠를 제공받는다.
통신부(230)는 와이-파이, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 콘텐츠 수신장치(100)와 통신을 수행할 수 있다.
신호 분석부(240)는 통신부(230)를 통해 수신된 콘텐츠를 분석하고, 상기 분석 결과에 따라 상기 콘텐츠의 출력 조건을 파악하여 제어부(260)로 출력한다.
신호 분석부(240)는 실시 예에 따라, 콘텐츠에 포함된 영상을 분석할 수 있으며, 이와 다르게 콘텐츠에 포함된 음성을 분석할 수 있다.
즉, 신호 분석부(240)는 콘텐츠에 포함된 영상을 프레임별로 구분하고, 그에 따라 상기 프레임별 영상에 대한 평균 휘도 레벨(APL:Average Picture Level)을 계산한다.
또한, 신호 분석부(240)는 콘텐츠에 포함된 영상을 프레임별로 구분하고, 그에 따라 상기 프레임별 영상을 분석하여 상기 영상 내에 포함된 객체의 위치를 확인한다. 이때, 영상 내에는 복수의 객체가 포함될 수 있으나, 신호 분석부(240)는 기설정된 분석 조건에 따라 상기 복수 개의 객체 중 어느 하나의 객체에 대한 위치 정보를 확인할 수 있다. 상기 분석 조건에는 영상 내에 포함된 다양한 객체 중 인물을 우선적으로 확인하라는 정보나, 영상 내에서 차지하는 비중 중 가장 많은 비중을 차지하는 객체를 확인하라는 정보 등을 포함할 수 있다.
또한, 신호 분석부(240)는 상기 프레임별 객체의 위치 정보를 이용하여, 동일 객체에 대하여, 상기 객체가 이동하고 있는 경우, 상기 객체의 위치정보와 함께 상기 객체의 이동 방향에 대한 정보를 확인할 수 있다.
또한, 신호 분석부(240)는 상기 영상 내에 포함된 영상을 프레임별로 구분하고, 그에 따라 상기 프레임별 영상을 분석하여, 상기 영상 내에 가장 많은 비중을 차지하는 색상 정보를 확인한다.
이때, 신호 분석부(240)는 전체 영상에 대해 상기 색상 정보를 확인할 수 있으나, 이와 다르게 특정 영역의 영상만을 분석하여 색상 정보를 확인할 수 있다. 예를 들어, 신호 분석부(240)는 상기 영상 내에서 객체를 추적하고, 상기 추적한 객체에 대해서만 색상 정보를 확인할 수 있다.
또한, 신호 분석부(240)는 콘텐츠에 포함된 음성을 추출하고, 그에 따라 상기 추출한 음성에 대한 레벨을 분석할 수 있다.
상기 음성에 대한 레벨은 상기 음성의 주파수, 빠르기, 크기, 음색, 음 높이 및 이퀄라이저 특성 중 적어도 어느 하나를 이용하여 분석할 수 있다.
저장부(250)는 조명장치(200)의 동작에 필요한 정보나, 상기 조명장치(200)의 동작중에 발생한 정보 등을 저장한다.
특히, 저장부(250)는 상기 콘텐츠의 출력 조건에 대응하여, 조명의 동작 상태를 조정하기 위한 조명의 동작 조건 정보를 저장한다.
이때, 조명의 동작 조건에는 영상의 평균 휘도 레벨에 대응되는 조명의 밝기 정보, 영상 내에 포함된 객체의 위치에 대응하여 구동될 조명의 위치 정보, 영상의 색상에 대응되는 조명의 색상 정보, 음성 레벨에 대응되는 조명의 밝기 정보 등을 포함한다.
제어부(260)는 조명장치(200)의 전반적인 동작을 제어한다.
특히, 제어부(260)는 상기 신호 분석부(240)를 통해 분석된 콘텐츠의 출력 조건을 수신하고, 상기 수신된 콘텐츠의 출력 조건에 대응되는 조명의 동작 조건 정보를 상기 저장부(250)로부터 추출하며, 상기 추출한 조명의 동작 조건 정보에 의해 조명(210)이 구동되도록 제어한다.
특히, 제어부(260)는 상기 영상에 대한 평균 휘도 레벨(APL:Average Picture Level)에 따른 조명의 밝기 정보를 추출하고, 그에 따라 상기 추출한 밝기로 조명(210)이 구동되도록 제어한다.
또한, 제어부(260)는 상기 영상 내에 포함된 객체의 위치를 토대로 상기 객체의 위치에 대응하여 특정 위치에 존재하는 조명만이 구동되도록 제어신호를 출력한다.
또한, 제어부(260)는 상기 확인되는 객체의 위치가 계속적으로 이동하는 경우, 상기 이동 방향에 대응하여 조명(210)의 점멸 순서를 결정하고, 상기 결정된 점멸 순서대로 순차적인 구동이 이루어지도록 한다. 이때, 제어부(260)는 객체의 위치가 변경되면, 상기 객체의 이전 위치에 대응되는 조명(210)은 오프시킨다.
이때, 상기 조명(210)이 갑작스럽게 오프하는 경우, 영상 시청에 방해를 줄 수 있으므로, 제어부(260)는 상기 이전 위치에 대응되는 조명(210)의 밝기를 점짐적으로 감소시켜, 상기 조명(210)이 서서히 꺼지도록 한다.
또한, 제어부(260)는 상기 영상의 색상 정보를 확인하고, 상기 확인한 색상 정보에 의거하여, 조명(210)의 구동 색상을 결정한다. 예를 들어, 상기 영상의 색상이 노란색인 경우, 제어부(260)는 노란색으로 발광하는 조명만이 선택적으로 구동되도록 한다.
또한, 제어부(260)는 상기 음성의 주파수, 빠르기, 크기, 음색, 음 높이 및 이퀄라이저 특성 중 적어도 어느 하나를 이용하여 분석한 음성 레벨에 따라 상기 조명(210)의 밝기를 제어한다.
도 4 내지 8은 본 발명의 실시 예에 따른 조명 구동 조건을 설명하는 도면이고, 도 9 내지 14는 본 발명의 실시 예에 따른 조명 동작 방법을 단계별로 설명하기 위한 흐름도이다.
우선, 도 9를 참조하면 조명장치(200)는 콘텐츠 수신장치(100)를 통해 전송되는 콘텐츠를 수신한다(10단계). 조명장치(200)는 상기 콘텐츠가 수신되면, 상기 수신된 콘텐츠 내에 포함된 영상만을 별도로 분리한다.
상기 영상이 분리되면, 조명장치(200)는 상기 영상을 분석하여, 각 프레임별 평균 휘도 레벨을 계산한다(20단계).
상기 평균 휘도 레벨은 프레임별 영상을 픽셀별로 분할하고, 그에 따라 상기 분할된 픽셀별 영상에 대한 휘도 레벨을 계산 한 후, 상기 계산된 휘도 레벨의 평균 값을 연산함으로써 구해질 수 있다.
조명장치(200)는 상기 영상의 평균 휘도 레벨이 계산되면, 상기 계산된 평균 휘도 레벨에 대응되는 조명의 밝기 정보를 확인한다(30단계). 이를 위해, 조명장치(200)는 상기 평균 휘도 레벨에 따른 조명의 밝기 정보를 테이블화하여 저장한다.
이후, 상기 조명의 밝기 정보가 확인되면, 상기 확인된 밝기로 조명(210)을 구동시킨다(40단계).
이때, 상기 조명(210)은 상기 영상의 평균 휘도 레벨에 비례 또는 반비례하여 밝기가 조정될 수 있다.
도 4를 참조하면, 제 1 실시 예에서 상기 조명(210)은 상기 영상의 평균 휘도 레벨에 반비례하여 밝기가 조정된다. 다시 말해서, 제 1 실시 예에서는 영상의 평균 휘도 레벨이 증가하면, 조명(210)의 밝기가 감소하고, 이와 반대로 영상의 평균 휘도 레벨이 감소하면, 조명(210)의 밝기가 증가한다.
또한, 제 2 실시 예에서 상기 조명(210)은 상기 영상의 평균 휘도 레벨에 비례하여 밝기가 조정된다. 다시 말해서, 제 2 실시 예에서는 영상의 평균 휘도 레벨이 증가하면, 조명(210)의 밝기도 증가하고, 이와 반대로 영상의 평균 휘도 레벨이 감소하면, 조명(210)의 밝기도 감소한다.
다음으로, 도 10을 참조하면 조명장치(200)는 콘텐츠 수신장치(100)를 통해 전송되는 콘텐츠를 수신한다(100단계). 조명장치(200)는 상기 콘텐츠가 수신되면, 상기 수신된 콘텐츠 내에 포함된 영상만을 별도로 분리한다.
상기 영상이 분리되면, 조명장치(200)는 상기 영상을 분석하여, 각 프레임별 평균 휘도 레벨을 계산한다(110단계).
상기 평균 휘도 레벨은 프레임별 영상을 픽셀별로 분할하고, 그에 따라 상기 분할된 픽셀별 영상에 대한 휘도 레벨을 계산 한 후, 상기 계산된 휘도 레벨의 평균 값을 연산함으로써 구해질 수 있다.
이후, 조명장치(200)는 현재 프레임에 대응되는 평균 휘도 레벨과, 이전 프레임에 대응되는 평균 휘도 레벨을 비교한다(120단계).
조명장치(200)는 상기 비교 결과에 따라 상기 두 평균 휘도 레벨의 차이가 기설정된 임계값을 초과하였는지 여부를 판단한다(130단계). 다시 말해서, 조명장치(200)는 수신되는 영상에 대한 밝기가 갑작스럽게 변화하는지 여부를 판단한다.
상기 판단결과(130단계), 조명장치(200)는 상기 두 평균 휘도 레벨의 차이가 기설정된 임계값을 초과하였다면, 조명(210)을 순간적으로 오프시킨다(140단계).
또한, 상기 판단결과(130단계), 조명장치(200)는 상기 두 평균 휘도 레벨의 차이가 기설정된 임계값 이하이면, 상기 현재 프레임의 평균 휘도 레벨에 따라 조명(210)의 밝기를 제어한다(150단계).
즉, 도 5를 참조하면 시간에 따라 영상의 평균 휘도 레벨이 제 1 레벨에서 제 2 레벨로 갑작스럽게 변한 경우, 조명장치(200)는 현재 콘텐츠에 번개 치는 장면 등이 포함되어 있다고 판단하고, 그에 따라 조명(210)을 순간적으로 오프시켜, 상기 번개 치는 장면에 대응하는 조명 효과가 표출되도록 한다.
다음으로, 도 11을 참조하면 조명장치(200)는 콘텐츠 수신장치(100)를 통해 전송되는 콘텐츠를 수신한다(200단계). 조명장치(200)는 상기 콘텐츠가 수신되면, 상기 수신된 콘텐츠 내에 포함된 영상만을 별도로 분리한다.
상기 영상이 분리되면, 조명장치(200)는 상기 영상을 분석하여, 상기 영상 내에 포함된 객체의 위치를 확인한다(210단계). 상기 객체의 위치를 확인하는 방법은 본 발명이 속하는 기술분야에서 이미 공지된 기술이므로, 이에 대한 상세한 설명은 생략하기로 한다.
상기 객체의 위치가 확인되면, 상기 확인한 객체 위치에 대응되는 조명을 확인한다(220단계).
이어서, 상기 확인한 조명을 구동시킨다(230단계).
즉, 도 6을 참조하면 수신되는 영상(600) 내의 제 1 위치에는 객체(610)가 표시되고 있다. 이에 따라, 조명장치(200)는 상기 영상(600) 내에서 상기 객체(610)의 위치를 확인한다.
상기 객체(610)의 위치가 확인되면, 조명장치(200)는 상기 객체(610)의 위치에 대응되는 조명을 확인한다.
예를 들어, 조명이 도 7에 도시된 바와 같은 블록(700)으로 다수 개 배치되어 있고, 상기 객체(610) 위치에 대응되는 조명의 위치(710)를 확인할 수 있으며, 그에 따라 상기 위치(710)에 존재하는 조명을 온 시킨다.
다시 말해서, 영상에 포함된 객체의 위치에 대응되는 특정 위치에 형성된 조명만을 선택적으로 온 시킨다.
이후, 상기 객체가 이동하는지 여부를 판단한다(240단계). 즉, 이전 프레임에서 파악한 객체의 위치와, 현재 프레임에서 파악한 객체의 위치가 상이한지 여부를 판단한다.
조명장치(200)는 상기 객체가 이동하였다고 판단되면, 상기 객체의 이동 방향에 따라 조명의 점멸 순서를 결정한다(250단계).
즉, 도 7에 도시된 바와 같이 객체가 제 1 위치(610)에서 제 2 위치(620)로 이동하고, 이후에 제 2 위치(620)에서 제 3 위치(630)로 이동하는 경우, 조명장치(200)는 상기 제 1 위치(610)에 대응되는 위치에 형성된 제 1 조명(710)이 우선적으로 켜지도록 하고, 이후에 제 2 위치(620)에 대응되는 위치에 형성된 제 2 조명(720). 제 3 위치(630)에 대응되는 위치에 형성된 제 3 조명(730)이 순차적으로 켜지도록 한다.
예를 들어, 제 1 위치(610)에 객체가 표시되는 경우에는 제 1 조명(710)이 켜지고, 제 2 위치(620)에 객체가 표시되는 경우에는 제 2 조명(720)이 켜지고, 제 3 위치(630)에 객체가 표시되는 경우에는 제 3 조명(730)이 켜지도록 한다.
이때, 조명장치(200)는 상기 제 2 위치(620)에 객체가 표시됨에 따라 제 1 조명(710)을 끄고, 제 2 조명을 바로 켜는 경우에는 상기 제 1 조명(710)의 갑작스런 소등으로 인해 사용자에게 불편함을 줄 수 있으므로, 상기 제 2 조명(720)이 켜질때, 제 1 조명(710)은 점진적으로 밝기가 감소하도록 한다.
다음으로, 도 12를 참조하면, 조명장치(200)는 콘텐츠를 수신하고, 상기 수신한 콘텐츠 내에 포함된 음성신호를 추출한다(300단계).
이후, 조명장치(200)는 상기 음성신호의 주파수, 이퀄라이저 특성뿐만 아니라, 음성의 빠르기, 크기, 음색, 음 높이 등을 이용하여 상기 음성의 레벨을 판단한다(310단계).
상기 음성 레벨이 판단되면, 조명장치(200)는 상기 판단한 음성 레벨에 대응되는 조명 밝기를 확인한다(320단계).
이후, 조명장치(200)는 상기 확인한 조명 밝기로 조명(210)을 구동시킨다(330단계).
도 8에 도시된 바와 같이, 조명장치(200)는 상기 음성 레벨이 판단되면, 상기 판단한 음성 레벨에 비례하여 상기 조명(210)의 밝기를 조정한다.
다음으로, 도 13을 참조하면 조명장치(200)는 상기 콘텐츠 내에 포함된 자막정보를 추출한다(400단계). 상기 자막 정보는 상기 콘텐츠와 연계되어 상기 콘텐츠에 따라 동작하는 조명의 동작 조건 정보를 포함한다.
이후, 조명장치(200)는 상기 확인된 자막 정보에 따라 조명의 구동 조건을 확인한다(410단계).
이후, 조명장치(200)는 상기 확인한 조명의 구동 조건을 토대로 조명을 구동시킨다(420단계).
다음으로, 도 14를 참조하면 조명장치(200)는 콘텐츠를 수신하고, 상기 수신된 콘텐츠에서 프레임별 영상을 추출한다(500단계).
이후, 조명장치(200)는 상기 추출한 프레임별 영상의 색상을 확인한다(510단계).
이때, 조명장치(200)는 상기 프레임별 영상의 전체 영상에 대한 평균 색상을 확인할 수 있으며, 이와 다르게, 특정 영역에 대한 평균 색상만을 확인할 수 있다. 예를 들어, 조명장치(200)는 영상 내에 포함된 객체에 대한 색상만을 확인할 수 있다.
이후, 조명장치(200)는 상기 확인한 색상에 대응되는 조명을 확인한다(520단계). 예를 들어, 조명장치(200)는 상기 영상의 색상과 동일한 색상을 가진 조명을 확인한다.
조명장치(200)는 상기 확인된 조명을 구동시킨다(530단계).
예를 들어, 조명장치(200)는 현재 영상 내에 바다 장면이 포함된 경우, 푸른색을 가진 조명이 발광하도록 하고, 영상 내에 노란색 자동차가 포함된 경우, 노란색을 가진 조명만이 발광하도록 할 수 있다.
본 발명에 따른 실시 예에 의하면, 콘텐츠에 포함된 영상이나 음성, 자막신호에 연동하여 조명의 동작 상태를 조정함으로써, 다양한 영상 변화나 음성 변화에 실시간으로 반응할 수 있는 사실감 있는 조명 표출 효과를 제공할 수 있다.
즉, 조명을 영상 및 음성에 동기화하여 동작시킴으로써, 역동적인 조명 효과를 제공할 수 있어 사용자 만족도를 향상시킬 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되서는 안될 것이다.
100: 콘텐츠 수신장치
200: 조명장치

Claims (26)

  1. 외부로부터 콘텐츠를 수신하는 콘텐츠 수신장치와,
    제 1 조명과 제 2 조명을 포함하는 복수의 조명과,
    상기 콘텐츠 수신장치를 통해 수신되는 콘텐츠의 출력 조건에 대응하여, 상기 복수의 조명의 동작 상태를 조정하기 위한 동작 조건 정보를 저장하는 저장부;
    상기 콘텐츠 수신장치를 통해 수신된 상기 콘텐츠 내에 포함된 비디오 신호 및 오디오 신호의 출력 조건에 따라 상기 복수의 조명의 동작 조건을 결정하고, 상기 결정된 동작 조건에 따라 상기 복수의 조명의 동작이 이루어지도록 제어하는 제어부를 포함하고,
    상기 제어부는,
    상기 오디오 신호의 주파수, 템포 및 소리 강도를 기준으로 음성 레벨에 따른 상기 복수의 조명의 점멸 순서를 결정하고, 상기 결정한 점멸 순서에 따라 상기 복수의 조명의 순차적인 구동이 이루어지도록 제어하고,
    상기 복수의 조명은,
    경관 조명이며,
    상기 점멸 순서는,
    상기 복수의 조명의 개별적인 온 또는 오프에 의해 상기 복수의 조명을 구동시키기 위한 제 1 점멸 순서와, 상기 복수의 조명을 함께 온 또는 오프하여 상기 복수의 조명을 구동시키기 위한 제 2 점멸 순서를 포함하고,
    상기 동작 조건 정보는,
    상기 비디오 신호의 평균 휘도 레벨에 따른 조명의 밝기 정보, 상기 비디오 신호 내에 포함된 객체의 위치에 대응하여 구동될 조명의 위치 정보, 상기 비디오 신호의 색상에 대응하는 조명의 색상 정보 및 상기 음성 레벨에 대응하는 조명의 밝기 정보를 포함하며,
    상기 제어부는,
    상기 콘텐츠 내에 포함된 비디오 신호의 밝기 정보, 상기 비디오 신호의 색상 정보 및 상기 오디오 신호의 주파수, 템포 및 소리 강도에 따른 음성 레벨을 기준으로 상기 복수의 조명의 휘도 및 색상을 제어하며,
    상기 복수의 조명 중 온 상태에서 오프 상태로 변경되는 조명이 존재하면, 상기 조명의 밝기를 점진적으로 감소시켜 오프시키며,
    상기 제어부는,
    기설정된 분석 조건에 따라 상기 비디오 신호 내에 포함된 특정 객체의 위치를 토대로 구동될 조명을 결정하고,
    상기 비디오 신호 내에서 가장 높은 비중을 차지하는 색상 정보를 확인하여 상기 조명의 구동 색상을 결정하며,
    상기 분석 조건은,
    상기 비디오 신호 내에 포함된 객체 중 상기 조명의 구동에 적용될 특정 객체의 정보를 포함하는
    조명장치.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 외부로부터 통신을 통해 콘텐츠를 수신하는 콘텐츠 수신장치;
    상기 콘텐츠 수신장치를 통해 수신된 콘텐츠를 분석하여 상기 콘텐츠의 출력 상태를 검출하는 콘텐츠 분석부;
    복수의 조명;
    상기 출력 상태에 대응하여, 상기 복수의 조명의 동작 상태를 조정하기 위한 동작 조건 정보를 저장하는 저장부;
    상기 콘텐츠의 출력 상태를 기준으로 상기 복수의 조명의 동작 조건을 결정하고, 상기 결정된 동작 조건을 기준으로 상기 복수의 조명을 구동하는 제어부를 포함하고,
    상기 동작 조건 정보는,
    비디오 신호의 평균 휘도 레벨에 따른 조명의 밝기 정보, 비디오 신호 내에 포함된 객체의 위치에 대응하여 구동될 조명의 위치 정보, 비디오 신호의 색상에 대응하는 조명의 색상 정보 및 음성 레벨에 대응하는 조명의 밝기 정보를 포함하며,

    상기 복수의 조명의 구동은, 상기 검출된 콘텐츠의 출력 상태를 기준으로 상기 복수의 조명 중 적어도 하나의 조명을 점멸시키는 것을 포함하며,
    상기 복수의 조명은,
    경관 조명이며,
    상기 동작 조건 정보는,
    비디오 신호의 평균 휘도 레벨에 따른 조명의 밝기 정보, 비디오 신호 내에 포함된 객체의 위치에 대응하여 구동될 조명의 위치 정보, 비디오 신호의 색상에 대응하는 조명의 색상 정보 및 음성 레벨에 대응하는 조명의 밝기 정보를 포함하며
    상기 제어부는,
    기설정된 분석 조건에 따라 비디오 신호 내에 포함된 특정 객체의 위치를 토대로 구동될 조명을 결정하고,
    비디오 신호 내에서 가장 높은 비중을 차지하는 색상 정보를 확인하여 상기 조명의 구동 색상을 결정하며,
    상기 분석 조건은,
    비디오 신호 내에 포함된 객체 중 상기 조명의 구동에 적용될 특정 객체의 정보를 포함하는
    조명 시스템.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
KR1020140135231A 2014-10-07 2014-10-07 조명장치, 조명시스템 및 조명제어방법 KR101664561B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140135231A KR101664561B1 (ko) 2014-10-07 2014-10-07 조명장치, 조명시스템 및 조명제어방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140135231A KR101664561B1 (ko) 2014-10-07 2014-10-07 조명장치, 조명시스템 및 조명제어방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020130092742A Division KR101795099B1 (ko) 2013-08-05 2013-08-05 조명장치, 이를 포함하는 조명 시스템 및 그의 동작 방법

Publications (2)

Publication Number Publication Date
KR20140135926A KR20140135926A (ko) 2014-11-27
KR101664561B1 true KR101664561B1 (ko) 2016-10-17

Family

ID=52456396

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140135231A KR101664561B1 (ko) 2014-10-07 2014-10-07 조명장치, 조명시스템 및 조명제어방법

Country Status (1)

Country Link
KR (1) KR101664561B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020038157A1 (en) 2000-06-21 2002-03-28 Dowling Kevin J. Method and apparatus for controlling a lighting system in response to an audio input
US20040263494A1 (en) 2001-04-30 2004-12-30 Poor Kyle W. Location sensitive display device, system, and method of providing animation sequences

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020038157A1 (en) 2000-06-21 2002-03-28 Dowling Kevin J. Method and apparatus for controlling a lighting system in response to an audio input
JP2004501497A (ja) 2000-06-21 2004-01-15 カラー・キネティックス・インコーポレーテッド オーディオ入力に応答して照明システムを制御する方法及び装置
US20040263494A1 (en) 2001-04-30 2004-12-30 Poor Kyle W. Location sensitive display device, system, and method of providing animation sequences

Also Published As

Publication number Publication date
KR20140135926A (ko) 2014-11-27

Similar Documents

Publication Publication Date Title
US9955557B2 (en) Lighting device, lighting system including the same, and method of operating the same
US20190069375A1 (en) Use of embedded data within multimedia content to control lighting
KR102708366B1 (ko) 디스플레이 장치 및 방법
US20110190911A1 (en) Data transmitting apparatus, data transmitting method, audio-visual environment controlling apparatus, audio-visual environment controlling system, and audio-visual environment controlling method
CN108632650B (zh) 具有柔性显示器的多媒体装置及其控制方法
CN113613363A (zh) 灯光控制方法、装置、控制器、模组及存储介质
US9084312B2 (en) Dynamic ambient lighting
EP3193326A1 (en) Image-processing device, and image-processing method
CN105636312B (zh) 智能灯的控制方法、控制装置、智能灯及通信控制装置
CN101523990B (zh) 一种用于环境或者普通照明系统的颜色转变的方法
CN110326365B (zh) 照明脚本控制
EP1379082B1 (en) Display apparatus
KR101543374B1 (ko) 감성 조명제어장치 및 방법
KR20070007266A (ko) 환경광 스크립트 명령 인코딩
JPWO2007052395A1 (ja) 視聴環境制御装置、視聴環境制御システム、視聴環境制御方法、データ送信装置及びデータ送信方法
CN1993999A (zh) 对于从通过未渲染颜色空间映射的视频内容中导出的环境光的无闪烁自适应阈值处理
JPWO2007122987A1 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法
WO2010087155A1 (ja) データ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御方法および視聴環境制御システム
US20130207916A1 (en) Multimedia device for controlling logo type indicator according to power control signal and method of controlling the same
KR102681849B1 (ko) 전자 장치 및 이의 제어 방법
CN105988369B (zh) 一种内容驱动的智能家居控制方法
KR101795099B1 (ko) 조명장치, 이를 포함하는 조명 시스템 및 그의 동작 방법
WO2007072339A2 (en) Active ambient light module
US20140104293A1 (en) Ambient light effect in video gaming
KR101664561B1 (ko) 조명장치, 조명시스템 및 조명제어방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190916

Year of fee payment: 4