KR20090061516A - 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 - Google Patents
멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 Download PDFInfo
- Publication number
- KR20090061516A KR20090061516A KR1020070128545A KR20070128545A KR20090061516A KR 20090061516 A KR20090061516 A KR 20090061516A KR 1020070128545 A KR1020070128545 A KR 1020070128545A KR 20070128545 A KR20070128545 A KR 20070128545A KR 20090061516 A KR20090061516 A KR 20090061516A
- Authority
- KR
- South Korea
- Prior art keywords
- metadata
- control
- multimedia content
- home network
- multimedia
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2807—Exchanging configuration information on appliance services in a home automation network
- H04L12/2812—Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/561—Adding application-functional data or data for application control, e.g. adding metadata
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- Selective Calling Equipment (AREA)
Abstract
본 발명은 멀티미디어 콘텐츠에 적합한 홈 네트워크 환경을 제공할 수 있는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법에 관한 것이다. 이와 같은 본 발명은, 멀티미디어 콘텐츠가 선택되는 단계와; 상기 선택되는 멀티미디어 콘텐츠에 포함된 제어용 메타데이터를 추출하여 메타데이터 스키마 포맷에 따라 분석하여 가전제어 메타데이터로서 저장하는 단계와; 상기 선택된 멀티미디어 콘텐츠가 실행되면 상기 저장된 가전제어 메타데이터를 기반으로 제어 메시지를 생성하고 그에 따른 홈 네트워크 내 디지털 기기의 제어를 수행하는 단계를 포함하여 이루어짐으로써, 멀티미디어 콘텐츠에 포함된 메타데이터를 이용하여 해당 멀티미디어 콘텐츠에 적절한 홈 네트워크 내 디지털 기기의 자동 제어를 수행할 수 있도록 한다.
콘텐츠, 메타데이터, 분석, 분석기, 홈 네트워크, 자동제어
Description
본 발명은 홈 네트워크에 관한 것으로, 특히 멀티미디어 콘텐츠에 적합한 홈 네트워크 환경을 제공할 수 있는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법에 관한 것이다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT신성장동력핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2007-S-010-01, 과제명: SMMD 기반 유비쿼터스홈 미디어 서비스 시스템 개발].
멀티미디어 콘텐츠가 다양해지고 홈 네트워크 원격제어 기술이 성장함에 따라서 홈 네트워크 사용자는 가정에서 미디어를 보는 동안 화면과 소리뿐만 아니라 조명, 진동, 향기, 분위기 등의 홈 네트워크 환경의 제어로 좀 더 실감나는 멀티미디어 콘텐츠 감상을 요구하게 되었다.
도 1은 종래의 기술에 따른 홈 네트워크 환경 구성을 나타내는 구성도이다.
도 1에 도시된 바와 같이, 홈 네트워크 상에는 홈서버(110), 멀티미디어 재 생기(120)와 제어 가능한 가전장치(130)가 연결되어 있다. 또한 홈 네트워크 외부에서는 지상파 방송을 제공하기 위한 장치(140)와 IPTV 및 VOD 서비스를 제공해주는 장치(150)가 연결되어 있다. 예를 들어 홈 네트워크 내 사용자가 멀티미디어 재생기의 하나인 TV 앞에 앉아 지상파 시청을 하고 싶다면 리모컨과 같은 컨트롤러로 홈서버(110)에게 지상파 방송을 요청하고 홈서버는 사용자에게 채널 정보를 받아 해당 방송 서비스를 제공해 주게 된다. 이때 사용자는 가전장치(130)에게 TV를 시청하기에 적절한 환경이 되도록 조명을 어둡게 하고 커튼을 닫아 TV 화면에서의 햇빛 반사를 방지하며 듣고 있던 음악은 조용히 낮추는 등, 지상파 방송을 시청하기 위한 홈 네트워크 환경을 만들 수 있다. IPTV와 VOD도 마찬가지로 사용자는 홈서버(110)를 통해 서비스 제공장치(150)로부터 멀티미디어 콘텐츠를 제공 받고, 멀티미디어 재생기(120)에 저장된 댁내 멀티미디어 콘텐츠 또한 홈서버(110)를 통해 해당 멀티미디어 서비스를 제공 받을 수 있으며 가전장치(130)를 제어할 수 있도록 되어 있다.
이러한 종래의 홈 네트워크 환경에서 있어서, 모든 가전 제어는 사용자 요청에 의한 수동적인 가전제어로 이루어지기 때문에 사용자의 편의성을 저해하는 문제점이 있다. 따라서 본 발명에서 제안하는 바와 같은 홈서버에 의한 능동적인 가전제어가 필요하다.
따라서 본 발명은 상기와 같은 문제점을 해결하기 위해 고안된 것으로, 본 발명의 목적은 멀티미디어 콘텐츠에 적합한 홈 네트워크 환경을 제공할 수 있는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법을 제공함에 있다.
본 발명의 다른 목적은 자동으로 홈 네트워크 내 디지털 기기를 제어할 수 있는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 홈 네트워크 내 디지털 기기의 제어에 적합한 메타데이터 스키마를 제안할 수 있는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법을 제공함에 있다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치는, 선택되는 멀티미디어 콘텐츠의 제어용 메타데이터를 분석하고 분석 결과를 기반으로 홈 네트워크 내 디지털 기기의 제어를 위한 제어 메시지를 생성하는 메타데이터 처리부와; 상기 제어 메시지를 기반으로 유무선 통신을 이용하여 홈 네트워크 내 디지털 기기의 제어를 수행하는 제어부를 포함하여 구성될 수 있다.
상기 메타데이터 처리부는 멀티미디어 콘텐츠를 선택하는 멀티미디어 선택기와; 상기 멀티미디어 선택기에 의해 선택된 멀티미디어 콘텐츠로부터 제어용 메타데이터를 추출하는 메타데이터 추출기와; 상기 메타데이터 추출기에 의해 추출된 제어용 메타데이터를 분석하는 메타데이터 분석기와; 상기 분석 결과를 가전제어 메타데이터로서 저장하는 저장부와; 상기 가전제어 메타데이터를 바탕으로 홈 네트워크 내 디지털 기기를 제어하기 위한 제어 메시지를 생성하는 제어메시지 생성기를 포함하여 구성될 수 있다.
상기 멀티미디어 콘텐츠 메타데이터를 이용한 홈 네트워크 제어 장치는 멀티미디어 콘텐츠의 제어용 메타데이터의 생성 및 수정을 위한 메타데이터 편집부를 더 포함하여 구성될 수 있다.
상기 메타데이터 편집부는 상기 멀티미디어 선택기에 의해 선택된 멀티미디어 콘텐츠에 제어용 메타데이터가 없을 경우 자막과 같은 다른 종류의 메타데이터가 있는지 판단하기 위한 메타데이터 판독기와; 멀티미디어 콘텐츠 내 멀티미디어의 표현 내용이 있는지 판단하는 디스크립터 판독기와; 상기 메타데이터 판독기 및 디스크립터 판독기에 의해 판독된 정보를 기반으로 제어용 메타데이터를 생성하는 메타데이터 생성기와; 사용자가 추가적으로 해당 멀티미디어 콘텐츠의 메타데이터에 제어내용을 추가 및 수정하도록 하기 위한 메타데이터 편집기를 포함하여 구성될 수 있다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법은, 멀티미디어 콘텐츠가 선택되는 단계와; 상기 선택되는 멀티미디어 콘텐츠에 포함된 제어용 메타데이터를 추출하여 메타데이터 스키마 포맷에 따라 분석하여 가전제어 메타데이터로서 저장하는 단계와; 상기 선택된 멀티미디어 콘텐츠가 실행되면 상기 저장된 가전제어 메타데이터를 기반으로 제어 메시지를 생성하고 그에 따른 홈 네트워크 내 디지털 기 기의 제어를 수행하는 단계를 포함하여 이루어질 수 있다.
본 발명에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치 및 방법은, 홈네트워크 내에 있는 가전 장치가 미디어 감상 효과를 더할 수 있도록 메타데이터를 분석하는 기술을 제안함으로써, 멀티미디어 콘텐츠의 제작자는 특정 형식의 메타데이터 스키마에 맞는 메타데이터를 생성하여 멀티미디어 콘텐츠 제작과 함께 보급하여 일관성 있고 효율적인 동적 가전제어를 가능하게 할 수 있고, 사용자 또한 멀티미디어 콘텐츠 제공자가 메타데이터를 넣지 않은 콘텐츠를 재생할 때 기존의 자막과 같은 메타데이터를 이용하거나 MPEG7과 같은 멀티미디어 디스크립터 정보가 있는 콘텐츠를 이용하여 직접 자신의 홈네트워크의 가전장치를 제어하기 위한 메타데이터를 용이하게 생성할 수 있는 효과가 있다. 또한 이에 따라 멀티미디어 콘텐츠의 메타데이터의 범용성을 제공하며 보급 효과 또한 높일 수 있다.
본 발명에서는 사용자 요청에 의한 수동적인 제어가 아니라 멀티미디어 콘텐츠에 포함된 정보를 기반으로 하는 홈서버에 의한 능동적인 가전제어를 제안한다. 즉 사용자가 멀티미디어 콘텐츠를 홈서버를 통해 재생하여 멀티미디어 재생기를 통해서 본다면 가전장치는 멀티미디어 콘텐츠 내용에 따라 자동으로 제어되어 콘텐츠 내용에 맞는 홈 네트워크 환경을 지원할 수 있다. 예컨대 멀티미디어 콘텐츠가 극장에서 상영되는 영화라면 TV를 켜고 볼륨을 조절하고 오디오의 음악 콘텐츠는 정 지하며 조명을 어둡게 하며 커튼을 닫는 일련의 가전제어를 홈서버가 그 미디어에 메타데이터 형태로 포함된 홈 네트워크 환경정보를 기반으로 사용자 요청 없이 능동적으로 판단하여 수행하게 된다. 또한, 영화가 종료된다면 커튼을 열고 조명을 밝히고 TV를 끄는 제어도 할 수 있으며, 멀티미디어 콘텐츠 재생 중에도 필요에 따라 조명의 밝기를 조절하여 분위기를 조절하거나 에어컨이나 선풍기를 제어하여 바람을 멀티미디어 콘텐츠의 일부로 제공하는 것으로 홈 네트워크 환경을 조절할 수도 있을 것이다. 이를 위해 본 발명에서는 멀티미디어 콘텐츠에 디지털 기기 제어를 위한 메타데이터(이하 '제어용 메타데이터'라 함)를 포함시키고 이 메타데이터의 분석 결과를 이용하여 가전 제품과 같은 홈 네트워크 내 디지털 기기를 제어할 수 있다.
이하, 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 2는 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치의 구성을 나타내는 구성도이다.
도 2에 도시된 바와 같이, 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치(200)는, 선택되는 멀티미디어 콘텐츠의 제어용 메타데이터를 분석하고 분석 결과를 기반으로 홈 네트워크 내 디지털 기기의 제어를 위한 제어 메시지를 생성하는 메타데이터 처리부(210)와; 상기 제어 메시지를 기반으로 유무선 통신을 이용하여 홈 네트워크 내 디지털 기기의 제어를 수행하는 제어부(230)를 포함하여 구성될 수 있다.
상기 메타데이터 처리부(210)는 멀티미디어 콘텐츠를 선택하는 멀티미디어 선택기(212)와; 상기 멀티미디어 선택기(212)에 의해 선택된 멀티미디어 콘텐츠로부터 제어용 메타데이터를 추출하는 메타데이터 추출기(214)와; 상기 메타데이터 추출기(214)에 의해 추출된 제어용 메타데이터를 분석하는 메타데이터 분석기(216)와; 상기 분석 결과를 메타데이터(이하 "가전제어 메타데이터")로서 저장하는 저장부(240)와; 상기 가전제어 메타데이터를 바탕으로 홈 네트워크 내 디지털 기기를 제어하기 위한 제어 메시지를 생성하는 제어메시지 생성기(218)를 포함하여 구성될 수 있다.
상기 멀티미디어 선택기(212)는 사용자의 키 입력이나 원격제어에 의해 인가되는 신호에 따라 멀티미디어 콘텐츠를 선택할 수 있다. 이를 위해 도시되진 않았으나 상기 멀티미디어 콘텐츠 메타데이터를 이용한 홈 네트워크 제어 장치(200)는 키 입력 수단이나 리모트 컨트롤러와 교신하기 위한 통신 단자(예컨대 적외선 포트)를 구비할 수 있다.
상기 메타데이터 추출기(214)는 상기 제어부(230)에 의해 제어용 메타데이터 스키마에 맞는 제어용 메타데이터가 있는 것으로 판단된 경우, 해당 제어용 메타데이터를 추출하여 상기 메타데이터 분석기(216)로 출력할 수 있다.
상기 메타데이터 분석기(216)는 입력되는 제어용 메타데이터를 메타데이터 스키마 포맷에 따라 분류하고 분석할 수 있다.
상기 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치(200)는 멀티미디어 콘텐츠의 제어용 메타데이터의 생성 및 수정을 위한 메타데이터 편집부(220)를 더 포함하여 구성될 수 있다.
상기 메타데이터 편집부(220)는 상기 멀티미디어 선택기(212)에 의해 선택된 멀티미디어 콘텐츠에 제어용 메타데이터가 없을 경우 자막과 같은 다른 종류의 메타데이터가 있는지 판단하기 위한 메타데이터 판독기(222)와; 멀티미디어 콘텐츠 내 멀티미디어의 표현 내용(예컨대, 엠펙(MPEG) 7으로 인코딩)이 있는지 판단하는 디스크립터 판독기(224)와; 상기 메타데이터 판독기(222) 및 디스크립터 판독기(224)에 의해 판독된 정보를 기반으로 제어용 메타데이터를 생성하는 메타데이터 생성기(226)와; 사용자가 추가적으로 해당 멀티미디어 콘텐츠의 메타데이터에 제어내용을 추가 및 수정하도록 하기 위한 메타데이터 편집기(228)를 포함하여 구성될 수 있다.
상기 메타데이터 편집부(220)에 의해 생성 및 편집되는 제어용 메타데이터는 상기 멀티미디어 콘텐츠의 소정 영역에 포함되어 상기 메타데이터 처리부(210)에 의해 처리되어 홈 네트워크 내 디지털 기기를 제어하는데 이용될 수 있다.
상기 제어부(230)는 상기 멀티미디어 선택기(212)에 의해 선택된 멀티미디어 콘텐츠에 제어용 메타데이터가 있는지 판단하고, 제어용 메타데이터가 있으면 상기 메타데이터 처리부(210)를 제어하여 제어용 메타데이터를 분석하고 분석 결과에 따라 가전제어 메타데이터를 저장하고 제어 메시지를 생성하는 일련의 과정을 제어하고, 생성된 제어 메시지를 기반으로 유무선 통신(예컨대, 적외선 통신, 블루투스, 지그비, 무선랜, 전력선 통신, IEEE1394, Lonwork 등)을 이용하여 홈 네트워크 내 디지털 기기 제어를 수행한다.
또한 상기 멀티미디어 선택기(212)에 의해 선택된 멀티미디어 콘텐츠에 제어용 메타데이터가 없는 것으로 판단된 경우, 상기 제어부(230)는 상기 메타데이터 편집부(220)를 제어하여 제어용 메타데이터 생성 과정을 제어한다.
이와 같이 구성되는 장치에서 사용되는 본 발명의 제어용 메타데이터를 도 3을 이용하여 설명하면 다음과 같다.
도 3은 본 발명의 제어용 메타데이터의 XML 스키마의 일예를 나타낸 도면으로, 이를 참조하면, 멀티미디어 콘텐츠를 구분하기 위해 프로그램(program)(3000)이라는 엘리먼트(element: 요소)를 이용한다. 상기 프로그램(3000)은 프로그램식별자(program id: pid)(3001)를 속성 값으로 가지며 멀티미디어 콘텐츠를 정수형으로 구분한다. 각 프로그램 엘리먼트는 싱크(sync)(3100), 초기(initial)(3200) 및 목록(lists)(3300) 엘리먼트를 포함하며 이를 이용하여 제어 메시지를 분류한다.
상기 싱크(3100) 엘리먼트는 주어진 시각에 가전 장치를 제어하기 위한 엘리먼트로서 시각을 나타내는 속성 값인 개시(start)(3101)를 포함한다. 또한 상기 싱크(3100) 엘리먼트는 속성 값으로 이름(name)(3111), 동작(action)(3112) 및 값(value)(3113)을 갖는 기구(appliances)(3110) 엘리먼트를 포함하는데, 이는 개시(3101) 시각에 이름(3111)의 값을 가지는 디지털 기기의 제어를 동작(3112)과 값(3113)에 맞게 제어하기 위한 스키마이다.
상기 초기(3200) 엘리먼트는 이름(3210) 엘리먼트를 함께 쓰며 이름(3210)에 해당되는 디지털 기기를 동작(3211)과 값(3212)에 맞게 초기화하는 값을 설정하는 스키마이며 이 값에 맞게 멀티미디어 콘텐츠가 시작할 때 디지털 기기를 제어함으로써 멀티미디어 콘텐츠 재생을 위한 홈 네트워크 환경 준비를 한다. 마지막으로 목록(3300)은 현재의 멀티미디어 콘텐츠에 필요한 디지털 기기를 정의하기 위한 엘리먼트로서 함께 오는 이름(3310) 엘리먼트가 속성 값으로 가짐(has)(3311)을 가지며 가짐(3311) 조건에 맞는 디지털 기기가 홈 네트워크 내에 있다면 해당 멀티미디어 콘텐츠와 함께 홈 네트워크 환경 준비에 참여한다.
도 4는 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법의 절차를 나타낸 흐름도이다.
도 4를 참조하면, S410 단계에서 상기 멀티미디어 선택기(212)가 실행되어 멀티미디어 콘텐츠가 선택되면, S412 단계에서 상기 제어부(230)는 선택된 멀티미디어 콘텐츠에 제어용 메타데이터가 있는지 판단한다. 상기 판단 결과 제어용 메타데이터가 있는 경우, S414 단계에서 상기 제어부(230)는 상기 메타데이터 추출기(214)를 제어하여 상기 제어용 메타데이터를 추출한다. S416 단계에서 상기 메타데이터 분석기(216)는 추출된 제어용 메타데이터를 메타데이터 스키마 포맷에 따라 분류하고 분석한다. S418 단계에서 상기 메타데이터 분석기(216)의 분석 결과는 상기 저장부(240)에 가전제어 메타데이터의 형태로 저장된다. 이후, S420 단계에서 상기 선택된 멀티미디어 콘텐츠가 실행되면, S422 내지 S428 단계에서 상기 제어메시지 생성기(218)는 상기 저장된 가전제어 메타데이터를 기반으로 제어 메시지를 생성하고 상기 제어부(230)는 그에 따른 홈 네트워크 내 디지털 기기의 제어를 수 행한다. 즉, S422 단계 내지 S424 단계에서 상기 제어부(230)는 선택된 멀티미디어 콘텐츠가 재생되는 중(종료되기 전)에 상기 저장부(240)에 저장된 가전제어 메타데이터를 기반으로 홈 네트워크 내 디지털 기기를 제어해야 하는 시각(예컨대 싱크(3100) 엘리먼트의 개시(3101)값의 시각)인지 판단하고, 판단결과 제어를 하는 시각인 경우, S426 단계에서 상기 제어메시지 생성기(218)를 가동하여 멀티미디어 콘텐츠의 제어용 메타데이터에 맞는 제어 메시지를 생성하게 되며 S428 단계에서 생성된 제어 메시지에 따라 해당 디지털 기기의 제어를 수행한다. 한편, 상기 판단(S422) 결과 제어 시각이 아닌 경우는 상기 멀티미디어 콘텐츠를 계속해서 재생한다.
한편, 상기 제어용 메타데이터의 유무 판단(S412)에서 제어용 메타데이터가 없는 경우, S430 단계에서 상기 제어부(230)는 메타데이터 없이, 즉, 디지털 기기의 제어 없이 멀티미디어 콘텐츠를 재생할 것인지를 판단한다. 이때 사용자와의 인터랙션을 통해 사용자의 의사를 묻고 이를 기반으로 판단을 수행할 수 있다. 판단 결과 디지털 기기의 제어 없이 멀티미디어 콘텐츠를 재생하는 경우, S420 단계에서 별도의 디지털 기기의 제어 수행 없이 상기 선택된 멀티미디어 콘텐츠가 실행된다. 그러나 상기 판단(S430) 결과 디지털 기기의 제어를 위한 메타데이터 없이는 멀티미디어 콘텐츠를 재생하지 않을 것으로 판단된 경우, 상기 제어부(230)는 상기 메타데이터 편집부(220)를 제어하여 S432 단계에서 메타데이터 판독기(222)가 상기 선택된 멀티미디어 콘텐츠에 제어용 메타데이터와 유사한 메타데이터가 있는지 판독하고, S434 단계에서 디스크립터 판독기(224)가 상기 선택된 멀티미디어 콘텐츠 에 미디어 설명 정보가 있는지 판독하며, S436 단계에서 메타데이터 생성기(226)가 상기 메타데이터 판독기(222) 및 디스크립터 판독기(224)에 의해 판독된 정보를 기반으로 제어용 메타데이터를 생성한다. 또한 선택적으로 사용자로부터 추가적인 입력 사항이나 수정 사항이 있는 경우 S438 단계에서 상기 메타데이터 편집기(228)가 사용자로부터 입력되는 정보를 기반으로 제어용 메타데이터를 편집할 수 있다.
도 5는 상기 메타데이터 분석(S416) 및 그에 따른 가전제어 메타데이터 저장 과정(S418)을 더 상세히 나타낸 흐름도로서, 이를 참조하면, S510 단계에서 상기 메타데이터 분석기(216)는 가전제어 메타데이터를 생성하기 위한 변수들을 초기화한다. 예컨대, 싱크 시간(synctime), 프로그램식별자(Program_id), 기구 이름(Appliance_name), 기기 동작(Device_action), 동작값(Action_value), 초(Seconds), 1/1000초(MilliSeconds), 초기화(Initialized) 등의 변수값을 0으로 설정한다. 이어서 S515 단계에서 상기 메타데이터 분석기(216)는 상기 제어용 메타데이터를 XML 스키마의 최소단위인 엘리먼트 단위로 분리한다.
그리고 S520 단계에서 엘리먼트로 분리할 메타데이터가 남아있는지 판단하여, 더 이상 없다면 엘리먼트를 하나씩 차례대로 읽어 처리하는데, S530 단계에서 엘리먼트가 program인지 판단하여, program이면 S535 단계에서 엘리먼트로부터 pid 값을 읽어 초기화된 변수인 program_id에 넣어 가전제어 메시지의 멀티미디어 콘텐츠의 id를 정의하고, 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다.
상기 판단(S530) 결과 엘리먼트가 프로그램에 해당되지 않으면, S540 단계에서 엘리먼트의 값이 sync인지 판단하여, sync이면 S545 단계에서 엘리먼트의 start 값을 읽어 초기화 된 변수의 Seconds와 Milliseconds값을 넣어 가전장치가 제어되어야 할 미디어 시작부터의 오프셋 시간을 지정하고, 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다.
상기 판단(S540) 결과 엘리먼트의 값이 sync에 해당되지 않으면, S550 단계에서 엘리먼트의 값이 appliances인지 판단하여, appliances이면 S555 단계에서 엘리먼트의 모든 attributes(속성) 값을 읽어 S580 단계에서 attribute name 값을 초기화된 변수인 Appliance_name에 넣고, S582 단계에서 attribute action 값을 Device_action에 넣고, S584 단계에서 attribute value 값을 Action_value에 넣는다. 이어서 S586 단계에서 현재 저장된 모든 변수를 이용하여 하나의 가전제어 엔터티로 저장하고, S590 단계에서 저장된 가전제어 엔터티들로 구성되는 가전제어 메타데이터를 생성하고, 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다.
상기 판단(S550) 결과 엘리먼트 값이 appliance에 해당되지 않으면 S560 단계에서 엘리먼트 값이 initial인지 판단하여 initial이면 S565 단계에서 디바이스 초기화에 필요한 메시지임을 구분하기 위해 해당 엘리먼트 값을 초기화된 변수인 Initialized 값에 넣고 S565 단계 내지 S590 단계에서 모든 attributes를 읽어 각 attribute를 해당 변수에 저장하고 가전제어 엔터티로 저장하여 가전제어 메타데이터를 생성하고, 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다.
상기 판단(S560) 결과 엘리먼트 값이 initial에 해당되지 않으면 S570 단계에서 엘리먼트 값이 lists인지 판단하여 lists이면 S575 단계에서 attribute has 값을 읽어 제어할 디지털 기기를 검색하기 위한 디바이스 검색 메시지를 만든다. 이어서 S588 단계에서 현재 읽은 모든 변수값을 디바이스 검색 엔터티로 저장하고, S590 단계에서 저장된 디바이스 검색 엔터티들을 가전제어 메타데이터에 추가하고, 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다.
상기 판단(S570) 결과 엘리먼트의 값이 lists에 해당하지 않으면 해당 엘리먼트는 분석기가 분석할 대상이 아니라 판단하여 다음 엘리먼트의 분석을 위해 상기 S520 단계로 귀환한다. 즉, S520 단계에서 분리할 엘리먼트가 있는지 판단하고, 판단 결과 멀티미디어 콘텐츠의 변경에 따라 새로운 메타데이터가 추가되거나 사용자 요청에 의한 메타데이터가 추가되면 새롭게 분리할 엘리먼트가 생기게 되어 S515 단계에서 메타데이터를 엘리먼트 단위로 분리하는 작업을 수행하고, 그에 따른 일련의 과정들 S515 내지 S590 단계를 반복적으로 수행할 수 있다. 상기 메타데이터 분석기(216)는 시스템이 시작됨과 동시에 대기하여 메타데이터가 입력되는 순간 활성화되어 메타데이터를 분석하고, 일련의 작업이 끝난 후 계속해서 추가되는 메타데이터를 대기하여 반복적으로 메타데이터를 분석할 수 있으며 시스템의 종료와 함께 종료된다.
도 6은 상기 메타데이터 편집 과정(S432 내지 S438)을 더 상세히 나타낸 흐름도로서, 이를 참조하면, S610 단계에서 상기 메타데이터 편집부(220)는 제어용 메타데이터가 없는 멀티미디어 콘텐츠의 형태를 정의하여, S620 단계에서 메타데이터 중의 하나인 자막파일이 존재하는지를 판단한다. 상기 판단(S620) 결과 자막파일이존재하면 S622 단계에서 소정 분량의 자막 파일에 대해 해당 내용이 가전제어와 매칭되는지, 즉, 디지털 기기를 제어하기 위한 것인가를 판단한다. 상기 판 단(S622) 결과 자막파일의 내용이 가전제어와 매칭되면 S624 단계에서 해당 자막파일 내 시간과 내용을 엔터티로 구성하여 저장한다. 즉, 자막 XML 스키마가 sync 엘리먼트를 이용하여 그 시각에 자막내용을 출력하는 구조와 같이, 메타데이터의 엘리먼트의 attribute를 읽어 제어용 메타데이터 스키마에 맞는 엔터티를 구성하여 저장한다. 이어서 S626 단계에서 자막 파일의 내용이 남아 있는지를 판단하여, 내용이 남아 있으면 자막파일의 모든 내용을 판독할 때까지 S622 내지 S626 단계를 반복 수행한다. 한편 더 판독할 자막 파일의 내용이 남아있지 않은 경우, 혹은 상기 판단(S620) 결과 자막파일이 존재하지 않는 경우, S630 단계에서 해당 멀티미디어 콘텐츠가 디스크립션이 있는 콘텐츠(예컨대 MPEG7과 같은 멀티미디어 콘텐츠의 정보가 기술되어 있는 콘텐츠)인지 판단한다. 상기 판단(S630) 결과 디스크립션이 있는 경우, S632 단계에서 해당 디스크립션이 가전제어와 매칭되는지를 판단하고, 가전제어와 매칭되면 S634 단계에서 해당 디스크립션의 시간과 내용을 엔터티로 구성하여 저장한다. 이어서 S636 단계에서 더 판독할 디스크립션이 있는지를 판단하여, 디스크립션이 남아 있으면 모든 디스크립션을 판독할 때까지 상기 S632 내지 S636 단계를 반복적으로 수행한다. 한편 더 판독할 디스크립션이 남아있지 않은 경우, 혹은 상기 판단(S630) 결과 디스크립션이 존재하지 않는 경우, S640 단계에서 사용자 입력 메타데이터를 생성할 것인지를 판단하여, 사용자 입력 메타데이터를 생성할 것으로 판단되면 S642 단계에서 사용자로부터의 입력에 따라 제어용 메타데이터를 생성한다. 또한 S644 단계에서 더 생성할 사용자 입력 메타데이터가 남아있는지를 판단하여 남아있는 경우 상기 S642 단계에서 사용자로부터의 입력에 따른 제어용 메타데이터를 생성하여 추가하고, 더 생성할 사용자 입력 메타데이터가 남아있지 않은 경우 편집 과정을 종료한다.
이상에서는 본 발명에서 특정의 바람직한 실시 예에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시 예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
도 1은 종래의 기술에 따른 홈 네트워크 환경 구성을 나타내는 구성도.
도 2는 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치의 구성을 나타내는 구성도.
도 3은 본 발명의 제어용 메타데이터의 XML 스키마의 일예를 나타낸 도면.
도 4는 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법의 절차를 나타낸 흐름도.
도 5는 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법 중 메타데이터 분석 및 그에 따른 가전제어 메타데이터 저장 과정을 나타낸 흐름도.
도 6은 본 발명의 실시 예에 따른 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법 중 메타데이터 편집 과정을 나타낸 흐름도.
Claims (13)
- 선택되는 멀티미디어 콘텐츠의 제어용 메타데이터를 분석하고 분석 결과를 기반으로 홈 네트워크 내 디지털 기기의 제어를 위한 제어 메시지를 생성하는 메타데이터 처리부와;상기 제어 메시지를 기반으로 유무선 통신을 이용하여 홈 네트워크 내 디지털 기기의 제어를 수행하는 제어부를 포함하여 구성되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 1항에 있어서, 상기 메타데이터 처리부는멀티미디어 콘텐츠를 선택하는 멀티미디어 선택기와;상기 멀티미디어 선택기에 의해 선택된 멀티미디어 콘텐츠로부터 제어용 메타데이터를 추출하는 메타데이터 추출기와;상기 메타데이터 추출기에 의해 추출된 제어용 메타데이터를 분석하는 메타데이터 분석기와;상기 분석 결과를 가전제어 메타데이터로서 저장하는 저장부와;상기 가전제어 메타데이터를 바탕으로 홈 네트워크 내 디지털 기기를 제어하기 위한 제어 메시지를 생성하는 제어메시지 생성기를 포함하여 구성되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 2항에 있어서, 상기 멀티미디어 선택기는사용자의 키 입력과 원격제어 중 적어도 하나에 의해 인가되는 신호에 따라 멀티미디어 콘텐츠를 선택하는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 2항에 있어서, 상기 메타데이터 추출기는상기 제어부에 의해 제어용 메타데이터 스키마에 맞는 제어용 메타데이터가 있는 것으로 판단된 경우, 해당 제어용 메타데이터를 추출하여 상기 메타데이터 분석기로 출력하는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 4항에 있어서, 상기 메타데이터 스키마는XML로 정의되며,프로그램(program), 싱크(sync), 기구(appliance), 초기(initial), 이름(name) 및 목록(lists)의 엘리먼트와;이름(name), 동작(action), 값(value), 개시(start), 가짐(has), 프로그램 식별자(pid)의 속성(attribute)을 포함하여 구성되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 1항에 있어서,멀티미디어 콘텐츠의 제어용 메타데이터의 생성 및 수정을 위한 메타데이터 편집부를 더 포함하여 구성되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 6항에 있어서, 상기 메타데이터 편집부는선택되는 멀티미디어 콘텐츠에 제어용 메타데이터가 없을 경우 다른 종류의 메타데이터가 있는지 판단하기 위한 메타데이터 판독기와;멀티미디어 콘텐츠 내 멀티미디어의 표현 내용이 있는지 판단하는 디스크립터 판독기와;상기 메타데이터 판독기 및 디스크립터 판독기에 의해 판독된 정보를 기반으로 제어용 메타데이터를 생성하는 메타데이터 생성기와;사용자가 추가적으로 해당 멀티미디어 콘텐츠의 메타데이터에 제어내용을 추가 및 수정하도록 하기 위한 메타데이터 편집기를 포함하여 구성되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 제 6항에 있어서, 상기 메타데이터 편집부에 의해 생성 및 편집되는 제어용 메타데이터는 상기 멀티미디어 콘텐츠의 소정 영역에 포함되어 상기 메타데이터 처리부에 의해 처리되어 홈 네트워크 내 디지털 기기를 제어하는데 이용되는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 장치.
- 멀티미디어 콘텐츠가 선택되는 단계와;상기 선택되는 멀티미디어 콘텐츠에 포함된 제어용 메타데이터를 추출하여 메타데이터 스키마 포맷에 따라 분석하여 가전제어 메타데이터로서 저장하는 단계와;상기 선택된 멀티미디어 콘텐츠가 실행되면 상기 저장된 가전제어 메타데이터를 기반으로 제어 메시지를 생성하고 그에 따른 홈 네트워크 내 디지털 기기의 제어를 수행하는 단계를 포함하여 이루어지는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법.
- 제 9항에 있어서, 상기 제어 수행 단계는선택된 멀티미디어 콘텐츠가 재생되는 중에 상기 저장된 가전제어 메타데이터를 기반으로 홈 네트워크 내 디지털 기기를 제어해야 하는 시각인지 판단하는 단계와;상기 판단결과 제어를 하는 시각인 경우, 멀티미디어 콘텐츠의 제어용 메타데이터에 맞는 제어 메시지를 생성하는 단계와;상기 생성된 제어 메시지에 따라 해당 디지털 기기의 제어를 수행하는 단계를 포함하여 이루어지는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법.
- 제 9항에 있어서, 상기 선택되는 멀티미디어 콘텐츠에 제어용 메타데이터가 없는 경우,상기 선택된 멀티미디어 콘텐츠에 제어용 메타데이터와 유사한 메타데이터가 있는지 판독하는 단계와;상기 선택된 멀티미디어 콘텐츠에 미디어 설명 정보가 있는지 판독하는 단계와;상기 판독된 정보들을 기반으로 제어용 메타데이터를 생성하는 단계를 포함하여 이루어지는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법.
- 제 11항에 있어서,사용자로부터 입력되는 정보를 기반으로 제어용 메타데이터를 편집하는 단계를 더 포함하여 이루어지는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법.
- 제 9항에 있어서, 상기 저장 단계는상기 선택되는 멀티미디어 콘텐츠에 포함된 제어용 메타데이터를 추출하는 단계와;상기 추출되는 제어용 메타데이터를 엘리먼트(element) 단위로 분리하는 단계와;분리된 엘리먼트를 차례대로 분석하여 모든 엘리먼트에 대해 해당 엘리먼트 의 모든 속성(attributes)의 값을 읽고 그에 따른 변수 값을 지정하여 가전제어 메타데이터를 생성하는 단계를 포함하여 이루어지는 것을 특징으로 하는 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크 제어 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070128545A KR20090061516A (ko) | 2007-12-11 | 2007-12-11 | 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070128545A KR20090061516A (ko) | 2007-12-11 | 2007-12-11 | 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20090061516A true KR20090061516A (ko) | 2009-06-16 |
Family
ID=40990972
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070128545A KR20090061516A (ko) | 2007-12-11 | 2007-12-11 | 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20090061516A (ko) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010008232A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008233A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 사용자 환경 정보 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008234A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
GB2548152A (en) * | 2016-03-11 | 2017-09-13 | Sony Corp | Apparatus, method and computer program |
-
2007
- 2007-12-11 KR KR1020070128545A patent/KR20090061516A/ko active Search and Examination
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010008232A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008233A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 사용자 환경 정보 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008234A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008234A3 (ko) * | 2008-07-16 | 2010-05-14 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008232A3 (ko) * | 2008-07-16 | 2010-05-14 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
WO2010008233A3 (ko) * | 2008-07-16 | 2010-05-14 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 사용자 환경 정보 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
US8712958B2 (en) | 2008-07-16 | 2014-04-29 | Electronics And Telecommunications Research Institute | Method and apparatus for representing sensory effects and computer readable recording medium storing user sensory preference metadata |
GB2548152A (en) * | 2016-03-11 | 2017-09-13 | Sony Corp | Apparatus, method and computer program |
EP3217678A3 (en) * | 2016-03-11 | 2017-10-25 | Sony Corporation | Apparatus, method and computer program |
US10362343B2 (en) | 2016-03-11 | 2019-07-23 | Sony Corporation | Apparatus, method and computer program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20050226601A1 (en) | Device, system and method for synchronizing an effect to a media presentation | |
CN102243581B (zh) | 多媒体桌面背景设置方法、多媒体播放器 | |
EP1967005B1 (en) | Script synchronization using fingerprints determined from a content stream | |
KR101492635B1 (ko) | 실감 미디어 생성 및 소비 방법 및 그 장치 | |
JP2009521170A (ja) | 透かしによるスクリプト同期化方法 | |
US20150003811A1 (en) | Providing Advance Content Alerts To A Mobile Device During Playback Of A Media Item | |
US20090288112A1 (en) | Inserting advance content alerts into a media item during playback | |
EP2103128A1 (en) | Personalised media presentation | |
RU2427986C2 (ru) | Управление окружающим освещением на основе событий | |
KR20090038835A (ko) | 실감 미디어 생성 및 소비 방법 및 그 장치 및 실감 미디어메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록매체 | |
US20050144637A1 (en) | Signal output method and channel selecting apparatus | |
US20090222849A1 (en) | Audiovisual Censoring | |
KR20100033954A (ko) | 실감 효과 표현 방법 및 장치 | |
WO2001082065A2 (en) | Method and apparatus for adapting a graphical user interface | |
KR20100008774A (ko) | 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 | |
EP3125247B1 (en) | Personalized soundtrack for media content | |
CN104835513A (zh) | 音频定时播放方法、装置及系统 | |
KR20090061516A (ko) | 멀티미디어 콘텐츠 메타데이터 분석에 따른 홈 네트워크제어 장치 및 방법 | |
CN105163448A (zh) | 一种led智能灯的控制方法、装置及系统 | |
KR20090103111A (ko) | Epg에 기초한 컨텐츠 재생 방법 및 그 장치 | |
JP2005006037A (ja) | メディア同期システム及びそれに用いるサービス提供方法 | |
JP5270031B2 (ja) | コンテンツ提供システム、コンテンツ生成装置、コンテンツ再生装置及びコンテンツ提供方法 | |
WO2010087153A1 (ja) | 感覚効果情報のデータ構造、感覚効果情報出力装置、感覚効果情報出力方法、感覚効果情報生成装置、制御装置、システム、プログラムおよび記録媒体 | |
Suk et al. | Sensory effect metadata for SMMD media service | |
KR101052850B1 (ko) | 상용 디브이디 콘텐츠를 이용한 자막제공 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
J201 | Request for trial against refusal decision | ||
AMND | Amendment | ||
B601 | Maintenance of original decision after re-examination before a trial | ||
J301 | Trial decision |
Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20090930 Effective date: 20110228 |