KR20110024754A - Image object service system and method for the same - Google Patents
Image object service system and method for the same Download PDFInfo
- Publication number
- KR20110024754A KR20110024754A KR1020090082881A KR20090082881A KR20110024754A KR 20110024754 A KR20110024754 A KR 20110024754A KR 1020090082881 A KR1020090082881 A KR 1020090082881A KR 20090082881 A KR20090082881 A KR 20090082881A KR 20110024754 A KR20110024754 A KR 20110024754A
- Authority
- KR
- South Korea
- Prior art keywords
- media content
- manager
- server
- media
- information
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/254—Management at additional data server, e.g. shopping server, rights management server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4782—Web browsing, e.g. WebTV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
본 발명은 영상 오브젝트 서비스 기술에 관한 것으로, 특히 영상에 포함된 특정 오브젝트를 썸네일로 활성화하여 표시하고 오브젝트 선택시 오브젝트에 대한 상세 정보를 출력함과 함께 이벤트 발생에 따른 웹 서비스 및 애플릿 서비스를 제공하는 영상 오브젝트 서비스 기술에 관한 것이다.The present invention relates to an image object service technology. In particular, the present invention provides a web service and an applet service according to an event occurrence while displaying and displaying a specific object included in an image as a thumbnail and outputting detailed information on the object when selecting an object. It relates to a video object service technology.
종래 미디어 컨텐츠와 연동하는 오브젝트 서비스는 미디어 컨텐츠의 타임라인에 따라 순차적으로 대기 상태에 놓이고 특정 타임라인에 도달하면 해당 오브젝트를 노출시킨다. 종래 오브젝트 서비스는 미디어 컨텐츠의 타임라인을 조정하여 해당 오브젝트를 순차적으로 접근하지만 서비스 오브젝트 단위로 미디어 컨텐츠의 영상 이동이 불가능한 문제점이 있다.The object service interworking with the conventional media content sequentially waits according to the timeline of the media content and exposes the object when the specific timeline is reached. Conventional object services adjust the timeline of media content to sequentially access the corresponding object, but there is a problem in that image movement of the media content cannot be performed in units of service objects.
종래 오브젝트 서비스는 미디어 컨텐츠에 포함된 오브젝트를 검색할 때 순차적으로 미디어 컨텐츠를 재생하여 해당 오브젝트가 노출되는 재생 시점을 검색해야 하므로 특정 오브젝트를 검색하기 위해 미디어 컨텐츠의 전체를 재생해야 하는 문제점이 있다.In the conventional object service, when searching for an object included in the media content, the media content must be sequentially played to search for a playback time at which the corresponding object is exposed. Therefore, the object service has to play the entire media content to search for a specific object.
본 발명의 목적은 미디어 컨텐츠의 영상을 오브젝트 중심으로 검색할 수 있도록 오브젝트의 직관적인 사용자 인터페이스를 제공하여 사용자 인터페이스를 통해 오브젝트 단위로 영상 검색을 제어하는 영상 오브젝트 서비스 기술을 제공하는 것이다.SUMMARY OF THE INVENTION An object of the present invention is to provide an image object service technology for controlling an image search by an object unit through a user interface by providing an intuitive user interface of an object so that an image of media content can be searched around an object.
또한, 본 발명의 목적은 오브젝트를 기준으로 미디어 컨텐츠의 영상을 정렬된 썸네일로 제공해서 특정 오브젝트를 포함한 영상에 바로 접근이 가능하고 오브젝트와 연동된 다양한 서비스를 제공하는 영상 오브젝트 서비스 기술을 제공하는 것이다.In addition, it is an object of the present invention to provide a video object service technology that provides a variety of services linked with the object by providing an image of the media content in a sorted thumbnail based on the object to directly access the image including a specific object. .
본 발명에 따른 영상 오브젝트 서비스 시스템은 미디어 컨텐츠를 제공하며 미디어 컨텐츠에 포함된 오브젝트에 대한 정보를 제공하는 오브젝트 서버에 해당하는 액세스 포인트를 제공하는 미디어 센터; 미디어 센터에 의해 제공되는 미디어 컨텐츠에 연동된 오브젝트 정보를 제공하는 오브젝트 서버; 미디어 재생 요청에 응답하여 미디어 센터로부터 미디어 컨텐츠를 수신해서 재생하고 미디어 컨텐츠에 대응하는 오브젝트 서버로부터 오브젝트 정보를 수신하여 미디어 컨텐츠의 재생 시점에 맞추어 오브젝트를 노출시키는 로컬 디바이스; 및 로컬 디바이스에 의해 노출된 오브젝트에서 발생하는 이벤트에 대응한 서비스를 제공하는 서비스 서버;를 포함하 여 구성된다.An image object service system according to the present invention includes a media center that provides media content and provides an access point corresponding to an object server that provides information about an object included in the media content; An object server that provides object information linked to media content provided by the media center; A local device that receives and plays media content from a media center in response to a media playback request, receives object information from an object server corresponding to the media content, and exposes the object in accordance with a playback time of the media content; And a service server that provides a service corresponding to an event occurring in an object exposed by the local device.
본 발명에 따른 로컬 디바이스는, 미디어 재생 요청에 따라 미디어 센터로부터 해당 미디어 컨텐츠를 수신해서 재생하고 미디어 컨텐츠에 대응한 오브젝트 정보를 제공하는 오브젝트 서버에 대한 액세스 포인트의 정보를 수신하는 미디어 플레이어; 및 미디어 컨텐츠에 대응한 오브젝트 서버에 접속하여 오브젝트 정보를 수신하고 미디어 플레이어에 의한 미디어 컨텐츠의 타임라인과 오브젝트 정보의 타임라인을 싱크하여 오브젝트를 로딩하는 오브젝트 매니저;를 포함하여 구성된 것을 특징으로 한다.According to an aspect of the present invention, there is provided a local device, comprising: a media player configured to receive information of an access point for an object server that receives and plays corresponding media content from a media center according to a media playback request, and provides object information corresponding to the media content; And an object manager connected to the object server corresponding to the media content to receive the object information and to load the object by synchronizing the timeline of the media content and the timeline of the object information by the media player.
본 발명에 따른 오브젝트 매니저는, 오브젝트 정보의 타임라인을 기준으로 해당 오브젝트의 컨텐츠를 저장하는 오브젝트 서버에 접속하여 획득한 오브젝트의 컨텐츠와 미디어 플레이어에 의해 재생되는 영상을 싱크하여 오브젝트를 로딩하는 타임라인 매니저; 및 타임라인 매니저에 의해 로딩된 오브젝트에서 발생하는 이벤트를 처리하여 웹 서비스 및 애플릿 서비스를 제공하는 오브젝트 플레이어;를 포함하여 구성된 것을 특징으로 한다.The object manager according to the present invention is connected to an object server that stores contents of an object based on a timeline of object information, and a timeline for loading an object by synchronizing the contents of the object obtained with the image played by the media player. Manager; And an object player that processes the events occurring in the object loaded by the timeline manager and provides a web service and an applet service.
본 발명에 따른 영상 오브젝트 서비스 방법은 (a) 오브젝트 매니저가 미디어 플레이어에 의해 재생되는 미디어 컨텐츠에 해당하는 오브젝트 정보를 오브젝트 서버로부터 수신하는 단계; (b) 미디어 플레이어가 미디어 컨텐츠를 재생하면서 영상의 타임라인을 오브젝트 매니저로 전달하는 단계; (c) 오브젝트 매니저가 영상의 타임라인에 기반하여 오브젝트의 타임라인에 싱크해서 오브젝트를 로딩하는 단계; 및 (d) 오브젝트 매니저가 키 조작과 미디어 컨텐츠의 재생 제어에 기반하여 로딩 된 오브젝트에서 발생하는 이벤트를 처리해서 웹 서비스 및 애플릿 서비스를 제공하는 단계;를 포함하여 구성된다.The video object service method according to the present invention comprises the steps of: (a) an object manager receiving object information corresponding to media content played by a media player from an object server; (b) the media player delivering the timeline of the image to the object manager while playing the media content; (c) the object manager synchronizing with the timeline of the object and loading the object based on the timeline of the image; And (d) providing, by the object manager, a web service and an applet service by processing an event occurring in the loaded object based on key manipulation and playback control of the media content.
본 발명에 따른 (a) 단계는, 오브젝트 매니저가 오브젝트 서버로 미디어 컨텐츠의 고유 번호를 전송하는 단계; 오브젝트 서버가 오브젝트 매니저로 미디어 컨텐츠의 고유 번호에 대응한 오브젝트 정보를 전달하는 단계; 및 오브젝트 매니저가 오브젝트 서버로부터 오브젝트 정보를 수신하고 수신된 오브젝트 정보를 파싱하여 오브젝트의 로딩을 대기하는 단계;를 포함하여 구성된 것을 특징으로 한다.According to the present invention, step (a) comprises the steps of: the object manager transmitting a unique number of the media content to the object server; Delivering, by the object server, object information corresponding to the unique number of the media content to the object manager; And receiving, by the object manager, the object information from the object server, parsing the received object information, and waiting for loading of the object.
본 발명에 따른 (a) 단계는, 오브젝트 매니저가 오브젝트 서버로 미디어 컨텐츠의 고유 번호를 전송하는 단계; 오브젝트 서버가 오브젝트 매니저로 미디어 컨텐츠의 고유 번호에 대응한 오브젝트의 썸네일 정보를 전달하는 단계; 오브젝트 매니저가 더미 패킷을 이용하여 오브젝트 서버와 통신 연결을 유지하는 단계; 및 오브젝트 매니저가 오브젝트의 썸네일 정보에 기반하여 미디어 컨텐츠의 재생 시점에 맞게 해당 오브젝트 정보를 오브젝트 서버에 요청하여 패킷 형태의 오브젝트 정보를 수신하는 단계;를 포함하여 구성된 것을 특징으로 한다.According to the present invention, step (a) comprises the steps of: the object manager transmitting a unique number of the media content to the object server; Delivering, by the object server, thumbnail information of the object corresponding to the unique number of the media content to the object manager; The object manager using the dummy packet to maintain a communication connection with the object server; And receiving, by the object manager, object information in the form of a packet by requesting the corresponding object information from the object server in accordance with the playback time of the media content based on the thumbnail information of the object.
본 발명에 따른 (a) 단계는, 오브젝트 매니저가 오브젝트 서버로 미디어 컨텐츠의 고유 번호를 전송하는 단계; 오브젝트 서버가 오브젝트 매니저로 상기 미디어 컨텐츠의 고유 번호에 대응한 오브젝트 정보를 전달하는 단계; 및 오브젝트 매니저가 오브젝트 서버로부터 오브젝트 정보를 수신하고 수신된 오브젝트 정보를 파싱하여 오브젝트의 로딩을 대기하는 단계;를 포함하고, (c) 단계는, 오브젝트 매니저가 특정 주기로 오브젝트 서버에 더미 패킷을 전송하고 오브젝트 서버가 더미 패 킷에 대한 응답으로 이벤트 오브젝트가 있는지를 체크하는 단계; 및 오브젝트 서버에서 이벤트 오브젝트가 있으면 오브젝트 매니저로 이벤트 오브젝트를 전송해서 오브젝트 매니저에서 이벤트 오브젝트를 로딩하는 단계;를 포함하여 구성된 것을 특징으로 한다.According to the present invention, step (a) comprises the steps of: the object manager transmitting a unique number of the media content to the object server; Transmitting, by an object server, object information corresponding to the unique number of the media content to an object manager; And receiving, by the object manager, the object information from the object server, parsing the received object information, and waiting for the loading of the object, wherein step (c) includes: transmitting the dummy packet to the object server at a specific period; The object server checking whether there is an event object in response to the dummy packet; And loading the event object in the object manager by transmitting the event object to the object manager if there is an event object in the object server.
본 발명에 따른 (a) 단계는, 오브젝트 매니저가 오브젝트 서버로 미디어 컨텐츠의 고유 번호를 전송하는 단계; 오브젝트 서버가 오브젝트 매니저로 미디어 컨텐츠의 고유 번호에 대응한 컨텐츠 URL을 전달하는 단계; 오브젝트 매니저가 오브젝트 서버로부터 수신한 컨텐츠 URL의 애플리케이션 컨텐츠를 브라우저 엔진을 통해 로딩하는 단계; 오브젝트 매니저가 미디어 플레이어로부터 수신한 미디어 컨텐츠의 재생 시점을 브라우저 엔진에 의해 로딩된 애플리케이션 컨텐츠에 전달하는 단계; 애플리케이션 컨텐츠가 미디어 컨텐츠의 재생 시점에 기반하여 이벤트 및 오브젝트 서비스를 실행하는 단계;를 포함하여 구성된 것을 특징으로 한다.According to the present invention, step (a) comprises the steps of: the object manager transmitting a unique number of the media content to the object server; Delivering, by the object server, the content URL corresponding to the unique number of the media content to the object manager; Loading, by the object manager, the application content of the content URL received from the object server through a browser engine; Delivering, by the object manager, the playback time of the media content received from the media player to the application content loaded by the browser engine; And executing the event and the object service based on the playing time of the media content.
본 발명에 따르면 단방향 서비스로 제공되는 미디어 컨텐츠의 재생 서비스에 대해 미디어 컨텐츠에 포함된 오브젝트에 연동하여 다양한 서비스를 제공함으로써 사용자 또는 지역에 따라 다양하게 특화된 양방향 데이터 서비스를 제공하는 효과가 있다.According to the present invention, by providing various services in association with an object included in the media content for the playback service of the media content provided by the one-way service, there is an effect of providing a bidirectional data service specialized for various users or regions.
또한, 본 발명은 외부 통신망과 연동하는 다양한 서비스 중 하나인 웹 서비스 및 애플릿 서비스를 미디어 컨텐츠의 영상에 포함된 오브젝트의 노출과 함께 활 성화하여 제공함으로써 보다 풍부한 정보와 다양한 서비스를 사용자에게 제공하는 효과가 있다.In addition, the present invention is to provide a richer information and a variety of services to the user by activating and providing a web service and an applet service, which is one of a variety of services interworking with the external communication network with the exposure of the object contained in the image of the media content There is.
이하, 본 발명의 실시예를 도면을 참조하여 상세하게 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
[도 1]은 본 발명에 따른 영상 오브젝트 서비스 시스템의 구성을 보인 블록도이다.1 is a block diagram showing the configuration of a video object service system according to the present invention.
영상 오브젝트 서비스 시스템은 미디어 센터(100), 오브젝트 서버(300), 로컬 디바이스(200), 서비스 서버(400)로 구성되어 로컬 디바이스(200)가 미디어 센터(100)에서 제공하는 미디어 컨텐츠를 재생하면서 미디어 컨텐츠의 재생 시점에 맞추어 오브젝트를 노출시키고 발생하는 이벤트에 대응하여 서비스 서버(400)에 접속해서 외부 통신망과 링크된 서비스인 웹 서비스 또는 애플릿 서비스를 제공한다. 영상 오브젝트 서비스 시스템을 구성하는 각각의 구성 요소에 대해 설명한다.The image object service system includes a
미디어 센터(100)는 로컬 디바이스(200)의 요청에 따라 미디어 컨텐츠를 제공한다. 미디어 센터(100)는 로컬 디바이스(200)에 미디어 컨텐츠를 제공함과 더불어 미디어 컨텐츠에 포함된 오브젝트에 대한 정보를 제공하는 오브젝트 서버(300)에 해당하는 액세스 포인트를 제공한다. 미디어 센터(100)는 로컬 디바이스(200)로 제공되는 미디어 컨텐츠에 해당하는 액세스 포인트를 제공하여 특정 미디어 컨텐츠에 대응한 오브젝트 정보를 제공하는 오브젝트 서버(300)의 접속 경로를 로컬 디바이스(200)에 전달한다.The
오브젝트 서버(300)는 로컬 디바이스(200)의 오브젝트 정보 요청에 응답하여 해당 미디어 컨텐츠에 대한 오브젝트 정보를 로컬 디바이스(200)로 제공한다. 오브젝트 서버(300)는 미디어 센터(100)에 의해 로컬 디바이스(200)로 제공되는 미디어 컨텐츠에 연동된 오브젝트 정보를 로컬 디바이스(200)로 전달한다.The
로컬 디바이스(200)는 사용자의 미디어 재생 요청에 응답하여 미디어 센터(100)에 해당 미디어 컨텐츠를 요청하여 미디어 컨텐츠와 오브젝트 서버(300)의 액세스 포인트를 수신한다. 로컬 디바이스(200)는 미디어 컨텐츠의 재생을 준비하고 미디어 컨텐츠에 대응하는 액세스 포인트인 오브젝트 서버(300)에 오브젝트 정보를 요청하여 수신한다. 로컬 디바이스(200)는 미디어 컨텐츠의 재생 시점에 맞추어 오브젝트를 노출시킨다.The
로컬 디바이스(200)의 세부 구성은 미디어 플레이어(220), 오브젝트 매니저(210)로 구성되며 오브젝트 매니저(210)는 타임라인 매니저(211), 오브젝트 플레이어(212)로 구성된다. 로컬 디바이스(200)의 세부 구성 요소에 대해 설명하면 다음과 같다.The detailed configuration of the
미디어 플레이어(220)는 사용자의 미디어 재생 요청에 따라 미디어 센터(100)로부터 해당 미디어 컨텐츠를 수신해서 재생한다. 미디어 플레이어(220)는 재생 요청된 미디어 컨텐츠에 대응한 오브젝트 정보를 제공하는 오브젝트 서버(300)에 대한 액세스 포인트의 정보를 수신하여 오브젝트 매니저(210)에 제공한다.The
오브젝트 매니저(210)는 미디어 플레이어(220)로부터 수신한 오브젝트 서 버(300)의 액세스 포인트 정보를 참조하여 미디어 컨텐츠에 대응한 오브젝트 서버(300)에 접속하여 오브젝트 정보를 수신한다. 오브젝트 매니저(210)는 미디어 플레이어(220)로부터 미디어 컨텐츠의 재생에 따른 타임라인 정보를 수신해서 미디어 컨텐츠의 타임라인과 오브젝트 정보의 타임라인을 싱크하여 해당 오브젝트를 로딩한다.The
오브젝트 매니저(210)의 타임라인 매니저(211)는 오브젝트 서버(300)로부터 수신한 오브젝트 정보를 참조하여 썸네일 스케줄을 구성한다. 타임라인 매니저(211)는 구성된 썸네일 스케줄에서 특정 썸네일 모드로의 진입을 감독하며 썸네일 모드로 진입시 키 핸들 및 미디어 제어의 이벤트를 관리한다.The
타임라인 매니저(211)는 오브젝트 정보의 타임라인을 기준으로 해당 오브젝트의 컨텐츠를 저장하는 오브젝트 서버(300)에 접속하여 획득한 오브젝트의 컨텐츠와 미디어 플레이어(220)에 의해 재생되는 영상을 싱크하여 오브젝트를 로딩한다.The
오브젝트 플레이어(212)는 타임라인 매니저(211)에 의해 로딩된 오브젝트에서 발생하는 이벤트를 처리하여 웹 서비스 및 애플릿 서비스를 제공한다. 오브젝트 플레이어(212)는 오브젝트와 영상의 싱크에 따라 오브젝트를 노출시키고 노출된 오브젝트가 인터액티브 모드에서 실행되도록 해서 오브젝트가 키 핸들 또는 이벤트 정책에서 보다 높은 우선 순위를 갖도록 한다. 오브젝트 플레이어(212)는 노출된 오브젝트에 대해 발생하는 이벤트를 처리하여 외부 서비스 서버와 링크된 서비스인 웹 서비스 또는 애플릿 서비스를 제공한다.The
서비스 서버(400)는 로컬 디바이스(200)에 의해 노출된 오브젝트에서 발생하 는 이벤트에 대응한 서비스를 제공한다. 예를 들어, 서비스 서버(400)는 로컬 디바이스(200)에서 실행 중인 오브젝트에서 발생하는 이벤트에 대응하여 웹 서비스 또는 애플릿 서비스를 로컬 디바이스(200)에 제공한다.The
[도 2]는 본 발명에 따른 영상 오브젝트 서비스 방법의 동작 흐름도이다.2 is an operation flowchart of a video object service method according to the present invention.
영상 오브젝트 서비스는 미디어 플레이어가 미디어 컨텐츠를 재생하면서 영상의 타임라인을 오브젝트 매니저에게 제공하고 오브젝트 매니저가 영상의 타임라인과 오브젝트의 타임라인을 싱크해서 오브젝트를 로딩해서 제공되는 서비스이다.The video object service is a service provided by a media player while playing media content, providing a timeline of an image to the object manager, and loading the object by synchronizing the timeline of the object with the timeline of the image.
영상 오브젝트 서비스가 실행되기 전의 사전 준비 과정으로 오브젝트 매니저는 미디어 플레이어에 의해 재생되는 미디어 컨텐츠에 해당하는 오브젝트 정보를 오브젝트 서버에 요청하여 수신한다. 오브젝트 매니저가 미디어 컨텐츠에 대한 오브젝트 정보를 구비하고 있다는 가정 하에 영상 오브젝트 서비스 방법의 동작 흐름에 대해 설명한다.In the preliminary preparation process before the video object service is executed, the object manager requests and receives object information corresponding to the media content played by the media player from the object server. The operation flow of the video object service method will be described on the assumption that the object manager includes object information on media content.
미디어 플레이어는 사용자의 미디어 재생 요청에 응답하여 미디어 센터로부터 다운로드한 미디어 컨텐츠의 재생을 시작한다(ST100). 미디어 플레이어는 미디어 컨텐츠의 재생에 따른 영상의 타임라인을 오브젝트 매니저에 제공한다(ST110).The media player starts playing the media content downloaded from the media center in response to the user's request to play the media (ST100). The media player provides the object manager with a timeline of an image according to the playback of the media content (ST110).
오브젝트 매니저는 영상의 타임라인에 기반하여 오브젝트의 타임라인에 싱크해서 오브젝트를 로딩한다(ST120). 오브젝트의 타임라인에 대한 정보는 오브젝트 매니저가 오브젝트 서버로부터 수신한 오브젝트 정보에 포함되어 있다.The object manager loads the object by syncing to the timeline of the object based on the timeline of the image (ST120). Information about the timeline of the object is included in the object information received by the object manager from the object server.
오브젝트 매니저는 밀리 초 단위로 영상의 타임라인을 체크하고 영상의 타임 라인과 오브젝트 타임라인을 싱크해서 해당 오브젝트를 로딩한다. 로딩된 오브젝트는 사용자 조작을 입력받아 자체에서 발생하는 이벤트를 처리해서 이벤트에 대응하는 서비스를 사용자에게 제공한다(ST130).The object manager checks the timeline of the image in milliseconds, and loads the corresponding object by synchronizing the timeline and the object timeline of the image. The loaded object receives a user operation and processes an event occurring in itself to provide a service corresponding to the event to the user (ST130).
다른 실시예로, 로딩된 오브젝트는 외부 링크로 연결되는 서비스 서버에 접속하여 링크 서비스를 제공한다(ST140). 로딩된 오브젝트는 키 조작과 미디어 컨텐츠의 재생 제어에 기반하여 발생하는 이벤트를 처리해서 링크 서비스인 웹 서비스 및 애플릿 서비스를 제공한다.In another embodiment, the loaded object accesses a service server connected to an external link to provide a link service (ST140). The loaded object handles events that occur based on key manipulation and playback control of media content to provide link services, web services and applet services.
[도 3]은 본 발명에 따른 오브젝트 정보의 필드 구성을 보인 예시도이다.3 is an exemplary view showing a field configuration of object information according to the present invention.
오브젝트 정보의 엘리먼트 구성은 미디어, 썸, 오브젝트로 구성되며 각각의 엘리먼트는 고유의 프로퍼티로 구성된다.Element composition of object information is composed of media, thumb, and object, and each element is composed of unique property.
미디어 엘리먼트는 오브젝트와 영상을 매칭하기 위하여 필요한 필드이다. 미디어 엘리먼트는 고유의 프로퍼티로 미디어 컨텐츠의 고유 번호를 포함한다.The media element is a field required for matching the object and the image. Media elements are unique properties that contain a unique number of media content.
썸 엘리먼트는 오브젝트를 가지는 장면을 표시하기 위하여 필요한 필드이다. 썸 엘리먼트는 고유의 프로퍼티로 오브젝트를 포함한 썸네일 인덱스, 이미지 위치 정보, 밀리 초 단위의 타임라인, 오브젝트 아이디, 검색어 정렬을 위한 필드를 포함한다.The thumb element is a field required for displaying a scene having an object. The thumb element is a unique property that includes a thumbnail index including an object, image location information, a timeline in milliseconds, an object ID, and a field for sorting a search word.
오브젝트 엘리먼트는 영상 내에 노출되어질 오브젝트를 표시하기 위하여 필요한 필드이다. 오브젝트 엘리먼트는 고유의 프로퍼티로 썸네일의 오브젝트 아이디와 매핑되는 아이디, 오브젝트 컨텐츠가 존재하는 경로, 오브젝트 이름, 자동 노 출 또는 사용자 입력 노출 여부를 나타내는 가시성, 오브젝트의 타입, 노출 시작 단위, 노출 종료 단위, 노출 주기, 오브젝트의 설명을 포함한다.The object element is a field necessary for indicating an object to be exposed in the image. Object elements are unique properties: IDs that map to object IDs in thumbnails, paths where object content exists, object names, visibility to indicate whether auto exposure or user input is exposed, object type, exposure start unit, exposure end unit, Contains the exposure cycle and the description of the object.
[도 4]는 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 1 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도이다.4 is a flowchart illustrating an operation of receiving object information according to the first embodiment in the image object service method according to the present invention.
미디어 플레이어가 미디어 센터에 미디어 컨텐츠를 요청하여(ST200) 수신하고(ST210), 미디어 컨텐츠에 대한 정보를 오브젝트 매니저에 제공한다(ST220).The media player requests media content from the media center (ST200), receives it (ST210), and provides information about the media content to the object manager (ST220).
오브젝트 매니저는 미디어 컨텐츠에 대응하는 고유 번호를 오브젝트 서버에 제공해서(ST230) 미디어 컨텐츠의 고유 번호에 해당하는 오브젝트 정보를 수신한다(ST240). 여기서, 오브젝트 서버는 미디어 센터에서 미리 획득된 파일 형태의 오브젝트 정보를 오브젝트 매니저로 전달한다.The object manager provides a unique number corresponding to the media content to the object server (ST230) to receive object information corresponding to the unique number of the media content (ST240). Here, the object server delivers the object information in the form of a file obtained in advance in the media center to the object manager.
오브젝트 매니저는 오브젝트 서버로부터 수신한 오브젝트 정보를 미디어 컨텐츠의 재생 전에 파싱하여 미디어 컨텐츠의 재생 시점에 싱크하여 출력될 오브젝트를 준비한다(ST250).The object manager parses the object information received from the object server before playing the media content, and prepares an object to be output by synchronizing at the time of playing the media content (ST250).
미디어 플레이어는 미디어 컨텐츠의 재생을 시작하고 영상의 타임라인을 오브젝트 매니저에 제공한다(ST260).The media player starts playback of the media content and provides a timeline of the image to the object manager (ST260).
오브젝트 매니저는 미디어 플레이어로부터 수신한 영상의 타임라인을 참조하여 영상의 타임라인에 싱크된 오브젝트의 타임라인에 해당하는 오브젝트를 노출시킨다(ST270).The object manager exposes an object corresponding to the timeline of the object synced to the timeline of the image by referring to the timeline of the image received from the media player (ST270).
[도 5]는 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 2 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도이다.5 is a flowchart illustrating an operation of receiving object information according to the second embodiment in the image object service method according to the present invention.
미디어 플레이어가 미디어 센터에 미디어 컨텐츠를 요청하여(ST300) 수신하고(ST310), 미디어 컨텐츠에 대한 정보를 오브젝트 매니저에 제공한다(ST320).The media player requests media content from the media center (ST300), receives it (ST310), and provides information about the media content to the object manager (ST320).
오브젝트 매니저는 오브젝트 서버에 소켓 연결을 요청하고, 소켓 연결이 성공하면 오브젝트 서버로 미디어 컨텐츠의 고유 번호를 제공한다(ST330).The object manager requests a socket connection from the object server, and if the socket connection is successful, provides the unique number of the media content to the object server (ST330).
오브젝트 서버는 미디어 컨텐츠의 고유 번호에 대응한 썸네일 정보를 전달한다(ST340). 오브젝트 서버는 최초의 정보 요청에 대해 미디어 센터로부터 미리 획득된 오브젝트 썸네일의 정보를 오브젝트 매니저에게 패킷 형태로 제공한다.The object server delivers thumbnail information corresponding to the unique number of the media content (ST340). The object server provides the object manager in the form of a packet with information of an object thumbnail obtained in advance from the media center for the first information request.
오브젝트 매니저는 미디어 컨텐츠가 재생되기 전에 영상의 썸네일을 구성하고, 더미 패킷을 이용하여 오브젝트 서버와 연결을 유지한다(ST350).The object manager composes a thumbnail of the video before the media content is played, and maintains a connection with the object server using the dummy packet (ST350).
미디어 플레이어는 미디어 컨텐츠의 재생 시작을 오브젝트 매니저에 알린다(ST360). 이후 미디어 플레이어는 미디어 컨텐츠의 재생 시점을 계속해서 오브젝트 매니저에 알린다.The media player informs the object manager of the start of playback of the media content (ST360). The media player then informs the object manager of when the media content is to be played.
오브젝트 매니저는 오브젝트 서버로부터 수신한 썸네일 정보를 참조하여 미디어 컨텐츠의 재생 시점에 맞게 해당 오브젝트의 노출을 위한 정보를 오브젝트 서버에 지속적으로 요청한다(ST370).The object manager continuously requests the object server for information on the exposure of the object in accordance with the playback time of the media content by referring to the thumbnail information received from the object server (ST370).
오브젝트 서버는 오브젝트 매니저의 정보 요청에 따라 패킷 형태의 오브젝트 정보를 오브젝트 매니저로 전달한다(ST380).The object server delivers the packet information of the object to the object manager according to the information request of the object manager (ST380).
오브젝트 매니저는 패킷 형태의 오브젝트 정보를 파싱하여 미디어 컨텐츠의 타임라인과 오브젝트의 타임라인에 싱크된 오브젝트를 노출시킨다(ST390). 오브젝트 매니저는 영상 썸네일에 기반하여 오브젝트 정보를 패킷 형태로 수신해서 미디어 컨텐츠의 타임라인에 싱크된 오브젝트를 노출시킨다.The object manager parses the object information in the form of a packet to expose the synced object in the timeline of the media content and the timeline of the object (ST390). The object manager receives the object information in the form of a packet based on the image thumbnail to expose the synchronized object in the timeline of the media content.
[도 6]은 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 3 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도이다.6 is a flowchart illustrating an operation of receiving object information according to the third embodiment in the video object service method according to the present invention.
미디어 플레이어가 미디어 센터에 미디어 컨텐츠를 요청하여(ST400) 수신하고(ST410), 미디어 컨텐츠에 대한 정보를 오브젝트 매니저에 제공한다(ST420).The media player requests media content from the media center (ST400), receives it (ST410), and provides information about the media content to the object manager (ST420).
오브젝트 매니저는 미디어 컨텐츠에 대응하는 고유 번호를 오브젝트 서버에 제공해서(ST430) 미디어 컨텐츠의 고유 번호에 해당하는 오브젝트 정보를 수신한다(ST440).The object manager provides the object server with a unique number corresponding to the media content (ST430) to receive object information corresponding to the unique number of the media content (ST440).
오브젝트 매니저는 오브젝트 서버로부터 수신한 오브젝트 정보를 미디어 컨텐츠의 재생 전에 파싱하여 미디어 컨텐츠의 재생 시점에 싱크하여 출력될 오브젝트를 준비한다(ST450).The object manager parses the object information received from the object server before playing the media content and prepares an object to be output by synchronizing at the time of playing the media content (ST450).
오브젝트 매니저는 더미 패킷을 이용하여 오브젝트 서버에 데이터를 요청해서 특정 주기로 오브젝트 서버와의 연결을 유지한다(ST460).The object manager requests data from the object server using the dummy packet and maintains a connection with the object server at a specific cycle (ST460).
미디어 플레이어는 미디어 컨텐츠의 재생 시작을 오브젝트 매니저에 알린다(ST470). 오브젝트 매니저는 특정 주기로 오브젝트 서버에 더미 패킷을 전송하고(ST480) 그 응답으로 패킷 형태의 이벤트 정보가 수신되는지를 판단하여 수신시(ST490) 이벤트를 실행한다. 이때, 이벤트 정보로는 긴급 사건 알림, 퀴즈, 설 문 조사가 포함된다.The media player informs the object manager of the start of playback of the media content (ST470). The object manager transmits the dummy packet to the object server at a specific cycle (ST480), determines whether the event information in the form of a packet is received in response, and executes the event upon reception (ST490). At this time, the event information includes emergency event notification, quiz, survey.
오브젝트 매니저는 더미 패킷 외에도 패킷 요청을 오브젝트 서버로 전송하고(ST491) 그 응답으로 패킷 형태의 이벤트 정보를 수신할 수 있다.In addition to the dummy packet, the object manager may transmit a packet request to the object server (ST491) and receive event information in the form of a packet in response.
오브젝트 매니저는 미디어 컨텐츠의 타임라인에 대한 싱크 및 더미 패킷에 대한 응답에 의해 해당 오브젝트를 노출시킨다(ST495).The object manager exposes the corresponding object in response to the sync and dummy packets to the timeline of the media content (ST495).
[도 7]은 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 4 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도이다.7 is a flowchart illustrating an operation of receiving object information according to a fourth embodiment in a video object service method according to the present invention.
미디어 플레이어가 미디어 센터에 미디어 컨텐츠를 요청하여(ST500) 수신하고(ST510), 미디어 컨텐츠에 대한 정보를 오브젝트 매니저에 제공한다(ST520).The media player requests media content from the media center (ST500), receives it (ST510), and provides information about the media content to the object manager (ST520).
오브젝트 매니저는 미디어 컨텐츠에 대응하는 고유 번호를 오브젝트 서버에 제공해서(ST530) 그 응답으로 오브젝트 서버는 오브젝트를 포함하는 컨텐츠 URL을 전달한다(ST540).The object manager provides the object server with a unique number corresponding to the media content (ST530), and in response, the object server delivers the content URL including the object (ST540).
오브젝트 매니저는 오브젝트 서버로부터 제공받은 컨텐츠 URL이 지시하는 컨텐츠를(ST550) 브라우저를 통하여 로드/실행하고, 미디어 플레이어에서 수신된 미디어 컨텐츠의 재생 정보를 브라우저에 의해 실행되는 컨텐츠로 전달한다(ST560). 여기서, 컨텐츠는 HTML/JAVA 스크립트로 코딩된 애플리케이션이다.The object manager loads / executes the content indicated by the content URL provided from the object server through the browser (ST550), and delivers playback information of the media content received from the media player to the content executed by the browser (ST560). Here, the content is an application coded with HTML / JAVA script.
컨텐츠 애플리케이션은 브라우저에 의해 실행되어 오브젝트 매니저, 오브젝트 서버로부터 전달되는 이벤트/미디어 정보를 자체에서 처리하여 해당 오브젝트를 노출시킨다(ST570).The content application processes the event / media information transmitted from the object manager and the object server by the browser and exposes the corresponding object (ST570).
[도 8]은 본 발명에 따른 영상 오브젝트 서비스의 제 1 실시예를 보인 예시도이다.8 is an exemplary view showing a first embodiment of a video object service according to the present invention.
영상 오브젝트 서비스로 제공되는 다양한 오브젝트에 대한 서비스 실시예를 도시하고 있다. 오브젝트로는 애플릿 실행, 인터넷 연결, 이벤트/퀴즈, 쇼핑이 제공된다. 애플릿 실행에는 게임과 같은 애플릿 실행이 포함되고, 인터넷 연결에는 등장인물 검색 또는 관련정보/채널 검색이 포함되고, 이벤트/퀴즈에는 시청자 퀴즈/공지 사항의 이벤트성 팝업 메시지가 포함되고, 쇼핑에는 영상내 협찬 상품의 구매를 유도하는 메시지가 포함된다. 이러한 오브젝트는 미디어 컨텐츠의 시청 외에 다양한 정보를 화면에 노출하여 사용자 참여를 유도한다.A service embodiment of various objects provided by the image object service is illustrated. Objects provide applet execution, internet connectivity, events / quizzes, and shopping. Running an applet includes running an applet such as a game, connecting the Internet to searching for characters or searching for related information / channels, events / quizzes containing event pop-up messages from viewer quizzes / announcements, and shopping in the video. Includes a message to encourage the purchase of sponsored goods. In addition to viewing media content, these objects expose various information to a screen to induce user participation.
[도 9]는 본 발명에 따른 영상 오브젝트 서비스의 제 2 실시예를 보인 예시도이다.9 is an exemplary view showing a second embodiment of a video object service according to the present invention.
영상 오브젝트 서비스로 제공되는 다양한 오브젝트에 대한 서비스 실시예를 도시하고 있다. 오브젝트로는 에피소드, 역사/인물 정보, 음성 자막, 영문 자막이 제공된다. 에피소드에는 줄거리를 통하여 사용자가 원하는 특정 에피소드 또는 특정 등장 인물이 존재하는 부분을 바로 시청 가능케하는 서비스가 포함되고, 역사/인물 정보에는 등장 인물의 정보와 역사적 정보를 가이드 메시지로 제공하는 교육용 서비스가 포함되고, 음성 자막에는 영상 화면에 대한 설명으로 제작된 음향데이터를 본 영상의 음향으로 대체하는 서비스가 포함되고, 영문 자막에는 어학용 자막 또는 다양한 언어의 자막을 제공하는 서비스가 포함된다.A service embodiment of various objects provided by the image object service is illustrated. Objects are provided with episodes, history / personal information, voice captions, and English subtitles. The episode includes a service that enables the user to immediately watch a specific episode or a specific character that the user wants through the plot, and the history / personal information includes an educational service that provides the character information and historical information as guide messages. The voice caption includes a service for replacing sound data produced as a description of the video screen with the sound of the image, and the English subtitle includes a service for providing subtitles for language use or subtitles in various languages.
이상에서 실시예를 들어 본 발명을 더욱 상세하게 설명하였으나, 본 발명은 반드시 이러한 실시예로 국한되는 것은 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형실시될 수 있다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.Although the present invention has been described in more detail with reference to the examples, the present invention is not necessarily limited to these embodiments, and various modifications can be made without departing from the spirit of the present invention. Therefore, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The protection scope of the present invention should be interpreted by the following claims, and all technical ideas within the equivalent scope should be interpreted as being included in the scope of the present invention.
도 1은 본 발명에 따른 영상 오브젝트 서비스 시스템의 구성을 보인 블록도,1 is a block diagram showing the configuration of a video object service system according to the present invention;
도 2는 본 발명에 따른 영상 오브젝트 서비스 방법의 동작 흐름도,2 is an operation flowchart of a video object service method according to the present invention;
도 3은 본 발명에 따른 오브젝트 정보의 필드 구성을 보인 예시도,3 is an exemplary view showing a field configuration of object information according to the present invention;
도 4는 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 1 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도,4 is a flowchart illustrating an operation of receiving object information according to the first embodiment in a video object service method according to the present invention;
도 5는 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 2 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도,5 is a flowchart illustrating an operation of receiving object information according to a second embodiment in a video object service method according to the present invention;
도 6은 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 3 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도,6 is a flowchart illustrating an operation of receiving object information according to a third embodiment in a video object service method according to the present invention;
도 7은 본 발명에 따른 영상 오브젝트 서비스 방법에서 제 4 실시예에 따른 오브젝트 정보의 수신 과정을 보인 동작 흐름도,7 is a flowchart illustrating an operation of receiving object information according to a fourth embodiment in a video object service method according to the present invention;
도 8은 본 발명에 따른 영상 오브젝트 서비스의 제 1 실시예를 보인 예시도,8 is an exemplary view showing a first embodiment of a video object service according to the present invention;
도 9는 본 발명에 따른 영상 오브젝트 서비스의 제 2 실시예를 보인 예시도이다.9 is an exemplary view showing a second embodiment of a video object service according to the present invention.
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090082881A KR101060168B1 (en) | 2009-09-03 | 2009-09-03 | Image object service system and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090082881A KR101060168B1 (en) | 2009-09-03 | 2009-09-03 | Image object service system and method |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20110024754A true KR20110024754A (en) | 2011-03-09 |
KR101060168B1 KR101060168B1 (en) | 2011-08-29 |
Family
ID=43932540
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090082881A KR101060168B1 (en) | 2009-09-03 | 2009-09-03 | Image object service system and method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101060168B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017222226A1 (en) * | 2016-06-20 | 2017-12-28 | (주)핑거플러스 | Method for registering advertised product on image content and server for executing same |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100828297B1 (en) | 2006-12-13 | 2008-05-07 | 에스케이 텔레콤주식회사 | System and method for synchronization between broadcasting contents and communication contents using image recognition |
-
2009
- 2009-09-03 KR KR1020090082881A patent/KR101060168B1/en not_active IP Right Cessation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017222226A1 (en) * | 2016-06-20 | 2017-12-28 | (주)핑거플러스 | Method for registering advertised product on image content and server for executing same |
Also Published As
Publication number | Publication date |
---|---|
KR101060168B1 (en) | 2011-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10848333B2 (en) | Providing synchronous content and supplemental experiences | |
US9467496B2 (en) | Apparatus and method for synchronizing E-book content with video content and system thereof | |
JP5536785B2 (en) | Video branch | |
US10664138B2 (en) | Providing supplemental content for a second screen experience | |
US7739584B2 (en) | Electronic messaging synchronized to media presentation | |
RU2597482C2 (en) | Receiving device, receiving method, transmitting device, transmission method, program and broadcast system | |
US8090694B2 (en) | Index of locally recorded content | |
US20180261253A1 (en) | Providing Enhanced Content | |
US20100122309A1 (en) | Comment delivery server, terminal device, comment delivery method, comment output method, and recording medium storing comment delivery program | |
US20010001160A1 (en) | Interactive entertainment system for presenting supplemental interactive content together with continuous video programs | |
US20100242066A1 (en) | Method of Performing Random Seek Preview for Streaming Video | |
EP2031875A1 (en) | Playback device, method, and program | |
JP2010514355A (en) | System and method for supporting multi-user media content access using index points | |
JP2004350092A (en) | Video image viewing system, video image reproduction terminal used for the same system, processing method in the video image reproduction terminal, program for executing the processing method, and recording medium with the program recorded | |
US20100293575A1 (en) | Live indexing and program guide | |
CN112954426B (en) | Video playing method, electronic equipment and storage medium | |
JP3968260B2 (en) | Video-related information presentation device, method, program, and recording medium recording the program | |
KR101060168B1 (en) | Image object service system and method | |
CN104010198A (en) | Method and system for preventing video delivery information from being shielded | |
JP5244547B2 (en) | Voice comment delivery sharing method and system | |
JP2002320214A (en) | Viewing management method and system thereof | |
JP4371667B2 (en) | Interface device used with multimedia content playback device to search multimedia content being played back | |
US20120151543A1 (en) | Iptv interactive system and device and interactive method thereof | |
KR100870559B1 (en) | Method for providing customer's participation service related to iptv contents | |
EP2015578A1 (en) | Method of broadcasting interactive television and means for implementing this method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140724 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20150812 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20160802 Year of fee payment: 6 |
|
LAPS | Lapse due to unpaid annual fee |