KR100486102B1 - Multimedia Metadata file Formation, Transmission, Print Method - Google Patents
Multimedia Metadata file Formation, Transmission, Print Method Download PDFInfo
- Publication number
- KR100486102B1 KR100486102B1 KR10-2002-0006273A KR20020006273A KR100486102B1 KR 100486102 B1 KR100486102 B1 KR 100486102B1 KR 20020006273 A KR20020006273 A KR 20020006273A KR 100486102 B1 KR100486102 B1 KR 100486102B1
- Authority
- KR
- South Korea
- Prior art keywords
- multimedia
- block
- driving
- metadata file
- data
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Abstract
본 멀티미디어 메타 데이터 파일 생성, 전송 및 출력 방법은, 멀티미디어를 통한 학습이 효율적으로 이루어지도록 하기 위하여 메타 데이터 파일을 생성하고, 전송하여, 출력하는 방법에 관한 것으로, 강의 내용을 각 페이지 별로 구분하여 각 페이지의 실행과 함께 멀티미디어 객체(그림, 표 등)를 연동하도록 메타 데이터 파일을 생성하는 방법과; 이렇게 생성된 메타 데이터 파일을 서비스 서버를 통해 학습자 컴퓨터에 전송하는 방법과; 전송된 메타 데이터 파일을 학습자 컴퓨터가 한 페이지씩 출력하면서 필요에 따라 멀티미디어 객체가 연동하도록 하는 방법에 관한 것이다. The multimedia metadata file generation, transmission, and output method relates to a method of generating, transmitting, and outputting a metadata file so that learning through multimedia can be efficiently performed. Generating a metadata file to link multimedia objects (pictures, tables, etc.) with the execution of the page; Transmitting the generated metadata file to the learner computer through the service server; The present invention relates to a method of allowing a multimedia object to be interlocked as needed while the learner computer outputs the transmitted metadata file page by page.
Description
본 발명은 유,무선 인터넷을 통해 이루어지는 온라인식 강의에 있어서 멀티미디어 파일을 효율적으로 생성하고 전송하여 출력하는 방법에 관한 것으로서, 보다 상세하게는 멀티미디어 데이터 파일을 생성하는 측에서 음성 또는 영상 데이터를 시간블록으로 나누어 저장하고 시간의 진행과 함께 일정 멀티미디어 객체를 연동하여 동작하도록 멀티미디어 객체 데이터를 분리하여 저장함으로써 학습자의 컴퓨터가 멀티미디어 데이터를 상기에서 생성한 형식에 맞추어 해석하고 객체 데이터를 연동하여 출력함으로써, 멀티미디어를 이용한 교육의 효과를 극대화시키기 위한 멀티미디어 메타 데이터 파일의 생성, 전송 및 출력 방법에 관한 것이다.The present invention relates to a method for efficiently generating, transmitting, and outputting a multimedia file in an online lecture through wired and wireless Internet, and more particularly, a time block for audio or video data in a side for generating a multimedia data file. By storing and dividing the multimedia object data so that the multimedia object data is operated in conjunction with the progress of time, the learner's computer interprets the multimedia data according to the format generated above and outputs the object data in conjunction with the multimedia data. The present invention relates to a method for generating, transmitting, and outputting a multimedia metadata file for maximizing the effect of using the same.
퍼스널 컴퓨터는 업무처리용 정보처리장치에서 교육, 게임 등 다기능 장치로 변화되어 가고 있다. 이러한 변화에 맞추어 학교나 학원에서 이루어지던 강의는 동영상 및 음성 데이터로 저장되어 그 저장된 데이터를 컴퓨터 장치를 통해 재생함으로써, 컴퓨터 멀티미디어를 이용한 학습이 가능하게 되었다. 더욱이 이러한 멀티미디어를 활용한 컴퓨터상에서의 교육은 인터넷의 발전으로 말미암아 실시간으로 강의내용 데이터를 전송하거나 또는 강의내용을 미리 다운로드 받아 이를 학습자의 컴퓨터가 그대로 구현함으로써, 학습자는 일정한 시스템만을 갖추고 있다면 특정 장소에 구애받지 않고 원하는 강의를 수강할 수 있게 되었다. Personal computers are changing from multitasking devices to education and games. In response to this change, lectures conducted at schools or institutes are stored as video and audio data, and the stored data is reproduced through computer devices, thereby enabling learning using computer multimedia. Moreover, the education on the computer using multimedia is based on the development of the Internet, so that the lecture contents data can be transmitted in real time or downloaded in advance and the learner's computer is implemented as it is. You can take the class you want without regard to it.
일반적으로 이러한 멀티미디어 데이터를 전송하는 방법으로는 강의내용을 디지털 자료화하여 MPEG1, MPEG2, MPEG4, ASF, WMF 등의 파일로 저장하거나 워드프로세서를 이용하여 강의 데이터를 만들고 이것을 다운로드 하는 방식이 이용되고 있다. 또한 HTML 파일 및 HTTPD가 지원하는 포맷으로 구성되는 형식으로 전달하는 방법도 이용되고 있다. 전송 용량이 작은 경우에는 플래쉬를 이용하여 정지화면을 초당 일정 프레임으로 나누어 음성 데이터와 함께 전송하여 음성과 함께 실행되는 방식이 이용되고 있다. In general, as a method of transmitting such multimedia data, lecture contents are digitalized and stored as files such as MPEG1, MPEG2, MPEG4, ASF, WMF, etc., or lecture data is created and downloaded using a word processor. . In addition, a method of delivering in a format composed of an HTML file and a format supported by HTTPD is also used. When the transmission capacity is small, a method in which a still picture is divided into predetermined frames per second using flash and transmitted together with voice data is executed with voice.
그러나 기존 기술에 의해서 멀티미디어 데이터 파일을 전송하는 방법에 의한다면, 학습자는 진행되는 멀티미디어에 의한 수업을 단순히 시청하거나, 청취함으로써 학습에 임하게 되고 이는 기존에 TV 의 보급과 함께 활성화된 TV 강의와 비교할 때 더 나은 학습효과를 기대할 수 없다. 따라서 TV 강의식의 일률적인 진행과 차별성을 가지고 컴퓨터에서 다양하게 구현될 수 있는 멀티미디어를 활용하기 위해서는 강의진행과 더불어 독립하여 구동되는 멀티미디어 객체 (표, 그림, 기타 강의 자료)가 함께 구현되어야 할 것이다. 기존 기술에 있어서, 수업진행과 함께 또 다른 멀티 미디어 객체(그림이나 표, 도형)를 불러들이거나 그 멀티미디어 객체의 속성을 변화시키기 위해서는 강의내용 데이터 내에 시간순서에 맞게 멀티미디어 객체의 속성변화 데이터를 직접 삽입하여 시간의 진행에 따라 실행되게 할 수 밖에 없다. 즉, 시간진행에 따라 시퀀스 방식으로 실행되는 데이터를 멀티미디어 객체의 속성 변화 데이터와 함께 하나하나 순서대로 저장해야 하는 방식이었다. 그러나 이는 전송 데이터 양이 너무 방대해져 데이터 전송에 부적합한 면이 있다. 따라서 음성 또는 영상 데이터가 진행되면서 이와 함께 그림, 표, 도형 등의 멀티미디어 객체가 연동하고 이들이 상호작용을 이루도록 멀티미디어 데이터를 전송하기에는 무리였다. However, according to the method of transmitting the multimedia data file by the existing technology, the learner learns by simply watching or listening to the advanced multimedia class, which is compared with the TV lectures activated with the prevalence of TV. You cannot expect a better learning effect. Therefore, in order to utilize multimedia that can be variously implemented on a computer with the uniformity and distinction of TV lecture ceremony, independent multimedia objects (tables, pictures, and other lecture materials) should be implemented along with the progress of lectures. In the existing technology, in order to load another multimedia object (picture, table, figure) or change the multimedia object's property with the progress of the class, the attribute change data of the multimedia object is directly added in the chronological order within the lecture contents data. You have to insert it and run it over time. That is, the data that is executed in sequence according to the progress of time should be stored one by one with the attribute change data of the multimedia object. However, this is because the amount of data to be transmitted is so large that it is unsuitable for data transmission. Therefore, as audio or video data progresses, multimedia objects such as pictures, tables, and figures interlock with each other and it is not sufficient to transmit multimedia data so that they can interact.
본 발명은 상기와 같은 점들을 감안하여 창안된 것으로서, 다양한 객체를 가지는 방대한 멀티미디어 데이터를 효율적으로 용량을 줄여 저장하고, 이를 전송하여 , 출력하는 방법에 관한 것이다. The present invention has been made in view of the above, and relates to a method of efficiently reducing and storing massive multimedia data having various objects, transmitting the same, and outputting the same.
본 발명의 다른 목적 및 장점들은 하기에 설명될 것이며, 본 발명의 실시에 의해 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 조합에 의해 실현될 수 있다. Other objects and advantages of the invention will be described below and will be appreciated by the practice of the invention. In addition, the objects and advantages of the present invention can be realized by means and combinations indicated in the claims.
상기와 같은 목적을 달성하기 위한 본 발명에 따른 멀티미디어 메타 데이터 파일의 생성 방법은, 음성, 영상, 그림, 표, 다기능 문자열을 포함하는 교육용 멀티미디어 메타 데이터를 저장하는 방법으로서,교육용 멀티미디어 메타 데이터 파일을 헤더 부분과 적어도 하나 이상의 페이지 단위로 구성되는 멀티 미디어 데이터 부분으로 구분하여 상기 헤더 부분에 멀티미디어 데이터에 관한 정보를 저장시키는 단계;상기 페이지의 멀티 미디어 데이터 부분을 객체블록과 구동블록으로 구분하여 상기 객체블록에 멀티미디어 객체의 정보를 저장시키는 단계;상기 구동블록을 객체파일 블록과 구동코드 블록으로 구분하여 상기 객체파일 블록에 재생되는 음성 및 영상 데이터(멀티미디어 객체 파일)를 저장하는 단계; 및상기 구동코드 블록에 멀티미디어 객체를 구동하는 구동코드를 저장시키는 단계를 포함한다.A method for generating a multimedia metadata file according to the present invention for achieving the above object is a method for storing educational multimedia metadata including audio, video, pictures, tables, and multi-function strings. Storing information about multimedia data in the header portion by dividing the header portion into a multimedia data portion composed of at least one or more page units; dividing the multimedia data portion of the page into an object block and a driving block; Storing the multimedia object information in a block; storing the audio and video data (multimedia object file) reproduced in the object file block by dividing the driving block into an object file block and a driving code block; And storing a driving code for driving a multimedia object in the driving code block.
삭제delete
삭제delete
또한, 본 발명에 따른 멀티미디어 메타 데이터 파일의 전송방법은,In addition, the transmission method of the multimedia metadata file according to the present invention,
서비스 서버는 학습자 컴퓨터에게 상기 멀티미디어 메타 데이터 파일중 멀티미디어 데이터가 포함된 페이지의 전체 수를 전송하는 단계와; The service server transmitting to the learner computer a total number of pages containing multimedia data in the multimedia metadata file;
상기 전체 페이지 수를 전송받은 학습자 컴퓨터는 효과적인 데이터 전송 및 재생을 위하여 메모리에 데이터 구조체를 설정하는 단계와;The learner computer receiving the total number of pages sets a data structure in a memory for effective data transmission and reproduction;
상기 서버는 현재 페이지에서 구동되는 멀티미디어 객체 정보를 포함하는 객체블록을 상기 학습자 컴퓨터에 전송하는 단계와;Transmitting, by the server, an object block including multimedia object information driven in a current page to the learner computer;
상기 서버는 상기 멀티미디어 객체를 구동하는 구동코드를 포함하는 구동블록을 학습자 컴퓨터에 전송하는 단계;를 포함한다.The server includes transmitting a driving block including a driving code for driving the multimedia object to the learner computer.
또한, 본 발명에 따른 멀티미디어 메타 데이터 파일의 출력 방법은,In addition, the method of outputting a multimedia metadata file according to the present invention,
학습자 컴퓨터는 상기 멀티미디어 객체의 정보를 포함하는 객체 블록을 로드하는 단계와;The learner computer loads an object block containing information of the multimedia object;
상기 멀티미디어 객체를 구동하는 구동블록을 로드하는 단계와;Loading a driving block for driving the multimedia object;
이와 연동하여 상기 멀티미디어 객체를 구동하는 구동코드를 실행하는 단계;를 포함한다.And executing the driving code for driving the multimedia object in association with it.
이하 첨부된 도면을 참조로 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상은 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Prior to this, terms or words used in the specification and claims should not be construed as having a conventional or dictionary meaning, and the inventors should properly explain the concept of terms in order to best explain their own invention. Based on the principle that can be defined, it should be interpreted as meaning and concept corresponding to the technical idea of the present invention. Therefore, the embodiments described in the specification and the drawings shown in the drawings are only the most preferred embodiment of the present invention and not all of the technical spirit of the present invention, various modifications that can be replaced at the time of the present application It should be understood that there may be equivalents and variations.
< 메타 데이터 파일 생성 방법 ><How to create a metadata file>
도 1 은 시간의 진행에 따라 음성 또는 영상 객체가 구동되면서, 텍스트, 이미지, 그래픽, 표, 차트 등의 멀티미디어 객체가 연동하는 것을 개략적으로 나타낸다. 즉, 음성 또는 영상 객체의 재생 중에 강의내용에 따른 표나 차트가 필요하게 되는 경우 그러한 멀티미디어 객체를 연동하여 화면에 출력하고 도형의 변화 등이 요구되는 경우 도형의 속성이 구동 코드에 의해서 변화시켜 출력하는 것이다.FIG. 1 schematically illustrates that multimedia objects such as text, images, graphics, tables, and charts are linked as a voice or video object is driven as time progresses. That is, when a table or chart according to the contents of a lecture is needed during the playback of an audio or video object, the multimedia object is interlocked and displayed on the screen. will be.
도 2 는 이러한 멀티미디어 데이터를 시간 진행에 따라 멀티미디어 객체의 연동이 가능하도록, 멀티미디어 메타 데이터 파일의 생성을 위한 파일 포맷을 예시하고 있다. 도 2 를 참조하면, 멀티미디어 메타 데이터 파일의 헤더(40)에는 멀티미디어 메타 데이터 파일의 시작점을 의미하는 파일 헤더(file header), 멀티미디어 메타 데이터 파일의 버전을 나타내는 버전(version), 전체 멀티미디어 메타 데이터 파일의 크기, 멀티미디어 데이터를 표현하기 위한 출력장치의 x,y 프레임의 크기, 강의내용의 전체 페이지수, 강의 제목의 길이, 강의 제목, 저작권자 이름의 길이, 저작권자 이름, 제작된 파일이 있는 주소나 소유자의 웹주소, 상기 웹주소의 길이, 기록일자 길이, 기록일자, 1페이지 위치, 1페이지 길이, 2페이지 위치, 2페이지 길이,..., 배경모드 등으로 구성된다. FIG. 2 illustrates a file format for generating a multimedia metadata file so that the multimedia data can be linked with the multimedia data over time. Referring to FIG. 2, the header 40 of the multimedia metadata file includes a file header indicating a starting point of the multimedia metadata file, a version indicating a version of the multimedia metadata file, and an entire multimedia metadata file. Size, size of x, y frame of output device to express multimedia data, total number of pages of lecture contents, length of lecture title, lecture title, length of copyright holder name, name of copyright holder, address or owner of produced file It consists of a web address, a length of the web address, a recording date length, a recording date, one page position, one page length, two page positions, two pages length, ..., background mode.
상기 메타 데이터 파일의 헤더(40) 뒤에는 멀티미디어 데이터가 강의 내용에 맞추어 페이지(42)로 나뉘어 저장되는데, 상기 헤더(40)에서 페이지(42) 배경모드가 0 인 경우에는 페이지(42) 앞에 배경색의 정보가 기록되고, 배경모드가 0 이 아닌 경우에는 페이지(42) 앞에 배경그림에 관한 데이터가 먼저 기록된다.After the header 40 of the metadata file, multimedia data is divided into pages 42 according to the contents of the lecture. When the background mode of the page 42 in the header 40 is 0, the background color is displayed in front of the page 42. If the information is recorded, and the background mode is not 0, data relating to the background picture is written first in front of the page 42.
각 페이지(42)는 그 페이지(42)에서 구동되는 멀티미디어 객체들에 관한 정보를 가지고 있는 객체 블록(44)과 그러한 객체들의 연동을 구동하는 구동 블록(46)으로 나누어진다. Each page 42 is divided into an object block 44 that contains information about the multimedia objects driven on that page 42 and a drive block 46 that drives the interworking of those objects.
상기 객체블록(44)은 다시 일반정보 블록(48)과 확장정보 블록(50)으로 나누어지고, 그 일반정보 블록(48)은 아래 표 1에서와 같은 일반정보 블록은 HEADER, STYLE, SHOW, 부가정보, 영역정보, NAME 항목으로 구성된다.The object block 44 is further divided into a general information block 48 and an extended information block 50, and the general information block 48 is a general information block as shown in Table 1 below, HEADER, STYLE, SHOW, and the like. Information, area information, and NAME items.
아래 표 2는 상기 일반정보 블록(48)의 STYLE 에 저장되는 멀티미디어 객체 STYLE 코드를 보여주고 있다.Table 2 below shows the multimedia object STYLE code stored in the STYLE of the general information block 48.
확장정보 블록(50)은 멀티미디어 객체에 따라 다르게 나타나는 정보로써 각 멀티미디어 객체의 일반정보 블록(48) 뒤에 저장한다. 확장정보에는 펜칼라(pen color)정보, 폰트(font) 정보, 보이기 스타일 정보 등이 포함된다. 확장정보가 필요 없는 경우에는 확장정보 블록(50)은 붙지 않는다. 아래 표3 은 멀티미디어 객체중 '표'에 관한 확장정보 블록(50)을 예시하여 설명하고 있다.The extended information block 50 is stored after the general information block 48 of each multimedia object as information that appears differently according to the multimedia object. The extended information includes pen color information, font information, display style information, and the like. If extended information is not needed, the extended information block 50 is not attached. Table 3 below illustrates the extended information block 50 for the 'table' of the multimedia objects.
구동블록(46)은 한 페이지(42)의 전체 시간블록수 만큼 존재하며 시간블록은 지정하지 않으면 0.5초로 지정한다. 만약 한 페이지(42)의 진행 시간이 20초라면 구동블록(46)은 40개가 존재하게 된다.The driving block 46 exists as many as the total number of time blocks of one page 42. If the time block is not specified, the driving block 46 is set to 0.5 second. If the progress time of one page 42 is 20 seconds, 40 driving blocks 46 exist.
구동블록(46)은 다시 음성 및 영상 데이터가 저장된 블록과 그 시간블록내에 구동되는 구동코드 블록으로 나누어진다. 구동코드 블록은 단위블록들로 이루어져 있고 이들 단위블록에는 멀티미디어 객체의 구동에 관한 명령 코드가 저장되어 있다.The drive block 46 is further divided into a block in which audio and video data are stored and a drive code block driven in the time block. The driving code block is composed of unit blocks, and these unit blocks store command codes for driving multimedia objects.
상기 단위블록은 Command, Argument size, Argument, 객체명 으로 구성되어 있다. 아래 표 4 는 단위블록의 각 부분에 관한 설명이 나타나 있다.The unit block is composed of Command, Argument size, Argument, and Object Name. Table 4 below shows the description of each part of the unit block.
상기 표 4 에서 구동 명령 번호는 원하는 객체의 출력 및 속성 변경의 구동 코드를 나타내는데, 아래 표 5 에 멀티미디어 객체인 '그림'에 관한 구동코드가 예시적으로 보여진다. The driving command number in Table 4 represents a driving code for outputting and changing property of a desired object. In Table 5, the driving code for the multimedia object 'picture' is shown as an example.
<메타 데이터 파일 페이지 출력 방법><Metadata file page output method>
도 3 은 상술한 바와 같이 생성된 메타 데이터 파일을 출력하는 학습자 컴퓨터(10)의 구조이다. 도 3 에 도시된 바와 같이, 본 학습자 컴퓨터(10)는 연산처리를 하는 CPU(10a), 프로그램 등의 기록한 ROM(10b), CPU 의 작업영역이 되는 RAM(10c), 조작자의 입력을 접수하는 키보드, 마우스 등의 입력장치(10d), 각종 데이터 등을 기록한 하드디스크 등의 외부기억장치(10e), CRT 등의 표시장치(10f), 프린터 등의 인쇄장치(10g)로 구성된다. 3 is a structure of the learner computer 10 for outputting the metadata file generated as described above. As shown in Fig. 3, the learner computer 10 receives a CPU 10a which performs arithmetic processing, a recorded ROM 10b such as a program, a RAM 10c serving as a work area of the CPU, and an operator's input. An input device 10d such as a keyboard and a mouse, an external storage device 10e such as a hard disk on which various data is recorded, a display device 10f such as a CRT, and a printing device 10g such as a printer.
도 4 는 상술한 바와 같이 생성된 메타 데이터 파일을 학습자 컴퓨터(10)가 한 페이지(42)씩 출력하는 방법을 나타내는 흐름도이다. 도 4 를 참조하면, 우선 메타 데이터 파일에서 한 페이지(42)의 객체블록(44)을 RAM(10c)에 로드한다(단계 S100). 이 때, 메타 데이터 파일은 하드디스크나 CD-ROM 등의 외부기억장치(10e) 에 저장되어 있을 수 있고, 또한 실시간으로 서비스 서버(20)로부터 전송될 수 있다. 객체블록(44)을 로드하면 이어서 하나의 시간블록에 해당하는 구동블록(46)을 RAM(10c)에 로드한다(단계 S102). 구동블록(46)에 음성 또는 영상 데이터가 존재하면 학습자 컴퓨터(10)의 표시장치(10f)에 이를 출력하고(단계 S106), 존재하지 않으면 그 시간블록내에서는 대기한다(단계 S108). 상기 과정에서 구동블록(46)을 로드함에 따라 구동코드를 연동하여 실행시키는데(단계 S114), 상술한 바와 같이 구동코드는 구동블록(46)내에 단위블록 형식으로 저장되어 있고 멀티미디어 객체를 그대로 출력시키거나 속성을 변화시켜 출력시킨다. 예를 들어, 첫 번째 시간블록에서 음성 또는 영상 데이터가 출력되면서 멀티미디어 객체인 '표'가 함께 실행되야 하는 경우, RAM(10c)에 로드된 객체블록(44)의 '표' 내용 데이터를 출력시키는 구동코드를 실행한다. 만약 그 시간블록에서 마지막 구동코드까지 실행이 완료되면 다음 구동블록(46)을 실행할 때까지 대기한다(단계 S116). 한편, 표시장치(10f)에 현재의 구동블록(46)을 실행하는 동안 다음 구동블록(46)을 RAM(10c)에 로드하여 다음 구동블록(46) 실행을 준비한다.(단계 S112).4 is a flowchart illustrating a method of outputting the metadata file generated as described above by the learner computer 10 page by page 42. Referring to FIG. 4, first, the object block 44 of one page 42 is loaded into the RAM 10c from the metadata file (step S100). At this time, the metadata file may be stored in an external storage device 10e such as a hard disk or a CD-ROM, and may also be transmitted from the service server 20 in real time. When the object block 44 is loaded, the driving block 46 corresponding to one time block is then loaded into the RAM 10c (step S102). If audio or video data exists in the drive block 46, it is outputted to the display device 10f of the learner computer 10 (step S106), and if not, it waits in the time block (step S108). In this process, the drive code 46 is executed by interlocking with the drive code (step S114). As described above, the drive code is stored in the drive block 46 in the unit block format and outputs the multimedia object as it is. Or change its properties and print it out. For example, when audio or video data is output in the first time block and the multimedia object 'table' needs to be executed together, the 'table' content data of the object block 44 loaded in the RAM 10c is output. Run the drive code. If execution is completed from the time block to the last drive code, the process waits until the next drive block 46 is executed (step S116). On the other hand, while executing the current drive block 46 in the display device 10f, the next drive block 46 is loaded into the RAM 10c to prepare for the next drive block 46 to be executed (step S112).
구동블록(46)을 순서대로 로드하고 실행하는 과정을 반복하면서 연동하여 구동코드를 실행시키고 현재 페이지(42)의 모든 구동블록(46)을 로드하여 실행시키면 한 페이지(42)의 출력을 끝내고 다음 페이지의 데이터를 출력한다.Repeating the process of loading and executing the drive block 46 in sequence, executes the drive code in conjunction with, and loads and executes all the drive block 46 of the current page 42 to finish the output of one page 42 and then Print the data on the page.
< 메타 데이터 전송 방법 ><Metadata transmission method>
상술한 바와 같이 멀티미디어 메타 데이터 파일을 생성하면, 학습자 컴퓨터(10)는 이 멀티미디어 메타 데이터 파일을 다운로드 받아 상술한 페이지(42) 출력 방법에 따라 메타 데이터 파일을 출력한다. When the multimedia metadata file is generated as described above, the learner computer 10 downloads the multimedia metadata file and outputs the metadata file according to the page 42 output method described above.
또한, 학습자 컴퓨터(10)는 상기 멀티미디어 메타 데이터 파일을 실시간으로 전송받아 출력하는 것도 가능한데, 도 5 는 이러한 멀티미디어 메타 데이터 파일을 학습자 컴퓨터(10)가 실시간으로 전송받아 출력하기 위한 네트워크 시스템을 나타내는 그림이다. 도 5 를 참조하면 네트워크 시스템은 네트워크망(30)과 이에 접속하는 복수의 학습자 컴퓨터(10)와 서비스 서버(20)로 이루어진다.In addition, the learner computer 10 may receive and output the multimedia metadata file in real time. FIG. 5 is a diagram illustrating a network system for the learner computer 10 receiving and outputting the multimedia metadata file in real time. to be. Referring to FIG. 5, the network system includes a network 30, a plurality of learner computers 10 and a service server 20 connected thereto.
학습자 컴퓨터(10)는 멀티미디어 메타 데이터 파일을 전송 받고자 하는 클라이언트 시스템으로 학습자는 서비스 서버(20)에 접속하여 메타 데이터 파일을 요청하고 이를 다운로드 받아 실행시킨다. 여기서, 학습자 컴퓨터(10)는 퍼스널 컴퓨터나 노트북 컴퓨터가 채택되는 것이 바람직하나 반드시 이에 한정되는 것은 아니며, 서비스 서버(20)와 데이터 통신이 가능한 모든 유,무선 단말기를 포함한다.The learner computer 10 is a client system for receiving a multimedia metadata file. The learner accesses the service server 20, requests a metadata file, downloads it, and executes the metadata file. Here, the learner computer 10 preferably adopts a personal computer or a notebook computer, but is not necessarily limited thereto, and includes all wired and wireless terminals capable of data communication with the service server 20.
그리고, 학습자 컴퓨터(10)는 통상적인 시스템 구성 요소로서, 서비스 서버(20)의 URL(Uniform Resource Locator)에 근거하여 웹페이지(24)를 불러오고, 이를 HTML(Hyper-Text Markup Language) 코드 해석하여 모니터에 디스플레이하는 웹브라우저(browser) 프로그램과, 윈도우 환경에서 이메일 메시지를 송, 수신하기 위한 소프트웨어로서의 메일 브라우저 프로그램, 및 컴퓨터 시스템을 전체적으로 관리, 제어하는 운영 체제(OS : Operating System) 프로그램을 포함한다. 또한 멀티미디어 메타 데이터 파일을 상술한 페이지 출력 방법에 의하여 실행시킬 수 있는 응용프로그램을 포함한다.In addition, the learner computer 10 is a typical system component, and loads the web page 24 based on the Uniform Resource Locator (URL) of the service server 20, and interprets the HTML (Hyper-Text Markup Language) code. A web browser program displayed on the monitor, a mail browser program as software for sending and receiving e-mail messages in a Windows environment, and an operating system program (OS) that manages and controls the computer system as a whole. do. It also includes an application program that can execute the multimedia metadata file by the page output method described above.
서비스 서버(20)는 멀티미디어 데이터를 확보하고 있는 측으로 상술한 바와 같이 메타 데이터 파일 형식으로 생성된 멀티미디어 데이터를 학습자 컴퓨터(10)에 전송하는 시스템으로 네트워크망(30)을 통해 액세스하는 학습자의 이용 신청을 받아들이고, 일련의 멀티미디어 데이터를 페이지(42) 순으로 전송하는 기능을 담당한다.The service server 20 is a side that secures the multimedia data and transmits the multimedia data generated in the metadata file format to the learner computer 10 as described above. It is responsible for the function of receiving the data, and transmitting a series of multimedia data in the order of page 42.
네트워크망(30)은 상기 학습자 컴퓨터(10)와 서비스 서버(20)를 공통으로 접속하여 상호간에 데이터 통신을 수행하도록 하는 것으로, 유/무선 인터넷망, 공중 전화망(PSTN), 이동 통신망 등이 이용될 수 있다. 다만, 이하에서는 설명의 편의상 네트워크망(30)이 월드 와이드 웹(WWW)을 기반으로 하는 유선 인터넷망이고, 상기 학습자 컴퓨터(10)가 퍼스널 컴퓨터인 경우를 대표적인 실시예로 들어 본 발명을 설명한다. 그러나, 본 발명이 반드시 이러한 예로 한정되는 것이 아님은 물론이다.The network 30 connects the learner computer 10 and the service server 20 to perform data communication with each other, and is used by wired / wireless Internet networks, public telephone networks (PSTNs), mobile communication networks, and the like. Can be. However, hereinafter, for convenience of explanation, the present invention will be described by taking the case where the network 30 is a wired Internet network based on the World Wide Web and the learner computer 10 is a personal computer. . However, it is a matter of course that the present invention is not necessarily limited to these examples.
도 6 은 서비스 서버(20)의 기능적 구성을 간략하게 나타내는 그림이다. 도 6 을 참조하면, 서비스 서버(20)는 서버엔진(22), 다수의 웹페이지(24), 단말기 정보 관리 모듈(26a), 메타 데이터 파일 전송 모듈(26b), 학습자 컴퓨터 DB(28a), 메타 데이터 파일 DB(28b)로 구성된다.6 is a diagram briefly showing the functional configuration of the service server 20. Referring to FIG. 6, the service server 20 includes a server engine 22, a plurality of web pages 24, a terminal information management module 26a, a metadata file transfer module 26b, a learner computer DB 28a, It consists of a metadata file DB 28b.
서버엔진(22)은 액세스하는 학습자 컴퓨터(10)에 대하여 다양한 웹페이지(24)를 제공하며, 상기 모듈들과 같은 서버 사이드(server-side) 프로그램을 위한 플랫폼을 제공한다. The server engine 22 presents various web pages 24 to the learner computer 10 to access and provides a platform for server-side programs such as the above modules.
여기서, 웹페이지(24)는 HTML 형식으로 작성되는 것이 바람직하나, 컴퓨터 시스템에 의해서 독출될 수 있는 것이라면 어떠한 형식으로 작성되어도 무방하다. Here, the web page 24 is preferably written in HTML format, but may be written in any format as long as it can be read by a computer system.
단말기 정보 관리 모듈(26a)은 서비스 서버(20)에 접속하는 학습자 컴퓨터의 단말기 정보를 수신하여 저장하기 위한 것으로서, 예를들어, 상기 학습자 컴퓨터(10)가 유선 통신망을 통해 접속되는 퍼스널 컴퓨터인 경우, 상기 단말기 정보는 IP 어드레스(IP Address)가 된다. The terminal information management module 26a is for receiving and storing terminal information of a learner computer connected to the service server 20. For example, when the learner computer 10 is a personal computer connected through a wired communication network. The terminal information is an IP address.
메타 데이터 파일 전송 모듈(26b)은 학습자 컴퓨터(10)로부터 메타 데이터 파일 전송 요청을 수신하고, 메타 데이터 파일 DB(28b)로부터 메타 데이터 파일을 인출하여 전송하는 기능을 수행하는 프로그램이다.The metadata file transfer module 26b is a program that receives a metadata file transfer request from the learner computer 10 and extracts and transfers the metadata file from the metadata file DB 28b.
단말기 정보 DB 는 학습자 컴퓨터의 단말기 정보가 저장되는 데이터베이스이다.The terminal information DB is a database in which terminal information of a learner computer is stored.
메타 데이터 파일 DB는 상술한 바와 같이 생성된 다수의 메타 데이터 파일이 저장되는 데이터베이스이다. The metadata file DB is a database in which a plurality of metadata files generated as described above are stored.
도 7 은 서비스 서버(20)로부터 학습자 컴퓨터(10)에 메타 데이터 파일이 페이지 별로 전송되는 과정을 나타내는 흐름도이다. 도 7 을 참조하면, 학습자는 학습자 컴퓨터(10)를 이용하여 네트워크망(30)을 통해 서비스 서버(20)에 접속함으로써, 서비스 서버(20)와 데이터 링크를 확보한다(단계 S100). 바람직하게 네트워크망(30)을 관리하는 통신회사는 상기 접속을 요청한 학습자 컴퓨터의 통신망상에서의 위치를 나타내는 고유한 IP 어드레스를 함께 전송한다. 여기서 학습자는 서비스 서버(20)를 대표하는 URL 로 접속하며, 이에 대해 서비스 서버(20)는 상기 URL에 대응하는 웹페이지(24)를 학습자 컴퓨터(10)의 웹브라우저에 제공하며, 웹브라우저는 전송된 웹페이지(24)를 코드해석하여 학습자 컴퓨터(10) 모니터에 디스플레이 한다(단계 S300). 7 is a flowchart illustrating a process of transmitting a metadata file page by page from the service server 20 to the learner computer 10. Referring to FIG. 7, the learner connects to the service server 20 through the network 30 using the learner computer 10 to secure a data link with the service server 20 (step S100). Preferably, the telecommunications company that manages the network 30 transmits a unique IP address indicating the location on the communication network of the learner computer requesting the connection. Here, the learner connects to the URL representing the service server 20, and the service server 20 provides the web page 24 corresponding to the URL to the web browser of the learner computer 10, and the web browser The coded webpage 24 is interpreted and displayed on the monitor of the learner computer 10 (step S300).
서비스 서버(20)에 접속한 학습자 컴퓨터(10)는 메타 데이터 파일의 전송을 요청한다(단계 S302). 서비스 서버(20)는 상기 요청을 접수하고 메타 데이터 파일 전송 모듈(26b)은 전송할 메타 데이터 파일의 전체 페이지수를 전송한다(단계 S304).이에 학습자 컴퓨터(10)는 메타 데이터 파일의 전체 페이지수를 수신하고 RAM(10c)에 그에 맞는 데이터 구조체를 설정한다(단계 S306). 이는 효과적인 데이터 전송과 원활한 재생을 위하여 메모리에 전체 페이지(42) 분량의 기억장소를 잡아두는 기능을 하는 것이다. 다시 서비스 서버(20)는 현재 페이지(42)에서 구동되는 멀티미디어 객체정보를 포함하는 객체블록(44)을 전송하고(단계 S308) 학습자 컴퓨터(10)는 이를 RAM(10c)에 계층적 구조로 저장한다(단계 S310). 다음에 상기 서비스 서버(20)는 현재 페이지(42)의 음성 또는 영상 데이터와 멀티미디어 객체를 구동하는 구동코드를 포함하는 구동블록(46)을 전송하고(단계 S312), 상기 학습자 컴퓨터(10)는 전송 받은 구동블록(46)을 RAM(10c)에 계층적 구조로 저장한다(단계 S314). 구동블록(46c)이 전송되어 RAM(10c)에 저장되면 학습자 컴퓨터(10)는 도 4에서 보여지는 바와 같이 페이지(42) 출력 방법을 이용하여 한 페이지(42) 씩 출력한다(단계 S316). 서비스 서버(20)는 한 페이지(42)의 전송이 끝나면 다음 페이지(42)의 전송을 반복하고 이 때 학습자 컴퓨터(10)는 페이지(42) 출력 방법을 함께 진행시킴에 따라 전송 받는 단계와 한 페이지(42) 씩 출력하는 단계를 동시에 진행시켜 멀티미디어 데이터 재생을 원활하게 한다.The learner computer 10 connected to the service server 20 requests the transmission of the metadata file (step S302). The service server 20 receives the request, and the metadata file transfer module 26b transmits the total number of pages of the metadata file to be transmitted (step S304). The learner computer 10 then changes the total number of pages of the metadata file. Is received, and a data structure corresponding thereto is set in the RAM 10c (step S306). This function holds the entire page 42 of memory in memory for efficient data transfer and smooth playback. The service server 20 again transmits the object block 44 including the multimedia object information driven in the current page 42 (step S308), and the learner computer 10 stores it in a hierarchical structure in the RAM 10c. (Step S310). Next, the service server 20 transmits the driving block 46 including the driving code for driving the multimedia object and the audio or video data of the current page 42 (step S312), and the learner computer 10 The received drive block 46 is stored in a hierarchical structure in the RAM 10c (step S314). When the driving block 46c is transmitted and stored in the RAM 10c, the learner computer 10 outputs one page 42 one by one using the page 42 output method as shown in FIG. 4 (step S316). After the transmission of one page 42, the service server 20 repeats the transmission of the next page 42. At this time, the learner computer 10 proceeds with the method of outputting the page 42. Simultaneously outputting the pages 42 by page facilitates multimedia data reproduction.
이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술 사상과 아래에 기재될 특허 청구 범위의 균등 범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.As mentioned above, although this invention was demonstrated by the limited embodiment and drawing, this invention is not limited by this, The person of ordinary skill in the art to which this invention belongs, Of course, various modifications and variations are possible within the scope of equivalent claims.
본 발명의 멀티미디어 메타 데이터 파일의 생성,전송,출력 방법에 따르면, 많은 양의 멀티미디어 데이터를 상대적으로 적은 양의 정보 데이터로 표현이 가능하고, 이에 따라 전송속도를 향상시킬 수 있으며 또한 정확한 전송이 가능하다. 그리고 무엇보다도 음성 또는 영상 데이터의 재생과 함께 그림, 표, 차트 등의 멀티미디어 객체가 연동함으로써 교육의 시각적, 청각적 효과를 최대화시키고, 학습자는 교육중 일정한 키조작을 통한 피드백이 가능함에 따라 상호 교환적인 수업을 이룰 수 있다. 따라서 궁극적으로는 멀티미디어를 이용한 교육의 효과가 극대화되어 컴퓨터를 이용한 교육의 활용도가 높아지고 나아가 지식을 전달하는 수단으로써 큰 역할을 담당하게 될 것이다. According to the method for generating, transmitting, and outputting a multimedia metadata file of the present invention, a large amount of multimedia data can be represented with a relatively small amount of information data, and accordingly, a transmission speed can be improved and accurate transmission is possible. Do. First of all, multimedia objects such as pictures, tables, and charts are linked together with playback of audio or video data to maximize the visual and auditory effects of education. Can achieve class. Therefore, ultimately, the effect of education using multimedia will be maximized, and the utilization of education using computer will be increased, and it will play a big role as a means of delivering knowledge.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 후술하는 발명의 상세한 설명과 함께 본 발명의 기술 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.The following drawings, which are attached to this specification, illustrate exemplary embodiments of the present invention, and together with the detailed description of the present invention, serve to further understand the technical spirit of the present invention. It should not be construed as limited to.
도 1 은 본 발명에 따른 멀티미디어 메타 데이터 파일의 한 페이지를 출력함에 있어서 시간의 진행 따라 음성 객체와 영상 객체가 구동되면서, 텍스트, 이미지, 그래픽, 표, 차트 등의 멀티미디어 객체가 연동하는 것을 개략적으로 나타내는 그림이다.1 is a schematic diagram illustrating the interworking of multimedia objects such as text, images, graphics, tables, and charts as voice objects and video objects are driven as time progresses in outputting a page of a multimedia metadata file according to the present invention. It is an illustration.
도 2 는 본 발명에 따른 멀티미디어 메타 데이터 파일의 생성을 위한 파일 포맷을 예시하는 도면이다.2 is a diagram illustrating a file format for generation of a multimedia metadata file according to the present invention.
도 3 은 본 발명에 따른 멀티미디어 메타 데이터 파일의 출력을 위한 학습자 컴퓨터의 구성을 나타내는 그림이다.3 is a diagram illustrating a configuration of a learner computer for outputting a multimedia metadata file according to the present invention.
도 4 는 본 발명에 따른 멀티미디어 메타 데이터 파일의 한 페이지를 출력하는 알고리즘을 나타내는 흐름도이다4 is a flowchart illustrating an algorithm for outputting one page of a multimedia metadata file according to the present invention.
도 5 는 본 발명에 따른 멀티미디어 메타 데이터 파일의 전송을 위한 네트워크 시스템의 구성을 나타내는 그림이다.5 is a diagram illustrating a configuration of a network system for transmitting a multimedia metadata file according to the present invention.
도 6 은 본 발명에 따른 멀티미디어 메타 데이터 파일의 전송을 위한 서비스 서버의 구성을 나타내는 그림이다. 6 is a diagram illustrating a configuration of a service server for transmitting a multimedia metadata file according to the present invention.
도 7 은 본 발명에 따른 멀티미디어 메타 데이터 파일을 서비스 서버가 학습자 컴퓨터에 전송하는 과정을 보여주는 흐름도이다.7 is a flowchart illustrating a process of transmitting, by a service server, a multimedia metadata file to a learner computer according to the present invention.
<도면 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>
10 : 학습자 컴퓨터 20 : 서비스 서버10: Learner Computer 20: Service Server
30 : 네트워크망30: network
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2002-0006273A KR100486102B1 (en) | 2002-02-04 | 2002-02-04 | Multimedia Metadata file Formation, Transmission, Print Method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2002-0006273A KR100486102B1 (en) | 2002-02-04 | 2002-02-04 | Multimedia Metadata file Formation, Transmission, Print Method |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20030066100A KR20030066100A (en) | 2003-08-09 |
KR100486102B1 true KR100486102B1 (en) | 2005-04-29 |
Family
ID=32220418
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR10-2002-0006273A KR100486102B1 (en) | 2002-02-04 | 2002-02-04 | Multimedia Metadata file Formation, Transmission, Print Method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100486102B1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11282826A (en) * | 1998-03-31 | 1999-10-15 | Nippon Telegr & Teleph Corp <Ntt> | Electronic education system using internet |
KR20010056342A (en) * | 1999-12-15 | 2001-07-04 | 김종근 | Effective user interfaces and data structure of a multi-media lecture, and a system structure for transferring and management of the multi-media lecture for distance education in computer networks |
KR20010104970A (en) * | 2000-05-17 | 2001-11-28 | 김상우 | Internet Educational Broadcasting System |
KR20020009757A (en) * | 2000-07-26 | 2002-02-02 | 성주호 | Digital Video Searching And Authoring Tool |
KR20020067230A (en) * | 2001-02-16 | 2002-08-22 | 주식회사 리얼타임테크 | Edu-V |
KR20030038933A (en) * | 2001-11-09 | 2003-05-17 | 이승근 | Method for reproducing some multimedia files being associated with time and space and apparatus thereof |
KR20030062593A (en) * | 2002-01-17 | 2003-07-28 | (주)텔리젠 | The apparatus and method for converting remote lecture file using xml |
-
2002
- 2002-02-04 KR KR10-2002-0006273A patent/KR100486102B1/en active IP Right Grant
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11282826A (en) * | 1998-03-31 | 1999-10-15 | Nippon Telegr & Teleph Corp <Ntt> | Electronic education system using internet |
KR20010056342A (en) * | 1999-12-15 | 2001-07-04 | 김종근 | Effective user interfaces and data structure of a multi-media lecture, and a system structure for transferring and management of the multi-media lecture for distance education in computer networks |
KR20010104970A (en) * | 2000-05-17 | 2001-11-28 | 김상우 | Internet Educational Broadcasting System |
KR20020009757A (en) * | 2000-07-26 | 2002-02-02 | 성주호 | Digital Video Searching And Authoring Tool |
KR20020067230A (en) * | 2001-02-16 | 2002-08-22 | 주식회사 리얼타임테크 | Edu-V |
KR20030038933A (en) * | 2001-11-09 | 2003-05-17 | 이승근 | Method for reproducing some multimedia files being associated with time and space and apparatus thereof |
KR20030062593A (en) * | 2002-01-17 | 2003-07-28 | (주)텔리젠 | The apparatus and method for converting remote lecture file using xml |
Also Published As
Publication number | Publication date |
---|---|
KR20030066100A (en) | 2003-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200193081A1 (en) | Automated augmentation of text, web and physical environments using multimedia content | |
US6829746B1 (en) | Electronic document delivery system employing distributed document object model (DOM) based transcoding | |
US6772144B2 (en) | Method and apparatus for applying an adaptive layout process to a layout template | |
US6725424B1 (en) | Electronic document delivery system employing distributed document object model (DOM) based transcoding and providing assistive technology support | |
US20060168348A1 (en) | Delta caching | |
US20040100509A1 (en) | Web page partitioning, reformatting and navigation | |
US7162197B2 (en) | Picture book production system, server for producing picture book, and recording medium | |
CN107402985B (en) | Video special effect output control method and device and computer readable storage medium | |
WO2004051966A2 (en) | System and methodology providing intelligent resource fork | |
JP2000512783A (en) | Network-based access system | |
JP2008176820A (en) | System and method for content delivery over wireless communication medium to portable computing device | |
CN110609965B (en) | Page display method, device and storage medium | |
JP2002108870A (en) | System and method for processing information | |
JP4094777B2 (en) | Image communication system | |
Krause | Introducing Web Development | |
KR100874289B1 (en) | Electronic pen-computer multimedia interactive system | |
US8149217B2 (en) | Creating responses for an electronic pen-computer multimedia interactive system | |
KR100486102B1 (en) | Multimedia Metadata file Formation, Transmission, Print Method | |
JPH10247191A (en) | Dynamic increment updating function for electronic document | |
KR20050040532A (en) | Method and system for providing three-dimensional data | |
JP2008515045A (en) | Method for implementing cartoon animation on a mobile terminal | |
JP3691403B2 (en) | Distribution system, portable terminal device and central device | |
JP3543642B2 (en) | Client-server information access method and system, and storage medium storing client-server information access program | |
KR100847943B1 (en) | Creating responses for an electronic pen-computer multimedia interactive system | |
CN112020847A (en) | Preserving digital ink spatial relationships in electronic messages |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130416 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20140411 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20160412 Year of fee payment: 12 |
|
FPAY | Annual fee payment |
Payment date: 20170413 Year of fee payment: 13 |
|
FPAY | Annual fee payment |
Payment date: 20190415 Year of fee payment: 15 |