KR101007645B1 - Data storage apparatus having indexing function and indexing method therefor - Google Patents

Data storage apparatus having indexing function and indexing method therefor Download PDF

Info

Publication number
KR101007645B1
KR101007645B1 KR1020100051789A KR20100051789A KR101007645B1 KR 101007645 B1 KR101007645 B1 KR 101007645B1 KR 1020100051789 A KR1020100051789 A KR 1020100051789A KR 20100051789 A KR20100051789 A KR 20100051789A KR 101007645 B1 KR101007645 B1 KR 101007645B1
Authority
KR
South Korea
Prior art keywords
file
unit
index
video
storage device
Prior art date
Application number
KR1020100051789A
Other languages
Korean (ko)
Inventor
성관수
Original Assignee
주식회사 넥스토디아이
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 넥스토디아이 filed Critical 주식회사 넥스토디아이
Priority to KR1020100051789A priority Critical patent/KR101007645B1/en
Application granted granted Critical
Publication of KR101007645B1 publication Critical patent/KR101007645B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/382—Information transfer, e.g. on bus using universal interface adapter
    • G06F13/387—Information transfer, e.g. on bus using universal interface adapter for adaptation of different data processing systems to different peripheral devices, e.g. protocol converters for incompatible systems, open system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/11—File system administration, e.g. details of archiving or snapshots
    • G06F16/122—File system administration, e.g. details of archiving or snapshots using management policies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/174—Redundancy elimination performed by the file system
    • G06F16/1748—De-duplication implemented within the file system, e.g. based on file segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/289—Object oriented databases
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10009—Improvement or modification of read or write signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

PURPOSE: A data storage apparatus with an indexing function and an indexing method therefor are provided to easily search a desired video file by checking a video index file. CONSTITUTION: A reproduction unit(183) reproduces a video file according to extracted meta information for each detected video file. A representative image extraction unit(185) selects a reproduced image as a representative image. An index file generation unit(187) generates index information including the meta information and the representative image for each detected video file. The index file generation unit generates an index file.

Description

인덱싱 기능을 갖는 데이터 저장 장치 및 인덱싱 방법{Data Storage Apparatus Having Indexing Function and Indexing Method Therefor}Data Storage Apparatus Having Indexing Function and Indexing Method Therefor}

본 발명은 데이터 저장 장치에 관한 것으로, 보다 구체적으로는 인덱싱 기능을 갖는 데이터 저장 장치 및 인덱싱 방법에 관한 것이다.The present invention relates to a data storage device, and more particularly, to a data storage device having an indexing function and an indexing method.

전자 문서 파일, 멀티미디어 파일 등과 같은 디지털 파일은 자료의 손실에 대비하여 동일한 파일을 다른 저장매체에 백업해 두는 것이 안전하다. 특히, 방송국이나 제작사들은 촬영한 동영상을 추후에 재사용하기 위해 장시간 보관하는 것이 일반적이다.For digital files such as electronic document files and multimedia files, it is safe to back up the same file to other storage media in case of data loss. In particular, broadcasting stations and producers generally store the video for a long time for later reuse.

이를 위해, 방송용 카메라에 장착되어 동영상 파일이 저장되는 메모리 카드의 내용을 백업해 두는 저장장치가 유통되고 있다. 백업 저장장치를 사용하게 되면, 메모리 카드의 내용을 백업 저장장치에 복사한 후 메모리 카드의 내용을 삭제한 다음 재사용할 수 있어 비용 면에서 효율적인 이점이 있다.To this end, a storage device that is mounted on a broadcasting camera and backs up the contents of a memory card that stores a video file is being distributed. Using a backup storage device has a cost-effective advantage because it can copy the contents of the memory card to the backup storage device, delete the contents of the memory card, and then reuse it.

백업 저장장치에 복사해 둔 동영상 파일은 다시 대용량 서버, 광학 디스크, 대용량 데이터 테이프 등에 보관하게 된다. 이와 같이 보관되는 동영상 파일은 시일이 경과함에 따라 누적되어 그 수가 증가하게 되고, 방대한 개수의 동영상 파일로부터 원하는 동영상 파일을 찾는 것은 쉽지 않은 작업이 될 수 밖에 없다.Movie files copied to backup storage will be stored on mass servers, optical disks and large data tapes. The video files stored as described above accumulate as the time passes and the number thereof increases, and finding a desired video file from a huge number of video files is a difficult task.

이를 대비하여 동영상 파일의 파일명이나 폴더명을 명명함에 있어 촬영 날짜나 동영상의 내용을 표현하는 단어를 포함하도록 하는 방법이 일반적으로 통용되고 있다. 하지만, 이러한 방식은 명명하는 사람의 기억에 의거하는 것이므로 일관적이지 않고, 담당자가 바뀌거나 오랜 시간이 경과하면 원하는 동영상을 찾는 데 여전히 어려움이 따르게 된다.In contrast, in naming a file name or a folder name of a video file, a method of including a word representing a shooting date or a content of a video is generally used. However, since this method is based on the memory of the naming person, it is not consistent, and when a person changes or a long time passes, it is still difficult to find a desired video.

또한, 찾고자 하는 동영상이 맞는지 확인을 위해 동영상을 재생하기 위해서는 해당 동영상을 재생할 수 있는 코덱을 알 수 있어야 하나, 파일명이나 폴더명 만으로는 이러한 정보를 한 눈에 알 수 없다.In addition, in order to play a video to check whether the video to be searched for, it is necessary to know a codec that can play the video, but the file name or folder name alone can not know this information at a glance.

본 발명은 백업되는 디지털 파일의 메타정보로부터 색인 파일을 생성할 수 있는 인덱싱 기능을 갖는 데이터 저장 장치 및 인덱싱 방법을 제공하는 데 그 기술적 과제가 있다.SUMMARY OF THE INVENTION The present invention provides a data storage device and an indexing method having an indexing function capable of generating an index file from meta information of a digital file to be backed up.

본 발명의 다른 기술적 과제는 동영상 파일로부터 대표 이미지를 포함하는 색인 파일을 생성할 수 있는 인덱싱 기능을 갖는 데이터 저장 장치 및 인덱싱 방법을 제공하는 데 있다.Another object of the present invention is to provide a data storage device having an indexing function and an indexing method capable of generating an index file including a representative image from a video file.

상술한 기술적 과제를 달성하기 위한 본 발명의 일 실시예에 의한 인덱싱 기능을 갖는 데이터 저장 장치는 외부장치로부터 적어도 하나의 동영상 파일을 수신하여 저장하는 데이터 저장 장치로서, 상기 동영상 파일 각각으로부터 메타 정보를 추출하여 색인 파일을 생성하는 인덱싱부;를 포함한다.Data storage device having an indexing function according to an embodiment of the present invention for achieving the above technical problem is a data storage device for receiving and storing at least one video file from an external device, the metadata information from each of the video files; And an indexing unit for extracting and generating an index file.

한편, 본 발명의 다른 실시예에 의한 인덱싱 기능을 갖는 데이터 저장 장치는 외부 장치가 접속됨에 따라, 상기 외부 장치에 저장된 데이터를 백업하는 복사부; 및 상기 복사부에 의해 백업된 데이터 중 동영상 파일이 존재하는 경우 상기 동영상 파일에 대한 색인 파일을 생성하는 인덱싱부;를 포함하고, 상기 인덱싱부는, 상기 동영상 파일 각각의 메타 데이터 중 기 설정된 조건을 만족하는 메타정보를 추출하는 메타정보 추출부; 상기 메타정보 추출부에서 추출한 메타정보에 따라, 상기 동영상 파일의 재생 시작 시점으로부터 지정된 시간이 경과한 시점에서 상기 동영상 파일을 재생하는 재생부; 상기 재생부에 의해 재생되어 표출되는 이미지를 대표 이미지로 선택하는 대표 이미지 추출부; 및 상기 동영상 파일 각각에 대한 메타정보 및 상기 대표 이미지를 포함하는 색인정보를 생성하고, 상기 색인정보를 취합하여 색인 파일을 생성하는 색인파일 생성부;를 포함한다.On the other hand, the data storage device having an indexing function according to another embodiment of the present invention, a copy unit for backing up the data stored in the external device as the external device is connected; And an indexing unit which generates an index file for the video file when a video file exists among the data backed up by the copying unit, wherein the indexing unit satisfies a predetermined condition among metadata of each of the video files. A meta information extracting unit for extracting meta information; A playback unit for reproducing the video file at a time elapsed from a start time of playback of the video file according to the meta information extracted by the meta information extraction unit; A representative image extracting unit which selects an image reproduced and displayed by the reproducing unit as a representative image; And an index file generator for generating index information including meta information of each of the video files and the representative image, and generating the index file by collecting the index information.

다른 한편, 본 발명의 일 실시예에 의한 데이터 저장 장치의 인덱싱 방법은 외부 장치로부터 동영상 파일을 백업하는 단계; 및 상기 백업이 완료된 동영상 파일의 메타 데이터를 참조하여 색인 파일을 생성하는 단계;를 포함한다.On the other hand, the indexing method of the data storage device according to an embodiment of the present invention comprises the steps of backing up a video file from an external device; And generating an index file by referring to metadata of the video file at which the backup is completed.

본 발명에 의하면, 동영상 파일과 같은 디지털 파일을 백업함과 동시에 이를 식별할 수 있는 색인 파일을 생성한다. 특히, 이러한 색인 파일은 동영상 파일의 기본 정보 외에 대표 이미지를 포함하고 있다. 따라서, 동영상을 생성한 후 오랜 시간이 경과하여도 색인 파일을 검토하는 간단한 작업만으로 원하는 동영상 파일을 용이하게 검색할 수 있다. 아울러, 색인 파일은 웹 문서로 생성할 수 있으며 따라서 색인 파일의 실행 및 검색을 더욱 용이하게 할 수 있다.According to the present invention, a digital file such as a video file is backed up and an index file for identifying the same is generated. In particular, such an index file includes a representative image in addition to the basic information of the video file. Therefore, even after a long time after generating a video, it is possible to easily search for a desired video file by simply examining the index file. In addition, the index file can be generated as a web document, thus making it easier to execute and search the index file.

결과적으로, 동영상 파일 각각에 대한 색인 파일을 생성함으로써 백업된 동영상 파일에 대한 효율적이고 용이한 보관 및 관리가 가능한 이점이 있다.As a result, by creating an index file for each video file, there is an advantage that efficient and easy storage and management of the backed up video file is possible.

도 1은 본 발명에 적용되는 데이터 저장 장치의 구성도,
도 2는 본 발명의 일 실시예에 의한 인덱싱 기능을 갖는 데이터 저장 장치의 구성도,
도 3은 도 2에 도시한 인덱싱부의 구성도,
도 4는 본 발명에 의해 생성된 색인 파일의 일 예시도,
도 5는 본 발명의 일 실시예에 의한 데이터 저장 장치의 인덱싱 방법을 설명하기 위한 흐름도,
도 6은 도 5에 도시한 인덱싱 과정의 흐름도이다.1 is a configuration diagram of a data storage device applied to the present invention;
2 is a block diagram of a data storage device having an indexing function according to an embodiment of the present invention;
3 is a configuration diagram of the indexing unit shown in FIG. 2;
4 is an exemplary diagram of an index file generated by the present invention;
5 is a flowchart illustrating an indexing method of a data storage device according to an embodiment of the present invention;
6 is a flowchart of the indexing process shown in FIG. 5.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 설명하기로 한다.Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명에 적용되는 데이터 저장 장치의 구성도이다.1 is a configuration diagram of a data storage device applied to the present invention.

도 1을 참조하면, 데이터 저장 장치(10)는 메모리 카드(20)가 삽입되는 슬롯(12)을 구비한다. 슬롯(12)에 메모리 카드(20)가 삽입되면, 데이터 저장 장치(10)는 이를 인식하고 메모리 카드(20)에 백업할 파일이 존재하는지 확인하여 이를 디스플레이부(14)에 표시한다.Referring to FIG. 1, the data storage device 10 includes a slot 12 into which a memory card 20 is inserted. When the memory card 20 is inserted into the slot 12, the data storage device 10 recognizes this and checks whether a file to be backed up exists in the memory card 20 and displays it on the display unit 14.

사용자는 데이터 백업을 원할 경우 조작버튼(16)을 통해 명령을 입력할 수 있고, 데이터 백업 상태는 디스플레이부(14)를 통해 표출될 수 있다.If the user wants to back up the data, the user can input a command through the operation button 16, and the data backup state can be displayed through the display unit 14.

아울러, 데이터 저장 장치(18)는 보조 기억장치 접속부(18)를 더 포함할 수 있다. 보조 기억장치 접속부(18)는 USB(Universal Serial Bus) 호스트, IEEE(Institute of Electrical and Electronics Engineers)1394, eSATA(external Serial Advanced Technology Attachment) 등이 될 수 있으며, 이를 통해 디스크 드라이버(30)를 연결하고, 디스크 드라이버(30)에 디스크(32)를 삽입하여 데이터 저장 장치(10)의 데이터를 디스크(32)로 전달할 수 있다.In addition, the data storage device 18 may further include an auxiliary storage device connection unit 18. The auxiliary storage connector 18 may be a USB (Universal Serial Bus) host, an Institute of Electrical and Electronics Engineers (IEEE) 1394, an external Serial Advanced Technology Attachment (eSATA), and the like to connect the disk driver 30. The data of the data storage device 10 can be transferred to the disk 32 by inserting the disk 32 into the disk driver 30.

한편, 본 발명에 의한 데이터 저장 장치(10)는 메모리 카드(20)의 내용을 복사할 때, 각 디지털 파일에 대한 색인 파일을 생성한다. 디지털 파일은 예를 들어 동영상 파일이 될 수 있으며, 이 경우 색인 파일은 동영상 파일의 코덱(CODEC) 종류 및 대표 이미지와 같은 색인정보를 포함할 수 있다. 이에 더하여, 색인정보는 제작일, 제작자, 길이, 크기, 비디오 출력 방식(NTSC(the united states National Television Systems Committee), PAL(Phase Alternation by Line)) 등을 더 포함할 수 있다.On the other hand, the data storage device 10 according to the present invention generates an index file for each digital file when copying the contents of the memory card 20. The digital file may be, for example, a video file. In this case, the index file may include index information such as a codec type and a representative image of the video file. In addition, the index information may further include a production date, a producer, a length, a size, a video output method (the united states National Television Systems Committee (NTSC), a phase alteration by line (PAL)), and the like.

대표 이미지를 제외한 색인정보는 동영상 파일의 메타 데이터로부터 추출할 수 있으며, 메타 데이터로부터 추출된 코덱 방식을 참조하여 동영상 파일을 재생하여 대표 이미지를 추출할 수 있다. 이에 대하여 도 2를 참조하여 설명하면 다음과 같다.Index information excluding the representative image may be extracted from metadata of the video file, and the representative image may be extracted by reproducing the video file with reference to a codec method extracted from the metadata. This will be described with reference to FIG. 2.

도 2는 본 발명의 일 실시예에 의한 인덱싱 기능을 갖는 데이터 저장 장치의 구성도이다.2 is a block diagram of a data storage device having an indexing function according to an embodiment of the present invention.

도시한 것과 같이, 데이터 저장 장치(10)는 전체적인 동작을 제어하는 제어부(110), 외부장치 인터페이스부(120), 외부장치 검출부(130), 복사부(140), 동영상 검출부(150), 내장 저장장치(160), 사용자 인터페이스부(170) 및 인덱싱부(180)를 포함한다.As illustrated, the data storage device 10 includes a controller 110, an external device interface unit 120, an external device detector 130, a copy unit 140, a video detector 150, and a built-in controller that control overall operations. The storage device 160, the user interface unit 170, and the indexing unit 180 are included.

외부장치 인터페이스부(120)는 메모리 카드가 삽입되는 슬롯(12), 또는 보조 기억장치 접속부(18)가 될 수 있으며, 슬롯(12)을 통해 메모리 카드가 삽입되는 경우 외부 장치 검출부(130)가 이를 인식하게 된다.The external device interface unit 120 may be a slot 12 into which a memory card is inserted or an auxiliary memory connecting unit 18. When the memory card is inserted through the slot 12, the external device detection unit 130 may be selected. You will recognize this.

외부장치 검출부(130)에서 인식한 외부장치에 디지털 파일이 존재하는 경우 복사부(140)는 검출된 디지털 파일을 내장 저장장치(160)로 복사한다. 여기에서, 내장 저장장치(160)는 하드디스크, SSD(Solid State Disk) 등이 될 수 있다.When the digital file exists in the external device recognized by the external device detector 130, the copying unit 140 copies the detected digital file to the internal storage device 160. Herein, the internal storage device 160 may be a hard disk, a solid state disk (SSD), or the like.

동영상 검출부(150)는 복사부(140)에 의해 내장 저장장치(160)로 디지털 파일이 복사된 후, 복사된 디지털 파일 중 인덱싱 대상 파일, 예를 들어 동영상 파일이 존재하는지 확인한다.After the digital file is copied to the internal storage device 160 by the copying unit 140, the video detecting unit 150 checks whether an indexing file, for example, a video file, exists among the copied digital files.

사용자 인터페이스부(170)는 디스플레이부(14) 및 조작버튼(16)이 될 수 있으며, 조작 버튼(16)을 통해 사용자로부터 명령을 입력받고, 데이터 저장 장치(10)의 동작 상태는 디스플레이부(14)를 통해 표출한다.The user interface unit 170 may be a display unit 14 and an operation button 16, and receives a command from a user through the operation button 16, and an operation state of the data storage device 10 may be displayed in the display unit ( It is expressed through 14).

인덱싱부(180)는 내장 저장장치(160)로 백업된 디지털 파일 중 동영상 검출부(150)에서 검출한 동영상 파일에 대한 색인 파일을 생성한다. 메모리 카드로부터 내장 저장장치(160)로 백업되는 데이터는 적어도 하나 이상의 동영상 파일이 저장되어 있을 수 있으며, 이 경우 동영상 파일 각각에 대한 색인정보를 생성한 후, 백업된 전체 동영상 파일에 대한 통합 색인 파일을 생성하는 것도 가능하다.The indexing unit 180 generates an index file for the video file detected by the video detecting unit 150 among the digital files backed up to the internal storage device 160. Data backed up from the memory card to the internal storage device 160 may include at least one video file. In this case, after generating index information for each video file, the integrated index file for all the backed up video files It is also possible to generate.

일반적으로, 동영상 파일 생성시 헤더에 메타 데이터가 포함되어 생성될 수도 있고, 동영상 파일과 별도의 파일에 메타 데이터를 생성한다. 메타 데이터는 동영상 관련 정보를 담고 있는 복수의 필드를 포함하고 있으며, 복수의 필드 중 기 설정된 조건에 만족되는 필드를 선택하여 색인정보로 검출한다. 기 설정된 조건에 만족되는 필드 즉, 색인정보는 예를 들어, 코덱(CODEC) 종류를 포함할 수 있고, 이에 더하여 동영상 파일의 제작일, 제작자, 길이, 크기, 비디오 출력 방식(NTSC, PAL)을 더 포함할 수 있다. 메타 데이터로부터 해당 동영상 파일의 코덱 종류를 확인하면 이에 따라 동영상 파일을 재생하게 되며, 이로부터 대표 이미지를 색인정보에 포함시킬 수 있다. 본 발명의 일 실시예에서, 대표 이미지는 동영상 파일의 재생 시작 시점으로부터 지정된 시간(예를 들어 3 내지 7초)이 경과한 시점에서 동영상을 재생시켜 표출되는 영상을 대표 이미지로 선택할 수 있다.In general, when generating a video file, the header may be generated by including metadata, or the metadata is generated in a file separate from the video file. The meta data includes a plurality of fields containing video related information, and selects a field satisfying a predetermined condition from among the plurality of fields and detects the index information. The field that satisfies the preset condition, that is, the index information may include, for example, a codec type, and in addition, the production date, the producer, the length, the size, and the video output method (NTSC, PAL) of the video file. It may further include. When the codec type of the corresponding video file is confirmed from the metadata, the video file is played accordingly, and the representative image may be included in the index information therefrom. In an embodiment of the present invention, the representative image may select an image displayed by playing the video at a time point (for example, 3 to 7 seconds) elapsed from the start time of playing the video file as the representative image.

한편, 인덱싱부(180)는 색인 파일에 더하여 라벨 파일을 생성하는 것도 가능하다. 데이터 저장 장치(10)에 백업된 동영상 파일은 광학 디스크 등과 같은 보조 기억장치에 복사할 수 있다. 보조 기억장치를 식별하기 위해서는 라벨링 작업을 수행하는 것이 바람직하며, 해당 보조 기억장치에 어떠한 동영상 파일이 저장되어 있음을 용이하게 식별하기 위하여, 색인정보를 참조하여 라벨 파일을 생성하는 것이다. 이러한 라벨 파일은 라벨 용지에 직접 인쇄 가능한 형태로 제작하여 사용 상의 편의를 향상시킬 수 있다. 더욱이, 보조 기억장치로 동영상 파일을 복사할 때 해당 동영상 파일에 대한 색인파일을 생성하여 복사하게 되면 보조 기억장치에 저장된 동영상 파일에 대한 식별력을 더욱 향상시킬 수 있다.The indexing unit 180 may generate a label file in addition to the index file. The video file backed up to the data storage device 10 may be copied to an auxiliary storage device such as an optical disk. In order to identify the auxiliary storage device, it is preferable to perform a labeling operation. In order to easily identify which moving picture file is stored in the auxiliary storage device, a label file is generated with reference to the index information. Such a label file may be manufactured in a form directly printable on a label sheet to improve convenience of use. In addition, when copying a video file to the auxiliary storage device, if the index file for the video file is generated and copied, the identification of the video file stored in the auxiliary storage device may be further improved.

도 3은 도 2에 도시한 인덱싱부의 구성도이다.3 is a configuration diagram illustrating the indexing unit shown in FIG. 2.

도 3에 도시한 것과 같이, 인덱싱부(180)는 메타정보 추출부(181), 재생부(183), 대표 이미지 추출부(185), 색인파일 생성부(187)를 포함하고, 이에 더하여 라벨 파일 생성부(189)를 추가로 포함할 수 있다.As shown in FIG. 3, the indexing unit 180 includes a meta information extracting unit 181, a playback unit 183, a representative image extracting unit 185, and an index file generating unit 187. The file generator 189 may be further included.

메타정보 추출부(181)는 메모리 카드에 저장되어 있던 디지털 파일이 내장 저장장치(160)로 백업된 후 동영상 검출부(150)에 의해 인덱싱 대상 동영상 파일이 검출됨에 따라, 검출된 각 동영상 파일에 대하여 메타 데이터를 확인하고, 이로부터 기 설정된 조건에 따라 색인정보에 필요한 정보를 추출한다. 예를 들어, 메타정보 추출부(181)로부터 추출되는 색인정보는 코덱(CODEC) 종류를 포함할 수 있고, 이에 더하여 동영상 파일의 제작일, 제작자, 길이, 크기, 비디오 출력 방식(NTSC(the united states National Television Systems Committee), PAL(Phase Alternation by Line))을 더 포함할 수 있다.The meta information extracting unit 181 may backup the digital file stored in the memory card to the internal storage device 160 and then detect the indexed moving image file by the moving image detecting unit 150. The metadata is checked, and information necessary for index information is extracted from the metadata according to a preset condition. For example, the index information extracted from the meta information extraction unit 181 may include a codec type, and in addition, the production date, creator, length, size, and video output method of the video file (NTSC (the united) states National Television Systems Committee (PAL), Phase Alternation by Line (PAL).

재생부(183)는 메타정보 추출부(181)에서 추출한 코덱 정보에 따라 백업이 완료된 동영상 파일을 재생하며, 대표 이미지 추출부(185)는 동영상 파일의 재생 시작 시점으로부터 지정된 시간, 예를 들어 3 내지 7초가 경과한 시점에서 동영상을 재생시켜 표출되는 영상을 대표 이미지로 선택한다.The playback unit 183 plays back the completed video file according to the codec information extracted from the meta information extractor 181, and the representative image extractor 185 designates a specified time, for example, 3 from the start point of playback of the video file. When the video is played after the 7 to 7 seconds have elapsed, the displayed video is selected as the representative image.

색인파일 생성부(187)는 동시에 내장 저장장치로 복사된 동영상 파일 각각에 대하여 색인정보를 생성한 후, 동시에 백업된 모든 동영상 파일에 대한 통합 색인 파일을 생성한다. 즉, 1회 백업시 복수개의 동영상 파일이 복사되었다면, 각 동영상 파일마다 색인정보를 생성하고, 이들을 통합하여 통합 색인 파일을 생성하는 것이다. 색인 파일은 웹 문서로 생성할 수 있으며, 예를 들어 HTML(HyperText Markup Language) 문서로 생성할 수 있다.The index file generator 187 simultaneously generates index information for each video file copied to the built-in storage device, and then generates an integrated index file for all video files backed up at the same time. That is, if a plurality of video files are copied in one backup, index information is generated for each video file, and the combined index files are generated by integrating them. The index file can be generated as a web document, for example as a HyperText Markup Language (HTML) document.

도 4는 본 발명에 의해 생성된 색인 파일을 실행시킨 예시도로서, 각각의 동영상마다 색인정보를 생성한 후 이들을 취합하여 하나의 색인 파일을 생성한 경우를 나타낸다.4 is an exemplary view of executing an index file generated by the present invention, and shows a case where one index file is generated by combining the index information after generating the index information for each video.

먼저, 참조부호 210은 색인정보 폴더 리스트를 나타내며, 각각의 폴더에는 적어도 하나의 동영상 파일에 대한 색인정보가 포함될 수 있다.First, reference numeral 210 denotes a list of index information folders, and each folder may include index information of at least one video file.

메모리 카드에 저장된 모든 데이터를 내장 저장 장치로 한 번에 백업한 경우, 백업된 총 파일 수, 총 동영상 파일 수 및 총 데이터 크기는 참조부호 220과 같이 나타난다.When all the data stored in the memory card is backed up to the built-in storage device at once, the total number of files backed up, the total number of video files, and the total data size are indicated by reference numeral 220.

색인정보 폴더 리스트 중 원하는 폴더, 예를 들어 20100223.010을 선택한 경우, 선택된 폴더에는 334개의 파일 중 63개의 동영상 파일이 존재하며 데이터 크기는 11.9GB임을 알 수 있다(230 참조). 그리고, 선택된 폴더에 포함된 63개의 동영상 파일 각각에 대하여 대표 이미지(242, 244, 246) 및 메타 데이터로부터 추출한 색인정보(252, 254, 256)를 확인할 수 있다.If a desired folder is selected from the index information folder list, for example, 20100223.010, 63 video files among 334 files exist and the data size is 11.9 GB (see 230). For each of the 63 video files included in the selected folder, the representative images 242, 244, and 246 and the index information 252, 254, and 256 extracted from the meta data may be checked.

색인정보(252, 254, 256)는 파일명, 카메라 제조사, 카메라 모델명, 촬영 시간, 파일 크기, 촬영 날짜, 코덱 정보가 포함됨을 알 수 있다.The index information 252, 254, and 256 may include a file name, a camera manufacturer, a camera model name, a shooting time, a file size, a shooting date, and codec information.

이와 같이 색인 파일을 생성해 둔 경우 브라우저를 통해 색인 파일을 실행하고, 대표 이미지를 포함하는 색인정보를 참조하여 원하는 동영상 파일을 용이하게 검색할 수 있다.When the index file is generated as described above, the index file is executed through the browser, and the desired video file can be easily searched by referring to the index information including the representative image.

다시, 도 3을 참조하여 라벨 파일 생성부(189)에 대해 설명한다.Again, the label file generation unit 189 will be described with reference to FIG. 3.

데이터 저장 장치에 백업된 동영상 파일은 광학 디스크 등과 같은 보조 기억장치에 저장될 수 있다. 보조 기억장치에는 일반적으로 하나의 동영상 파일 및 이에 대한 색인 파일이 저장될 수 있으며, 보조 기억장치에 저장된 동영상 파일 정보를 용이하게 식별할 수 있도록 하기 위해 라벨 파일을 생성한다.The moving image file backed up to the data storage device may be stored in an auxiliary storage device such as an optical disc. In general, one video file and an index file thereof may be stored in the auxiliary storage device, and a label file is generated to easily identify the video file information stored in the auxiliary storage device.

즉, 라벨 파일은 데이터 저장 장치의 내장 저장장치에 저장된 동영상 파일 중 선택된 동영상 파일이 보조 기억장치로 전송될 때 생성할 수 있다. 이를 위해, 해당 동영상 파일에 대한 색인정보를 포함하고 있는 파일을 검색하고, 색인 파일 중 해당 동영상 파일에 대한 대표 이미지를 포함하는 색인정보를 추출한다. 아울러, 지정된 라벨 용지에 인쇄할 수 있는 형태로 색인정보를 가공하여 라벨 파일을 생성한다.That is, the label file may be generated when the selected moving image file among the moving image files stored in the internal storage of the data storage device is transferred to the auxiliary storage device. To this end, a file including index information of the video file is searched and index information including a representative image of the video file is extracted from the index file. In addition, the label information is generated by processing the index information in a form that can be printed on the designated label sheet.

생성된 라벨 파일은 동영상 파일 및 색인 파일과 함께 보조 기억장치로 전송되어 저장되도록 할 수 있다.The generated label file may be transferred to the auxiliary storage device and stored together with the moving image file and the index file.

이와 같이, 본 발명에서는 동영상 파일을 백업할 때 색인 파일을 함께 생성한다. 아울러, 색인 파일은 대표 이미지를 포함하는 색인 정보로 이루어져 있으며, 이를 통해 동영상 파일의 용이하고 원활한 유지 및 관리가 가능하게 된다.As described above, in the present invention, the index file is generated together with the backup of the moving image file. In addition, the index file is composed of index information including the representative image, thereby enabling easy and smooth maintenance and management of the video file.

또한, 색인 파일로부터 라벨 파일을 생성하여 보조 기억장치에 부착하도록 하면, 보조 기억장치에 대한 식별력 또한 향상시킬 수 있다.In addition, by generating a label file from the index file and attaching the label file to the auxiliary storage device, the identification ability of the auxiliary storage device can also be improved.

도 5는 본 발명의 일 실시예에 의한 데이터 저장 장치의 인덱싱 방법을 설명하기 위한 흐름도이다.5 is a flowchart illustrating an indexing method of a data storage device according to an embodiment of the present invention.

데이터 저장 장치의 외부장치 인터페이스부(120)를 통해 외부 장치, 예를 들어 메모리 카드가 삽입됨에 따라, 외부장치 검출부(130)가 이를 인식하게 된다(S10). 외부장치가 인식되면, 복사부(140)는 외부장치의 데이터들을 내장 저장장치(160)로 백업한다(S20).As the external device, for example, the memory card is inserted through the external device interface unit 120 of the data storage device, the external device detection unit 130 recognizes this (S10). If the external device is recognized, the copying unit 140 backs up data of the external device to the internal storage device 160 (S20).

백업이 완료되면 동영상 검출부(150)는 백업된 데이터 중 동영상 파일이 존재하는지 확인하고(S30), 동영상 파일이 존재하는 경우, 인덱싱부(180)는 백업된 파일 각각에 대한 색인 정보를 생성한 후, 이들을 취합하여 색인 파일을 생성한다(S40).When the backup is completed, the video detector 150 checks whether a video file exists among the backed up data (S30), and if the video file exists, the indexing unit 180 generates index information for each backed up file. In operation S40, the index files are collected by collecting the index files.

인덱싱 과정에 대해 도 6을 참조하여 보다 구체적으로 설명하면, 먼저, 메타정보 추출부(181)는 각 동영상 파일의 헤더 또는 별도의 파일로 제작된 메타 데이터를 확인하여, 기 설정된 조건에 만족되는 필드의 메타 정보를 추출한다(S401). 이에 따라 추출되는 메타 정보는 코덱(CODEC) 정보를 포함할 수 있으며, 이에 더하여 동영상 파일의 제작일, 제작자, 길이, 크기, 비디오 출력 방식(NTSC, PAL)을 더 포함할 수 있다.The indexing process will be described in more detail with reference to FIG. 6. First, the meta information extracting unit 181 checks metadata of a video file header or a separate file, and satisfies a predetermined condition. Extract the meta information of (S401). Accordingly, the extracted meta information may include codec information, and may further include a production date, a producer, a length, a size, and a video output method (NTSC, PAL) of the video file.

단계 S401에서 메타 정보를 추출함에 따라 코덱 정보가 획득되면, 재생부(183)는 해당 코덱을 이용하여 동영상 파일을 재생한다(S403). 이 때, 재생부(183)는 동영상 파일의 재생 시작 시점으로부터 지정된 시간, 예를 들어 3 내지 7초가 경과한 시점에서 동영상을 재생시키며, 이미지 추출부(185)는 재생 시점에 표출되는 영상을 대표 이미지로서 추출한다(S405).When codec information is obtained by extracting meta information in step S401, the playback unit 183 plays a video file using the corresponding codec in step S403. At this time, the playback unit 183 plays the video at a specified time, for example, 3 to 7 seconds have elapsed since the start of the playback of the video file, and the image extraction unit 185 represents the video displayed at the playback time. Extracted as an image (S405).

이후, 단계 S401에서 추출한 메타 정보 및 단계 S405에서 추출한 대표 이미지를 이용하여 해당 동영상 파일에 대한 색인 정보를 생성한다(S407).Thereafter, index information for the corresponding video file is generated using the meta information extracted in step S401 and the representative image extracted in step S405 (S407).

하나의 동영상 파일에 대한 색인 정보 생성 과정이 완료되면, 색인 정보를 생성할 또 다른 동영상 파일이 존재하는지 확인한다(S409). 확인 결과, 동영상 파일이 존재하면 단계 S401로 복귀하여 이후의 과정을 반복한다. 만약, 백업된 모든 동영상 파일에 대한 색인 정보가 생성되었다면, 단계 S411로 진행, 모든 색인 정보를 취합하여 색인 파일을 생성한다.When the process of generating index information for one video file is completed, it is checked whether another video file for generating index information exists (S409). As a result of the check, if the video file exists, the process returns to step S401 and the subsequent process is repeated. If the index information for all the backed up video files has been generated, the process proceeds to step S411 where all index information is collected to generate an index file.

본 발명의 다른 실시예에서, 색인 정보 생성 단계(S407)를 수행한 후, 생성된 색인 정보를 이용하여 라벨 파일을 생성하는 것도 가능하다. 라벨 파일은 해당 동영상 파일을 보조 기억장치로 전송할 때 색인 파일과 함께 전송될 수 있으며, 동영상 파일이 저장된 보조 기억장치에 부착할 수 있는 라벨 용지에 인쇄 가능한 형태로 생성된다.In another embodiment of the present invention, after performing the index information generation step S407, it is also possible to generate a label file using the generated index information. The label file may be transmitted along with the index file when the moving image file is transferred to the auxiliary storage device, and is generated in a printable form on a label sheet that can be attached to the auxiliary storage device where the moving image file is stored.

데이터 저장 장치 또는 보조 기억 장치로 백업되는 데이터는 추후 재사용을 위하여 장기 보관된다. 따라서, 오랜 시간이 경과한 후에도 동영상 파일을 용이하게 검색하기 위해서는 각 동영상 파일을 식별할 수 있는 인덱싱 과정이 필요하다. 본 발명에서는 동영상 파일에 대한 인덱싱을 함에 있어서, 동영상 파일에 대한 기본적인 정보뿐 아니라 대표 이미지까지 포함시켜 색인 파일을 생성한다. 아울러, 보조 기억 장치에 부착하는 라벨 용지에 인쇄 가능한 형태의 라벨 파일 또한 생성할 수 있다.Data backed up to a data storage device or auxiliary storage device is stored for a long time for later reuse. Therefore, in order to easily search for a video file even after a long time has elapsed, an indexing process for identifying each video file is required. In the present invention, when indexing a video file, an index file is generated by including not only basic information about the video file but also a representative image. In addition, a label file in a form printable on a label sheet attached to the auxiliary storage device can also be generated.

따라서, 동영상 파일에 대한 식별력을 향상시킬 수 있고, 보관 및 관리가 용이하게 된다.Therefore, the discriminating power of the moving image file can be improved, and the storage and management becomes easy.

이와 같이, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As such, those skilled in the art will appreciate that the present invention can be implemented in other specific forms without changing the technical spirit or essential features thereof. Therefore, the above-described embodiments are to be understood as illustrative in all respects and not as restrictive. The scope of the present invention is shown by the following claims rather than the detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalents should be construed as being included in the scope of the present invention. do.

10 : 데이터 저장 장치
110 : 제어부
120 : 외부장치 인터페이스부
130 : 외부장치 검출부
140 : 복사부
150 : 동영상 검출부
160 : 내장 저장장치
170 : 사용자 인터페이스부
180 : 인덱싱부10: data storage device
110: control unit
120: external device interface unit
130: external device detection unit
140: copy unit
150: video detection unit
160: built-in storage device
170: user interface unit
180: indexing unit

Claims (18)

외부장치로부터 적어도 하나의 동영상 파일을 수신하여 저장하는 데이터 저장 장치로서,
외부장치 인터페이스부를 통해 접속한 외부장치에 디지털 파일이 존재하는 경우 검출된 상기 디지털 파일을 저장장치로 복사하는 복사부;
상기 저장장치에 상기 디지털 파일이 복사됨에 따라 상기 디지털 파일에 동영상 파일이 존재하는지 확인하는 동영상 검출부;
상기 동영상 검출부에서 적어도 하나의 동영상 파일이 검출됨에 따라, 상기 검출된 적어도 하나의 동영상 파일에 대한 색인 파일을 생성하는 인덱싱부;를 포함하고,
상기 인덱싱부는, 상기 검출된 적어도 하나의 동영상 파일 각각의 메타 데이터 중 기 설정된 조건을 만족하는 메타정보를 추출하는 메타정보 추출부;
상기 검출된 동영상 파일 각각에 대하여, 상기 메타정보 추출부에서 추출한 메타정보에 따라, 상기 동영상 파일의 재생 시작 시점으로부터 지정된 시간이 경과한 시점에서 상기 동영상 파일을 재생하는 재생부;
상기 재생부에 의해 재생되어 표출되는 이미지를 대표 이미지로 선택하는 대표 이미지 추출부; 및
상기 검출된 동영상 파일 각각에 대하여 상기 메타정보 추출부에서 추출한 메타정보 및 상기 대표 이미지를 포함하는 색인정보를 생성하고, 상기 색인정보를 취합하여 색인 파일을 생성하는 색인파일 생성부;
를 포함하는 인덱싱 기능을 갖는 데이터 저장 장치.A data storage device for receiving and storing at least one video file from an external device,
A copy unit for copying the detected digital file to a storage device when a digital file exists in an external device connected through an external device interface unit;
A moving picture detector to determine whether a moving picture file exists in the digital file as the digital file is copied to the storage device;
And an indexing unit configured to generate an index file for the detected at least one video file when at least one video file is detected by the video detector.
The indexing unit may include: a meta information extracting unit extracting meta information satisfying a preset condition among metadata of each of the detected at least one video file;
A playback unit for each of the detected moving image files, playing the moving image file when a specified time elapses from the start of reproduction of the moving image file according to the meta information extracted by the meta information extraction unit;
A representative image extracting unit which selects an image reproduced and displayed by the playback unit as a representative image; And
An index file generation unit generating index information including meta information extracted by the meta information extracting unit and the representative image for each of the detected moving image files, and generating the index file by collecting the index information;
Data storage device having an indexing function comprising a. 삭제delete 제 1 항에 있어서,
상기 메타 정보는, 각각의 동영상 파일에 대한 코덱(CODEC) 종류를 포함하는 인덱싱 기능을 갖는 데이터 저장 장치.The method of claim 1,
The meta information includes an indexing function including a codec type for each video file. 제 3 항에 있어서,
상기 재생부는, 상기 코덱 종류에 따라 상기 동영상 파일을 재생시키는 인덱싱 기능을 갖는 데이터 저장 장치.The method of claim 3, wherein
And the playback unit has an indexing function to play the video file according to the codec type. 삭제delete 삭제delete 제 1 항에 있어서,
상기 색인 파일은 웹 문서 형태인 인덱싱 기능을 갖는 데이터 저장 장치.The method of claim 1,
And the index file has an indexing function in the form of a web document. 삭제delete 삭제delete 삭제delete 제 1 항에 있어서,
상기 인덱싱부는, 상기 색인정보를 이용하여 인쇄 가능한 형태의 라벨 파일을 생성하는 라벨 파일 생성부를 더 포함하는 인덱싱 기능을 갖는 데이터 저장 장치.The method of claim 1,
The indexing unit, the data storage device having an indexing function further comprises a label file generating unit for generating a label file of the printable form using the index information. 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020100051789A 2010-06-01 2010-06-01 Data storage apparatus having indexing function and indexing method therefor KR101007645B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100051789A KR101007645B1 (en) 2010-06-01 2010-06-01 Data storage apparatus having indexing function and indexing method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100051789A KR101007645B1 (en) 2010-06-01 2010-06-01 Data storage apparatus having indexing function and indexing method therefor

Publications (1)

Publication Number Publication Date
KR101007645B1 true KR101007645B1 (en) 2011-01-13

Family

ID=43616180

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100051789A KR101007645B1 (en) 2010-06-01 2010-06-01 Data storage apparatus having indexing function and indexing method therefor

Country Status (1)

Country Link
KR (1) KR101007645B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101404245B1 (en) * 2012-09-06 2014-06-11 도시바삼성스토리지테크놀러지코리아 주식회사 System and method for indexing the selectively content

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040041174A (en) * 2001-09-24 2004-05-14 노키아 코포레이션 Streaming of multimedia files comprising meta-data and media-data
KR20070011091A (en) * 2005-07-20 2007-01-24 삼성전자주식회사 Method and apparatus for encoding multimedia contents and method and system for applying encoded multimedia contents
KR20090026942A (en) * 2007-09-11 2009-03-16 삼성전자주식회사 Method and apparatus for recording multimedia data by automatically generating/updating metadata
KR20100043108A (en) * 2007-08-20 2010-04-27 노키아 코포레이션 Segmented metadata and indexes for streamed multimedia data

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040041174A (en) * 2001-09-24 2004-05-14 노키아 코포레이션 Streaming of multimedia files comprising meta-data and media-data
KR20070011091A (en) * 2005-07-20 2007-01-24 삼성전자주식회사 Method and apparatus for encoding multimedia contents and method and system for applying encoded multimedia contents
KR20100043108A (en) * 2007-08-20 2010-04-27 노키아 코포레이션 Segmented metadata and indexes for streamed multimedia data
KR20090026942A (en) * 2007-09-11 2009-03-16 삼성전자주식회사 Method and apparatus for recording multimedia data by automatically generating/updating metadata

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101404245B1 (en) * 2012-09-06 2014-06-11 도시바삼성스토리지테크놀러지코리아 주식회사 System and method for indexing the selectively content

Similar Documents

Publication Publication Date Title
JP4885841B2 (en) Cyclic referencing management method and apparatus, and purging method and apparatus
EP3089470B1 (en) Video editing device
KR101058054B1 (en) Extract video
JP2010258704A (en) Reproducing unit and reproduction method
CN106576151A (en) Video processing apparatus and method
JP5079817B2 (en) Method for creating a new summary for an audiovisual document that already contains a summary and report and receiver using the method
US20040181545A1 (en) Generating and rendering annotated video files
EP1583005A2 (en) File management and apparatus for controlling digital contents in multimedia appliances and information recording medium therefor
US20110019970A1 (en) Information processing apparatus, recording method, and recording system
US20040098750A1 (en) Method for fixing up last uniform resource locator representing path and file name of multiphoto/video asset
RU2324987C2 (en) Method and device for displaying multimedia data, combined with text, and media with software to implement the method
KR101007645B1 (en) Data storage apparatus having indexing function and indexing method therefor
JP2010147509A (en) Video processor and video distribution system
JP5063534B2 (en) Image recording apparatus and image recording method
KR101442355B1 (en) Device and method to create media summary data
JP2012103833A (en) Information processing apparatus, electronic equipment, information processing method, and program
JP2008060622A5 (en)
JP2007280493A (en) Content recording and reproducing device and its method using the same
KR101300220B1 (en) Method and apparatus for generating meta data of content data
JP2008148073A (en) Data transfer device and data transfer system
WO2006004274A1 (en) Cyclic referencing management method and apparatus, parsing method and apparatus
JP4250662B2 (en) Digital data editing device
JP4549325B2 (en) VIDEO INFORMATION INDEXING SUPPORT DEVICE, PROGRAM, AND STORAGE MEDIUM
JP5299043B2 (en) Video recording / reproducing apparatus, video recording / reproducing method, and video recording / reproducing program
JP5240014B2 (en) Video recording device

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131022

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20141104

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151222

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee