WO2012141433A2 - 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션 - Google Patents

피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션 Download PDF

Info

Publication number
WO2012141433A2
WO2012141433A2 PCT/KR2012/002169 KR2012002169W WO2012141433A2 WO 2012141433 A2 WO2012141433 A2 WO 2012141433A2 KR 2012002169 W KR2012002169 W KR 2012002169W WO 2012141433 A2 WO2012141433 A2 WO 2012141433A2
Authority
WO
WIPO (PCT)
Prior art keywords
multimedia
multimedia source
annotation
unit
data
Prior art date
Application number
PCT/KR2012/002169
Other languages
English (en)
French (fr)
Other versions
WO2012141433A3 (ko
Inventor
장진혁
Original Assignee
Jang Jin Hyuk
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jang Jin Hyuk filed Critical Jang Jin Hyuk
Priority to US14/006,712 priority Critical patent/US9547632B2/en
Priority to JP2014503589A priority patent/JP2014518576A/ja
Priority to CN201280018052.0A priority patent/CN103548083B/zh
Publication of WO2012141433A2 publication Critical patent/WO2012141433A2/ko
Publication of WO2012141433A3 publication Critical patent/WO2012141433A3/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/14—Tree-structured documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0442—Handling or displaying different aspect ratios, or changing the aspect ratio
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/14—Electronic books and readers

Definitions

  • the present invention relates to a multimedia playback system for a PDF document based e-book, a method of playing the same, and an application for a PC or a mobile device implementing the same. More specifically, the present invention relates to an object such as a text and an image of an e-book document.
  • the present invention relates to a multimedia playback system for a PDF document-based e-book capable of playing / stopping multimedia content on a document according to a user's request, and a method of playing the same, and an application for a PC or a mobile device implementing the same.
  • PDF stands for 'Portable Document Format' and is a file format created using Acrobat, Acrobat Capture, or equivalent software developed by Adobe Systems in the United States.
  • the Web can't provide documents in a variety of formats over specific styles, and Adobe Systems uses a plug-in or Acrobat reader to view PDF files on the Web. It has been distributed free of charge to the public, and as the number of users of PDF files increases, it has become the most important means for distributing documents through the Internet in public offices, research institutes and companies.
  • PDF files can be printed or attached to e-mail, and easily uploaded to a network server or web site. Smaller PDF files are an ideal format for electronic distribution.
  • PDF files can be viewed or printed on any computer, regardless of the installation of a particular operating system, software, or font, and can be viewed and output as designed in the original application.
  • PDF files have been the standard of electronic document format for the safest and most reliable exchange of information since its publication in 1993, and in particular, it has been adopted as an international standard in 2008, allowing safe sharing of e-books and electronic records, It is used by governments and companies around the world for management and storage.
  • Embodiments of the present invention seek to convert a static existing PDF-based e-book that outputs only images of the same form as a publication into a dynamic e-book capable of providing various contents according to a user's request.
  • the present invention intends to enable interaction with the user by mapping an object such as a text or an image of a document to multimedia content so that the user can play / pause it according to the user's request.
  • multimedia data can be played over the network to provide a variety of content on the e-book without time and distance constraints.
  • video, voice, animation, etc. are added to e-books and composed of learning data utilizing multimedia, thereby maximizing learning effects through the convergence of video lectures and e-books.
  • a PDF document processing unit for selecting and loading a PDF file to separate and extract the page components necessary for rendering, and output the PDF document by transmitting the rendered page components to the output device; and output Input data and annotation processing unit for extracting the data of the annotation associated with the input data in relation to the specific area of the PDF document, and separating the syntax of the multimedia format that can be processed among the syntax contained in the data of the extracted interpretable functional annotation
  • a multimedia source for analyzing the syntax of the multimedia format separated by the input data and the annotation processor to determine the location of the multimedia source, and loading the multimedia source stored in at least one of a PDF file, a local storage device, or a remote server.
  • a loading unit configured to store at least one multimedia source of a flash, a video, or a music file by dividing a format when the header of the loaded multimedia source is analyzed and reproduced.
  • a multimedia playback system for a book may be provided.
  • the PDF document processing unit may further include a PDF file loading unit configured to select and load a PDF file and store the same in a memory; and to separate the page components necessary for analyzing and rendering PDF data by reading the PDF file stored in the memory.
  • a document output unit which transmits and outputs the page component rendered by the rendering unit to the output device.
  • the input data and annotation processing unit may further include a user input unit configured to receive input data including an input signal generated by a user selecting a specific region of the PDF document, and data for simple graphic processing by analyzing the input data. And an input data analyzer for separating the data of the annotation from the annotation and transferring the data for the simple graphic processing to the content analyzer.
  • the input data and the annotation processing unit receives the data of the annotation from the input data analysis unit, separates the data of the functional annotation that can be interpreted, the data of the simple annotation other than the data of the functional annotation or annotations required for rendering
  • the data may further include an annotation analyzer for transmitting to the content analyzer.
  • the input data and annotation processing unit may further include a syntax filtering unit configured to receive data of the functional annotation from the annotation analyzer and separate syntax of a multimedia format that can be processed among phrases included in the data of the functional annotation. Can be done.
  • a syntax filtering unit configured to receive data of the functional annotation from the annotation analyzer and separate syntax of a multimedia format that can be processed among phrases included in the data of the functional annotation. Can be done.
  • the multimedia source loading unit may further include: a syntax analysis unit configured to analyze a syntax of the multimedia format received from the syntax filtering unit and transmit a processing command according to the location of the multimedia source; and the location of the multimedia source may be a PDF file.
  • a syntax analysis unit configured to analyze a syntax of the multimedia format received from the syntax filtering unit and transmit a processing command according to the location of the multimedia source
  • the location of the multimedia source may be a PDF file.
  • the processing instruction from the syntax analysis unit referring to an annotation dictionary, the key mapped to the multimedia source in the PDF file is transmitted to the content analysis unit, and the multimedia source is converted using the transmitted key.
  • a data mapping unit that loads the multimedia source using the returned pointer when the pointer returns a pointer indicating the location of the source; and the processing instruction from the syntax analysis unit when the location of the multimedia source is outside the PDF file.
  • the link location of the multimedia source It analyzes whether gyeokji server or a local storage device link processing unit for generating a control command;
  • the multimedia source loading unit may further include a multimedia file loading unit receiving a control command from the link processing unit and loading the multimedia source in the local storage device when the location of the multimedia source is a local storage device. .
  • the multimedia source loading unit may further include a network connection unit accessing a remote server using a network and downloading a multimedia source when the location of the multimedia source is a remote server.
  • the multimedia player may further include: a multimedia format analyzer configured to transmit the loaded multimedia source to each playback unit by dividing a format when the header of the loaded multimedia source is analyzed and reproduced; and the multimedia source is Adobe.
  • a multimedia format analyzer configured to transmit the loaded multimedia source to each playback unit by dividing a format when the header of the loaded multimedia source is analyzed and reproduced
  • the multimedia source is Adobe.
  • the flash playback unit for receiving and playing the multimedia source from the multimedia format analysis unit
  • the multimedia source is MP4, WMV, AVI format, receiving and playing the multimedia source from the multimedia format analysis unit Video playback unit
  • a music file playback unit for receiving and playing the multimedia source from the multimedia format analysis unit when the multimedia source is MP3, WMA, WAV format.
  • an application for a PC or a mobile device including a multimedia playback system for a PDF document based e-book may be provided.
  • a regeneration method may be provided.
  • the determining of whether the annotation is associated with the multimedia source may include: receiving input data including an input signal generated through selection of the specific region, extracting and extracting data of the annotation defined in the specific region; And separating the syntax of the processable multimedia format among the syntaxes included in the data of the interpretable functional annotation.
  • the loading of the multimedia source may include analyzing the syntax of the multimedia format and searching for a key mapped to the multimedia source in the PDF file by referring to an annotation dictionary when the location of the multimedia source is in the PDF file.
  • Loading the multimedia source in a local storage device by receiving a control command if the location of the multimedia source is a local storage device; and loading a multimedia source in a local server when the location of the multimedia source is a remote server. And accessing a remote server using the remote server and downloading a multimedia source.
  • the playing of the multimedia source may include: analyzing the header of the loaded multimedia source, classifying a format when the header is a playable header, and delivering the loaded multimedia source to each play unit; In the case of Adobe Flash format, receiving and playing the multimedia source from the flash player; And, if the multimedia source is MP4, WMV, AVI format, receiving and playing the multimedia source from the video player; And When the multimedia source is in the MP3, WMA, or WAV format, a step of receiving and playing the multimedia source from a music file reproducing unit may be performed.
  • Embodiments of the present invention can convert a static existing PDF-based e-book that outputs only images of the same type as a publication into a dynamic e-book capable of providing various contents according to a user's request.
  • various types of content such as video, audio, and animation may be provided to a PDF-based e-book, and multimedia content may be played on a document.
  • mapping the object, such as the article, image, etc. of the document with the multimedia content to enable the play / stop according to the user's request.
  • the learning data utilizing multimedia can be used to maximize the learning effect through the fusion of the video lecture and the e-book.
  • FIG. 1 is a block diagram showing the detailed configuration of a multimedia playback system for a PDF document based e-book according to an embodiment of the present invention
  • FIG. 2 is a block diagram schematically illustrating an access and playback relationship according to a multimedia source position of a multimedia playback system for a PDF document based e-book according to an embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating an implementation procedure of a multimedia playback method for an e-book based on a PDF document according to an embodiment of the present invention.
  • FIG. 4 is an exemplary view showing an example of implementing a multimedia playback method for a PDF document based e-book according to an embodiment of the present invention.
  • FIG. 1 is a block diagram showing a detailed configuration of a multimedia playback system for a PDF document based e-book according to an embodiment of the present invention
  • Figure 2 is a PDF document based e-book according to an embodiment of the present invention
  • 3 is a block diagram schematically illustrating an access and playback relationship according to a multimedia source location of a multimedia playback system for an electronic multimedia playback system
  • FIG. 3 is a flowchart illustrating an implementation procedure of a multimedia document playback method for an e-book based on a PDF document according to an embodiment of the present invention
  • 4 is an exemplary view illustrating an example of implementing a multimedia playback method for an e-book based on a PDF document according to an embodiment of the present invention.
  • the multimedia playback system for an e-book based on a PDF document divides and extracts page components necessary for rendering by selecting and loading a PDF file 700.
  • a PDF document processing unit 100 for transmitting a rendered page component to an output device (not shown) to output a PDF document, and an annotation 500 associated with input data in relation to a specific area of the output PDF document.
  • Input data and an annotation processing unit 200 for extracting the data of a) and separating syntax of a processable multimedia form among the syntaxes included in the extracted interpretable functional annotation 500, and the input data and annotation processing unit 200.
  • the multimedia source loading unit 300 for loading the multimedia source 600 stored therein and the header of the loaded multimedia source 600 may be analyzed to reproduce at least one of a flash, video or music file. It may be made to include a multimedia player 400 for playing any one of the multimedia source (600).
  • the PDF file 700 may be produced to provide various types of works such as various books, magazines, study papers, brochures, catalogs, etc. in the form of an e-book, e-book.
  • the PDF document processing unit 100 performs basic processing of the PDF file 700.
  • the PDF document processing unit 100 includes a PDF file loading unit 110, a content analyzing unit 120, and a rendering unit ( 130, the document output unit 140, and the like.
  • the PDF file loading unit 110 stores the PDF file 700 in a memory installed in the PC or the mobile device.
  • the content analyzer 120 retrieves the PDF file 700 stored in the memory, analyzes data for outputting the PDF document, and separates page components necessary for rendering for screen configuration of the output PDF document. Extract.
  • the page component is an element including a graphic or text, and refers to an element constituting an image of a PDF document to be output.
  • the content analyzer 120 first extracts only data items related to page elements necessary for basic rendering, and performs parsing only when other items have a separate call signal.
  • the rendering unit 130 generates an image of the PDF document to be output by arranging and arranging the page components separated and extracted from the content analysis unit 120 for screen output and adjusting them to the characteristics of the output device. do.
  • the document output unit 140 transmits the page component rendered by the rendering unit 130 to the output device to finally output a PDF document that can be viewed by the user.
  • the output device may include hardware such as a graphic processing device and a display device for realizing the rendered data as an actual image.
  • the outputted PDF document allows the user to read the contents of the work contained in the e-book. By selecting a specific area of the PDF document while reading the work, multimedia located inside or outside the PDF file 700 can be read. Source 600 can be accessed.
  • the input data and annotation processing unit 200 is associated with the data input in relation to the specific area of the output PDF document;
  • the data of the associated annotation 500 may be extracted, and the syntax of the processable multimedia format may be separated from the syntax included in the extracted interpretable functional annotation 500.
  • the input data and annotation processing unit 200 may include a user input unit 210, an input data analysis unit 220, an annotation analysis unit 230, and a syntax filtering unit 240.
  • the user input unit 210 receives input data including an input signal generated by a user selecting a specific region of the PDF document.
  • the input signal is generated by receiving data or an event such as a click or a drag from a user and inputs the input data through a keyboard, a mouse, a touch screen, a keypad, a voice recognition device, or the like, which is an input device of a PC or a mobile device. Can be configured.
  • the specific region of the PDF document is a predetermined region formed by an image, text, etc. included in the output PDF document, and a user inputs for playing the multimedia source 600 by clicking the specific region, for example. You can generate a signal.
  • the input data analysis unit 220 analyzes the input data input as described above to separate the data for the simple graphics processing and the data of the annotation 500, the data for the simple graphics processing is the content analysis unit Transfer to the 120, the data of the annotation 500 is transmitted to the annotation analyzer 230.
  • the input data analyzer 220 transmits the input data to the content analyzer 120 in the case of an input signal for general graphic processing such as screen enlargement, reduction, page movement, and the like. By separating and extracting new page elements based on the received input data, new screen composition corresponding to the input data is performed through rendering.
  • the data of the annotation 500 transmitted to the annotation analyzer 230 may be used to reproduce the multimedia source 600 in the multimedia reproduction system for an e-book based on a PDF document according to an embodiment of the present invention. It plays an important role.
  • Annotation 500 is mainly introduced to perform collaboration, explanation, and communication functions in a PDF document that is difficult to modify or edit.
  • the annotation 500 may be a medium for reproducing the multimedia source 600. Function as a command system
  • the annotation analysis unit 230 receives the data of the annotation 500, separates the data of the functional annotation 500 that can be interpreted, and transmits the data to the syntax filtering unit 240, and of the functional annotation 500
  • the data of the simple annotation 500 except the data or the data of the annotation 500 necessary for rendering is transmitted to the content analyzer 120, and the content analyzer 120 constructs a page of data of the received annotation 500. Used to extract elements.
  • the annotation analyzer 230 is a Text, Link, FreeText, Line, Square, Circle, Polygon, PolyLine, Highlight, Underline, Squiggly, StrikeOut, Stamp, Caret, Ink, Popup, FileAttachment, Sound, Movie, Widget , Screen, PrinterMark, TrapNet, Watermark, 3D, Redact, Projection, RichMedia, etc. can be configured to analyze and distinguish the annotation format defined.
  • the syntax filtering unit 240 may receive the data of the functional annotation 500 from the annotation analyzer 230 to separate a syntax of a multimedia format that can be processed among the syntaxes included in the data of the functional annotation 500. have.
  • the syntax filtering unit 240 separates only annotations related to multimedia processing among the analyzed annotations, and includes a specific format, for example, ResourceLocator, MediaWidth, MediaHeight, DispWidth, DispHeight, MainRect, HideMenu, Popup, TitleChange, ClientToHost, ToolBar. It not only checks that the syntax of annotations including, FullScreen, NavigateBar, Close, SetWidth, SetHeight, Resizable, SecureLock, etc. is correct, but also prints syntax errors and displays unsupported forms to handle exceptions.
  • the multimedia source loading unit 300 analyzes the syntax of the multimedia format separated by the input data and the annotation processing unit 200 to determine the location of the multimedia source 600, and stores the PDF file 700 internally and locally. Load the multimedia source 600 stored in at least one of the device 800 or the remote server 900.
  • the multimedia source loading unit 300 receives the received syntax. It analyzes the syntax of the separated multimedia format to determine the location of the multimedia source 600 and to load the multimedia source 600.
  • the multimedia source loading unit 300 may include a syntax analysis unit 310, a data mapping unit 320, a link processing unit 330, a multimedia file loading unit 340, and a network access unit 350. And the like.
  • the syntax analysis unit 310 analyzes the syntax of the multimedia format received from the syntax filtering unit 240 and transmits a processing command according to the location of the multimedia source 600.
  • the PDF file 700 In the case of the multimedia source 600 inside, the processing command is transmitted to the data mapping unit 320 and the link processing unit 330 in the case of the multimedia source 600 existing outside.
  • the syntax analysis unit 310 analyzes the syntax to determine the processing method according to the data (multimedia) location and extract and apply the attribute value, for example,
  • the command sends a media file to be displayed as a pop-up window of 500 pixels wide and 400 pixels high.
  • the data mapping unit 320 receives the processing instruction from the syntax analysis unit 310 and maps the multimedia source 600 to the multimedia source 600 in the PDF file by referring to the annotation dictionary.
  • the content analyzer 120 searches for the multimedia source 600 using the transmitted key and returns a pointer indicating the location of the multimedia source 600.
  • the multimedia source 600 is loaded using the returned pointer.
  • the link processor 330 receives the processing command from the syntax analysis unit 310 to determine the link location of the multimedia source 600.
  • the remote server 900 or the local storage device 800 is analyzed to generate a control command.
  • the multimedia file loading unit 340 receives a control command from the link processing unit 330 and receives the multimedia command from the local storage device 800. If 600 is loaded and the location of the multimedia source 600 is a remote server 900, the network connection unit 350 accesses the remote server 900 using a network to download the multimedia source 600. do.
  • the header may be analyzed by analyzing the header of the loaded multimedia source 600 in the multimedia player 400 to classify the format into flash, video, or the like. Play at least one multimedia source 600 of music files.
  • the multimedia player 400 may include a multimedia format analyzer 410, a flash player 420, a video player 430, a music file player 440, and the like.
  • the multimedia format analysis unit 410 analyzes the header of the loaded multimedia source 600 and classifies the format when the header is a playable header, and delivers the loaded multimedia source 600 to each playback unit.
  • the multimedia format analysis unit 410 may be configured to, for example, analyze the header of the pre-loaded data to determine whether there is supportable media.
  • the header format may be, for example,
  • the multimedia format analyzer may be used by the flash player 420.
  • the multimedia player 600 plays the multimedia source 600 from the multimedia format analyzer 410.
  • the multimedia source is MP3, WMA, WAV format
  • the music file player 440 may be configured to receive and play the multimedia source from the multimedia format analyzer 410.
  • input data such as an annotation 500 defined in a corresponding area is input together with an input signal generated by selecting and clicking a specific area of the output PDF document, that is, an area defined by an image or text (S100). .
  • the syntax of the annotation 500 defined in the specific region is analyzed (S200) to determine whether the annotation 500 is associated with the multimedia source 600 (S300).
  • the input data and the annotation processing unit 200 receives input data including an input signal generated through the selection of the specific region, extracts data of the annotation 500 defined in the specific region, and extracts the extracted data.
  • input data including an input signal generated through the selection of the specific region
  • extracts data of the annotation 500 defined in the specific region and extracts the extracted data.
  • the input data analyzer 220 analyzes the input data input as described above, and transmits data of the annotation 500 associated with the input data to the annotation analyzer 230, and the annotation analyzer 230.
  • Receives the data of the annotation 500 separates the data of the interpretable functional annotation 500, and transfers the data to the syntax filtering unit 240, and the syntax filtering unit 240 is the annotation analysis unit 230.
  • the data of the functional annotation 500 is received from the syntax included in the data of the functional annotation 500 to separate the syntax of the multimedia format that can be processed.
  • the location of the multimedia source is determined (S400), and the PDF file 700 is stored in a local storage device.
  • the multimedia source 600 stored in at least one of the 800 and the remote server 900 is loaded.
  • the multimedia source 600 is located inside the PDF file 700 (S500), and when the location of the multimedia source 600 is in the PDF file 700, the PDF file (see the annotation dictionary) is referred to.
  • the multimedia source is loaded by searching for a key mapped with the multimedia source 600 in 700 (S510).
  • the link processor 330 analyzes whether the link location of the multimedia source 600 is the remote server 900 or the local storage device 800.
  • the multimedia file loading unit 340 receives a control command from the link processing unit 330 local
  • the network connection unit 350 uses a network to remotely operate the server 900. Access to download the multimedia source 600 (S550).
  • the multimedia format analyzer 410 analyzes the header of the loaded multimedia source 600 (S600), determines whether it is a playable header (S700), and if it is a playable header, classifies the format into a data format.
  • the multimedia source 600 may be played by selecting a suitable player (S800).
  • the reproduction of the multimedia source 600 may be configured such that a separate popup window is generated and reproduced or reproduced in an overlapped state on the PDF document.
  • the above-described multimedia playback system for a PDF document based e-book may be implemented and provided as an application for a PC or a mobile device, and output only an image having the same form as a publication through the multimedia playback system for a PDF document based e-book.
  • multimedia content can be played on the document, and the object (text, image, etc.) of the document can be mapped to the multimedia content
  • Users can interact with the user by enabling playback / stopping according to the user's request, and provide various contents on the e-book without restriction of time and distance by playing the multimedia data of the remote place through the network. can do.
  • the learning effect can be maximized through the convergence of video lectures and e-books.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PDF 문서 기반의 e-book용 멀티미디어 재생 시스템이 개시된다. 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템에 따르면, e-book 문서의 글, 이미지 등의 객체를 멀티미디어 컨텐츠와 맵핑하여, 사용자의 요구에 따라 멀티미디어 컨텐츠를 문서 상에서 재생/중지 가능하다.

Description

피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션
본 발명은 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 PC 또는 모바일 장치용 어플리케이션에 관한 것으로서, 더욱 상세하게는 e-book 문서의 글, 이미지 등의 객체를 멀티미디어 컨텐츠와 맵핑하여, 사용자의 요구에 따라 멀티미디어 컨텐츠를 문서 상에서 재생/중지 가능한 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 PC 또는 모바일 장치용 어플리케이션에 관한 것이다.
일반적으로, PDF는 'Portable Document Format'의 약자로 미국 어도비시스템즈(Adobe Systems)에서 개발한 애크로뱃(Acrobat)이나 애크로뱃 캡처 또는 이와 동등한 소프트웨어를 이용해 만든 파일 포맷(format)이다.
웹(Web)은 그 기능의 한계상 특정 스타일 이상의 다양한 형식의 문서를 제공할 수 없는데, 어도비시스템즈사는 웹 상에서 PDF 파일을 볼 수 있도록 플러그인(plug-in)이나 애크러뱃 리더(acrobat reader)를 사용자들에게 무상으로 배포하여 왔고, PDF 파일의 사용자가 늘면서 관공서, 연구소, 기업 등에서 문서를 인터넷 등을 통해서 배포하려 할 때 가장 중요한 수단으로 자리 매김을 하였다.
PDF 파일은 인쇄를 하거나 전자메일에 첨부할 수 있고, 네트워크 서버나 웹 사이트 상에 간편하게 올릴 수 있는데, 파일 사이즈가 작은 PDF 파일은 전자 배포를 위한 이상적인 포맷이다.
특히, PDF 파일 특정 운영체제나 소프트웨어, 또는 글꼴의 설치와는 무관하게 모든 컴퓨터에서 보거나 인쇄할 수 있고, 원본 응용프로그램에서 디자인된 그대로 보여지고 출력되는 장점이 있다.
따라서, PDF 파일은 1993년 발표된 이후 지금까지 가장 안전하고 신뢰할 수 있는 정보 교환을 위한 전자 문서 포맷의 표준으로 자리잡아 왔으며, 특히 2008년 국제표준으로 채택되면서 e-book 및 전자 기록물의 안전한 공유, 관리와 보관을 위해 전세계 정부 및 기업에서 활용되고 있다.
그러나, e-book형태로 제공되는 PDF 파일의 경우, 출판물과 동일한 형태의 이미지만을 출력할 수 있으므로 제공되는 컨텐츠에 제약이 따르고, 동영상/음성 등의 멀티미디어 요소를 가미할 수 없는 단점이 있다.
또한, 사용자가 e-book을 접할 때, 문서내의 글, 이미지 등의 객체에 대하여 사용자와의 상호작용이 어렵기 때문에 컨텐츠 제공자가 제공하는 글, 이미지만을 접할 수밖에 없으며, 인터넷상의 미디어 데이터와의 연동 불가능하므로, 다양한 컨텐츠 제공에 제약이 따르게 된다.
따라서, 출판물과 동일한 형태의 이미지만을 출력하는 정적인 기존 PDF 기반의 e-book을 사용자의 요구에 따라 다양한 컨텐트를 제공할 수 있는 동적 e-book으로 전환하여 제공할 필요성이 대두되고 있다.
본 발명의 실시예들은 출판물과 동일한 형태의 이미지만을 출력하는 정적인 기존 PDF 기반의 e-book을 사용자의 요구에 따라 다양한 컨텐트를 제공할 수 있는 동적 e-book으로 전환하고자 한다.
또한, PDF 기반의 e-book에 동영상, 음성, 애니메이션 등의 다양한 형태의 컨텐츠를 제공하고, 멀티미디어 컨텐츠를 문서 상에서 재생 가능하게 하고자 한다.
또한, 문서의 글, 이미지 등의 객체를 멀티미디어 컨텐츠와 맵핑하여 사용자의 요구에 따라 재생/중지 가능하도록 함으로써 사용자와의 상호작용을 가능하게 하고자 한다.
또한, 원격지의 멀티미디어 데이터를 네트워크를 통해 재생시킬 수 있도록 하여 e-book 상에서 다양한 컨텐츠를 시간과 거리의 제약 없이 제공하고자 한다.
또한, 동영상, 음성, 애니메이션 등을 e-book에 가미하여 멀티미디어를 활용한 학습 데이터로 구성함으로써, 동영상 강의와 e-book의 융합을 통해 학습효과를 극대화시키고자 한다.
본 발명의 일측면에 따르면, PDF 파일을 선택, 로딩하여 랜더링에 필요한 페이지 구성요소를 분리, 추출하고, 랜더링된 페이지 구성요소를 출력장치로 전송하여 PDF 문서를 출력하는 PDF 문서 처리부;와, 출력된 상기 PDF 문서의 특정 영역과 관련하여 입력된 데이터와 연계된 주석의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 입력데이터 및 주석 처리부;와, 상기 입력데이터 및 주석 처리부에서 분리된 멀티미디어 형식의 구문을 분석하여 멀티미디어 소스의 위치를 파악하고, PDF 파일 내부, 로컬 저장장치 또는 원격지 서버 중 적어도 어느 하나에 저장된 멀티미디어 소스를 로딩하는 멀티미디어 소스 로딩부; 및, 상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스를 재생하는 멀티미디어 재생부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템이 제공될 수 있다.
또한, 상기 PDF 문서 처리부는, PDF 파일을 선택, 로딩하여 메모리에 저장하는 PDF 파일 로딩부;와, 상기 메모리에 저장된 상기 PDF 파일을 불러들여 PDF 데이터를 분석하고 랜더링에 필요한 페이지 구성요소를 분리, 추출하는 컨텐츠 해석부;와, 상기 컨텐츠 해석부로부터 분리, 추출된 페이지 구성요소를 화면 출력을 위해 정렬, 배치하고 출력장치의 특성에 맞게 조정하는 랜더링부; 및, 상기 랜더링부에서 랜더링된 페이지 구성요소를 상기 출력장치로 전송하여 출력하는 문서 출력부;를 포함하여 이루어질 수 있다.
또한, 상기 입력데이터 및 주석 처리부는, 사용자가 상기 PDF 문서의 특정 영역을 선택하여 발생하는 입력신호가 포함된 입력데이터를 입력 받는 사용자 입력부;와, 상기 입력데이터를 분석하여 단순 그래픽 처리를 위한 데이터와 주석의 데이터를 분리하고 상기 단순 그래픽 처리를 위한 데이터는 상기 컨텐츠 해석부로 전달하는 입력데이터 분석부;를 포함하여 이루어질 수 있다.
또한, 상기 입력데이터 및 주석 처리부는, 상기 입력데이터 분석부로부터 주석의 데이터를 전달받아, 해석 가능한 기능성 주석의 데이터를 분리하고, 상기 기능성 주석의 데이터를 제외한 단순 주석의 데이터 또는 랜더링에 필요한 주석의 데이터는 상기 컨텐츠 해석부로 전달하는 주석 분석부;를 더 포함하여 이루어질 수 있다.
또한, 상기 입력데이터 및 주석 처리부는, 상기 주석 분석부로부터 상기 기능성 주석의 데이터를 전달받아 상기 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 구문 필터링부;를 더 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 소스 로딩부는, 상기 구문 필터링부로부터 전달받은 상기 멀티미디어 형식의 구문을 분석하여 상기 멀티미디어 소스의 위치에 따라 처리 명령을 전달하는 구문형식 분석부;와, 상기 멀티미디어 소스의 위치가 PDF 파일 내인 경우, 상기 구문형식 분석부로부터 상기 처리 명령을 전달받아 주석사전을 참조하여 PDF 파일 내의 멀티미디어 소스와 맵핑된 키를 상기 컨텐츠 해석부로 전송하고, 상기 컨텐츠 해석부가 전송된 키를 이용하여 멀티미디어 소스를 검색하여 소스의 위치를 지시하는 포인터를 리턴하면, 리턴 받은 포인터를 이용하여 멀티미디어 소스를 로딩하는 데이터 맵핑부;와, 상기 멀티미디어 소스의 위치가 PDF 파일 외부인 경우, 상기 구문형식 분석부로부터 상기 처리 명령을 전달받아 멀티미디어 소스의 링크 위치가 원격지 서버 또는 로컬 저장장치인지를 분석하여 제어 명령을 발생시키는 링크 처리부;를 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 소스 로딩부는, 상기 멀티미디어 소스의 위치가 로컬 저장장치인 경우, 상기 링크 처리부로부터 제어 명령을 전달받아 로컬 저장장치에서 멀티미디어 소스를 로딩하는 멀티미디어 파일 로딩부;를 더 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 소스 로딩부는, 상기 멀티미디어 소스의 위치가 원격지 서버인 경우 네트워크를 이용하여 원격지 서버에 접속하고 멀티미디어 소스를 다운로드 하는 네트워크 접속부;를 더 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 재생부는, 상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 각각의 재생부로 상기 로딩된 멀티미디어 소스를 전달하는 멀티미디어 형식 분석부;와, 상기 멀티미디어 소스가 Adobe Flash 형식인 경우, 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 플래시 재생부;와, 상기 멀티미디어 소스가 MP4, WMV, AVI 형식인 경우, 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 동영상 재생부;와, 상기 멀티미디어 소스가 MP3, WMA, WAV 형식인 경우 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 음악파일 재생부;를 포함하여 이루어질 수 있다.
본 발명의 다른 측면에 의하면, PDF 문서 기반의 e-book용 멀티미디어 재생 시스템을 포함하는 PC 또는 모바일 장치용 어플리케이션이 제공될 수 있다.
본 발명의 또 다른 측면에 의하면, PDF 문서의 특정 영역을 선택하는 단계;와, 상기 특정 영역에 정의된 주석의 구문을 분석하여 멀티미디어 소스와 연계된 주석인지 여부를 판단하는 단계;와, 상기 특정 영역에 정의된 주석이 상기 멀티미디어 소스와 연계된 주석인 경우 멀티미디어 소스의 위치를 파악하고, PDF 파일 내부, 로컬 저장장치 또는 원격지 서버 중 적어도 어느 하나에 저장된 멀티미디어 소스를 로딩하는 단계; 및 상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스를 재생하는 단계;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 방법이 제공될 수 있다.
또한, 상기 멀티미디어 소스와 연계된 주석인지 여부를 판단하는 단계는, 상기 특정 영역의 선택을 통해 발생하는 입력신호가 포함된 입력데이터를 입력 받아 상기 특정 영역에 정의된 주석의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 단계;를 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 소스를 로딩하는 단계는, 상기 멀티미디어 형식의 구문을 분석하여 상기 멀티미디어 소스의 위치가 PDF 파일 내인 경우, 주석사전을 참조하여 PDF 파일 내의 멀티미디어 소스와 맵핑된 키를 검색함으로써 상기 멀티미디어 소스를 로딩하는 단계;와, 상기 멀티미디어 소스의 위치가 로컬 저장장치인 경우, 제어 명령을 전달받아 로컬 저장장치에서 멀티미디어 소스를 로딩하는 단계;와, 상기 멀티미디어 소스의 위치가 원격지 서버인 경우, 네트워크를 이용하여 원격지 서버에 접속하고 멀티미디어 소스를 다운로드 하는 단계;를 포함하여 이루어질 수 있다.
또한, 상기 멀티미디어 소스를 재생하는 단계는, 상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 각각의 재생부로 상기 로딩된 멀티미디어 소스를 전달하는 단계;와, 상기 멀티미디어 소스가 Adobe Flash 형식인 경우, 플래시 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;와, 상기 멀티미디어 소스가 MP4, WMV, AVI 형식인 경우, 동영상 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;와, 상기 멀티미디어 소스가 MP3, WMA, WAV 형식인 경우 음악파일 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;를 포함하여 이루어질 수 있다.
본 발명의 실시예들은 출판물과 동일한 형태의 이미지만을 출력하는 정적인 기존 PDF 기반의 e-book을 사용자의 요구에 따라 다양한 컨텐트를 제공할 수 있는 동적 e-book으로 전환시킬 수 있다.
또한, PDF 기반의 e-book에 동영상, 음성, 애니메이션 등의 다양한 형태의 컨텐츠를 제공하고, 멀티미디어 컨텐츠를 문서 상에서 재생할 수 있다.
또한, 문서의 글, 이미지 등의 객체를 멀티미디어 컨텐츠와 맵핑하여 사용자의 요구에 따라 재생/중지 가능하도록 함으로써 사용자와의 상호작용을 가능하게 할 수 있다.
또한, 원격지의 멀티미디어 데이터를 네트워크를 통해 재생시킬 수 있도록 하여 e-book 상에서 다양한 컨텐츠를 시간과 거리의 제약 없이 제공할 수 있다.
또한, 동영상, 음성, 애니메이션 등을 e-book에 가미하여 멀티미디어를 활용한 학습 데이터로 구성함으로써, 동영상 강의와 e-book의 융합을 통해 학습효과를 극대화시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템의 세부적인 구성을 나타낸 블록도
도 2는 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템의 멀티미디어 소스 위치에 따른 접근 및 재생관계를 개괄적으로 도시한 구성도
도 3은 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 방법의 구현 순서를 도시한 순서도
도 4는 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 방법이 구현되는 예를 도시한 예시도이다.
이하, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명하기로 한다. 그러나, 본 발명은 여기서 설명되는 실시 예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 오히려, 여기서 소개되는 실시 예들은 개시된 내용이 철저하고 완전해질 수 있도록, 그리고 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 제공되는 것이다. 명세서 전체에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다.
도 1은 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템의 세부적인 구성을 나타낸 블록도이고, 도 2는 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템의 멀티미디어 소스 위치에 따른 접근 및 재생관계를 개괄적으로 도시한 구성도이며, 도 3은 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 방법의 구현 순서를 도시한 순서도이고, 도 4는 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 방법이 구현되는 예를 도시한 예시도이다.
도 1 내지 도 4를 참조하면, 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템은 크게 PDF 파일(700)을 선택, 로딩하여 랜더링에 필요한 페이지 구성요소를 분리, 추출하고, 랜더링된 페이지 구성요소를 출력장치(미도시)로 전송하여 PDF 문서를 출력하는 PDF 문서 처리부(100)와, 출력된 상기 PDF 문서의 특정 영역과 관련하여 입력된 데이터와 연계된 주석(500)의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 입력데이터 및 주석 처리부(200)와, 상기 입력데이터 및 주석 처리부(200)에서 분리된 멀티미디어 형식의 구문을 분석하여 멀티미디어 소스(600)의 위치를 파악하고, PDF 파일(700) 내부, 로컬 저장장치(800) 또는 원격지 서버(900) 중 적어도 어느 하나에 저장된 멀티미디어 소스(600)를 로딩하는 멀티미디어 소스 로딩부(300) 및, 상기 로딩된 멀티미디어 소스(600)의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스(600)를 재생하는 멀티미디어 재생부(400)를 포함하여 이루어질 수 있다.
상기 PDF 파일(700)은 각종 도서, 잡지, 학습지, 홍보책자, 카탈로그 등 다양한 형태의 저작물을 전자도서 즉, e-book 형태로 제공하기 위해 제작될 수 있다. 상기 PDF 문서 처리부(100)는 이러한 PDF 파일(700)의 기본적인 처리를 수행하며, 이를 위하여, 상기 PDF 문서 처리부(100)는 PDF 파일 로딩부(110), 컨텐츠 해석부(120), 랜더링부(130), 문서 출력부(140) 등을 포함하여 이루어질 수 있다.
구체적으로, 상기 PDF 파일 로딩부(110)는 사용자가 PC 또는 모바일 장치에 저장된 PDF 파일(700)을 선택하면, 이를 로딩하여 PC 또는 모바일 장치 내부에 설치된 메모리에 PDF 파일(700)을 저장한다.
그리고, 상기 컨텐츠 해석부(120)는 상기 메모리에 저장된 상기 PDF 파일(700)을 불러들여 PDF 문서 출력을 위한 데이터를 분석하고 출력될 PDF 문서의 화면 구성을 위하여 랜더링에 필요한 페이지 구성요소를 분리, 추출한다. 여기서, 상기 페이지 구성요소는 그래픽이나 텍스트를 포함한 요소로서, 출력될 PDF 문서의 화상을 구성하는 요소를 말한다.
이때, 상기 컨텐츠 해석부(120)는 기본 랜더링에 필요한 페이지 구성요소와 관련된 데이터 항목만을 우선 추출하게 되며, 그 외 항목은 별도의 호출신호가 있는 경우에만 파싱(parsing)을 수행한다.
한편, 상기 랜더링부(130)는 상기 컨텐츠 해석부(120)로부터 분리, 추출된 페이지 구성요소를 화면 출력을 위해 정렬, 배치하고 출력장치의 특성에 맞게 조정함으로써, 출력될 PDF 문서의 화상을 생성한다.
그 후 문서 출력부(140)는 상기 랜더링부(130)에서 랜더링된 페이지 구성요소를 상기 출력장치로 전송하여 사용자가 볼 수 있는 PDF 문서를 최종적으로 출력하게 된다. 여기서, 상기 출력장치는 랜더링된 데이터를 실제 화상으로 구현하는 그래픽 처리 장치와 디스플레이 장치 등의 하드웨어를 포함할 수 있다.
이와 같이 출력된 PDF 문서를 통해 사용자는 e-book에 포함된 저작물의 내용을 가독할 수 있게 되는데, 저작물을 읽는 중에 PDF 문서의 특정 영역을 선택함으로써, PDF 파일(700) 내부 또는 외부에 위치한 멀티미디어 소스(600)에 접근할 수 있다.
사용자가 PDF 문서 상에서 멀티미디어 소스(600)를 재생시킬 수 있는 구성과 작동과정을 구체적으로 살펴보면, 먼저 상기 입력데이터 및 주석 처리부(200)는 출력된 상기 PDF 문서의 특정 영역과 관련하여 입력된 데이터와 연계된 주석(500)의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 역할을 수행할 수 있다.
이를 위해 상기 입력데이터 및 주석 처리부(200)는 사용자 입력부(210), 입력데이터 분석부(220), 주석 분석부(230) 및 구문 필터링부(240) 등을 포함하여 이루어질 수 있다.
먼저, 상기 사용자 입력부(210)는 사용자가 상기 PDF 문서의 특정 영역을 선택하여 발생하는 입력신호가 포함된 입력데이터를 입력 받는다. 상기 입력신호는 사용자로부터 데이터 또는 클릭, 드래그 등의 이벤트를 입력 받음으로 인해 생성되며 PC 또는 모바일 장치의 입력장치인 키보드, 마우스, 터치스크린, 키패드, 음성인식장치 등을 통해 이러한 입력데이터가 입력되도록 구성될 수 있다.
이때, 상기 PDF 문서의 특정 영역은 출력된 PDF 문서에 포함된 이미지, 텍스트 등에 의해 형성되는 소정의 영역으로서, 사용자는 예를 들어, 상기 특정 영역을 클릭함으로써 멀티미디어 소스(600)의 재생을 위한 입력신호를 생성할 수 있다.
한편, 상기 입력데이터 분석부(220)는 위와 같이 입력된 상기 입력데이터를 분석하여 단순 그래픽 처리를 위한 데이터와 주석(500)의 데이터를 분리하고, 상기 단순 그래픽 처리를 위한 데이터는 상기 컨텐츠 해석부(120)로 전달하며, 주석(500)의 데이터는 주석 분석부(230)로 전달한다.
상기 입력데이터 분석부(220)는 화면 확대, 축소, 페이지 이동 등의 일반적인 그래픽 처리를 위한 입력신호인 경우 그 입력데이터를 상기 컨텐츠 해석부(120)로 전송하며, 상기 컨텐츠 해석부(120)에서는 전달받은 입력데이터를 바탕으로 새로운 페이지 구성요소를 분리, 추출함으로써, 랜더링을 통해 입력데이터에 대응되는 새로운 화면 구성을 수행하게 된다.
그리고, 상기 주석 분석부(230)로 전달된 상기 주석(500)의 데이터는 본 발명의 일실시예에 의한 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템에 있어서 멀티미디어 소스(600)를 재생하기 위한 중요한 역할을 수행한다.
주석(500)은 수정이나 편집이 어려운 PDF 문서에 있어서 주로 협업과 부연설명 및 의사전달 기능을 수행하기 위해 도입된 것이지만, 본 발명의 실시예들에 있어서는 멀티미디어 소스(600)의 재생을 위한 매체 내지 명령체계로서 기능한다.
특히, 상기 주석 분석부(230)는 주석(500)의 데이터를 전달받아, 해석 가능한 기능성 주석(500)의 데이터를 분리하여 상기 구문 필터링부(240)로 전달하고, 상기 기능성 주석(500)의 데이터를 제외한 단순 주석(500)의 데이터 또는 랜더링에 필요한 주석(500)의 데이터는 상기 컨텐츠 해석부(120)전달하며, 상기 컨텐츠 해석부(120)는 전달받은 주석(500)의 데이터를 페이지 구성요소 추출에 활용한다.
구체적으로, 상기 주석 분석부(230)는 Text, Link, FreeText, Line, Square, Circle, Polygon, PolyLine, Highlight, Underline, Squiggly, StrikeOut, Stamp, Caret, Ink, Popup, FileAttachment, Sound, Movie, Widget, Screen, PrinterMark, TrapNet, Watermark, 3D, Redact, Projection, RichMedia 등으로 정의된 주석 형식을 분석하여 구분하도록 구성될 수 있다.
상기 구문 필터링부(240)는 상기 주석 분석부(230)로부터 상기 기능성 주석(500)의 데이터를 전달받아 상기 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리할 수 있다.
즉, 상기 구문 필터링부(240)는 분석된 주석 중 멀티미디어 처리에 관련된 주석만을 분리하며, 특정 형식, 예를 들어 ResourceLocator, MediaWidth, MediaHeight, DispWidth, DispHeight, MainRect, HideMenu, Popup, TitleChange, ClientToHost, ToolBar, FullScreen, NavigateBar, Close, SetWidth, SetHeight, Resizable, SecureLock 등이 포함된 주석의 문법이 올바른지 확인할 뿐만 아니라, 문법 오류를 출력하여 지원되지 않는 형식부분을 표시함으로써 예외상황이 발생한 경우를 처리한다.
한편, 상기 멀티미디어 소스 로딩부(300)는 상기 입력데이터 및 주석 처리부(200)에서 분리된 멀티미디어 형식의 구문을 분석하여 멀티미디어 소스(600)의 위치를 파악하고, PDF 파일(700) 내부, 로컬 저장장치(800) 또는 원격지 서버(900) 중 적어도 어느 하나에 저장된 멀티미디어 소스(600)를 로딩한다.
즉, 상기 멀티미디어 소스 로딩부(300)는 상기 입력데이터 및 주석 처리부(200)에서 추출된 해석 가능한 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하면, 이를 전송받아 분리된 멀티미디어 형식의 구문을 분석하여 멀티미디어 소스(600)의 위치를 파악하고 멀티미디어 소스(600)를 로딩하는 역할을 수행하는 것이다.
이러한 역할을 수행하기 위해, 상기 멀티미디어 소스 로딩부(300)는 구문형식 분석부(310), 데이터 맵핑부(320), 링크 처리부(330), 멀티미디어 파일 로딩부(340) 및 네트워크 접속부(350) 등을 포함하여 이루어질 수 있다.
구체적으로, 상기 구문형식 분석부(310)는 상기 구문 필터링부(240)로부터 전달받은 상기 멀티미디어 형식의 구문을 분석하여 상기 멀티미디어 소스(600)의 위치에 따라 처리 명령을 전달하는데, PDF 파일(700) 내부의 멀티미디어 소스(600)일 경우 데이터 맵핑부(320)로, 외부에 존재하는 멀티미디어 소스(600)일 경우는 링크 처리부(330)로 처리 명령을 전달한다.
이때, 상기 구문형식 분석부(310)는 구문을 분석하여 데이터(멀티미디어) 위치에 따라 처리방식을 결정하고 속성 값을 추출하여 적용하는데, 예를 들어,
"RL(ResourceLocator)=mediafile,
DW(DispWidth)=500,
DH(DispHeight)=400,
Popup=T"
와 같은 구문의 경우 미디어파일(mediafile)을 가로 500, 세로 400 픽셀 크기의 팝업창으로 출력하라는 처리 명령을 전달하게 된다.
상기 데이터 맵핑부(320)는 상기 멀티미디어 소스의 위치가 PDF 파일 내인 경우, 상기 구문형식 분석부(310)로부터 상기 처리 명령을 전달받아 주석사전을 참조하여 PDF 파일 내의 멀티미디어 소스(600)와 맵핑된 키를 상기 컨텐츠 해석부(120)로 전송하고, 상기 컨텐츠 해석부(120)가 전송된 키를 이용하여 멀티미디어 소스(600)를 검색하여 멀티미디어 소스(600)의 위치를 지시하는 포인터를 리턴하면, 리턴 받은 포인터를 이용하여 멀티미디어 소스(600)를 로딩하게 된다.
한편, 상기 링크 처리부(330)는 상기 멀티미디어 소스(600)의 위치가 PDF 파일(700) 외부인 경우, 상기 구문형식 분석부(310)로부터 상기 처리 명령을 전달받아 멀티미디어 소스(600)의 링크 위치가 원격지 서버(900) 또는 로컬 저장장치(800)인지를 분석하여 제어 명령을 발생시킨다.
이때, 상기 멀티미디어 소스(600)의 위치가 로컬 저장장치(800)인 경우, 상기 멀티미디어 파일 로딩부(340)가 상기 링크 처리부(330)로부터 제어 명령을 전달받아 로컬 저장장치(800)에서 멀티미디어 소스(600)를 로딩하고, 상기 멀티미디어 소스(600)의 위치가 원격지 서버(900)인 경우 상기 네트워크 접속부(350)가 네트워크를 이용하여 원격지 서버(900)에 접속하여 멀티미디어 소스(600)를 다운로드 하게 된다.
이와 같이, 상기 멀티미디어 소스(600)가 해당 위치에서 로딩되면, 상기 멀티미디어 재생부(400)에서 상기 로딩된 멀티미디어 소스(600)의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스(600)를 재생한다.
이러한, 상기 멀티미디어 재생부(400)는 멀티미디어 형식 분석부(410), 플래시 재생부(420), 동영상 재생부(430) 및 음악파일 재생부(440) 등을 포함하여 이루어질 수 있다.
구체적으로, 상기 멀티미디어 형식 분석부(410)는 상기 로딩된 멀티미디어 소스(600)의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 각각의 재생부로 상기 로딩된 멀티미디어 소스(600)를 전달한다.
상기 멀티미디어 형식 분석부(410)는 예를 들어, Pre-loading된 데이터의 헤더를 분석하여 지원 가능한 미디어 유무를 확인하도록 구성될 수 있는데, 그 헤더 형식은 예를 들어,
Mp3 => 49 44 33 02 03 76 54 45 4E
WMV => 30 26 B2 75 8E 66 CF 11 A6 D9
SWF => 43 57 53 09 5C 0B 02 00 78 9C
와 같이 이루어질 수 있다.
이와 같이, 상기 멀티미디어 형식 분석부(410)에서 멀티미디어 소스(600)의 유형이 확인되면, 상기 멀티미디어 소스(600)가 Adobe Flash 형식인 경우, 상기 플래시 재생부(420)에서 상기 멀티미디어 형식 분석부(410)로부터 멀티미디어 소스를 전달받아 재생하고, 상기 멀티미디어 소스(600)가 MP4, WMV, AVI 형식인 경우, 상기 동영상 재생부(430)에서 상기 멀티미디어 형식 분석부(410)로부터 멀티미디어 소스(600)를 전달받아 재생하며, 상기 멀티미디어 소스가 MP3, WMA, WAV 형식인 경우 상기 음악파일 재생부(440)가 상기 멀티미디어 형식 분석부(410)로부터 멀티미디어 소스를 전달받아 재생하도록 구성될 수 있다.
상술한 본 발명의 일 실시예에 따른 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템의 멀티미디어 재생방법을 설명하면 아래와 같다.
먼저, 상기 출력된 PDF 문서의 특정 영역 즉, 이미지나 텍스트에 의해 정의된 영역을 선택, 클릭하여 생성되는 입력신호와 함께 해당 영역에 정의된 주석(500) 등의 입력데이터가 입력된다(S100).
그리고, 상기 특정 영역에 정의된 주석(500)의 구문을 분석하여(S200) 멀티미디어 소스(600)와 연계된 주석(500)인지 여부를 판단하게 된다(S300).
이때, 상기 입력데이터 및 주석 처리부(200)에서, 상기 특정 영역의 선택을 통해 발생하는 입력신호가 포함된 입력데이터를 입력 받아 상기 특정 영역에 정의된 주석(500)의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리함으로써, 멀티미디어 소스(600)와 연계된 주석(500)인지 여부를 판단하게 된다.
구체적으로, 상기 입력데이터 분석부(220)는 위와 같이 입력된 상기 입력데이터를 분석하여 입력데이터와 연계된 주석(500)의 데이터는 주석 분석부(230)로 전달하고, 상기 주석 분석부(230)는 주석(500)의 데이터를 전달받아, 해석 가능한 기능성 주석(500)의 데이터를 분리하여 상기 구문 필터링부(240)로 전달하며, 상기 구문 필터링부(240)는 상기 주석 분석부(230)로부터 상기 기능성 주석(500)의 데이터를 전달받아 상기 기능성 주석(500)의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하게 된다.
그 후, 상기 특정 영역에 정의된 주석(500)이 상기 멀티미디어 소스(600)와 연계된 주석(500)인 경우 멀티미디어 소스의 위치를 파악하고(S400), PDF 파일(700) 내부, 로컬 저장장치(800) 또는 원격지 서버(900) 중 적어도 어느 하나에 저장된 멀티미디어 소스(600)를 로딩한다.
구체적으로, 상기 멀티미디어 소스(600)가 PDF 파일(700) 내부에 위치하는지를 판단하고(S500), 상기 멀티미디어 소스(600)의 위치가 PDF 파일(700) 내인 경우, 주석사전을 참조하여 PDF 파일(700) 내의 멀티미디어 소스(600)와 맵핑된 키를 검색함으로써 상기 멀티미디어 소스를 로딩한다(S510).
그리고, 상기 멀티미디어 소스(600)가 PDF 파일(700) 외부에 위치하는 경우 상기 링크 처리부(330)는 멀티미디어 소스(600)의 링크 위치가 원격지 서버(900) 또는 로컬 저장장치(800)인지를 분석하여 제어 명령을 발생시키는데(S520), 상기 멀티미디어 소스(600)의 위치가 로컬 저장장치(800)인 경우, 상기 멀티미디어 파일 로딩부(340)가 상기 링크 처리부(330)로부터 제어 명령을 전달받아 로컬 저장장치(800)에서 멀티미디어 소스(600)를 로딩하고(S540), 상기 멀티미디어 소스(600)의 위치가 원격지 서버(900)인 경우 상기 네트워크 접속부(350)가 네트워크를 이용하여 원격지 서버(900)에 접속하여 멀티미디어 소스(600)를 다운로드 하게 된다(S550).
이후 상기 멀티미디어 형식 분석부(410)에서 상기 로딩된 멀티미디어 소스(600)의 헤더를 분석하고(S600), 재생 가능한 헤더인지 여부를 판단하며(S700) 재생 가능한 헤더일 경우 형식을 구분하여 데이터 형식에 맞는 재생기를 선택함으로써 멀티미디어 소스(600)가 재생될 수 있다(S800). 이때, 상기 멀티미디어 소스(600)의 재생은 별도의 팝업창이 생성되어 재생되거나, PDF 문서 상에 오버랩 된 상태로 재생되도록 구성될 수 있다.
상술한 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템은 PC 또는 모바일 장치용 어플리케이션으로 구현되어 제공될 수 있으며, 이러한 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템을 통해 출판물과 동일한 형태의 이미지만을 출력하는 정적인 기존 PDF 기반의 e-book을 사용자의 요구에 따라 다양한 컨텐트를 제공할 수 있는 동적 e-book으로 전환시킬 수 있다.
또한, PDF 기반의 e-book에 동영상, 음성, 애니메이션 등의 다양한 형태의 컨텐츠를 제공하고, 멀티미디어 컨텐츠를 문서 상에서 재생할 수 있고, 문서의 객체(글, 이미지 등)를 멀티미디어 컨텐츠와 맵핑하여, 사용자의 요구에 따라 재생/중지 가능하도록 하여 사용자와의 상호작용을 가능하게 할 수 있으며, 원격지의 멀티미디어 데이터를 네트워크를 이용하여 재생시킬 수 있도록 하여 e-book 상에서 다양한 컨텐츠를 시간과 거리의 제약 없이 제공할 수 있다.
더 나아가, 동영상, 음성, 애니메이션 등을 e-book에 가미하여 멀티미디어를 활용한 학습 데이터로 구성함으로써, 동영상 강의와 e-book의 융합을 통해 학습효과를 극대화시킬 수 있다.
상기에서는 본 발명의 일 실시예를 참조하여 설명하였지만, 해당 기술분야의 당업자는 이하에서 서술하는 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경 실시할 수 있을 것이다. 그러므로 변형된 실시가 기본적으로 본 발명의 특허청구범위의 구성요소를 포함한다면 모두 본 발명의 기술적 범주에 포함된다고 보아야 한다.

Claims (14)

  1. PDF 파일을 선택, 로딩하여 랜더링에 필요한 페이지 구성요소를 분리, 추출하고, 랜더링된 페이지 구성요소를 출력장치로 전송하여 PDF 문서를 출력하는 PDF 문서 처리부;
    출력된 상기 PDF 문서의 특정 영역과 관련하여 입력된 데이터와 연계된 주석의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 입력데이터 및 주석 처리부;
    상기 입력데이터 및 주석 처리부에서 분리된 멀티미디어 형식의 구문을 분석하여 멀티미디어 소스의 위치를 파악하고, PDF 파일 내부, 로컬 저장장치 또는 원격지 서버 중 적어도 어느 하나에 저장된 멀티미디어 소스를 로딩하는 멀티미디어 소스 로딩부; 및
    상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스를 재생하는 멀티미디어 재생부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  2. 제1항에 있어서,
    상기 PDF 문서 처리부는,
    PDF 파일을 선택, 로딩하여 메모리에 저장하는 PDF 파일 로딩부;
    상기 메모리에 저장된 상기 PDF 파일을 불러들여 PDF 데이터를 분석하고 랜더링에 필요한 페이지 구성요소를 분리, 추출하는 컨텐츠 해석부;
    상기 컨텐츠 해석부로부터 분리, 추출된 페이지 구성요소를 화면 출력을 위해 정렬, 배치하고 출력장치의 특성에 맞게 조정하는 랜더링부; 및
    상기 랜더링부에서 랜더링된 페이지 구성요소를 상기 출력장치로 전송하여 출력하는 문서 출력부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  3. 제2항에 있어서,
    상기 입력데이터 및 주석 처리부는,
    사용자가 상기 PDF 문서의 특정 영역을 선택하여 발생하는 입력신호가 포함된 입력데이터를 입력 받는 사용자 입력부;
    상기 입력데이터를 분석하여 단순 그래픽 처리를 위한 데이터와 주석의 데이터를 분리하고 상기 단순 그래픽 처리를 위한 데이터는 상기 컨텐츠 해석부로 전달하는 입력데이터 분석부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  4. 제3항에 있어서,
    상기 입력데이터 및 주석 처리부는,
    상기 입력데이터 분석부로부터 주석의 데이터를 전달받아, 해석 가능한 기능성 주석의 데이터를 분리하고, 상기 기능성 주석의 데이터를 제외한 단순 주석의 데이터 또는 랜더링에 필요한 주석의 데이터는 상기 컨텐츠 해석부로 전달하는 주석 분석부;를 더 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  5. 제4항에 있어서,
    상기 입력데이터 및 주석 처리부는,
    상기 주석 분석부로부터 상기 기능성 주석의 데이터를 전달받아 상기 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 구문 필터링부;를 더 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  6. 제5항에 있어서,
    상기 멀티미디어 소스 로딩부는,
    상기 구문 필터링부로부터 전달받은 상기 멀티미디어 형식의 구문을 분석하여 상기 멀티미디어 소스의 위치에 따라 처리 명령을 전달하는 구문형식 분석부;
    상기 멀티미디어 소스의 위치가 PDF 파일 내인 경우, 상기 구문형식 분석부로부터 상기 처리 명령을 전달받아 주석사전을 참조하여 PDF 파일 내의 멀티미디어 소스와 맵핑된 키를 상기 컨텐츠 해석부로 전송하고, 상기 컨텐츠 해석부가 전송된 키를 이용하여 멀티미디어 소스를 검색하여 소스의 위치를 지시하는 포인터를 리턴하면, 리턴 받은 포인터를 이용하여 멀티미디어 소스를 로딩하는 데이터 맵핑부;
    상기 멀티미디어 소스의 위치가 PDF 파일 외부인 경우, 상기 구문형식 분석부로부터 상기 처리 명령을 전달받아 멀티미디어 소스의 링크 위치가 원격지 서버 또는 로컬 저장장치인지를 분석하여 제어 명령을 발생시키는 링크 처리부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  7. 제6항에 있어서,
    상기 멀티미디어 소스 로딩부는,
    상기 멀티미디어 소스의 위치가 로컬 저장장치인 경우, 상기 링크 처리부로부터 제어 명령을 전달받아 로컬 저장장치에서 멀티미디어 소스를 로딩하는 멀티미디어 파일 로딩부;를 더 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  8. 제6항에 있어서,
    상기 멀티미디어 소스 로딩부는,
    상기 멀티미디어 소스의 위치가 원격지 서버인 경우 네트워크를 이용하여 원격지 서버에 접속하고 멀티미디어 소스를 다운로드 하는 네트워크 접속부;를 더 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  9. 제1항에 있어서,
    상기 멀티미디어 재생부는,
    상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 각각의 재생부로 상기 로딩된 멀티미디어 소스를 전달하는 멀티미디어 형식 분석부;
    상기 멀티미디어 소스가 Adobe Flash 형식인 경우, 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 플래시 재생부;
    상기 멀티미디어 소스가 MP4, WMV 또는 AVI 형식인 경우, 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 동영상 재생부;
    상기 멀티미디어 소스가 MP3, WMA 또는 WAV 형식인 경우 상기 멀티미디어 형식 분석부로부터 멀티미디어 소스를 전달받아 재생하는 음악파일 재생부;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템.
  10. 제1항 내지 제9항 중 어느 하나의 항에 의한 PDF 문서 기반의 e-book용 멀티미디어 재생 시스템을 포함하는 PC 또는 모바일 장치용 어플리케이션.
  11. PDF 문서의 특정 영역을 선택하는 단계;
    상기 특정 영역에 정의된 주석의 구문을 분석하여 멀티미디어 소스와 연계된 주석인지 여부를 판단하는 단계;
    상기 특정 영역에 정의된 주석이 상기 멀티미디어 소스와 연계된 주석인 경우 멀티미디어 소스의 위치를 파악하고, PDF 파일 내부, 로컬 저장장치 또는 원격지 서버 중 적어도 어느 하나에 저장된 멀티미디어 소스를 로딩하는 단계; 및
    상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 플래시, 동영상 또는 음악파일 중 적어도 어느 하나의 멀티미디어 소스를 재생하는 단계;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 방법.
  12. 제11항에 있어서,
    상기 멀티미디어 소스와 연계된 주석인지 여부를 판단하는 단계는,
    상기 특정 영역의 선택을 통해 발생하는 입력신호가 포함된 입력데이터를 입력 받아 상기 특정 영역에 정의된 주석의 데이터를 추출하고, 추출된 해석 가능한 기능성 주석의 데이터에 포함된 구문 중 처리 가능한 멀티미디어 형식의 구문을 분리하는 단계;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 방법.
  13. 제12항에 있어서,
    상기 멀티미디어 소스를 로딩하는 단계는,
    상기 멀티미디어 형식의 구문을 분석하여 상기 멀티미디어 소스의 위치가 PDF 파일 내인 경우, 주석사전을 참조하여 PDF 파일 내의 멀티미디어 소스와 맵핑된 키를 검색함으로써 상기 멀티미디어 소스를 로딩하는 단계;와,
    상기 멀티미디어 소스의 위치가 로컬 저장장치인 경우, 제어 명령을 전달받아 로컬 저장장치에서 멀티미디어 소스를 로딩하는 단계;와,
    상기 멀티미디어 소스의 위치가 원격지 서버인 경우, 네트워크를 이용하여 원격지 서버에 접속하고 멀티미디어 소스를 다운로드 하는 단계;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 방법.
  14. 제11항에 있어서,
    상기 멀티미디어 소스를 재생하는 단계는,
    상기 로딩된 멀티미디어 소스의 헤더를 분석하여 재생 가능한 헤더일 경우 형식을 구분하여 각각의 재생부로 상기 로딩된 멀티미디어 소스를 전달하는 단계;와,
    상기 멀티미디어 소스가 Adobe Flash 형식인 경우, 플래시 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;와,
    상기 멀티미디어 소스가 MP4, WMV 또는 AVI 형식인 경우, 동영상 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;와,
    상기 멀티미디어 소스가 MP3, WMA 또는 WAV 형식인 경우 음악파일 재생부에서 상기 멀티미디어 소스를 전달받아 재생하는 단계;를 포함하는 PDF 문서 기반의 e-book용 멀티미디어 재생 방법.
PCT/KR2012/002169 2011-04-13 2012-03-26 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션 WO2012141433A2 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US14/006,712 US9547632B2 (en) 2011-04-13 2012-03-26 Playing multimedia associated with a specific region of a PDF
JP2014503589A JP2014518576A (ja) 2011-04-13 2012-03-26 Ｐｄｆ文書基盤のイーブック用マルチメディア再生システム及びその再生方法，並びにこれを具現したｐｃ又はモバイル装置用アプリケーション
CN201280018052.0A CN103548083B (zh) 2011-04-13 2012-03-26 基于pdf文档的电子书的多媒体重放系统及方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110034430A KR101111031B1 (ko) 2011-04-13 2011-04-13 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법
KR10-2011-0034430 2011-04-13

Publications (2)

Publication Number Publication Date
WO2012141433A2 true WO2012141433A2 (ko) 2012-10-18
WO2012141433A3 WO2012141433A3 (ko) 2013-01-10

Family

ID=45840062

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/002169 WO2012141433A2 (ko) 2011-04-13 2012-03-26 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션

Country Status (5)

Country Link
US (1) US9547632B2 (ko)
JP (1) JP2014518576A (ko)
KR (1) KR101111031B1 (ko)
CN (1) CN103548083B (ko)
WO (1) WO2012141433A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150008277A (ko) * 2013-07-11 2015-01-22 삼성전자주식회사 전자문서를 공유하는 방법 및 이를 위한 장치들

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104516861B (zh) * 2014-11-26 2017-04-12 无锡永中软件有限公司 多媒体互动文档处理方法
US10032438B2 (en) * 2015-04-30 2018-07-24 Intuit Inc. Rendering graphical assets natively on multiple screens of electronic devices
CN107924398B (zh) * 2015-05-29 2022-04-29 微软技术许可有限责任公司 用于提供以评论为中心的新闻阅读器的系统和方法
US20170017616A1 (en) * 2015-07-17 2017-01-19 Apple Inc. Dynamic Cinemagraph Presentations
CN105912247B (zh) * 2016-04-15 2017-12-26 广州阿里巴巴文学信息技术有限公司 一种数字内容的处理方法、装置和信息设备
CN108319574A (zh) * 2017-01-18 2018-07-24 北大方正集团有限公司 交互式pdf文件的生成方法和生成装置
KR101986210B1 (ko) 2018-02-28 2019-06-05 주식회사 이지시스템 스마트종이를 이용한 pdf 문서 기반의 3d객체 제어 및 멀티미디어 구현을 위한 시스템
KR101971172B1 (ko) * 2018-08-23 2019-04-23 (주)씨에스피아이 전자문서 파일 변환시스템 및 그 방법
KR102005829B1 (ko) * 2018-12-11 2019-07-31 이수민 디지털 라이브 북 제작 시스템
CN111611505B (zh) * 2020-05-19 2023-08-29 掌阅科技股份有限公司 电子书中多媒体资源的访问方法、计算设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000072740A (ko) * 2000-09-22 2000-12-05 박용정 인터넷을 이용한 피디에프 인터넷 신문의 디스플레이 방법
US20090202226A1 (en) * 2005-06-06 2009-08-13 Texthelp Systems, Ltd. System and method for converting electronic text to a digital multimedia electronic book
US7617450B2 (en) * 2004-09-30 2009-11-10 Microsoft Corporation Method, system, and computer-readable medium for creating, inserting, and reusing document parts in an electronic document
US20100123908A1 (en) * 2008-11-17 2010-05-20 Fuji Xerox Co., Ltd. Systems and methods for viewing and printing documents including animated content

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2190928T3 (es) * 1999-11-12 2003-09-01 Ricoh Kk Sistema para tratar preguntas almacenadas como documentos que se pueden buscar en un sistema de gestion de documentos.
US7418656B1 (en) * 2003-10-03 2008-08-26 Adobe Systems Incorporated Dynamic annotations for electronics documents
US20060277098A1 (en) * 2005-06-06 2006-12-07 Chung Tze D Media playing system and method for delivering multimedia content with up-to-date and targeted marketing messages over a communication network
JP4400589B2 (ja) * 2006-03-28 2010-01-20 セイコーエプソン株式会社 画像供給装置、及び画像圧縮方式決定方法
JP5482040B2 (ja) * 2009-09-07 2014-04-23 村田機械株式会社 画像読取装置、画像読取方法、画像処理システム及びコンピュータプログラム
US20120066574A1 (en) * 2010-09-10 2012-03-15 Google Inc. System, Apparatus, and Method for Inserting a Media File into an Electronic Document

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000072740A (ko) * 2000-09-22 2000-12-05 박용정 인터넷을 이용한 피디에프 인터넷 신문의 디스플레이 방법
US7617450B2 (en) * 2004-09-30 2009-11-10 Microsoft Corporation Method, system, and computer-readable medium for creating, inserting, and reusing document parts in an electronic document
US20090202226A1 (en) * 2005-06-06 2009-08-13 Texthelp Systems, Ltd. System and method for converting electronic text to a digital multimedia electronic book
US20100123908A1 (en) * 2008-11-17 2010-05-20 Fuji Xerox Co., Ltd. Systems and methods for viewing and printing documents including animated content

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150008277A (ko) * 2013-07-11 2015-01-22 삼성전자주식회사 전자문서를 공유하는 방법 및 이를 위한 장치들
KR102220267B1 (ko) 2013-07-11 2021-02-25 삼성전자주식회사 전자문서를 공유하는 방법 및 이를 위한 장치들

Also Published As

Publication number Publication date
WO2012141433A3 (ko) 2013-01-10
JP2014518576A (ja) 2014-07-31
KR101111031B1 (ko) 2012-02-13
US20140013206A1 (en) 2014-01-09
CN103548083A (zh) 2014-01-29
CN103548083B (zh) 2016-03-23
US9547632B2 (en) 2017-01-17

Similar Documents

Publication Publication Date Title
WO2012141433A2 (ko) 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션
WO2013077537A1 (en) Flexible display apparatus and method of providing user interface by using the same
WO2013162181A1 (en) Method and apparatus for sharing presentation data and annotation
US20130088511A1 (en) E-book reader with overlays
Truong et al. StuPad: Integrating student notes with class lectures
KR20040080735A (ko) Ｓｍｉｌ을 사용하여 제작된 멀티미디어 컨텐츠를관리하는 방법 및 그 파일 시스템
WO2020149501A1 (ko) 전자문서의 점자 변환 시스템 및 그 방법
EP2336898A1 (en) Method and system for processing electronic data
WO2021066325A1 (ko) 웹 페이지를 생성하는 방법 및 장치
WO2010041887A2 (en) Apparatus and method for providing ui based on structured rich media data
WO2016032267A1 (ko) 도큐먼트를 반응형 웹으로 변환하는 반응형 웹 생성 방법
KR20090000745A (ko) 인터넷을 이용한 사용자 녹음방식의 소리책 제작 시스템 및방법
CN107066437B (zh) 数字作品标注的方法及装置
WO2012102424A1 (ko) 전자 그림책 편집 장치 및 방법
WO2018212486A1 (ko) 마크업 언어 기반 문서의 조합 글자 동기화 장치 및 그의 동작 방법
WO2013062324A1 (en) Method for applying supplementary attribute information to e-book content and mobile device adapted thereto
WO2013187555A1 (ko) 데이터 공유 서비스 시스템, 데이터 공유 서비스를 위한 장치 및 방법
JPH01233489A (ja) データ提示方法及びその装置
WO2011016598A1 (ko) 컨텐츠 제공 매체 및 그 제공방법
WO2023022462A1 (ko) 스마트 펜에 기초한 독서 관리 서비스 제공 방법 및 이를 구현하기 위한 시스템
WO2022119326A1 (ko) 영상 리소스 매칭을 이용한 멀티미디어 변환 콘텐츠 제작 서비스 제공 방법 및 그 장치
WO2013066094A1 (en) Method and apparatus for scraping of digital magazine that is edited in layers
WO2023008839A1 (ko) 터치 입력을 기반으로 전자 문서 간의 하이퍼링크를 가능하게 하는 터치스크린 기반의 전자 장치 및 그 동작 방법
WO2023229087A1 (ko) 위젯을 편집하기 위한 방법 및 전자 장치
WO2024076205A1 (ko) 백그라운드 이미지를 이용하여 플리커 현상을 제거한 반응형 영상 제공 장치 및 방법

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201280018052.0

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12770628

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 14006712

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2014503589

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12770628

Country of ref document: EP

Kind code of ref document: A2