WO2012102424A1 - 전자 그림책 편집 장치 및 방법 - Google Patents

전자 그림책 편집 장치 및 방법 Download PDF

Info

Publication number
WO2012102424A1
WO2012102424A1 PCT/KR2011/000585 KR2011000585W WO2012102424A1 WO 2012102424 A1 WO2012102424 A1 WO 2012102424A1 KR 2011000585 W KR2011000585 W KR 2011000585W WO 2012102424 A1 WO2012102424 A1 WO 2012102424A1
Authority
WO
WIPO (PCT)
Prior art keywords
picture book
voice
user
editing
voice signal
Prior art date
Application number
PCT/KR2011/000585
Other languages
English (en)
French (fr)
Inventor
장지수
박은경
Original Assignee
Jang Ji-Su
Park Eun-Kyoung
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jang Ji-Su, Park Eun-Kyoung filed Critical Jang Ji-Su
Publication of WO2012102424A1 publication Critical patent/WO2012102424A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/131Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/169Annotation, e.g. comment data or footnotes

Definitions

  • the present invention relates to an electronic picture book editing technology, and more particularly, to an electronic picture book editing apparatus and method capable of recording editing per page.
  • the conventional electronic picture book is a form that can not be edited, there was also a problem that the children passively strategy by requiring only children to read the electronic picture book.
  • the present invention has been made in an effort to provide an electronic picture book editing apparatus and method that allows a user having an intimate voice such as a parent to record and edit an electronic picture book directly by page.
  • Another object of the present invention is to provide an electronic picture book editing apparatus and method for modulating and storing a user's voice based on a character.
  • An electronic picture book editing apparatus for achieving the above object, the storage unit for storing an original electronic picture book composed of a plurality of editing pages; And extracting and displaying the editing page of the original electronic picture book requested to be edited from the storage unit, recording a voice signal input from a user, synchronizing the recorded voice signal with the currently displayed editing page to generate a multimedia page. And a picture book editing unit for storing the generated multimedia page in the storage unit.
  • a method of editing an electronic picture book in units of pages by using a voice signal input from a user includes: A page outputting step of outputting, on the screen, an editing page of the electronic picture book, in which the modulation icons are arranged; A recording step of receiving and recording a voice signal of a user; An icon click confirmation step of confirming whether or not the voice modulation icon arranged in the dialogue sentence of the editing page is clicked; A character identification step of identifying a character corresponding to the clicked voice modulation icon when the voice signal of the user is received while the voice modulation icon is clicked as a result of the checking; A voice signal modulation step of modulating and recording the received voice signal of the user with a voice pattern corresponding to the identified character; And a multimedia page generating step of generating a multimedia page by mapping the recorded voice signal of the user to the editing page.
  • an electronic picture book editing apparatus comprising: a storage unit for storing pages for editing an electronic picture book in which voice modulation icons are arranged in a dialogue sentence for each character according to a characteristic of a character; A picture book editing unit for extracting and displaying the editing page of the edited electronic picture book from the storage unit and receiving and recording a voice signal of a user; And when the voice signal of the user is received while the voice modulation icon is clicked, identifies a character corresponding to the clicked icon, modulates the received voice signal of the user with a voice pattern corresponding to the identified character, and records the voice signal. And a voice modulation module, wherein the picture book editing unit generates a multimedia page by mapping the recorded voice signal and the editing page when the editing operation signal is received from the user, and generates the multimedia page. And storing a page in the storage unit.
  • the present invention provides an interface for a user to record and edit an electronic picture book page by page, and the emotional stability of children reading the electronic picture book by inducing a user having a friendly voice such as parents and siblings to record the electronic picture book It has the advantage of increasing intimacy.
  • the present invention has an advantage of facilitating editing of an electronic picture book by a user by disposing a voice modulation icon according to character characteristics in a dialogue sentence of the character.
  • the present invention has the advantage of further improving the vividness and realism of the electronic picture book by reproducing the effect sound based on the words of the electronic fairy tale book and mixing the effect sound and the user's voice.
  • FIG. 1 is a diagram illustrating a configuration of a system to which an electronic picture book editing apparatus is applied according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a configuration of an electronic picture book editing apparatus according to an embodiment of the present invention.
  • FIG. 3 is a flowchart illustrating a method of editing an original electronic picture book in an electronic picture book editing apparatus according to an embodiment of the present invention.
  • FIG. 4 is a diagram showing an editing page constituting an original electronic picture book according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating an editing page of an original electronic picture book which is being edited according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating a method of playing a multimedia electronic picture book in an electronic picture book editing apparatus according to an embodiment of the present invention.
  • FIG. 7 is a diagram illustrating a multimedia page being viewed by a user according to an embodiment of the present invention.
  • FIG. 8 illustrates audio data synchronized with a multimedia page according to an embodiment of the present invention.
  • Original electronic picture book means an electronic picture book before editing.
  • the original electronic picture book is composed of a plurality of editable pages for editing.
  • the editing page is a basic unit constituting the original electronic picture book, which is editable by the user and includes an image (image image or video image), text, and voice modulation icon.
  • a multimedia electronic picture book refers to an original electronic picture book edited by a user, and is composed of a plurality of multimedia pages like the original electronic picture book.
  • the multimedia page is a basic unit constituting a multimedia electronic picture book, and includes an image (image image or video image), text and voice modulation icons, and is synchronized with audio data.
  • the synchronization means that when a specific multimedia page is called, the audio data mapped with the multimedia page is played back.
  • the audio data represents a sound synchronized with the multimedia page, and includes at least one of an original voice signal of a user, background music, an effect sound, and a modulated voice signal of the user, and a plurality of mixed sound among them.
  • Voice modulation means converting a user's voice signal into a voice pattern of a character appearing in an electronic picture book.
  • the background music represents a sound included in the audio data, and various sounds such as classic, cartoon theme, song, and the like may be adopted.
  • the sound effect is a sound included in the audio data and includes various sounds such as animal sounds, natural sounds (eg, stream sounds, wind sounds, etc.), train sounds, and the like.
  • FIG. 1 is a diagram illustrating a configuration of a system to which an electronic picture book editing apparatus is applied according to an embodiment of the present invention.
  • the electronic picture book editing apparatus 200 communicates with the content server 100 through the network 300.
  • the network 300 includes a mobile communication network and a broadband wired Internet network, and relays communication between the electronic picture book editing apparatus 200 and the content server 100.
  • the content server 100 performs a function of providing an original electronic picture book to the electronic picture book editing apparatus 200.
  • the content server 100 receives and stores the multimedia electronic picture book from the electronic picture book editing apparatus 200 and provides the multimedia electronic picture book to others. That is, the content server 100 performs a function of sharing an electronic picture book (ie, a multimedia electronic picture book) edited by a specific user to others.
  • the electronic picture book editing apparatus 200 stores one or more original electronic picture books and multimedia electronic picture books. When a specific multimedia electronic picture book is selected, the electronic picture book editing apparatus 200 outputs the multimedia pages constituting the electronic picture book to the liquid crystal display. In addition, the electronic picture book editing apparatus 200 outputs audio data synchronized with the multimedia page to a speaker so that the multimedia electronic picture book is read by the user. In particular, when the electronic picture book editing apparatus 200 is requested to edit the original electronic picture book, the electronic picture book editing apparatus 200 sequentially outputs each editing page constituting the original electronic picture book and stores the edited information on the output editing page for each page. . In this case, the electronic picture book editing apparatus 200 modulates and records a user's voice signal based on the clicked voice modulation icon when a specific voice modulation icon arranged on the editing page is clicked.
  • the electronic picture book editing apparatus 200 may be mounted on a general purpose computer such as a mobile communication terminal such as a smart phone, a personal digital assistant (PDA), a notebook computer, a laptop computer, a desktop computer, and the like.
  • a mobile communication terminal such as a smart phone, a personal digital assistant (PDA), a notebook computer, a laptop computer, a desktop computer, and the like.
  • PDA personal digital assistant
  • FIG. 2 is a diagram illustrating a configuration of an electronic picture book editing apparatus according to an embodiment of the present invention.
  • the electronic picture book editing apparatus 200 may include an input unit 210, a communication unit 220, a speaker 230, a display unit 230, a storage unit 250, and the like. Picture book editing unit 260 and picture book providing unit 270 is included.
  • the input unit 210 is an input means such as a keypad, a keyboard, a touch screen, and the like, and receives a user's operation signal and transmits it to a picture book editing unit 260 or a picture book providing unit 270.
  • the input unit 210 includes a voice receiving means such as a microphone to receive a voice signal from a user.
  • the communication unit 220 performs a function of communicating with a broadband wired communication network or a mobile communication network distributed in the network 300.
  • the communication unit 220 communicates with the content server 100 via the network 300, thereby uploading the multimedia electronic picture book to the content server 100, and from the content server 100 an original electronic picture book or multimedia electronic picture book. Download it.
  • the speaker 230 outputs an audio signal transmitted from the picture book providing unit 270 or the picture book editing unit 260 as audio output means.
  • the display unit 230 includes a liquid crystal display device and performs a function of outputting an electronic picture book transmitted from the picture book editing unit 260 or the picture book providing unit 270.
  • the display unit 230 may be a touch screen. In this case, the display unit 230 functions as an input means and transmits the touched information to the picture book editing unit 260 or the picture book providing unit 270.
  • the storage unit 250 is a storage means such as an electrically erasable programmable read-only memory (EEPROM), a flash memory, a disk device, or the like, and stores various data necessary for editing an electronic picture book and reading an electronic picture book.
  • the storage unit 250 stores the original electronic picture book and the multimedia electronic picture book edited by the user.
  • the storage unit 250 stores a plurality of background music, sound effects and character-specific modulation pattern information.
  • a voice modulation icon according to the characteristics of the character is arranged in the dialogue sentence for each character.
  • detailed data such as voice tone pattern information, tone height pattern information, pulse period information, and synthesized voice frequency is recorded in the modulation pattern information of the storage unit 250.
  • the storage unit 250 stores the event word information for generating each sound effect and the effect sound.
  • the storage unit 250 may map and store the 'bump' event word information and the 'bump1.wav' sound effect, and may also store the 'tweet' event word information and the 'bird1.wav' sound effect. .
  • the picture book editing unit 260 performs a function of editing the original electronic picture book according to the user's operation. Specifically, the picture book editing unit 260 extracts the editing page constituting the original electronic picture book from the storage unit 250 and outputs it to the display unit 230, and mixes the background music selected by the user with the voice signal input from the user. Record. At this time, when the user's voice signal is received while the voice modulation icon placed on the editing page is clicked, the picture book editing unit 260 instructs the voice modulation module 261 to modulate the voice signal.
  • the picture book editing unit 260 terminates the user's voice recording and receives the user's voice and / or the mixed voice as one audio data when the edit completion operation signal for the editing page is received through the input unit 210.
  • the audio data is mapped to the editing page currently being output and stored in the storage unit 250.
  • the picture book editing unit 260 further stores the recording state information of the voice modulation icon and the link information of the modulated voice signal and the voice modulation icon in the storage unit 250 in correspondence with the editing page currently being output.
  • the picture book editing unit 260 includes a voice modulation module 261 for modulating the user's voice signal according to the characteristics of the character and the sound effect reproduction module 262 for reproducing the effect sound.
  • the voice modulation module 261 identifies which character the voice modulation icon clicked by the user corresponds to, and modulates and records a user voice signal received in the voice pattern of the identified character, and then modulates the voice signal. And the clicked voice modulation icon. In this case, the voice modulation module 261 checks the modulation pattern information corresponding to the identified character in the storage unit 250 and modulates the user's voice signal based on the modulation pattern information. In addition, when the click state of the voice modulation icon is released, the voice modulation module 261 changes the icon from the unrecorded state to the recording state.
  • the sound effect reproducing module 262 When the user's voice signal is received, the sound effect reproducing module 262 performs voice recognition on words included in the voice signal, compares the voice recognized word with event word information of the storage unit 250, and generates a sound effect event. Check whether or not. When the sound effect event occurs, the sound effect reproduction module 262 extracts and reproduces the sound effect mapped to the sound effect event from the storage 250. In this case, the picture book editing unit 260 mixes and reproduces the reproduced sound effect, the user's voice signal, and the background music.
  • the picture book providing unit 270 extracts the multimedia pages constituting the multimedia electronic picture book from the storage unit 250 and displays them on the display unit 240, extracts audio data synchronized with the multimedia pages from the storage unit 230, and generates a speaker.
  • the function outputs to 230.
  • the picture book providing unit 270 outputs a multimedia page including a plurality of icons to the display unit 240, and stores a voice signal modulated according to the clicked icon or audio data synchronized with the corresponding multimedia page. Extracted from and output to the speaker 230.
  • the picture book providing unit 270 may download the multimedia electronic picture book from the content server 100 through the communication unit 220 and store it in the storage unit 250.
  • FIG. 3 is a flowchart illustrating a method of editing an original electronic picture book in an electronic picture book editing apparatus according to an embodiment of the present invention.
  • the input unit 210 of the electronic picture book editing apparatus 200 receives an edit manipulation signal for a specific original electronic picture book from a user and transmits the signal to the picture book editing unit 260 (S301). Then, the picture book editing unit 260 extracts the original electronic picture book selected by the user from the storage unit 250, and displays the first editing page constituting the original electronic picture book on the display unit 230 (S303). In this case, when the user has previously edited the original electronic picture book, the picture book editing unit 260 may display the last edited page on the display unit 230. In each of the editing pages constituting the original electronic picture book, voice modulation icons classified according to the characteristics of the characters are arranged in the dialogue sentence for each character.
  • FIG. 4 is a diagram illustrating an editing page constituting an original electronic picture book, according to an embodiment of the present invention.
  • the editing page includes voice modulation icons 410 and 420 based on characteristics of characters. It is placed in this dialog.
  • a bear voice modulation icon 410 is disposed in a dialogue sentence of a bear
  • a lion voice modulation icon 420 is disposed in a dialogue sentence of a lion. That is, the voice modulation icon of the character is arranged at the beginning of the dialogue of each character.
  • a voice modulation icon corresponding to the characteristic of the character is disposed in the dialogue of the character.
  • the picture book editing unit 260 In such a state that the editing page on which the voice modulation icon is arranged is displayed, the picture book editing unit 260 outputs the background music list to the display unit 240. Subsequently, when the selection information of the specific background music is received from the user from the background music list, the picture book editing unit 260 extracts and plays the selected background music from the storage unit 250 (S305). When the user's voice signal is input through the input unit 210, the picture book editing unit 260 mixes the user's voice signal with the background music to be recorded (S307).
  • the effect sound reproducing module 262 recognizes the words included in the voice signal, and generates the voice recognized words and the event generating words of the storage unit 250.
  • a sound effect event is detected by comparing with each other.
  • the sound effect reproduction module 262 extracts and reproduces the sound effect corresponding to the sound effect event from the storage 250. Accordingly, the picture book editing unit 260 mixes and records the effect sound, the user's voice signal, and the background music in real time (S311).
  • the sound effect reproducing module 262 when the sound effect reproducing module 262 recognizes a sound event event voice word such as "growl”, “tweet”, “boom”, etc., as a result of recognizing the user's voice signal, the sound effect unit corresponding to the word may be stored. Extracted from the file 250, and reproduced, the picture book editing unit 260 mixes the sound effect and the user's voice signal and background music together.
  • a sound event event voice word such as "growl”, “tweet”, “boom”, etc.
  • the picture book editing unit 260 checks whether the voice modulation icon is in a clicked state (S313).
  • the picture book editing unit 260 transmits the received voice signal to the voice modulation module 261 to instruct voice modulation.
  • the voice modulation module 261 identifies which character the clicked voice modulation icon corresponds to, modulates and records the voice signal of the received user with the voice pattern of the identified character, and then modifies the voice signal. And the clicked voice modulation icon (S315, S317). In this case, the voice modulation module 261 checks the modulation pattern information corresponding to the identified character in the storage unit 250 and modulates the voice signal of the user being received based on the modulation pattern information.
  • the voice modulation module 261 checks the bear modulation pattern information in the storage unit 250 and then records the voice tone recorded in the bear modulation pattern information.
  • the user's voice signal is modulated with reference to detailed data such as voice height and synthesized voice frequency, and the clicked voice modulation icon is linked with the modulated user's voice signal.
  • the voice modulation module 261 separately stores the modulated user's voice signal linked with the voice modulation icon in the storage 250.
  • the voice modulation module 261 changes the voice modulation icon from the unrecorded state to the recording state. That is, the voice modulation module 261 changes the voice modulation icon from the unrecorded state to the recorded state when the modulation of the voice signal of the user is completed.
  • FIG. 5 is a diagram illustrating an editing page of an original electronic picture book in progress according to an embodiment of the present invention.
  • the picture book editing unit 260 displays the voice when the click state of the voice modulation icon is released. Change the modulation icon from unrecorded to recorded.
  • the click state of the bear voice modulation icon 410 is released (that is, when the user's voice signal has been modulated into a bear voice pattern)
  • the picture book editing unit 260 performs the bear voice modulation icon 410.
  • the bear voice modulation icon 410 can be changed from an unrecorded state to a recorded state.
  • the picture book editing unit 260 may change the shape or color of the voice modulation icon to change the display of the voice modulation icon from the unrecorded state to the recorded state.
  • the picture book editing unit 260 may change the color of the bear voice modulation icon 410 from a transparent (or circular) state in an unrecorded state to a yellow (or triangular form) in a recording state.
  • the picture book editing unit 260 checks whether the edit completion operation signal for the editing page has been received through the input unit 210, and if not, re-executes step S307 (S319). That is, the picture book editing unit 260 continuously receives a recording signal for the corresponding editing page from the user when the page editing completion operation signal is not received from the user, and receives the voice signal of the user according to whether the voice modulation icon is clicked. Record by modulating, recording by mixing the user's voice signal and sound effect according to whether or not an effect sound output event occurs, or recording by maintaining the original state of the user's voice signal.
  • the picture book editing unit 260 receives the edited manipulation signal of the page from the user via the input unit 210, the mixed voice signal (that is, the user's voice signal or modulated voice signal, sound effects, background music, etc.) This mixed audio signal) is generated as one audio data. Subsequently, the picture book editing unit 260 synchronizes the audio data with the editing page output to the display unit 240 to generate a multimedia page, and stores the multimedia page in the storage unit 250 (S321).
  • synchronization means that when a specific multimedia page is called, audio data mapped with the corresponding multimedia page is played back. That is, the audio data of the edited edited page is divided and stored in units of pages.
  • the picture book editing unit 260 maps the recording state information of the voice modulation icon and the link state of the modulated voice signal and the voice modulation icon to the generated multimedia page and stores the additional information in the storage unit 250.
  • the picture book editing unit 260 outputs the next editing page of the edited editing page to the display unit 230, thereby inducing a user to edit another editing page.
  • the picture book editing unit 260 collects the generated plurality of multimedia pages to create a single multimedia electronic picture book, the multimedia electronic picture book generated in this way to the storage unit 250 Save it.
  • the electronic picture book editing apparatus 200 provides a user with an interface for editing on a page basis, and receives editing information input through the interface from the user and stores the information on a page basis.
  • the picture book editing unit 260 of the electronic picture book editing apparatus 200 may upload the edited original electronic picture book (ie, the multimedia electronic picture book) to the content server 100 using the communication unit 220 and share it with others. .
  • FIG. 6 is a flowchart illustrating a method of playing a multimedia electronic picture book in an electronic picture book editing apparatus according to an embodiment of the present invention.
  • the input unit 210 of the electronic picture book editing apparatus 200 receives a read request signal of a specific multimedia electronic picture book from a user and transmits it to the picture book providing unit 270 (S601). Then, the picture book providing unit 270 extracts the multimedia electronic picture book selected by the user from the storage unit 250, and displays the first multimedia page constituting the extracted electronic picture book on the display unit 230 (S603 and S605). . In this case, the picture book providing unit 270 checks whether the bookmark information input by the user is recorded in the multimedia electronic picture book page, and if it is recorded, displays the multimedia page in which the bookmark information is recorded instead of the first multimedia page. 230). In the output multimedia page, a voice modulation icon is arranged in the dialogue of the character, and a plurality of icons are arranged in the multimedia page.
  • FIG. 7 is a diagram illustrating a multimedia page being viewed by a user according to an embodiment of the present invention.
  • a bear voice modulation icon 410 is disposed in a dialogue of a bear character, and dialogue of a lion character is illustrated.
  • the lion voice modulation icon 420 is disposed in the.
  • Each voice modulation icon 410 or 420 may additionally display voice modulation recording state information.
  • a play icon 510 which is voice modulation recording state information
  • an ALL icon 710 for outputting audio data synchronized with the corresponding multimedia page is disposed on the multimedia page, and icons 720 and 730 used to view the next page or the previous page are disposed below.
  • an end icon 740 which is used to end viewing of the multimedia electronic picture book, is disposed at the bottom of the multimedia page.
  • the input unit 210 receives specific icon click information from the user and transmits it to the picture book providing unit 270 (S607). Then, the picture book providing unit 270 checks the clicked icon, and when the ALL icon 710 for outputting the synchronized audio data is clicked, the picture book providing unit 270 maps the stored audio data to the currently displayed multimedia page and stores the stored unit 250. ) And output to the speaker 230 (S609, S611). That is, the picture book providing unit 270 extracts and reproduces the audio data synchronized with the multimedia page from the storage unit 250. In this case, the picture book providing unit 270 continuously checks whether or not a voice modulated audio signal is output from all audio data and outputs the blinking voice modulator icon 410 linked with the voice modulated part. Recognize that the voice-modulated sentence is being played.
  • the picture book providing unit 270 extracts a modulated voice signal linked to the icon from the storage unit 250 and outputs the modulated voice signal to the speaker 230.
  • FIG. 8 illustrates audio data synchronized with a multimedia page according to an embodiment of the present invention.
  • the picture book providing unit 270 sequentially outputs audio of 810, 820, 830, and 840 to the speaker 230. That is, the picture book providing unit 270 reproduces the mixed background music and the bear modulation sound during the T1 time, reproduces the voice signal mixed with the background music and the user's original voice during the T2 time, and the effect sound, the background music and the like during the T3 time. After the user's original voice is mixed, the user's original voice is mixed with the background music and the user's original voice is reproduced during the T4 time. At this time, the picture book providing unit 270 controls the bear voice modulation icon 410 to blink while the audio of the 810 portion is reproduced, so that the user recognizes that the modified bear dialogue is being reproduced.
  • the picture book providing unit 270 does not play the entire audio data synchronized with the multimedia page when the play icon 510 disposed next to the bear voice modulation icon 410 is clicked on the multimedia page of FIG. 7.
  • the bear modulated sound linked with the bear voice modulation icon 410 is extracted from the storage unit 250 and reproduced through the speaker 230.
  • the picture book providing unit 270 if the clicked icon is the previous page icon 720 or the next page icon 730, removes from the display unit 240 of the multimedia page currently being output, the previous multimedia page or the next multimedia page Is extracted from the storage unit 250 and output to the display unit 240. That is, when the clicked icon is the previous page icon 720 or the next page icon 730, the picture book providing unit 270 resumes the process after step S603.
  • the picture book providing unit 270 plays only the voice modulated according to the clicked icons 510 and 710 on the multimedia page currently being output or reproduces all audio data synchronized with the corresponding multimedia page.
  • the picture book providing unit 270 removes the multimedia page currently being output from the display unit 240 and terminates the multimedia electronic picture book reading process.
  • the electronic picture book editing apparatus 200 provides an interface for a user to record and edit an electronic picture book for each page.
  • the electronic picture book editing apparatus 200 induces a user having a friendly voice such as parents or siblings to record and edit the electronic picture book for the children, thereby enhancing emotional stability and intimacy of the children.
  • the electronic picture book editing apparatus 200 facilitates the user's editing of the electronic picture book by placing the voice modulation icon according to the character characteristics in the dialogue sentence of the character.
  • the electronic picture book editing apparatus 200 recognizes the user's voice and mixes the effect sound reproduced according to the recognized voice and the recorded user's voice, thereby further improving the liveness and realism of the electronic picture book.
  • the method of the present invention as described above may be implemented as a program and stored in a recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.) in a computer-readable form. Since this process can be easily implemented by those skilled in the art will not be described in more detail.
  • a recording medium CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.
  • the present invention is expected to implement an electronic picture book editing apparatus that can be edited by the user, not only to induce children's reading interest and to enhance the emotion, but also to contribute to the development of the electronic book industry.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명에 따른 전자 그림책 편집 장치는 오리지널 전자 그림책을 저장하는 저장부 및 편집요청된 오리지널 전자 그림책의 편집용 페이지를 상기 저장부에서 추출하여 디스플레이하고, 녹음된 사용자의 음성신호와 디스플레이된 편집용 페이지를 동기화시켜 멀티미디어 페이지를 생성하여 상기 저장부에 저장하는 그림책 편집부를 포함한다.

Description

전자 그림책 편집 장치 및 방법
본 발명은 전자 그림책 편집 기술에 관한 것으로서, 더욱 상세하게는 페이지별로 녹음 편집이 가능한 전자 그림책 편집 장치 및 방법에 관한 것이다.
본 출원은 2011년 1월 27일에 출원된 한국특허출원 제10-2011-0008277호에 기초한 우선권을 주장하며, 해당 출원의 명세서 및 도면에 개시된 모든 내용은 본 출원에 원용된다.
오늘날 워드프로세스, PDF 파일 등과 같이 컴퓨터상에서 전자적으로 작성된 도서가 사용자들에게 배포되고, 사용자들은 컴퓨터, 이동통신단말 등과 같은 통신장치를 이용하여 전자도서를 열람하고 있다. 이러한 전자도서 중에서 대표적인 것은 전자 그림책이 있다.
종래의 전자 그림책은 종이로 인쇄한 형태와 동일하게 전자화되어 사용자들에게 제공되었으나, 현재에는 사운드가 가미된 전자 그림책이 출시되고 있다. 이러한 전자 그림책은 성우 목소리를 출력함으로써, 어린이들에게 애니메이션을 시청하는 것과 같은 효과를 제공한다.
그런데 이렇게 사운드가 가미된 전자 그림책은 단순하게 하나의 음성파일을 재생하여 출력시키기 때문에, 어린이들에게 획일화된 음성 청취를 요구하게 되는 문제가 있다. 특히, 듣기 거북한 목소리가 출력되는 전자 그림책을 제공할 경우, 어린이에게 친밀감을 제공하지 못할 뿐만 아니라 정서에 악영향을 미칠 수도 있다.
아울러, 종래의 전자 그림책은 편집이 불가능한 형태로서, 단지 어린이들에게 전자 그림책의 열람만을 요구하여 어린이들을 수동적으로 전략시키는 문제점도 있었다.
본 발명은 이러한 종래의 문제점을 해결하고자, 부모와 같은 친밀한 목소리를 가진 사용자가 페이지별로 직접 전자 그림책을 녹음하여 편집할 수 있는 전자 그림책 편집 장치 및 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 캐릭터에 근거하여 사용자의 음성을 변조하여 저장하는 전자 그림책 편집 장치 및 방법을 제공하는데 또 다른 목적이 있다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명의 제 1 측면에 따른 전자 그림책 편집 장치는, 복수의 편집용 페이지로 구성되는 오리지널 전자 그림책을 저장하는 저장부; 및 편집요청된 오리지널 전자 그림책의 편집용 페이지를 상기 저장부에서 추출하여 디스플레이하고, 사용자로부터 입력받은 음성신호를 녹음하여 상기 녹음된 음성신호와 현재 디스플레이된 편집용 페이지를 동기화시켜 멀티미디어 페이지를 생성하고, 상기 생성된 멀티미디어 페이지를 상기 저장부에 저장하는 그림책 편집부;를 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 제 2 측면에 따른 전자 그림책 편집 장치에서 사용자로부터 입력받은 음성신호를 이용하여 전자 그림책을 페이지 단위로 편집하는 방법은, 캐릭터의 특성에 따라 캐릭터별 대화문장에 음성변조 아이콘이 각각 배치된 전자 그림책의 편집용 페이지를 화면에 출력하는 페이지 출력 단계; 사용자의 음성신호를 수신하여 녹음하는 녹음 단계; 상기 편집용 페이지의 대화문장에 배치된 음성변조 아이콘이 클릭되었는지 여부를 확인하는 아이콘 클릭 확인 단계; 상기 확인 결과, 음성변조 아이콘이 클릭된 상태에서 상기 사용자의 음성신호가 수신된 경우, 상기 클릭된 음성변조 아이콘과 대응되는 캐릭터를 식별하는 캐릭터 식별 단계; 상기 식별된 캐릭터에 해당하는 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음하는 음성신호 변조 단계; 및 상기 녹음된 사용자의 음성신호를 상기 편집용 페이지를 매핑하여 멀티미디어 페이지를 생성하는 멀티미디어 페이지 생성 단계;를 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 제 3 측면에 따른 전자 그림책 편집 장치는, 캐릭터의 특성에 따라 캐릭터별 대화문장에 음성변조 아이콘이 각각 배치된 전자 그림책의 편집용 페이지를 저장하는 저장부; 편집요청된 전자 그림책의 편집용 페이지를 상기 저장부에서 추출하여 디스플레이하고 사용자의 음성신호를 수신하여 녹음하는 그림책 편집부; 및 음성변조 아이콘이 클릭된 상태에서 상기 사용자의 음성신호가 수신된 경우 상기 클릭된 아이콘과 대응되는 캐릭터를 식별하여 이 식별된 캐릭터에 해당하는 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음하는 음성 변조 모듈;을 포함하고, 상기 그림책 편집부는, 편집완료 조작신호를 상기 사용자로부터 수신한 경우 상기 녹음된 사용자의 음성신호와 상기 편집용 페이지의 매핑하여 멀티미디어 페이지를 생성하고, 상기 생성된 멀티미디어 페이지를 상기 저장부에 저장하는 것을 특징으로 한다.
본 발명은 사용자가 페이지별로 전자 그림책을 녹음 편집할 수 있는 인터페이스를 제공하고, 부모, 형제와 같은 친근한 목소리를 가지는 사용자가 전자 그림책을 녹음할 수 있도록 유도함으로써, 전자 그림책을 열람하는 어린이들의 정서적 안정과 친밀감을 높이는 장점이 있다.
아울러, 본 발명은 캐릭터 특성에 따른 음성변조 아이콘을 해당 캐릭터의 대화문장에 배치시킴으로써, 사용자의 전자 그림책 편집을 용이하게 하는 이점이 있다.
또한, 본 발명은 전자 동화책의 단어를 토대로 효과음을 재생시키고 상기 효과음과 사용자의 음성을 믹싱 처리함으로써, 전자 그림책의 생동감과 사실성을 더욱 향상시키는 장점이 있다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 발명을 실시하기 위한 구체적인 내용과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.
도 1은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치가 적용된 시스템의 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치의 구성을 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치에서 오리지널 전자 그림책을 편집하는 방법을 설명하는 순서도이다.
도 4는 본 발명의 일 실시예에 따른, 오리지널 전자 그림책을 구성하는 편집용 페이지를 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른, 편집 진행중인 오리지널 전자 그림책의 편집용 페이지를 나타내는 도면이다.
도 6은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치에서 멀티미디어 전자 그림책을 재생하는 방법을 설명하는 순서도이다.
도 7은 본 발명의 일 실시예에 따른 사용자에 의해 열람되고 있는 멀티미디어 페이지를 나타내는 도면이다.
도 8은 본 발명의 일 실시예에 따른, 멀티미디어 페이지와 동기화된 오디오 데이터를 나타내는 도면이다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다.
본 발명의 실시예에 따른 전자 그림책 편집 장치 및 방법을 설명하기에 앞서, 후술되는 용어에 대해 정의한다.
오리지널 전자 그림책(original electronic picture book)은 편집되기 전의 전자 그림책을 의미한다. 상기 오리지널 전자 그림책은 편집가능한 복수의 편집용 페이지로 구성된다.
편집용 페이지는 오리지널 전자 그림책을 구성하는 기본 단위로서, 사용자에 의해 편집 가능하며 이미지(화상 이미지 또는 동영상 이미지), 텍스트 및 음성변조 아이콘을 포함한다.
멀티미디어 전자 그림책(multimedia electronic picture book)은 사용자에 의해 편집된 오리지널 전자 그림책을 의미하는 것으로서, 오리지널 전자 그림책과 마찬가지로 복수의 멀티미디어 페이지로 구성된다.
멀티미디어 페이지는 멀티미디어 전자 그림책을 구성하는 기본 단위로서, 이미지(화상 이미지 또는 동영상 이미지), 텍스트 및 음성변조 아이콘을 포함하고 오디오 데이터와 동기화된다. 여기서, 동기화라 함은 특정한 멀티미디어 페이지가 호출되면, 이 멀티미디어 페이지와 매핑되어 있는 오디오 데이터가 재생되도록 연동되어 있음을 나타낸다.
오디오 데이터는 멀티미디어 페이지와 동기화된 사운드를 나타내는 것으로서, 사용자의 오리지널 음성신호, 배경음악, 효과음, 변조된 사용자의 음성신호 중 하나 이상을 포함하고 더불어 이 중에서 복수 개가 믹싱 처리된 사운드를 포함한다.
음성 변조는 사용자의 음성신호를 전자 그림책에 등장하는 캐릭터의 음성패턴으로 변환하는 것을 의미한다.
배경음악은 오디오 데이터에 포함되는 사운드를 나타내는 것으로서, 클래식, 만화주제가, 가요 등과 같은 각종 사운드가 채택될 수 있다.
효과음은 오디오 데이터에 포함되는 사운드로서, 동물소리, 자연소리(예컨대, 시냇물 소리, 바람소리 등), 기차소리 등과 같은 각종 소리를 포함한다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치가 적용된 시스템의 구성을 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 발명에 따른 전자 그림책 편집 장치(200)는 네트워크(300)를 통해 콘텐츠 서버(100)와 통신한다.
상기 네트워크(300)는 이동통신망과 광대역 유선 인터넷망을 포함하며, 전자 그림책 편집 장치(200)와 콘텐츠 서버(100)의 통신을 중계한다.
콘텐츠 서버(100)는 전자 그림책 편집 장치(200)로 오리지널 전자 그림책을 제공하는 기능을 수행한다. 또한, 콘텐츠 서버(100)는 전자 그림책 편집 장치(200)로부터 멀티미디어 전자 그림책을 수신하여 저장하고, 이 멀티미디어 전자 그림책을 타인에게 제공한다. 즉, 콘텐츠 서버(100)는 특정 사용자에 의해서 편집된 전자 그림책(즉, 멀티미디어 전자 그림책)을 타인에게 공유시키는 기능을 수행한다.
전자 그림책 편집 장치(200)는 하나 이상의 오리지널 전자 그림책과 멀티미디어 전자 그림책을 저장하며, 특정 멀티미디어 전자 그림책이 선택되면 그 전자 그림책을 구성하는 멀티미디어 페이지를 액정표시장치에 출력한다. 또한, 전자 그림책 편집 장치(200)는 상기 멀티미디어 페이지와 동기화된 오디오 데이터를 스피커로 출력함으로써 멀티미디어 전자 그림책이 사용자에 의해 열람되게 한다. 특히, 전자 그림책 편집 장치(200)는 오리지널 전자 그림책의 편집이 요청되면, 해당 오리지널 전자 그림책을 구성하는 각 편집용 페이지를 순차적으로 출력하고 이 출력된 편집용 페이지에서 편집된 정보를 페이지별로 저장한다. 이때, 전자 그림책 편집 장치(200)는 편집용 페이지에 배치된 특정 음성변조 아이콘이 클릭된 경우 상기 클릭된 음성변조 아이콘을 근거로 사용자의 음성신호를 변조하여 녹음한다.
이러한 전자 그림책 편집 장치(200)는 스마트폰, PDA(Personal Digital Assistant) 등과 같은 이동통신단말, 노트북, 랩탑 컴퓨터, 데스크탑 컴퓨터 등과 범용 컴퓨터에 탑재될 수 있다.
이하, 도 2 내지 도 8을 참조하여 본 발명에 따른 전자 그림책 편집 장치 및 이 장치에서의 전자 그림책 편집 방법에 상세하게 설명한다.
도 2는 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치의 구성을 나타내는 도면이다.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 전자 그림책 편집 장치(200)는 입력부(210), 통신부(220), 스피커(230), 표시부(230), 저장부(250) 및 그림책 편집부(260) 및 그림책 제공부(270)를 포함한다.
입력부(210)는 키패드, 키보드, 터치스크린 등과 같은 입력수단으로서, 사용자의 조작신호를 입력받아 그림책 편집부(260) 또는 그림책 제공부(270)로 전달하는 기능을 수행한다. 또한, 입력부(210)는 마이크와 같은 음성수신수단을 구비하여, 사용자로부터 음성신호를 입력받는다.
통신부(220)는 네트워크(300)에 분포된 광대역 유선 통신망 또는 이동통신망과 통신하는 기능을 수행한다. 특히, 통신부(220)는 네트워크(300)를 경유하여 콘텐츠 서버(100)와 통신함으로써, 콘텐츠 서버(100)로 멀티미디어 전자 그림책을 업로드하고, 상기 콘텐츠 서버(100)로부터 오리지널 전자 그림책 또는 멀티미디어 전자 그림책을 다운로드한다.
스피커(230)는 오디오 출력 수단으로서, 그림책 제공부(270) 또는 그림책 편집부(260)로부터 전달받은 오디오 신호를 출력한다.
표시부(230)는 액정표시소자를 구비하여, 그림책 편집부(260) 또는 그림책 제공부(270)에서 전달받은 전자 그림책을 출력하는 기능을 수행한다. 상기 표시부(230)는 터치 스크린(touch screen)일 수 있으며, 이 경우 상기 표시부(230)는 입력수단으로 기능하여 터치된 정보를 그림책 편집부(260) 또는 그림책 제공부(270)로 전달한다.
저장부(250)는 EEPROM(Electrically Erasable Programmable Read-Only Memory), 플래시 메모리(flash memory), 디스크 장치 등의 저장수단으로서, 전자 그림책 편집 및 전자 그림책 열람에 필요한 각종 데이터를 저장한다. 게다가, 저장부(250)는 오리지널 전자 그림책과 사용자에 의해 편집된 멀티미디어 전자 그림책을 저장한다. 특히, 저장부(250)는 다수의 배경음악, 효과음 및 캐릭터별 변조패턴정보를 저장한다. 상기 멀티미디어 전자 그림책과 오리지널 전자 그림책의 각 페이지(즉, 편집용 페이지, 멀티미디어 페이지)에는 캐릭터의 특성에 따른 음성변조 아이콘이 캐릭터별 대화문장에 배치된다. 또한, 저장부(250)의 변조패턴정보에는 음성톤 패턴 정보, 음의 높낮이 패턴 정보, 펄스 주기 정보, 합성 음성 주파수 등의 세부 데이터가 기록된다.
아울러, 저장부(250)는 각 효과음과 효과음이 발생하는 이벤트 단어정보를 저장한다. 예를 들어, 저장부(250)는 '꽝' 이벤트 단어정보와 'bump1.wav' 효과음을 매핑하여 저장하고, 또한, '짹짹' 이벤트 단어정보와 'bird1.wav' 효과음을 매핑하여 저장할 수 있다.
그림책 편집부(260)는 사용자의 조작에 따라 오리지널 전자 그림책을 편집하는 기능을 수행한다. 구체적으로, 그림책 편집부(260)는 오리지널 전자 그림책을 구성하는 편집용 페이지를 저장부(250)에서 추출하여 표시부(230)에 출력하고, 사용자가 선택한 배경음악과 사용자로부터 입력받은 음성신호를 믹싱하여 녹음한다. 이때, 그림책 편집부(260)는 편집용 페이지에 배치된 음성변조 아이콘이 클릭된 상태에서 사용자의 음성신호가 수신되면, 음성변조 모듈(261)로 상기 음성신호의 변조를 지시한다.
또한, 그림책 편집부(260)는 입력부(210)를 통해 편집용 페이지에 대한 편집완료 조작 신호가 수신되면, 사용자의 음성 녹음을 종료하고, 사용자 음성 또는/및 믹싱된 음성을 하나의 오디오 데이터로 생성하여 이 오디오 데이터를 현재 출력중인 편집용 페이지와 매핑하여 저장부(250)에 저장한다. 아울러, 그림책 편집부(260)는 음성변조 아이콘의 녹음 상태 정보 및 변조된 음성신호와 음성변조 아이콘의 링크 정보를 현재 출력중인 편집용 페이지와 대응시켜 저장부(250)에 추가적으로 저장한다.
한편, 그림책 편집부(260)는 캐릭터의 특성에 따라 사용자의 음성신호를 변조하는 음성변조 모듈(261) 및 효과음을 재생하는 효과음 재생 모듈(262)을 포함한다.
음성변조 모듈(261)은 사용자에 의해 클릭된 음성변조 아이콘이 어느 캐릭터에 해당하는지를 식별하고, 이 식별된 캐릭터의 음성패턴으로 수신되고 있는 사용자 음성신호를 변조하여 녹음한 후, 상기 변조된 음성신호와 클릭된 음성변조 아이콘을 링크시킨다. 이때, 음성변조 모듈(261)은 상기 식별된 캐릭터에 대응하는 변조패턴정보를 저장부(250)에서 확인하고, 이 변조패턴정보를 토대로 사용자의 음성신호를 변조한다. 아울러, 음성변조 모듈(261)은 상기 음성변조 아이콘의 클릭 상태가 해제되면, 이 아이콘을 미녹음 상태에서 녹음 상태로 변경시킨다.
효과음 재생 모듈(262)은 사용자의 음성신호가 수신되면, 상기 음성신호에 포함된 단어들을 음성 인식하고, 상기 음성 인식된 단어와 저장부(250)의 이벤트 단어정보를 비교하여, 효과음 이벤트가 발생하였는지 여부를 확인한다. 효과음 재생 모듈(262)은 효과음 이벤트가 발생한 경우, 해당 효과음 이벤트에 매핑되는 효과음을 저장부(250)에서 추출하여 재생한다. 이 경우, 그림책 편집부(260)는 상기 재생되는 효과음, 사용자의 음성신호 및 배경음악을 믹싱하여 녹음한다.
그림책 제공부(270)는 멀티미디어 전자 그림책을 구성하는 멀티미디어 페이지를 저장부(250)에서 추출하여 표시부(240)에 디스플레이하고, 상기 멀티미디어 페이지와 동기화된 오디오 데이터를 저장부(230)에서 추출하여 스피커(230)에 출력하는 기능을 수행한다. 특히, 그림책 제공부(270)는 복수의 아이콘이 배치된 멀티미디어 페이지를 표시부(240)에 출력하고, 클릭된 아이콘에 따라 변조된 음성신호 또는 해당 멀티미디어 페이지와 동기화된 오디오 데이터를 저장부(250)에서 추출하여 스피커(230)로 출력한다. 또한, 그림책 제공부(270)는 통신부(220)를 통해 콘텐츠 서버(100)로부터 멀티미디어 전자 그림책을 다운로드하여 저장부(250)에 저장할 수 있다.
도 3은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치에서 오리지널 전자 그림책을 편집하는 방법을 설명하는 순서도이다.
도 3을 참조하면, 전자 그림책 편집 장치(200)의 입력부(210)는 특정 오리지널 전자 그림책에 대한 편집 조작신호를 사용자로부터 입력받아, 그림책 편집부(260)로 전달한다(S301). 그러면, 그림책 편집부(260)는 사용자가 선택한 오리지널 전자 그림책을 저장부(250)에서 추출하고, 이 오리지널 전자 그림책을 구성하는 첫 번째 편집용 페이지를 표시부(230)에 디스플레이한다(S303). 이때, 그림책 편집부(260)는 사용자가 이전에 상기 오리지널 전자 그림책의 편집을 수행한 경우, 가장 마지막으로 편집된 편집용 페이지를 표시부(230)에 디스플레이할 수 있다. 상기 오리지널 전자 그림책을 구성하는 각 편집용 페이지에는 캐릭터의 특성에 따라 구분된 음성변조 아이콘이 캐릭터별 대화문장에 배치된다.
도 4는 본 발명의 일 실시예에 따른, 오리지널 전자 그림책을 구성하는 편집용 페이지를 나타내는 도면으로서, 도 4를 참조하면 편집용 페이지에는 캐릭터의 특성에 근거하여, 음성변조 아이콘(410, 420)이 대화문장에 배치된다. 도 4에서는 곰이 말하는 대화문장에는 곰 음성변조 아이콘(410)이 배치되고, 사자가 말하는 대화문장에는 사자 음성변조 아이콘(420)이 배치된다. 즉, 각 캐릭터의 대사의 시작 부분에 해당 캐릭터의 음성변조 아이콘이 배치된다. 또한 캐릭터가 동물이 아닌 사람이거나 다른 캐릭터(예컨대, 로봇)인 경우, 그 캐릭터의 특성에 해당하는 음성변조 아이콘이 해당 캐릭터의 대사에 배치된다.
이렇게 음성변조 아이콘이 배치된 편집용 페이지가 표시된 상태에서, 그림책 편집부(260)는 배경음악 목록을 표시부(240)에 출력한다. 이어서, 상기 배경음악 목록에서 특정 배경음악의 선택정보가 사용자로부터 수신되면, 그림책 편집부(260)는 상기 선택된 배경음악을 저장부(250)에서 추출하여 재생한다(S305). 그리고 그림책 편집부(260)는 입력부(210)를 통해 사용자의 음성신호가 입력되면, 이 사용자의 음성신호와 상기 재생하는 배경음악을 믹싱하여 녹음한다(S307).
이때, 효과음 재생 모듈(262)은 입력부(210)를 통해 사용자의 음성신호가 입력되면, 상기 음성신호에 포함된 단어들을 음성 인식하고, 상기 음성 인식된 단어와 저장부(250)의 이벤트 발생단어를 비교하여, 효과음 이벤트가 발생하였는지 여부를 확인한다(S309). 그리고 효과음 재생 모듈(262)은 상기 효과음 이벤트가 발생한 경우, 해당 효과음 이벤트에 해당되는 효과음을 저장부(250)에서 추출하여 재생한다. 이에 따라, 그림책 편집부(260)는 상기 효과음, 사용자의 음성신호 및 배경음악을 실시간으로 믹싱하여 녹음한다(S311). 예컨대, 효과음 재생 모듈(262)은 사용자의 음성신호를 인식한 결과, "으르렁", "짹짹', "꽝" 등과 같은 효과음 이벤트 음성단어가 인식된 경우, 상기 단어와 대응되는 효과음을 저장부(250)에서 추출하여 재생하고, 그림책 편집부(260)는 상기 효과음과 사용자의 음성신호 및 배경음악을 함께 믹싱한다.
다음으로, 그림책 편집부(260)는 음성변조 아이콘이 클릭된 상태인지 여부를 확인한다(S313). 그림책 편집부(260)는 음성변조 아이콘이 클릭된 상태에서 사용자의 음성신호가 수신되면, 수신된 사용자의 음성신호를 음성변조 모듈(261)로 전달하여 음성 변조를 지시한다.
그러면, 음성변조 모듈(261)은 클릭된 음성변조 아이콘이 어느 캐릭터에 해당하는지를 식별하고, 이 식별된 캐릭터의 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음한 후, 상기 변조된 음성신호와 클릭된 음성변조 아이콘을 링크시킨다(S315, S317). 이때, 음성변조 모듈(261)은 상기 식별된 캐릭터에 대응하는 변조패턴정보를 저장부(250)에서 확인하고, 이 변조패턴정보를 토대로 수신되고 있는 사용자의 음성신호를 변조한다.
예를 들어, 음성변조 모듈(261)은 음성변조 아이콘 중에 곰 음성변조 아이콘이 클릭된 상태인 경우, 곰 변조패턴정보를 저장부(250)에서 확인한 후, 이 곰 변조패턴정보에 기록된 음성톤, 음성 높낮이, 합성 음성 주파수 등의 세부 데이터를 참조하여, 사용자의 음성신호를 변조하고 상기 클릭된 음성변조 아이콘과 상기 변조된 사용자의 음성신호를 링크시킨다. 또한, 음성변조 모듈(261)은 음성변조 아이콘과 링크시킨 변조된 사용자의 음성신호를 저장부(250)에 별도로 저장한다.
다음으로, 음성변조 모듈(261)은 상기 음성변조 아이콘의 클릭 상태가 해제되면, 상기 음성변조 아이콘을 미녹음 상태에서 녹음 상태로 변경시킨다. 즉, 음성변조 모듈(261)은 사용자의 음성신호에 대한 변조가 완료된 경우, 상기 음성변조 아이콘을 미녹음 상태에서 녹음 상태로 변경시킨다.
도 5는 본 발명의 일 실시예에 따른, 편집 진행중인 오리지널 전자 그림책의 편집용 페이지를 나타내는 도면으로서, 도 5를 참조하면 그림책 편집부(260)는 음성변조 아이콘의 클릭 상태가 해제된 경우, 이 음성변조 아이콘을 미녹음 상태에서 녹음상태로 변경한다. 예를 들어, 그림책 편집부(260)는 곰 음성변조 아이콘(410)의 클릭 상태가 해제된 경우(즉, 사용자의 음성신호를 곰 음성패턴으로 변조 완료한 경우), 상기 곰 음성변조 아이콘(410) 오른쪽에 재생버튼(510)을 표시함으로써 상기 곰 음성변조 아이콘(410)을 미녹음 상태에서 녹음상태로 변경할 수 있다. 또는, 그림책 편집부(260)는 음성변조 아이콘의 형태 또는 색상 등을 변경하여, 상기 음성변조 아이콘을 미녹음 상태에서 녹음 상태로 표시 변경할 수도 있다. 예컨대, 그림책 편집부(260)는 상기 곰 음성변조 아이콘(410)의 색상을 미녹음 상태인 투명색(또는 원형 상태)에서 녹음 상태인 노란색(또는 삼각형 형태)으로 변경할 수 있다.
다음으로, 그림책 편집부(260)는 입력부(210)를 통해 편집용 페이지에 대한 편집완료 조작 신호가 수신되었는지 여부를 확인하여, 수신되지 않으면 S307 단계 이후를 재진행한다(S319). 즉, 그림책 편집부(260)는 페이지 편집완료 조작신호가 사용자로부터 수신되지 않으면, 해당 편집용 페이지에 대한 녹음 신호를 사용자로부터 계속적으로 입력받고, 음성변조 아이콘의 클릭 상태 여부에 따라 사용자의 음성신호를 변조하여 녹음하거나, 효과음 출력 이벤트 발생 여부에 따라 사용자의 음성신호와 효과음을 믹싱하여 녹음하거나, 사용자의 음성신호의 원본 상태를 유지하여 녹음한다.
반면에, 그림책 편집부(260)는 입력부(210)를 통해 사용자로부터 해당 페이지의 편집완료 조작 신호가 수신되면, 믹싱된 음성신호(즉, 사용자의 음성신호 또는 변조된 음성신호, 효과음, 배경음악 등이 믹싱된 음성신호)를 하나의 오디오 데이터로서 생성한다. 이어서, 그림책 편집부(260)는 오디오 데이터와 표시부(240)에 출력중인 편집용 페이지와 동기화시켜 멀티미디어 페이지로 생성하고, 이 멀티미디어 페이지를 저장부(250)에 저장한다(S321). 여기서, 동기화라 함은 특정한 멀티미디어 페이지가 호출되면, 해당 멀티미디어 페이지와 매핑되어 있는 오디오 데이터가 재생되도록 연동되어 있음을 나타낸다. 즉, 편집 완료된 편집용 페이지의 오디오 데이터는 페이지 단위로 구분되어 저장된다.
또한, 그림책 편집부(260)는 음성변조 아이콘의 녹음 상태 정보 및 변조된 음성신호와 음성변조 아이콘의 링크 상태를 상기 생성한 멀티미디어 페이지와 매핑하여 저장부(250)에 추가적으로 저장한다. 다음으로, 그림책 편집부(260)는 편집 완료된 편집용 페이지의 다음 편집용 페이지를 표시부(230)에 출력함으로써, 사용자에 의해 다른 편집용 페이지의 편집이 수행되도록 유도한다.
한편, 모든 편집용 페이지에 대한 편집이 완료되면, 그림책 편집부(260)는 생성한 복수의 멀티미디어 페이지를 취합하여 하나의 멀티미디어 전자 그림책으로 생성하고, 이렇게 생성한 멀티미디어 전자 그림책을 저장부(250)에 저장한다.
도 3의 방법을 통해서, 전자 그림책 편집 장치(200)는 사용자에게 페이지 단위로 편집할 수 있는 인터페이스를 제공하고, 이 인터페이스를 통해 입력된 편집정보를 사용자로부터 수신하여 페이지 단위로 저장한다. 또한, 전자 그림책 편집 장치(200)의 그림책 편집부(260)는 편집 완료된 오리지널 전자 그림책(즉, 멀티미디어 전자 그림책)을 통신부(220)를 이용하여 콘텐츠 서버(100)로 업로드하여 타인에게 공유시킬 수도 있다.
도 6은 본 발명의 일 실시예에 따른, 전자 그림책 편집 장치에서 멀티미디어 전자 그림책을 재생하는 방법을 설명하는 순서도이다.
도 6을 참조하면, 전자 그림책 편집 장치(200)의 입력부(210)는 사용자로부터 특정 멀티미디어 전자 그림책의 열람 요청 신호를 입력받아 그림책 제공부(270)로 전달한다(S601). 그러면, 그림책 제공부(270)는 상기 사용자가 선택한 멀티미디어 전자 그림책을 저장부(250)에서 추출하고, 상기 추출한 전자 그림책을 구성하는 첫 번째 멀티미디어 페이지를 표시부(230)에 디스플레이한다(S603, S605). 이때, 그림책 제공부(270)는 상기 사용자가 입력한 책갈피 정보가 멀티미디어 전자 그림책 페이지에 기록되어 있는지 여부를 확인하고, 기록된 경우 첫 번째 멀티미디어 페이지가 아닌 상기 책갈피 정보가 기록된 멀티미디어 페이지를 표시부(230)에 디스플레이한다. 상기 출력된 멀티미디어 페이지에는 음성변조 아이콘이 캐릭터의 대사에 배치되어 있으며, 또한 다수의 아이콘이 상기 멀티미디어 페이지에 배치되어 있다.
도 7은 본 발명의 일 실시예에 따른 사용자에 의해 열람되고 있는 멀티미디어 페이지를 나타내는 도면으로서, 도 7에 도시된 바와 같이 곰 캐릭터의 대사에는 곰 음성변조 아이콘(410)이 배치되고 사자 캐릭터의 대사에는 사자 음성변조 아이콘(420)이 배치된다. 각 음성변조 아이콘(410, 420)에는 음성변조 녹음 상태 정보가 추가적으로 표시될 수 있다. 예를 들어, 도 7에서 곰 음성변조 아이콘(410) 옆에는 음성변조 녹음 상태 정보인 재생 아이콘(510)이 배치된다. 아울러, 해당 멀티미디어 페이지와 동기화된 오디오 데이터를 출력시키는 ALL 아이콘(710)이 상기 멀티미디어 페이지에 배치되고, 다음 페이지 또는 이전 페이지를 열람할 때 이용되는 아이콘(720, 730)이 하부에 배치된다. 게다가, 멀티미디어 전자 그림책의 열람을 종료할 때 이용되는 종료 아이콘(740)이 멀티미디어 페이지의 하부에 배치된다.
이렇게 멀티미디어 페이지가 출력된 상태에서, 입력부(210)는 사용자로부터 특정 아이콘 클릭 정보를 수신하여, 그림책 제공부(270)로 전달한다(S607). 그러면, 그림책 제공부(270)는 상기 클릭된 아이콘을 확인하여, 동기화된 오디오 데이터를 출력시키는 ALL 아이콘(710)이 클릭된 경우 현재 표시중인 멀티미디어 페이지와 매핑하여 저장한 오디오 데이터를 저장부(250)에서 추출하여 스피커(230)로 출력한다(S609, S611). 즉, 그림책 제공부(270)는 상기 멀티미디어 페이지와 동기화시킨 오디오 데이터를 저장부(250)에서 추출하여 재생한다. 이때, 그림책 제공부(270)는 전체 오디오 데이터 중에서 음성변조된 오디오 신호가 출력되는지 여부를 계속적으로 확인하여 출력되는 경우, 상기 음성변조된 부분과 링크된 음성변조 아이콘(410)을 깜빡거리게 하여, 음성변조된 문장이 재생되고 있음을 사용자에게 인지시킨다.
또한, 그림책 제공부(270)는 상기 클릭된 아이콘이 음성변조 아이콘인 경우, 해당 아이콘과 링크시킨 변조된 음성신호를 저장부(250)에서 추출하여 스피커(230)로 출력한다.
도 8은 본 발명의 일 실시예에 따른, 멀티미디어 페이지와 동기화된 오디오 데이터를 나타내는 도면이다.
도 8을 참조하여 예를 들어 설명하면, 그림책 제공부(270)는 ALL 아이콘이 클릭된 경우, 810, 820, 830, 840의 오디오를 순차적으로 스피커(230)로 출력한다. 즉, 그림책 제공부(270)는 T1 시간동안에 믹싱된 배경음악과 곰 변조음을 재생하고, T2 시간동안에 배경음악과 사용자 원본 음성이 믹싱된 음성신호를 재생하고, T3 시간동안에 효과음, 배경음악 및 사용자 원본 음성이 믹싱된 음성신호를 재생한 후, T4 시간동안에 배경음악과 사용자 원본 음성이 믹싱된 음성신호를 재생한다. 이때, 그림책 제공부(270)는 810 부분의 오디오가 재생되는 동안에, 곰 음성변조 아이콘(410)을 깜빡거리게 제어함으로써, 사용자에게 변조된 곰 대사가 재생되고 있음을 인지시킨다.
또한, 그림책 제공부(270)는 도 7의 멀티미디어 페이지에서 곰 음성변조 아이콘(410)의 옆에 배치된 재생 아이콘(510)이 클릭된 경우, 상기 멀티미디어 페이지와 동기화된 오디오 데이터 전체를 재생시키지 않고 곰 음성변조 아이콘(410)과 링크시킨 곰 변조음을 저장부(250)에서 추출하여 스피커(230)를 통해 재생시킨다.
한편, 그림책 제공부(270)는 클릭된 아이콘이 이전 페이지 아이콘(720) 또는 다음 페이지 아이콘(730)인 경우, 현재 출력중인 멀티미디어 페이지의 표시부(240)에서 제거하고, 이전 멀티미디어 페이지 또는 다음 멀티미디어 페이지를 저장부(250)에서 추출하여 표시부(240)로 출력한다. 즉, 그림책 제공부(270)는 클릭된 아이콘이 이전 페이지 아이콘(720) 또는 다음 페이지 아이콘(730)인 경우, S603 단계 이후를 재진행한다. 그리고 그림책 제공부(270)는 현재 출력중인 멀티미디어 페이지에서의 클릭된 아이콘(510, 710)에 따라 변조된 음성만을 재생시키거나 해당 멀티미디어 페이지와 동기화시킨 오디오 데이터 전체를 재생시킨다.
또한, 그림책 제공부(270)는 클릭된 아이콘이 종료 아이콘(740)인 경우, 현재 출력중인 멀티미디어 페이지를 표시부(240)에서 제거하고, 멀티미디어 전자 그림책 열람 프로세스를 종료한다.
상술한 바와 같이, 본 발명에 따른 전자 그림책 편집 장치(200)는 사용자가 페이지별로 전자 그림책을 녹음 편집할 수 있는 인터페이스를 제공한다. 또한, 전자 그림책 편집 장치(200)는 부모, 형제와 같은 친근한 목소리를 가지는 사용자가 전자 그림책을 녹음 편집하여 어린이들에게 열람시키도록 유도함으로써, 어린이들의 정서적 안정과 친밀감을 높인다.
아울러, 본 발명에 따른 전자 그림책 편집 장치(200)는 캐릭터 특성에 따른 음성변조 아이콘을 해당 캐릭터의 대화문장에 배치시킴으로써, 사용자의 전자 그림책 편집을 용이하게 한다. 또한, 전자 그림책 편집 장치(200)는 사용자의 음성을 인식하여, 상기 인식된 음성에 따라 재생된 효과음과 녹음된 사용자의 음성을 믹싱 처리함으로써, 전자 그림책의 생동감과 사실성을 더욱 향상시킨다.
본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 안 된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.
도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로, 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 안 된다. 특정 환경에서 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. 상술한 프로그램 구성요소 및 시스템은 일반적으로 단일 소프트웨어 제품 또는 멀티플 소프트웨어 제품에 패키지로 구현될 수 있다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(시디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
본 발명은 사용자가 편집할 수 있는 전자 그림책 편집 장치를 구현하여, 어린이들의 독서 흥미를 유발하고 정서를 함양시킬 뿐만 아니라 전자도서산업의 발전에도 기여할 것으로 기대된다.

Claims (15)

  1. 복수의 편집용 페이지로 구성되는 오리지널 전자 그림책을 저장하는 저장부; 및
    편집요청된 오리지널 전자 그림책의 편집용 페이지를 상기 저장부에서 추출하여 디스플레이하고, 사용자로부터 입력받은 음성신호를 녹음하여 상기 녹음된 음성신호와 현재 디스플레이된 편집용 페이지를 동기화시켜 멀티미디어 페이지를 생성하고, 상기 생성된 멀티미디어 페이지를 상기 저장부에 저장하는 그림책 편집부;를 포함하는 전자 그림책 편집 장치.
  2. 제 1 항에 있어서,
    상기 오리지널 전자 그림책의 페이지에는 캐릭터의 특성에 따른 음성변조 아이콘이 캐릭터별 대화문장에 각각 배치되고,
    음성변조 아이콘이 클릭된 상태에서 상기 사용자의 음성신호가 수신된 경우 상기 클릭된 아이콘과 대응되는 캐릭터를 식별하여 이 식별된 캐릭터에 해당하는 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음하는 음성 변조 모듈;을 더 포함하는 것을 특징으로 하는 전자 그림책 편집 장치.
  3. 제 2 항에 있어서,
    상기 저장부는 각 효과음과 효과음 이벤트 단어정보를 매핑하여 저장하고,
    상기 수신된 사용자의 음성신호에 포함된 단어들을 음성 인식하고, 상기 음성 인식한 단어와 상기 저장부의 효과음 이벤트 단어정보를 비교하여 효과음 이벤트가 발생하였는지 여부를 확인하여 효과음 이벤트가 발생한 경우, 상기 음성 인식한 단어에 해당하는 효과음을 저장부에서 추출하여 재생하는 효과음 재생 모듈;을 더 포함하고,
    상기 그림책 편집부는, 상기 재생된 효과음과 상기 사용자의 음성신호를 믹싱하여 녹음하는 것을 특징으로 하는 전자 그림책 편집 장치.
  4. 전자 그림책 편집 장치에서 사용자로부터 입력받은 음성신호를 이용하여 전자 그림책을 페이지 단위로 편집하는 방법으로서,
    캐릭터의 특성에 따라 캐릭터별 대화문장에 음성변조 아이콘이 각각 배치된 전자 그림책의 편집용 페이지를 화면에 출력하는 페이지 출력 단계;
    사용자의 음성신호를 수신하여 녹음하는 녹음 단계;
    상기 편집용 페이지의 대화문장에 배치된 음성변조 아이콘이 클릭되었는지 여부를 확인하는 아이콘 클릭 확인 단계;
    상기 확인 결과, 음성변조 아이콘이 클릭된 상태에서 상기 사용자의 음성신호가 수신된 경우, 상기 클릭된 음성변조 아이콘과 대응되는 캐릭터를 식별하는 캐릭터 식별 단계;
    상기 식별된 캐릭터에 해당하는 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음하는 음성신호 변조 단계; 및
    상기 녹음된 사용자의 음성신호를 상기 편집용 페이지를 매핑하여 멀티미디어 페이지를 생성하는 멀티미디어 페이지 생성 단계;를 포함하는 전자 그림책 편집 방법.
  5. 제 4 항에 있어서,
    상기 수신된 사용자의 음성신호에 포함된 단어를 음성 인식하는 단계;
    상기 음성 인식한 단어와 사전에 저장된 효과음 이벤트 단어정보를 비교하여, 효과음 이벤트가 발생하였는지 여부를 판단하는 단계;
    상기 판단 결과, 효과음 이벤트가 발생한 경우, 상기 음성 인식한 단어에 해당하는 효과음을 추출하여 재생하는 단계; 및
    상기 재생된 효과음과 사용자의 음성신호와 믹싱하여 녹음하는 단계;를 더 포함하는 것을 특징으로 하는 전자 그림책 편집 방법.
  6. 제 4 항 또는 제 5 항에 있어서,
    상기 음성신호 변조 단계는,
    상기 클릭된 음성변조 아이콘을 미녹음 상태에서 녹음 상태로 변경하는 단계; 및
    상기 클릭된 음성변조 아이콘과 상기 변조된 사용자의 음성신호를 링크시키는 단계;를 포함하는 것을 특징으로 하는 전자 그림책 편집 방법.
  7. 제 6 항에 있어서,
    상기 멀티미디어 페이지 생성 단계 이후에,
    사용자로부터 전자 그림책 열람 요청 신호를 수신하여, 녹음 상태 또는 미녹음 상태가 표시된 음성변조 아이콘을 포함하는 멀티미디어 페이지를 화면에 표시하는 단계; 및
    상기 멀티미디어 페이지에서 녹음 상태의 음성변조 아이콘이 클릭되면, 상기 음성변조 아이콘과 링크시킨 변조된 음성신호를 추출하여 재생하는 단계;를 더 포함하는 것을 특징으로 하는 전자 그림책 편집 방법.
  8. 제 4 항 또는 제 5 항에 있어서,
    사용자로부터 배경음악을 선택받아 재생하는 단계;를 더 포함하고,
    상기 녹음 단계는,
    상기 재생된 배경음악과 사용자의 음성신호를 믹싱하여 녹음하는 것을 특징으로 하는 전자 그림책 편집 방법.
  9. 제 4 항 또는 제 5 항에 있어서,
    상기 음성신호 변조 단계는,
    상기 식별된 캐릭터에 대응하는 변조패턴정보를 추출하고 이 변조패턴정보를 참조하여, 상기 사용자의 음성신호를 변조하는 것을 특징으로 하는 전자 그림책 편집 방법.
  10. 캐릭터의 특성에 따라 캐릭터별 대화문장에 음성변조 아이콘이 각각 배치된 전자 그림책의 편집용 페이지를 저장하는 저장부;
    편집요청된 전자 그림책의 편집용 페이지를 상기 저장부에서 추출하여 디스플레이하고 사용자의 음성신호를 수신하여 녹음하는 그림책 편집부; 및
    음성변조 아이콘이 클릭된 상태에서 상기 사용자의 음성신호가 수신된 경우 상기 클릭된 아이콘과 대응되는 캐릭터를 식별하여 이 식별된 캐릭터에 해당하는 음성패턴으로 상기 수신된 사용자의 음성신호를 변조하여 녹음하는 음성 변조 모듈;을 포함하고,
    상기 그림책 편집부는, 편집완료 조작신호를 상기 사용자로부터 수신한 경우 상기 녹음된 사용자의 음성신호와 상기 편집용 페이지의 매핑하여 멀티미디어 페이지를 생성하고, 상기 생성된 멀티미디어 페이지를 상기 저장부에 저장하는 것을 특징으로 하는 전자 그림책 편집 장치.
  11. 제 10 항에 있어서,
    상기 저장부는 각 효과음과 효과음 이벤트 단어정보를 매핑하여 저장하고,
    상기 수신된 사용자의 음성신호에 포함된 단어들을 음성 인식하여, 상기 음성 인식한 단어와 상기 저장부의 효과음 이벤트 단어정보를 비교하여 효과음 이벤트가 발생하였는지 여부를 확인하여 효과음 이벤트가 발생한 경우, 상기 음성 인식한 단어에 해당하는 효과음을 저장부에서 추출하여 재생하는 효과음 재생 모듈;을 더 포함하고,
    상기 그림책 편집부는, 상기 재생된 효과음과 상기 사용자의 음성신호를 믹싱하여 녹음하는 것을 특징으로 하는 전자 그림책 편집 장치.
  12. 제 10 항 또는 제 11 항에 있어서,
    상기 그림책 편집부는,
    상기 클릭된 음성변조 아이콘을 미녹음 상태에서 녹음 상태로 변경하고, 상기 클릭된 음성변조 아이콘과 상기 변조된 사용자의 음성신호를 링크시키는 것을 특징으로 하는 전자 그림책 편집 장치.
  13. 제 12 항에 있어서,
    사용자로부터 전자 그림책 열람 요청 신호를 수신하여, 녹음 상태 또는 미녹음 상태가 표시된 음성변조 아이콘을 포함하는 멀티미디어 페이지를 상기 저장부에서 추출하여 디스플레이하고, 상기 멀티미디어 페이지에서 녹음 상태의 음성변조 아이콘이 클릭되면 이 음성변조 아이콘과 링크시킨 변조된 음성신호를 상기 저장부에서 추출하여 재생하는 그림책 제공부;를 더 포함하는 것을 특징으로 하는 전자 그림책 편집 장치.
  14. 제 10 항 또는 제 11 항에 있어서,
    상기 그림책 편집부는,
    사용자로부터 배경음악을 선택받아 재생하고, 상기 재생된 배경음악과 사용자의 음성신호를 믹싱하여 녹음하는 것을 특징으로 하는 전자 그림책 편집 장치.
  15. 제 10 항 또는 제 11 항에 있어서,
    상기 저장부는, 캐릭터별 변조패턴정보를 저장하고,
    상기 음성변조 모듈은, 상기 식별된 캐릭터에 대응하는 변조패턴정보를 상기 저장부에서 추출하고 이 변조패턴정보를 참조하여, 상기 사용자의 음성신호를 변조하는 것을 특징으로 하는 전자 그림책 편집 장치.
PCT/KR2011/000585 2011-01-27 2011-01-27 전자 그림책 편집 장치 및 방법 WO2012102424A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110008277A KR101124798B1 (ko) 2011-01-27 2011-01-27 전자 그림책 편집 장치 및 방법
KR10-2011-0008277 2011-01-27

Publications (1)

Publication Number Publication Date
WO2012102424A1 true WO2012102424A1 (ko) 2012-08-02

Family

ID=46142020

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/000585 WO2012102424A1 (ko) 2011-01-27 2011-01-27 전자 그림책 편집 장치 및 방법

Country Status (2)

Country Link
KR (1) KR101124798B1 (ko)
WO (1) WO2012102424A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110858221A (zh) * 2018-08-07 2020-03-03 北京京东尚科信息技术有限公司 一种制作有声绘本的方法和装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101757219B1 (ko) * 2016-05-02 2017-07-12 주식회사 에프피온 양방향 전자동화 공유 시스템 및 방법
KR20220086335A (ko) 2020-12-16 2022-06-23 주식회사 작가의탄생 딥러닝 기반 그림책 디자인 서비스 장치 및 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050114142A (ko) * 2004-05-31 2005-12-05 고성민 전자 동화책 편집 방법 및 그 장치
JP2006073026A (ja) * 1999-10-15 2006-03-16 Hitachi Kokusai Electric Inc 動画像編集方法
JP2006101270A (ja) * 2004-09-30 2006-04-13 Sony Corp 動画像データの編集装置および動画像データの編集方法
KR20090003445A (ko) * 2007-06-11 2009-01-12 주식회사 디지투 가상현실 기법을 이용한 온라인 아동 학습 서비스 장치 및그 서비스 방법
KR20090089504A (ko) * 2008-02-19 2009-08-24 포스데이타 주식회사 객체 지향형 컨텐츠를 이용한 다국어 학습 서비스 제공방법 및 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006073026A (ja) * 1999-10-15 2006-03-16 Hitachi Kokusai Electric Inc 動画像編集方法
KR20050114142A (ko) * 2004-05-31 2005-12-05 고성민 전자 동화책 편집 방법 및 그 장치
JP2006101270A (ja) * 2004-09-30 2006-04-13 Sony Corp 動画像データの編集装置および動画像データの編集方法
KR20090003445A (ko) * 2007-06-11 2009-01-12 주식회사 디지투 가상현실 기법을 이용한 온라인 아동 학습 서비스 장치 및그 서비스 방법
KR20090089504A (ko) * 2008-02-19 2009-08-24 포스데이타 주식회사 객체 지향형 컨텐츠를 이용한 다국어 학습 서비스 제공방법 및 시스템

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110858221A (zh) * 2018-08-07 2020-03-03 北京京东尚科信息技术有限公司 一种制作有声绘本的方法和装置

Also Published As

Publication number Publication date
KR101124798B1 (ko) 2012-03-23

Similar Documents

Publication Publication Date Title
WO2018227761A1 (zh) 一种教学录播数据修正装置
US20110153330A1 (en) System and method for rendering text synchronized audio
WO2012086356A1 (ja) ファイルフォーマット、サーバ、電子コミックのビューワ装置および電子コミック生成装置
US9601029B2 (en) Method of presenting a piece of music to a user of an electronic device
WO2012141433A2 (ko) 피디에프 문서 기반의 이북용 멀티미디어 재생 시스템 및 그 재생 방법, 그리고 이를 구현한 피씨 또는 모바일 장치용 어플리케이션
WO2017119782A1 (ko) 음악의 분절별 동영상 재생 방법 및 장치
KR100856786B1 (ko) 3d 버추얼 에이전트를 사용한 멀티미디어 나레이션 저작시스템 및 그 제공 방법
WO2019019406A1 (zh) 一种用于更新教学录播数据的装置
WO2014181969A1 (ko) 멀티 트랙 미디어 파일이 기록된 기록 매체, 멀티 트랙 미디어 파일 편집 방법, 및 멀티 트랙 미디어 파일 편집 장치
WO2013154267A1 (ko) 강의 교재와 동기되는 데이터를 이용하는 강의 컨텐츠 제공 시스템 및 강의 컨텐츠 제공 방법
WO2012102424A1 (ko) 전자 그림책 편집 장치 및 방법
JP2014085998A (ja) 電子ノート作成支援装置および電子ノート作成支援装置用プログラム
US20220391440A1 (en) Content providing system, content providing method, and storage medium
KR100395883B1 (ko) 실시간 강의 기록 장치 및 그에 따른 파일 기록방법
KR20060088175A (ko) 멀티 포맷을 갖는 전자책 파일 생성 방법 및 시스템
KR20090000745A (ko) 인터넷을 이용한 사용자 녹음방식의 소리책 제작 시스템 및방법
JP2008523759A (ja) 映像メッセージを合成する方法及びシステム
JP2014007561A (ja) コンテンツ閲覧装置およびコンテンツ提供システム
JP2005326811A (ja) 音声合成装置および音声合成方法
WO2013151286A1 (ko) 전자노트 기능을 갖는 시스템 및 그 운용방법
US11968432B2 (en) Information processing system, information processing method, and storage medium
JP2008032788A (ja) 語学教材データ作成用プログラム
JP2001283516A (ja) 再生可能なデータをデータ担体上に書き込む方法
JP4250983B2 (ja) 連続データへのユーザデータ関連付け装置
WO2023149678A1 (ko) 자기주도 암기학습 장치 및 그 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11857082

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205N DATED 04/10/2013)

122 Ep: pct application non-entry in european phase

Ref document number: 11857082

Country of ref document: EP

Kind code of ref document: A1