KR20070095028A

KR20070095028A - The voice service for mobile comic contents

Info

Publication number: KR20070095028A
Application number: KR1020060025171A
Authority: KR
Inventors: 정기철; 한은정; 전성국
Original assignee: 정기철; 한은정; 전성국
Priority date: 2006-03-20
Filing date: 2006-03-20
Publication date: 2007-09-28

Abstract

A voice service system for mobile cartoons is provided to offer a voice service when providing mobile cartoon contents by recognizing letter data which exist on cartoon images. Binary data, scanned from a plurality of image data files(1) or received by a camera installed in a portable terminal, are divided into images and letters separately. The letters in a speech bubble are extracted by the connected component of the letters in order to extract the letters in the area unit of the letters. Information as to corresponding characters is analyzed by the standardization of the extracted letters. Voice data according to the analyzed information are generated.

Description

Mobile comic voice service system {The voice service for mobile comic contents}

도 1은 본 발명의 개략도.1 is a schematic diagram of the present invention.

도 2는 본 발명의 시스템 구성도2 is a system configuration diagram of the present invention

본 발명은 기존 모바일 만화 콘텐츠를 이용한 음성서비스에 관한 것으로, 특히 모바일용 만화 이미지에 존재하는 문자의 인식을 통해 모바일 단말기에 만화영상과 음성서비스를 제공할 수 있는 시스템에 관한 것이다. 현대 사회의 컴퓨터 응용은 인간이 사용하기 편리하고 효율적인 방향으로 이루어져가고 있는 실정이다. 또한 기존에 Personal Computer에서 수행되던 작업들이 모바일 단말기기의 하드웨어적인 발전에 따라서 모바일 기기에서도 수행가능해지고 있다. 이와 같은 모바일 기기의 발전은 사용자가 PC에서만 즐길 수 있었던 여러 가지 콘텐츠들의 모바일 환경으로의 컨버팅을 가능하게 하고 있으며 언제 어디서나 즐길 수 있다는 모바일 환경의 특성 역시 사용자로 하여금 다양한 모바일 콘텐츠의 제공을 요구하도록 촉진하고 있다. The present invention relates to a voice service using an existing mobile cartoon content, and more particularly, to a system capable of providing a cartoon image and a voice service to a mobile terminal through the recognition of a character present in the mobile cartoon image. Computer applications in modern society are being made in a direction that is convenient and efficient for human use. In addition, tasks that were previously performed in a personal computer have been able to be performed in a mobile device according to the hardware development of the mobile terminal device. This development of mobile devices enables users to convert various contents that users could only enjoy on PC to mobile environment, and the characteristics of mobile environment that can be enjoyed anytime and anywhere also encourage users to provide various mobile contents. Doing.

현재, 모바일 단말기용 만화 콘텐츠는 대부분 전문적인 모바일 단말기용 콘텐츠 제공자(Mobile Contexts Provider)에 의해 서비스되고 있으며, 이들은 무선 통신 사업자에 따라 상이한 접속 형태로 모바일 만화 콘텐츠를 제공하고 있다. Currently, cartoon content for mobile terminals is mostly serviced by professional mobile contextual content providers (Mobile Contexts Provider), and they provide mobile cartoon content in different types of connection according to wireless carriers.

가장 일반적인 형태는 기존 오프라인 콘텐츠를 스캔 하여, 다시 모바일 단말기용 콘텐츠에 맞게 재구성한다. 기존 오프라인 만화 콘텐츠를 모바일 단말기용 콘텐츠로 전환하여 보여 주기 위해서 스캔 받은 오프라인 만화의 임의 영역을 지정해 휴대 단말기 화면 사이즈에 맞게 편집/수정하여 모바일 단말기상에서 제공해주는 방법으로 만화 콘켄츠를 제공한다. 그러나 이와 같은 방법으로 오프라인 만화 콘텐츠나 혹은 온라인 만화 콘텐츠를 휴대용 단말기로 제공할 경우 작은 화면을 가진 모바일 기기의 특성 때문에 만화 콘텐츠의 효율적인 의미전달에 제약이 따른다. The most common form scans existing offline content and reconstructs it for content for mobile devices. In order to convert existing offline cartoon content into mobile terminal content and to show it, the cartoon content is provided by a method of designing and modifying an arbitrary area of the scanned offline cartoon content to be edited and modified according to the screen size of the mobile terminal. However, in the case of providing offline cartoon content or online cartoon content to a portable terminal in this manner, there is a restriction on efficient meaning delivery of cartoon content due to the characteristics of a mobile device having a small screen.

상기와 같은 문제점을 감안하여 본 발명에서는 만화의 내용의 핵심이 되는 만화 이미지상의 문자를 인식하여 음성서비스를 제공하는 방법 및 시스템을 제공하고, 이 방법을 구현하기 위한 소프트웨어를 포함하고 있는 시스템을 제공한다. In view of the above problems, the present invention provides a method and system for providing a voice service by recognizing a character on a cartoon image, which is the core of a cartoon content, and provides a system including software for implementing the method. do.

이제 이러한 본 발명의 목적을 달성하기 위한 구성에 대하여 도 1을 참고로 하여 설명하도록 한다. Now, a configuration for achieving the object of the present invention will be described with reference to FIG.

기존 오프라인 만화 콘텐츠(1)의 만화 영상을 스캔받거나 휴대 단말기에 장착된 카메라를 통해 획득한 후 이진화한 다음, 이진화된 영상에서 문자를 추출, 인식(2)하여 얻어진 데이터를 통해 음성데이터를 생성(3)하고 서비스하여 가독성이 떨어지는 모바일 단말기의 단점을 해소하는 방법에 관한 것이다. After the cartoon image of the existing offline cartoon content (1) is scanned or acquired through a camera mounted on the mobile terminal, it is binarized, and then voice data is generated from the data obtained by extracting and recognizing a character from the binary image (2). 3) and to solve the shortcomings of a mobile terminal with poor readability by servicing.

기존의 모바일 만화 콘텐츠의 가장 큰 단점은 사용자가 만화 콘텐츠 이용 시 모바일기기의 작은 화면 때문에 만화의 내용을 효율적으로 파악하지 못한다는 점이었다. 이러한 문제점은 모바일 만화 콘텐츠가 충분히 시장성이 있는 분야임에도 불구하고 폭발적으로 인기를 끌지 못하게 하는 큰 걸림돌이었다. 본 과제에서는 이러한 문제점들을 기반 기술의 개발과 활용을 통해 해결할 수 있게 했다. The main disadvantage of the existing mobile cartoon content is that the user does not efficiently grasp the contents of the cartoon because of the small screen of the mobile device when using the cartoon content. This problem was a major stumbling block to the explosive popularity despite the fact that mobile comic content is sufficiently marketable. In this task, these problems can be solved through the development and utilization of the base technology.

개발과정에서 모바일 단말기에 장착된 카메라를 통하여 만화의 문서 영상을 입력 받은 후 입력영상에 존재하는 문자들을 자동으로 추출하고 추출된 문자를 바탕으로 연관된 음성데이터를 생성하도록 한다. 이미지상의 문자 추출은 추출될 문자가 다양한 폰트와 다양한 크기를 가질 수 있으므로 이들을 고려한 전처리 기술 및 문자 추출 기술을 포함한다. In the development process, after receiving the document image of the cartoon through the camera mounted on the mobile terminal, it automatically extracts the characters present in the input image and generates the associated voice data based on the extracted characters. Character extraction on an image includes a preprocessing technique and a character extraction technique in consideration of the characters to be extracted can have a variety of fonts and various sizes.

문자인식 또는 추출의 분야는 1920년대부터 연구가 진행되어 와서 전세계적으로 많은 연구가 이루어져 있고 또한 많은 응용분야가 개척되어 있는 상황이다. 문자는 크게 온라인 문자 와 오프라인 문자로 나눌 수 있는데 온라인 추출이라는 것은 문자가 쓰여지는 그 시점에서 문자를 인식하여 추출하는 것을 말한다. 그래서 오프라인 문자 추출에 비해 문자를 쓰게 되는 시간적인 정보와 좀더 자세한 공간정보를 가질 수 있다. 하지만 사용자의 입력 방법에 약간의 제약을 두어 입력하게 하는 등의 재제를 가 하기도 한다. 오프라인 문자인식이 대부분 문자인식을 말하는 것 같다. 오프라인 문자인식은 또 다시 필기체와 인쇄체 문자 인식으로 나뉘는데 필기체도 어떤 일정한 교육을 받은 사람이 규정대로 쓰게 되는 필기체를 인식하 는 것과 보통 사람이 쓴 필기체를 인식하는 것으로 나뉘어 질 수 있다. 그러나 기존 문자 보다 더 불 분명한 문자 체를 사용하는 만화를 추출한다. The field of character recognition or extraction has been studied since the 1920s, and many studies have been conducted around the world and many applications have been explored. Characters can be largely divided into online characters and offline characters. On-line extraction means recognizing and extracting characters at the time when they are written. So, compared to offline text extraction, it can have more temporal information and more detailed spatial information. However, some restrictions are put on the user's input method with some restrictions. Offline character recognition seems to speak most of character recognition. Offline character recognition is further divided into handwriting and printed character recognition, which can be divided into recognition of handwriting written by a certain educated person as prescribed, and recognition of handwriting written by an ordinary person. However, we extract a cartoon that uses a more obvious font than the existing text.

이제, 원활한 콘텐츠 공급을 위해 기존 오프라인 콘텐츠를 활용하여 모바일 단말기를 통해 음성 서비스가 포함된 만화 콘텐츠를 제공할수 있는 시스템을 부가하는 것으로 만화를 제공하는 제공자나 제공받는 사용자에게 보다 효과적인 콘텐츠를 제공한다. 제공자에게는 음성 데이터를 만들기 위한 수작업을 할 필요 없이 효과적인 콘텐츠를 제공할 수 있다. 사용자에게는 모바일 단말기의 작은 화면로 인해 발생할 수 있는 불편함을 음성서비스를 통해 극복하므로써 모바일 만화 콘텐츠를 효과적으로 제공받을 수 있다. Now, by providing a system that can provide comic content including a voice service through a mobile terminal by utilizing existing offline content to provide smooth content, a more effective content is provided to a provider or a user who provides a comic. Providers can provide effective content without the need for manual labor to create voice data. The user can effectively receive the mobile cartoon content by overcoming the inconvenience caused by the small screen of the mobile terminal through the voice service.

상기한 바와 같이 본 발명은 만화 이미지상에 존재하는 문자 데이터를 인식하여, 모바일 만화 컨텐츠 제공시 음성 서비스를 하는 방법 및 시스템에 관한 것이다. As described above, the present invention relates to a method and system for recognizing text data present on a cartoon image and providing a voice service when providing mobile cartoon content.

Claims

In the method of extracting characters,

A character extraction step of extracting a character in a speech bubble from the image in which the image data is stored;

Scan the plurality of image data files or divide the binarized image received by the camera mounted on the mobile terminal into each image and text, and extract the text in the speech bubble by using the connected component of the text to extract the text area unit. How to extract.

In the method for generating voice data.

Voice data generation step of generating the associated voice data by recognizing the extracted text:

Method to form the extracted character to find out the information of the character and to generate the voice data accordingly.