KR20110116116A - 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기 - Google Patents

휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기 Download PDF

Info

Publication number
KR20110116116A
KR20110116116A KR1020117010161A KR20117010161A KR20110116116A KR 20110116116 A KR20110116116 A KR 20110116116A KR 1020117010161 A KR1020117010161 A KR 1020117010161A KR 20117010161 A KR20117010161 A KR 20117010161A KR 20110116116 A KR20110116116 A KR 20110116116A
Authority
KR
South Korea
Prior art keywords
text
related information
image
character
mobile terminal
Prior art date
Application number
KR1020117010161A
Other languages
English (en)
Inventor
현민호
Original Assignee
현민호
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현민호 filed Critical 현민호
Priority to KR1020117010161A priority Critical patent/KR20110116116A/ko
Publication of KR20110116116A publication Critical patent/KR20110116116A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기에 관한 것으로, 본 발명에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법은 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하는 단계, 원본 영상 이미지 중 문자 영역을 선택받는 단계, 선택된 문자 영역에서 문자를 추출하는 단계, 문자 관련 정보 데이터베이스를 참조하여, 추출된 문자에 상응하는 문자 관련 정보를 검색하는 단계 및 검색된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 단계를 포함함으로써, 카메라를 통해 획득한 원본 영상 이미지 중 선택된 문자 영역에 포함된 문자에 상응하는 문자 관련 정보를 원본 영상 이미지에 합성하여 증강현실 기법으로 디스플레이할 수 있다.

Description

휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기{Method for providing text relation information using mobile terminal and mobile terminal}
본 발명은 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기에 관한 것으로, 더욱 상세하게는 휴대 단말기에 구비된 카메라를 통해 획득한 원본 영상 이미지에 포함된 문자에 대한 관련 정보를 제공하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기에 관한 것이다.
전자, 통신, 배터리 기술 등의 비약적인 발전으로 휴대가 가능하면서 음성 및 영상 통화를 수행할 수 있는 기능, 정보를 입/출력할 수 있는 기능 및 데이터를 저장할 수 있는 기능 등을 갖춘 휴대 단말기가 급격히 발전하고 있다.
그러나 이러한 휴대 단말기는 그 편리성과 효용성에도 불구하고 쉽게 휴대 가능하고 어디서나 사용할 수 있어야 하므로 기구적인 크기에 제한이 있다. 이에 따라, 버튼 키를 이용한 입력/ 표시부를 통한 일반적인 디스플레이 방법만으로는 사용자의 다양하고 즉흥적인 욕구를 충족시키기가 어렵다.
또한, 휴대 단말기는 고정형 기기들과 달리 다양한 위치와 환경 속에서 사용이 되므로 버튼 키를 이용한 입력뿐만 아니라 다양한 형태의 정보(예를 들어, 움직임, 위치/방향 정보, 카메라를 통해 획득하는 영상 이미지 정보 등)를 유용한 입력으로 사용할 수 있다.
이에 따라, 휴대 단말기는 입력된 다양한 형태의 정보를 이용하여, 가상 현실과 실제 현실을 혼합한 증강현실(Augmented Reality) 형태 등으로 디스플레이함으로써 휴대에 따른 이점을 이용하여 사용자에게 다양한 정보를 제공할 필요가 있다.
이때, 휴대 단말기는 네트워크의 속도, 단말기의 처리 속도 등을 감안하여, 입력된 다양한 형태의 정보(예를 들어, 카메라를 통해 획득한 영상 이미지)에 대한 최적화된 처리를 수행할 필요가 있다.
본 발명의 목적은 카메라를 통해 획득한 원본 영상 이미지 중 선택된 문자 영역에서 문자를 추출하고, 추출된 문자에 상응하는 문자 관련 정보를 문자 관련 정보 서버를 통해 검색하며, 검색된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기를 제공함에 있다.
이러한 과제를 달성하기 위한 본 발명에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법은 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하며, 원본 영상 이미지 중 문자 영역을 선택받는 단계, 휴대 단말기가 선택된 문자 영역에서 문자를 추출하여, 추출된 문자 정보를 문자 관련 정보 서버로 전송하는 단계, 문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 문자 정보에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 상기 휴대 단말기로 전송하는 단계 및 휴대 단말기가 전송된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 단계를 포함한다.
또한, 본 발명에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법은 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하며, 원본 영상 이미지 중 문자 영역을 선택받는 단계, 휴대 단말기가 선택된 문자 영역에서 문자 특징를 추출하여, 추출된 문자 특징 정보를 문자 관련 정보 서버로 전송하는 단계, 문자 관련 정보 서버가 전송된 문자 특징 정보에 따라 문자를 추출하는 단계, 문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 추출된 문자에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 휴대 단말기로 전송하는 단계 및 휴대 단말기가 전송된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 단계를 포함한다.
또한, 본 발명에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법은 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하는 단계, 휴대 단말기는 원본 영상 이미지 중 문자 영역을 선택받고, 선택된 문자 영역을 문자 관련 정보 서버로 전송하는 단계, 문자 관련 정보 서버가 전송된 문자 영역으로부터 문자를 추출하는 단계, 문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 추출된 문자에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 휴대 단말기로 전송하는 단계 및 휴대 단말기가 전송된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 단계를 포함한다.
또한, 본 발명에 따른 휴대 단말기는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하는 카메라부, 원본 영상 이미지 중 문자 영역이 선택된 경우, 선택된 문자 영역에 상응하는 정보를 문자 관련 정보 서버로 전송하도록 하는 제어부 및 문자 관련 정보 서버로부터 문자 영역에 상응하는 정보에 대응하여 수신된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이하는 표시부를 포함한다.
또한, 본 발명에 따른 문자 관련 정보 서버는 하나 이상의 문자 정보와 각 문자 정보에 상응하는 문자 관련 정보를 저장하는 문자 관련 정보 데이터베이스,휴대 단말기에 의해 획득된 원본 영상 이미지 중 선택된 문자 영역에 상응하는 정보를 수신하는 수신부, 문자 관련 정보 데이터베이스를 참조하여 수신된 문자 정보에 상응하는 문자 관련 정보를 검색하는 관련 정보 검색부 및 검색된 문자 관련 정보를 휴대 단말기로 전송하는 관련 정보 제공부를 포함한다.
본 발명에 따르면, 카메라를 통해 획득한 원본 영상 이미지 중 선택된 문자 영역에 포함된 문자에 상응하는 문자 관련 정보를 원본 영상 이미지에 합성하여 증강현실 기법으로 디스플레이한다.
도 1은 본 발명의 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 시스템을 나타낸 도면.
도 2는 본 발명의 실시예에 따른 문자 관련 정보 서버의 내부 구성을 나타낸 도면.
도 3은 본 발명의 실시예에 따른 휴대 단말기의 내부 구성을 나타낸 도면.
도 4는 본 발명의 실시예에 따른 문자 추출부의 내부 구성을 나타낸 도면.
도 5는 본 발명의 실시예에 따른 원본 영상 이미지 화면과 문자 관련 정보 제공 화면을 나타낸 도면.
도 6은 본 발명의 일 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도.
도 7은 본 발명의 다른 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도.
도 8은 본 발명의 또 다른 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도.
발명의 실시를 위한 형태
도 1은 본 발명의 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 시스템을 나타낸 도면이다.
도 1을 참조하면, 본 발명에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 시스템은, 휴대 단말기(100), 문자 관련 정보 서버(200) 및 개인용 컴퓨터(150)를 포함한다. 이때, 휴대 단말기(100)는 이동통신망을 문자 관련 정보 서버(200)와 통신을 수행하고, 문자 관련 정보 서버(200)는 인터넷망을 통해 개인용 컴퓨터(150)와 통신을 수행할 수 있다.
휴대 단말기(100)는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하고, 사용자로부터 원본 영상 이미지 중 문자 영역을 선택받을 수 있다.
또한, 휴대 단말기(100)는 선택된 문자 영역에서 문자를 추출하고, 추출된 문자 정보를 문자 관련 정보 서버로 전송하고, 문자 관련 서버로부터 추출된 문자에 상응하는 문자 관련 정보를 수신하며, 수신된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이할 수 있다.
문자 관련 정보 서버(200)는 이동통신망을 통해 휴대 단말기(100)로부터 원본 영상 이미지 중 문자 정보를 수신하고, 수신된 문자 정보에 상응하는 문자 관련 정보를 검색하여, 휴대 단말기(100)로 전송할 수 있다.
이때, 문자 관련 정보 서버(200)는 하나 이상의 문자 정보와 각 문자에 상응하는 문자 관련 정보를 인터넷망과 연결된 개인용 컴퓨터(150)에 의해 획득하거나 인터넷을 자동 검색하여 문자 관련 정보 데이터 베이스에 저장할 수 있다.
또한, 문자 관련 정보 서버(200)는 휴대 단말기(100)로부터 문자 영역 이미지 또는 문자 특징 정보를 수신하는 경우, 수신된 문자 영역 이미지 또는 문자 특징 정보로부터 문자 정보를 추출하며, 추출된 문자 정보에 상응하는 문자 관련 정보를 검색할 수 있다.
도 2는 본 발명의 실시예에 따른 문자 관련 정보 서버의 내부 구성을 나타낸 도면이다.
도 2를 참조하면, 본 발명의 실시예에 따른 문자 관련 정보 서버(200)는 문자 정보 수신부(201), 영상 이미지 수신부(202), 문자 추출부(204), 관련 정보 검색부(206), 관련 정보 제공부(208) 및 문자 관련 정보 데이터베이스(210)를 포함한다.
문자 정보 수신부(201)는 휴대 단말기로부터 원본 영상 이미지 중 문자 영역에서 추출된 문자 정보 또는 문자를 추출하기 위해 필요한 중요 특징 즉, 문자 특징 정보를 수신할 수 있다. 이때, 휴대 단말기가 원본 영상 이미지 중 문자를 추출하여 문자 정보를 문자 관련 정보 서버로 제공하는 경우에는 문자 관련 정보 서버는 문자 추출 기능을 수행할 필요가 없다.
영상 이미지 수신부(202)는 휴대 단말기로부터 원본 영상 이미지 중 문자 영역 부분인 문자 영역 이미지를 수신할 수 있다. 또한, 영상 이미지 수신부(202)는 휴대 단말기로부터 원본 영상 이미지 전체를 수신할 수 있다.
문자 추출부(204)는 수신된 문자 영역 이미지로부터 텍스트 데이터(즉, 문자 정보)를 추출할 수 있다. 이때, 문자 추출부(204)는 수신된 문자 영역 이미지의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 수행 모듈, 수신된 문자 영역에서 문자 데이터를 추출하는 문자 추출 모듈 및 문자 데이터 중 문자 코드만을 추출하는 후처리 수행 모듈을 포함할 수 있다. 이때, 전처리 수행 모듈은 흔들린 영상을 복원하는 디블루링(deblurring) 처리를 수행할 수도 있다. 또한, 문자 추출부(204)는 수신된 문자 특징 정보로부터 문자를 추출할 수 있다.
관련 정보 검색부(206)는 휴대 단말기로부터 수신된 문자 정보 또는 문자 영역 이미지 등으로부터 추출한 문자 정보에 상응하는 문자 관련 정보를 검색할 수 있다.
관련 정보 제공부(208)는 검색된 문자 관련 정보를 휴대 단말기로 전송할 수 있으며, 문자 관련 정보는 증가 현실 기술에 의해 원본 영상 이미지에 삽입될 수 있는 가상 이미지로 제공될 수 있다.
문자 관련 정보 데이터베이스(210)는 하나 이상의 문자와 각 문자에 상응하는 문자 관련 정보를 인터넷망에 의해 접속된 개인용 컴퓨터 등을 통해 수집하여 미리 저장하거나 인터넷을 자동 검색하여 저장할 수 있다.
도 3은 본 발명의 실시예에 따른 휴대 단말기의 내부 구성을 나타낸 도면이다.
도 3을 참조하면, 본 발명의 실시예에 따른 휴대 단말기(100)는 무선 통신부(302), 카메라부(304), 조작부(306), 문자 추출부(308), 제어부(310), 표시부(312), 음향 출력부(314), 저장부(316) 및 전원 공급부(318)를 포함할 수 있다.
무선 통신부(302)는 이동통신망을 통해 무선 신호를 송수신하는 이동통신 모듈 및 무선 인터넷 접속을 위한 무선 인터넷 모듈을 포함할 수 있다. 무선 통신부(302)는 추출된 문자에 해당하는 문자 정보를 문자 관련 정보 서버로 전송하고, 문자 관련 서버에 의해 검색된 추출 문자에 상응하는 문자 관련 정보를 수신할 수 있다.
카메라부(304)는 화상통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 즉, 카메라부(304)는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득할 수 있다. 이때, 처리된 화상 프레임은 표시부(312)에 표시될 수 있다.
조작부(306)는 사용자가 단말기의 동작 제어를 위하여 입력하는 키 입력 데이터를 발생시킨다. 조작부(306)는 키 패드, 돔 스위치, 터치 패드 등으로 구성될 수 있다. 특히, 터치 패드는 후술하는 표시부(312)와 상호 레이어 구조를 이루는 터치 스크린으로 구현될 수 있다. 이때, 표시부(312)는 카메라부에 의해 획득한 원본 영상 이미지를 디스플레이하고, 사용자로부터 원본 영상 이미지 중 문자 영역을 선택받을 수 있다.
문자 추출부(308)는 원본 영상 이미지 중 선택된 문자 영역에서 문자를 추출한다. 이때, 문자 추출부(308)는 선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 수행 모듈, 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 모듈 및 문자 데이터 중 문자 코드만을 추출하는 후처리 수행 모듈을 포함할 수 있다. 여기서, 전처리 수행 모듈은 흔들린 영상을 복원하는 디블루링(deblurring) 처리를 수행할 수도 있다.
제어부(310)는 휴대 단말기의 전반적인 동작을 제어하며, 예를 들어, 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련 제어 및 처리를 수행할 수 있다.
또한, 제어부(310)는 선택된 문자 영역에서 문자를 추출하도록 하고, 추출된 문자 정보를 문자 관련 정보 서버로 전송하도록 관련 제어 및 처리를 수행할 수 있다. 또한, 제어부(310)는 선택된 문자 영역에서 문자 특징을 추출하도록 하고, 추출된 문자 특징 정보를 문자 관련 정보 서버로 전송하도록 제어할 수 있다. 또한, 제어부(310)는 선택된 문자 영역 이미지를 문자 관련 정보 서버로 전송하도록 제어할 수 있다.
또한, 제어부(310)는 원본 영상 이미지에 기초하여, 문자 관련 정보 서버로부터 전송된 문자 관련 정보에 상응하는 가상 이미지의 합성 위치를 분석하고, 가상 이미지를 원본 영상 이미지의 분석된 위치에 합성하여, 표시부를 통해 증강 현실 기법으로 출력하도록 한다.
표시부(312)는 휴대 단말기에서 처리되는 정보를 표시 출력한다. 예를 들어, 휴대 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고, 휴대 단말기가 화상 통화 모드 또는 촬영 모드인 경우, 촬영되거나 수신된 영상을 각각 또는 동시에 표시할 수 있다.
이때, 표시부(312)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중 적어도 하나를 포함할 수 있다.
또한, 표시부(312)는 검색된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이한다. 이때, 표시부(312)는 원본 영상 이미지에 검색된 문자 관련 정보에 상응하는 가상 이미지를 합성하여, 증강 현실 기법으로 디스플레이한다. 또한, 표시부(312)는 증강 현실 기법뿐만 아니라 예를 들어, 문자 관련 정보를 포함하는 부가 화면을 원본 영상 이미지에 디스플레이하는 방법 등과 같이 다양한 방법으로 문자 관련 정보를 디스플레이할 수 있다.
음향 출력부(314)는 통화모드, 방송수신모드 등에서 무선 통신부(302)를 통해 수신되거나 저장부(316)에 저장된 오디오 데이터를 출력할 수 있다. 또한, 음향 출력부(314)는 원본 영상 이미지에 검색된 문자 관련 정보를 합성하여 디스플레이하는 시점에, 미리 설정된 음향을 출력할 수 있다. 즉, 음향 출력부(314)는 전송된 문자 관련 정보를 TTS(Text To Speech)를 통해 음성 또는 음향 형태로 출력할 수 있다. 또한, 음향 출력부(314)는 문자 관련 정보 서버로부터 가상 이미지에 상응하는 음성 또는 음향 정보를 수신하여 출력할 수 있다.
저장부(316)는 제어부(310)의 처리 및 제어를 위한 프로그램이 저장될 수 있고, 입력되거나 출력되는 데이터들을 임시로 저장할 수 있다.
전원 공급부(318)는 제어부(110)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다.
도 4는 본 발명의 실시예에 따른 문자 추출부의 내부 구성을 나타낸 도면이다.
도 4를 참조하면, 본 발명의 실시예에 따른 문자 추출부는 전처리 수행 모듈(402), 문자 추출 모듈(404) 및 후처리 수행 모듈(406)을 포함할 수 있다.
전처리 수행 모듈(402)은 획득한 원본 영상 이미지에서 인식률을 높일 수 있도록 선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리를 수행할 수 있다. 또한, 전처리 수행 모듈(420)은 흔들린 영상을 복원하는 디블루링(deblurring) 처리를 수행할 수도 있다.
또한, 문자 추출 모듈(404)은 선택된 문자 영역(즉, 문자 이미지)에서 문자 데이터를 추출할 수 있다.
또한, 후처리 수행 모듈(406)은 추출된 문자 데이터 중 문자 코드만을 추출함으로써, 문자 추출 과정에서 발생할 수 있는 오류를 감소시킬 수 있다.
도 5는 본 발명의 실시예에 따른 원본 영상 이미지 화면과 문자 관련 정보 제공 화면을 나타낸 도면이다.
도 5를 참조하면, 본 발명에 따른 휴대 단말기는 카메라부를 통해 영상을 촬영하여 원본 영상 이미지를 획득하면, 표시부를 통해 원본 영상 이미지 화면(510)을 디스플레이할 수 있다.
또한, 휴대 단말기는 문자 관련 정보 제공 화면(520)에 도시된 바와 같이 원본 영상 이미지에 문자 관련 가상 이미지 영역(525)을 삽입하여 증강 현실 기법으로 디스플레이한다. 증강 현실 기법은 현실 세계(예를 들어, 카메라에 의해 획득된 정지 영상)위에 가상 정보를 부가하여 표현하는 것이다. 즉, 현실 세계 정보에는 사용자가 필요로 하지 않는 정보도 있고 때로는 사용자가 필요로 하는 정보가 부족할 수도 있다. 이에 따라, 가상 정보를 이용하면 필요로 하지 않는 정보는 단순하게 하거나 보이지 않는 정보로 만들수 있고, 부족한 정보는 보충할 수 있다.
도 6은 본 발명의 일 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도이다.
도 6을 참조하면, 본 발명의 다른 실시예에 따른 휴대 단말기는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하고(S602), 사용자에 의해 원본 영상 이미지 중 문자 영역을 선택받는다(S604).
또한, 휴대 단말기는 선택된 문자 영역에서 문자를 추출(S606)하는데, 이때, 선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 순차적으로 수행할 수 있다.
또한, 휴대 단말기는 추출된 문자 정보를 문자 관련 정보 서버로 전송하고(S608), 이에 따라, 문자 관련 정보 서버는 문자 관련 정보 데이터베이스를 참조하여, 추출된 문자에 상응하는 문자 관련 정보를 검색하여 휴대 단말기로 제공한다(S610).
또한, 휴대 단말기는 검색된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이한다(S612). 이때, 휴대 단말기는 검색된 문자 관련 정보에 상응하는 가상 이미지를 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이한다.
도 7은 본 발명의 다른 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도이다.
도 7을 참조하면, 본 발명의 다른 실시예에 따른 휴대 단말기는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하고(S702), 사용자에 의해 원본 영상 이미지 중 문자 영역을 선택받는다(S704).
또한, 휴대 단말기는 선택된 문자 영역에서 문자를 추출하는데 중요한 특징인 문자 특징을 추출(S706)하고, 추출된 문자 특징 정보를 문자 관련 정보 서버로 전송한다(S708).
이에 따라, 문자 관련 정보 서버는 전송된 문자 특징 정보를 참조하여 문자를 추출하고(S710), 문자 관련 정보 데이터베이스를 참조하여, 추출된 문자에 상응하는 문자 관련 정보를 검색하여 휴대 단말기로 제공한다(S712).
또한, 휴대 단말기는 제공된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이한다(S714). 이때, 휴대 단말기는 제공된 문자 관련 정보에 상응하는 가상 이미지를 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이한다.
도 8은 본 발명의 또 다른 실시예에 따른 휴대 단말기를 이용한 문자 관련 정보 제공 방법을 나타낸 순서도이다.
도 8을 참조하면, 본 발명의 또 다른 실시예에 따른 휴대 단말기는 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하고(S802), 사용자에 의해 원본 영상 이미지 중 문자 영역을 선택받는다.
또한, 휴대 단말기는 선택된 문자 영역 정보를 문자 관련 정보 서버로 전송할 수 있다(S804).
이에 따라, 문자 관련 정보 서버는 선택된 문자 영역에서 문자를 추출(S806)하는데, 이때, 선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 순차적으로 수행할 수 있다.
또한, 문자 관련 정보 서버는 문자 관련 정보 데이터베이스를 참조하여, 추출된 문자에 상응하는 문자 관련 정보를 검색하여 휴대 단말기로 제공한다(S808).
이에 따라, 휴대 단말기는 검색된 문자 관련 정보를 원본 영상 이미지에 합성하여 디스플레이할 수 있다(S810). 이때, 휴대 단말기는 검색된 문자 관련 정보에 상응하는 가상 이미지를 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이할 수 있다.

Claims (20)

  1. 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하며, 상기 원본 영상 이미지 중 문자 영역을 선택받는 단계;
    상기 휴대 단말기가 선택된 문자 영역에서 문자를 추출하여, 추출된 문자 정보를 문자 관련 정보 서버로 전송하는 단계;
    문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 상기 문자 정보에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 상기 휴대 단말기로 전송하는 단계; 및
    상기 휴대 단말기가 전송된 문자 관련 정보를 상기 원본 영상 이미지에 합성하여 디스플레이하는 단계;
    를 포함하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  2. 청구항 1에 있어서,
    상기 추출 문자 정보 전송 단계는,
    선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 상기 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 상기 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 수행하여 문자를 추출하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  3. 청구항 2에 있어서,
    상기 디스플레이 단계는,
    상기 전송된 문자 관련 정보에 상응하는 가상 이미지를 상기 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  4. 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하며, 상기 원본 영상 이미지 중 문자 영역을 선택받는 단계;
    상기 휴대 단말기가 선택된 문자 영역에서 문자 특징를 추출하여, 추출된 문자 특징 정보를 문자 관련 정보 서버로 전송하는 단계;
    상기 문자 관련 정보 서버가 상기 전송된 문자 특징 정보에 따라 문자를 추출하는 단계;
    상기 문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 상기 추출된 문자에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 상기 휴대 단말기로 전송하는 단계; 및
    상기 휴대 단말기가 전송된 문자 관련 정보를 상기 원본 영상 이미지에 합성하여 디스플레이하는 단계;
    를 포함하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  5. 청구항 4에 있어서,
    상기 문자 추출 단계는,
    상기 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 상기 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 상기 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 수행하여 문자를 추출하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  6. 청구항 5에 있어서,
    상기 디스플레이 단계는,
    상기 전송된 문자 관련 정보에 상응하는 가상 이미지를 상기 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  7. 휴대 단말기가 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하는 단계;
    상기 휴대 단말기는 상기 원본 영상 이미지 중 문자 영역을 선택받고, 선택된 문자 영역을 문자 관련 정보 서버로 전송하는 단계;
    상기 문자 관련 정보 서버가 상기 전송된 문자 영역으로부터 문자를 추출하는 단계;
    상기 문자 관련 정보 서버가 문자 관련 정보 데이터베이스를 참조하여 상기 추출된 문자에 상응하는 문자 관련 정보를 검색하며, 검색된 문자 관련 정보를 상기 휴대 단말기로 전송하는 단계; 및
    상기 휴대 단말기가 전송된 문자 관련 정보를 상기 원본 영상 이미지에 합성하여 디스플레이하는 단계;
    를 포함하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  8. 청구항 7에 있어서,
    상기 문자 추출 단계는,
    상기 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 상기 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 상기 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 수행하여 문자를 추출하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  9. 청구항 8에 있어서,
    상기 디스플레이 단계는,
    상기 전송된 문자 관련 정보에 상응하는 가상 이미지를 상기 원본 영상 이미지에 중첩하여 증강 현실 기법으로 디스플레이하는 것을 특징으로 하는 휴대 단말기를 이용한 문자 관련 정보 제공 방법.
  10. 카메라를 통해 영상을 촬영하여 원본 영상 이미지를 획득하는 카메라부;
    상기 원본 영상 이미지 중 문자 영역이 선택된 경우, 상기 선택된 문자 영역에 상응하는 정보를 문자 관련 정보 서버로 전송하도록 하는 제어부; 및
    상기 문자 관련 정보 서버로부터 상기 문자 영역에 상응하는 정보에 대응하여 수신된 문자 관련 정보를 상기 원본 영상 이미지에 합성하여 디스플레이하는 표시부;
    를 포함하는 휴대 단말기.
  11. 청구항 10에 있어서,
    상기 제어부는, 상기 선택된 문자 영역에서 문자를 추출하도록 하고, 추출된 문자 정보를 상기 문자 영역에 상응하는 정보로 하여 상기 문자 관련 정보 서버로 전송하도록 하는 것을 특징으로 하는 휴대 단말기.
  12. 청구항 11에 있어서,
    상기 선택된 문자 영역의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 과정, 상기 선택된 문자 영역에서 문자 데이터를 추출하는 문자 추출 과정 및 상기 문자 데이터 중 문자 코드만을 추출하는 후처리 과정을 수행하여 문자를 추출하는 문자 추출부를 더 포함하는 것을 특징으로 하는 휴대 단말기.
  13. 청구항 10에 있어서,
    상기 제어부는, 상기 선택된 문자 영역에서 문자 특징을 추출하고, 추출된 문자 특징 정보를 상기 문자 영역에 상응하는 정보로 하여 상기 문자 관련 정보 서버로 전송하도록 하는 것을 특징으로 하는 휴대 단말기.
  14. 청구항 10에 있어서,
    상기 제어부는, 상기 선택된 문자 영역 이미지를 상기 문자 영역에 상응하는 정보로 하여 상기 문자 관련 정보 서버로 전송하도록 하는 것을 특징으로 하는 휴대 단말기.
  15. 청구항 10에 있어서,
    상기 제어부는, 상기 원본 영상 이미지에 기초하여, 상기 전송된 문자 관련 정보에 상응하는 가상 이미지의 합성 위치를 분석하고, 상기 가상 이미지를 상기 원본 영상 이미지의 분석된 위치에 합성하여, 상기 표시부를 통해 증강 현실 기법으로 출력하도록 하는 것을 특징으로 하는 휴대 단말기.
  16. 하나 이상의 문자 정보와 상기 각 문자 정보에 상응하는 문자 관련 정보를 저장하는 문자 관련 정보 데이터베이스;
    휴대 단말기에 의해 획득된 원본 영상 이미지 중 선택된 문자 영역에 상응하는 정보를 수신하는 수신부;
    상기 문자 관련 정보 데이터베이스를 참조하여 상기 수신된 문자 정보에 상응하는 문자 관련 정보를 검색하는 관련 정보 검색부; 및
    상기 검색된 문자 관련 정보를 상기 휴대 단말기로 전송하는 관련 정보 제공부;
    를 포함하는 문자 관련 정보 서버.
  17. 청구항 16항에 있어서,
    상기 문자 관련 정보 데이터베이스는 인터넷망을 통해 연결된 개인용 컴퓨터에 의해 상기 문자 관련 정보를 획득하여 저장하거나 인터넷을 자동 검색하여 상기 문자 관련 정보를 획득하여 저장하는 것을 특징으로 하는 문자 관련 정보 서버.
  18. 청구항 16에 있어서,
    상기 관련 정보 제공부는 상기 검색된 문자 관련 정보에 상응하는 가상 이미지 정보를 상기 휴대 단말기로 전송하는 것을 특징으로 하는 문자 관련 정보 서버.
  19. 청구항 16항에 있어서,
    상기 수신부가 휴대 단말기로부터 문자 영역 이미지 또는 문자 특징 정보를 수신하는 경우, 상기 수신된 문자 영역 이미지 또는 문자 특징 정보로부터 문자를 추출하는 문자 추출부를 더 포함하며,
    상기 관련 정보 검색부는 상기 추출된 문자에 상응하는 문자 관련 정보를 검색하는 것을 특징으로 하는 문자 관련 정보 서버.
  20. 청구항 19항에 있어서,
    상기 문자 추출부는, 상기 문자 영역 이미지의 밝기 또는 명암을 조절하여 윤곽을 선명하게 처리하는 전처리 수행 모듈, 상기 수신된 문자 영역에서 문자 데이터를 추출하는 문자 추출 모듈 및 상기 문자 데이터 중 문자 코드만을 추출하는 후처리 수행 모듈을 포함하는 것을 특징으로 하는 문자 관련 정보 서버.
KR1020117010161A 2010-03-30 2010-03-30 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기 KR20110116116A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020117010161A KR20110116116A (ko) 2010-03-30 2010-03-30 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020117010161A KR20110116116A (ko) 2010-03-30 2010-03-30 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기

Publications (1)

Publication Number Publication Date
KR20110116116A true KR20110116116A (ko) 2011-10-25

Family

ID=45030538

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117010161A KR20110116116A (ko) 2010-03-30 2010-03-30 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기

Country Status (1)

Country Link
KR (1) KR20110116116A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130130396A (ko) * 2012-05-22 2013-12-02 주식회사 성우모바일 교육매체 제작방법 및 교육매체 시스템
WO2014014238A1 (en) * 2012-07-17 2014-01-23 Samsung Electronics Co., Ltd. System and method for providing image
KR20160010289A (ko) * 2014-07-18 2016-01-27 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
KR101591074B1 (ko) 2014-08-18 2016-02-18 최보경 무선통신을 이용한 향기 분사 장치

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130130396A (ko) * 2012-05-22 2013-12-02 주식회사 성우모바일 교육매체 제작방법 및 교육매체 시스템
WO2014014238A1 (en) * 2012-07-17 2014-01-23 Samsung Electronics Co., Ltd. System and method for providing image
US9204090B2 (en) 2012-07-17 2015-12-01 Samsung Electronics Co., Ltd. System and method for providing image
US9654728B2 (en) 2012-07-17 2017-05-16 Samsung Electronics Co., Ltd. System and method for providing image
US10075673B2 (en) 2012-07-17 2018-09-11 Samsung Electronics Co., Ltd. System and method for providing image
KR20160010289A (ko) * 2014-07-18 2016-01-27 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
KR101591074B1 (ko) 2014-08-18 2016-02-18 최보경 무선통신을 이용한 향기 분사 장치

Similar Documents

Publication Publication Date Title
US10706887B2 (en) Apparatus and method for displaying times at which an object appears in frames of video
CN111556278B (zh) 一种视频处理的方法、视频展示的方法、装置及存储介质
US12020385B2 (en) Augmented reality processing method, storage medium, and electronic device
US9015029B2 (en) Camera dictionary based on object recognition
CN112991553B (zh) 信息展示方法及装置、电子设备和存储介质
US10754888B2 (en) Establishment of an association between an object and a mood media item
CN110572716B (zh) 多媒体数据播放方法、装置及存储介质
EP2597623A2 (en) Apparatus and method for providing augmented reality service for mobile terminal
CN111445583A (zh) 增强现实处理方法及装置、存储介质和电子设备
KR100724870B1 (ko) 휴대단말기의 별자리 검색방법
CN112052897A (zh) 多媒体数据拍摄方法、装置、终端、服务器及存储介质
KR20140026726A (ko) 광학식 문자 판독기를 이용한 데이터 처리 방법 및 장치
CN111670431A (zh) 信息处理装置、信息处理方法以及程序
KR20110116116A (ko) 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기
US11606531B2 (en) Image capturing method, apparatus, and storage medium
CN111524518B (zh) 增强现实处理方法及装置、存储介质和电子设备
KR20160116752A (ko) 이동단말기 및 그 제어방법
WO2011122717A1 (ko) 휴대 단말기를 이용한 문자 관련 정보 제공 방법 및 휴대 단말기
CN110493511B (zh) 一种全景图像生成方法及移动终端
KR102231163B1 (ko) 영상 편집을 위한 전자 장치 및 그 동작 방법
CN113705450A (zh) 视频处理方法及装置、电子设备和存储介质
KR20180022184A (ko) 이동 단말기 및 그 제어방법
CN113821662A (zh) 图片搜索方法、装置及存储介质
CN115086759A (zh) 视频处理方法、装置、计算机设备及介质
CN113489903A (zh) 一种拍摄方法、装置、终端设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E601 Decision to refuse application