KR20060133430A - 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기 - Google Patents

이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기 Download PDF

Info

Publication number
KR20060133430A
KR20060133430A KR1020050053256A KR20050053256A KR20060133430A KR 20060133430 A KR20060133430 A KR 20060133430A KR 1020050053256 A KR1020050053256 A KR 1020050053256A KR 20050053256 A KR20050053256 A KR 20050053256A KR 20060133430 A KR20060133430 A KR 20060133430A
Authority
KR
South Korea
Prior art keywords
image
information
mobile communication
communication terminal
providing server
Prior art date
Application number
KR1020050053256A
Other languages
English (en)
Other versions
KR100754656B1 (ko
Inventor
김순옥
김대규
박용수
이철환
서유덕
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR1020050053256A priority Critical patent/KR100754656B1/ko
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to PCT/KR2006/002352 priority patent/WO2006137667A1/en
Priority to RU2007147402/09A priority patent/RU2391797C2/ru
Priority to JP2006170314A priority patent/JP2007006488A/ja
Priority to EP06012636A priority patent/EP1737198A3/en
Priority to CN2010102249311A priority patent/CN101883197A/zh
Priority to US11/471,427 priority patent/US20070036469A1/en
Priority to CNA2006100930646A priority patent/CN1885291A/zh
Publication of KR20060133430A publication Critical patent/KR20060133430A/ko
Application granted granted Critical
Publication of KR100754656B1 publication Critical patent/KR100754656B1/ko
Priority to JP2009157066A priority patent/JP2009219166A/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00331—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus performing optical character recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3273—Display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Telephonic Communication Services (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)
  • Information Transfer Between Computers (AREA)
  • Character Discrimination (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 실시예에 따라 이동통신단말기는 카메라 모듈을 통해 촬영한 이미지에 관한 정보를 획득할 수 있도록 구성된다. 즉, 본 발명의 실시예에서 이동통신단말기는 카메라 모듈을 통해 촬영한 이미지중 인식하고자 하는 이미지를 캡쳐하고 캡쳐한 이미지에 관한 정보를 내부적으로 검색하거나 또는 인터넷망 또는 무선망을 통해 정보 제공 서버에 요청한다. 정보 제공 서버는 이동통신단말기로부터 캡쳐한 이미지를 수신하면 캡쳐한 이미지로부터 이미지 패턴 또는 문자를 인식한 후 그 관련 정보를 검색한다. 또는 정보 제공 서버는 이미지 패턴 또는 문자를 수신하면 수신한 이미지 패턴 또는 문자에 관련한 정보를 검색한다. 정보 제공 서버가 검색한 정보를 이동통신단말기로 전송하면 이동통신단말기는 수신한 정보를 사용자에게 표시한다.
캡쳐, 이미지 패턴

Description

이미지와 관련한 정보를 사용자에게 제공하는 방법 및 시스템과 이를 위한 이동통신단말기{Method and system for providing user with image related information and mobile communication system}
도 1은 본 발명에 따른 이미지 관련 정보를 제공하는 이동통신단말기가 속한 시스템의 구성도를 나타낸 도면,
도 2는 본 발명의 실시예에 따른 이동통신단말기의 블록 구성도를 나타낸 도면,
도 3은 본 발명의 일실시예에 따른 이동통신단말기와 정보 제공 서버 간에 메시지 흐름을 나타낸 도면,
도 4는 본 발명의 다른 실시예에 따른 이동통신단말기와 정보 제공 서버 간에 메시지 흐름을 나타낸 도면,
도 5는 본 발명의 실시예에 따라 이동통신단말기에서 캡쳐한 이미지에 관련한 정보를 제공하기 위한 제어 흐름을 나타낸 도면,
도 6은 본 발명의 실시예에 따라 이동통신단말기에서 동영상중 한 장면을 캡쳐하여 관련 정보를 획득하기 위한 제어 흐름을 나타낸 도면,
도 7은 본 발명의 실시예에 따라 2 이상의 패턴 인식 대상이 존재하는 경우에 그 관련 정보를 획득하기 위한 제어 흐름을 나타낸 도면.
본 발명은 이미지와 관련한 정보를 사용자에게 제공하는 방법 및 시스템과 이를 위한 이동통신단말기에 관한 것이다.
최근 들어 이동 통신 단말기의 보급이 일반화되면서 이동 통신 단말기의 화면을 통해 운전 중에 도로 상황을 알려줄 수 있는 교통 정보 서비스, 나만의 독특한 벨소리를 등록하여 사용할 수 있는 마이벨 서비스, 음성 사서함의 메시지 도착을 문자로 통보해주는 이동 전화 호출 서비스 등 다양한 서비스가 제공되고 있다. 이러한 이동 통신 단말기에는 음성 사서함 기능이나 특수 정보 수신 기능과 같은 서비스 제공자측으로부터 여러 가지 부가 서비스를 제공받을 수 있는 기능이 설계되어 있기 때문에 이동 통신 단말기 사용자는 고유의 전화 통화 기능 이외에도 다양한 사용상 편의를 제공받게 된다.
이러한 다양한 서비스 및 부가 기능들이 점차 확대되고, 이에 따라 이동통신 시스템은 음성, 데이터뿐만 아니라 IDSN급, 수 Mb/s의 멀티미디어 서비스를 제공한다. 이와 같은 이동통신 시스템에 적합한 단말기가 개발되어 있다. 그 일 예로서 피사체를 촬영한 이미지를 저장할 수 있는 기능을 가지는 카메라 모듈을 구비하는 이동통신 단말기가 등장하게 되었다.
이와 같은 이동 통신 단말기가 대중화됨에 따라 사용자는 이동 통신 단말기로 언제 어디서든 편리하게 촬영을 할 수 있다. 또한 사용자가 항시 휴대하는 이동 통신 단말기에 카메라를 장착한 것이기 때문에 위급 시 긴박한 장면을 촬영할 수도 있고 그 이외에 필요시 언제든지 촬영이 가능하다는 장점이 있다.
따라서 이러한 장점을 바탕으로 카메라 모듈을 구비한 이동 통신 단말기를 좀 더 효율적이고 다양한 방법으로 활용할 필요성이 있다. 이동 통신 단말기의 효용 가치를 높이고 사용자들의 다양한 욕구를 만족시키기 위해서 카메라를 구비한 이동 통신 단말기와 이러한 이동 통신 단말기의 다양한 서비스 및 부가 기능들을 접목시키는 활용이 필요하다. 이러한 활용의 한 예로서, 전술한 이동통신 단말기에 구비되어 있는 카메라 모듈을 이용하여 문서에 인자된 전화번호 및 데이터와 같은 문자를 인식할 수 있는 OCR(Optical Character Recognition) 기능의 구현이 있다.
그런데, 이동통신단말기에 구비된 카메라 모듈을 이용하여 다양한 응용이 가능함에도 불구하고 카메라 모듈의 이용은 OCR 기능에만 적용되고 있었다.
따라서 본 발명은 이미지와 관련한 정보를 사용자에게 제공하는 방법 및 시스템과 이를 위한 이동통신단말기를 제공한다.
전술한 본 발명의 목적을 달성하기 위하여 본 발명은 이미지와 관련한 정보를 사용자에게 제공하는 이동통신단말기에 있어서, 이미지를 촬영하기 위한 카메라 모듈과, 이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베 이스와, 상기 카메라 모듈을 이용하여 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 상기 데이터베이스에서 그 관련 정보를 검색한 후 사용자에게 제공하는 제어부를 포함한다.
또 본 발명은 이동통신단말기와 정보 제공 서버를 포함하는 시스템에서 이미지와 관련한 정보를 사용자에게 제공하는 방법에 있어서, 상기 이동통신단말기가 소정 이미지를 촬영하며 상기 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하고 그 결과를 상기 정보 제공 서버에 전송하는 단계와, 상기 정보 제공 서버가 상기 인식한 이미지 패턴 또는 문자에 관련된 정보를 검색하여 상기 이동통신단말기로 전송하는 단계와, 상기 이동통신단말기가 상기 정보 제공 서버로부터의 검색 정보를 표시하는 단계를 포함한다.
이하 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
본 발명의 실시예에 따라 이동통신단말기는 카메라 모듈을 통해 촬영한 이미지에 관한 정보를 획득할 수 있도록 구성된다. 즉, 본 발명의 실시예에서 이동통신단말기는 카메라 모듈을 통해 촬영한 이미지에 관한 정보를 내부적으로 검색하거나 또는 인터넷망 또는 무선망을 통해 정보 제공 서버에 요청한다. 이때, 촬영한 이미지는 특정 건물 외곽이 나타난 이미지, 소정 소매점의 간판, 버스의 번호판 등이 될 수 있다. 이동통신단말기는 촬영한 이미지를 바로 정보 제공 서버로 전송할 수도 있고 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 그 결과를 정보 제공 서버로 전송할 수도 있다. 그리고, 카메라부를 통해 촬영된 이미지는 사용자에 의해 소정 영역만 캡쳐될 수 있다. 즉 이동통신단말기는 카메라부를 통해 촬영한 이미지에 대해 사용자에게 소정 영역을 캡쳐할 수 있도록 한다. 물론, 촬영 이미지중 캡쳐한 영역만 정보 제공 서버에 전송될 수 있다.
정보 제공 서버는 이동통신단말기로부터 촬영한 이미지를 수신하면 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식한 후 그 관련 정보를 검색한다. 또는 정보 제공 서버는 이미지 패턴 또는 문자를 수신하면 수신한 이미지 패턴 또는 문자에 관련한 정보를 검색한다. 정보 제공 서버가 검색한 정보를 이동통신단말기로 전송하면 이동통신단말기는 수신한 정보를 사용자에게 표시한다. 다르게는 이동통신단말기는 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 자체 데이터베이스에서 그 관련 정보를 검색한 후 사용자에게 제공할 수 있다. 물론 이 경우에도 카메라부를 통해 촬영된 이미지는 사용자에 의해 소정 영역만 캡쳐될 수 있다. 도 1은 본 발명에 따른 이미지 관련 정보를 제공하는 이동통신단말기가 속한 시스템의 구성도를 나타낸 도면이다. 도 1을 참조하면, 이동통신단말기(100)는 무선으로 기지국(200)과 통신한다.
기지국(200)은 해당 셀 영역의 이동통신단말기(100)와 무선 연결되어 이동통신단말기(100)에 이동 통신 서비스를 제공한다. 기지국(200)은 이동 교환기(210)에 연결되어 있다. 이동 교환기(210)는 기지국(200)과 연결되어 있고 이동통신단말기(100)로의 착신/발신 요구를 처리하기 위한 호 연결 교환 기능을 수행하며, 다른 이동 교환국과의 망 연동 기능을 수행한다. 또한, 이동 교환국(210)은 정보 제공 서버(220)에 연결되어 이동통신단말기(100)를 연동시킨다.
이동통신단말기(100)는 구비한 카메라 모듈을 통해 촬영한 이미지를 기지국(200) 및 이동 교환기(210)를 통해 정보 제공 서버(220)로 전송할 수도 있다. 또, 이동통신단말기(100)는 상기 카메라 모듈을 통해 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 그 결과를 정보 제공 서버(220)로 전송할 수도 있다. 정보 제공 서버(220)는 이동통신단말(100)로부터 촬영된 이미지를 수신하면 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식한 후 그 관련 정보를 검색한다. 또는 정보 제공 서버(220)는 이미지 패턴 또는 문자를 수신하면 수신한 이미지 패턴 또는 문자에 관련한 정보를 검색한다. 이를 위해 정보 제공 서버(220)는 이동통신단말로부터 제공되는 이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스(230)를 구비한다. 예컨대, 데이터베이스(230)에는 특정 건물 또는 특정 간판의 이미지가 저장되어 있고 그에 대응하여 그 위치에 관한 GPS 데이터 등이 저장될 수 있다. 또는 데이터베이스(230)에는 버스 번호와 그의 노선/시간 안내 정보가 저장될 수 있다.
이러한 경우 만약 이동통신단말기(100)가 특정 건물에 촬영한 이미지를 그대로 정보 제공 서버(220)에 전송한다면 정보 제공 서버(220)는 촬영한 이미지를 데이터베이스(230)를 검색하여 찾고, 그에 관련하여 저장된 GPS 데이터를 이동통신단말기(100)에게 전송할 수 있다. 이때 GPS 데이터는 현재 위치한 곳에서 해당 특정 건물/간판까지의 지도, 가야할 방향 등이 될 수 있다. 또는 정보 제공 서버(220)는 캡쳐한 이미지를 이미지 패턴 인식 또는 문자 인식 후 이미지 패턴 또는 문자에 관 련한 정보를 검색할 수 있다.
또, 이동통신단말기(100)는 특정 버스의 번호판을 캡쳐한 후 OCR 기술 등을 이용하여 번호판을 판독할 수 있다. 이동통신단말기(100)가 버스 번호를 정보 제공 서버(220)에 전송한다면 정보 제공 서버(220)는 데이터베이스(230)를 검색하여 구한 해당 버스 번호에 대한 노선/시간 안내 정보를 이동통신단말기(100)에게 전송할 수 있다. 정보 제공 서버(220)가 검색한 정보를 이동통신단말기로 전송하면 이동통신단말기는 수신한 정보를 사용자에게 표시한다.
한편, 이동통신단말기(100)는 정보 제공 서버 없이 카메라 모듈을 이용하여 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 자체 데이터베이스에서 그 관련 정보를 검색한 후 사용자에게 제공할 수 있다.
이러한 이동통신단말기의 블록 구성도를 도 2를 참조하여 설명한다. 도 2를 참조하면, 이동통신단말기(100)는 RF 모듈(110), 베이스밴드 처리부(112), 사용자 인터페이스(120), 제어부(130), 메모리(140), 표시부(150), 문자 인식부(160), 카메라 모듈(170) 및 패턴 인식부(180)을 포함한다.
이동통신단말기의 제어부(130)는 이동통신단말기를 전반적으로 제어하며 본 발명의 바람직한 실시예에 따라 소정 이미지를 촬영하고 그 관련 정보를 제공하기 도 1의 각 부를 제어한다.
이러한 제어부(130)의 동작을 좀더 설명하면, 일 실시예에 따라 제어부(130)는 카메라 모듈(170)을 통해 촬영한 이미지를 그대로 정보 제공 서버(220)로 전송할 수 있다.
다른 실시예에 따라 제어부(130)는 상기 카메라 모듈(170)을 통해 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 그 결과를 정보 제공 서버(220)로 전송할 수도 있다. 이 때 제어부(130)는 촬영한 이미지로부터 이미지 패턴을 패턴 인식부(180)를 통해 인식한다. 또는, 제어부(130)는 촬영한 이미지로부터 문자를 문자 인식부(160)를 통해 인식한다. 이와 같이 인식한 이미지 패턴 또는 문자를 제어부(130)는 무선부(110)를 통해 정보 제공 서버(220)로 전송한다. 만약 제어부(130)가 촬영한 이미지로부터 획득한 이미지 패턴 또는 문자를 인식할 수 없는 경우에는 촬영한 이미지를 정보 제공 서버(220)로 전송할 수 있다.
또 다른 실시예에 따라, 제어부(130)는 정보 제공 서버 없이 카메라 모듈(170)을 이용하여 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하고 자체 메모리(140)에서 그 관련 정보를 검색한 후 사용자에게 제공할 수 있다.
선택적으로 제어부(130)는 사용자에게 카메라부를 통해 촬영된 이미지중 소정 영역만 캡쳐할 수 있도록 한다. 이를 위해 제어부(130)는 여러가지 패턴 인식 대상이 촬영되었을 경우 예컨대, 버스의 번호판이 3개인 경우 원하는 대상을 선택할 수 있도록 사용자에게 안내한다. 사용자가 촬영된 이미지의 안내된 소정 영역을 캡쳐하면 제어부(130)는 선택된 소정 영역을 캡쳐하여 전체 이미지중 캡쳐된 영역만을 정보 제공 서버에 전송한다.또는 제어부(130)는 동영상의 표시 중에 사용자가 표시되는 동영상중 해당 동영상의 장면과 관련된 정보를 알고 싶으면 캡쳐키를 눌러 원하는 장면을 획득할 수 있도록 한다. 이를 위해 제어부(130)는 동영상이 표시되는 중에 캡쳐키가 입력되는 지를 판단하고, 캡쳐키가 눌러지면 그 순간의 이미지 를 캡쳐한다. 그리고 제어부(130)는 캡쳐한 이미지로부터 이미지 패턴 또는 문자를 인식한다.
제어부(130)는 인식한 이미지 패턴 또는 문자에 관련한 정보를 예컨대 메모리(140) 상에 구현된 데이터베이스로부터 검색하거나 정보 제공 서버(220)에 요청하여 해당 정보를 얻을 수도 있다
그리고 RF 모듈(110)은 안테나를 통해 기지국과 RF 신호를 송수신하는데, 수신되는 RF 신호를 IF(Intermediate Frequency) 신호로 변환하여 베이스밴드 처리부(112)로 출력하고 베이스밴드 처리부(120)로부터 입력되는 IF 신호를 RF 신호로 변환하여 송신한다. 베이스밴드 처리부(112)는 제어부(130)와 RF부(110)간의 인터페이스를 제공하는 BAA(Baseband Analog ASIC)로서, 제어부(130)로부터 인가되는 베이스밴드의 디지털 신호를 아날로그 IF 신호로 변환하여 RF부(110)로 인가하고, RF부(110)로부터 인가되는 아날로그 IF 신호를 베이스밴드의 디지털 신호로 변환하여 제어부(130)에 인가한다.
사용자 인터페이스(120)는 다수의 숫자키 및 기능키들을 구비하고 있으며, 사용자가 누르는 키에 대응하는 키입력 데이터를 제어부(130)로 출력한다. 메모리(140)는 이동통신단말기(100) 동작 제어 시 필요한 다수의 프로그램과 정보를 저장하기 위한 롬(ROM : Read Only Memory) 및 램(RAM : Random Access Memory), 음성 메모리 등으로 이루어진다. 그리고 메모리(140)는 이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스(도시생략)을 포함할 수 있다. 또 메모리(140)는 이미지 패턴 인식 또는 문자 인식을 위한 데이터를 저장할 수 있다. 표시부(150)는 통상적으로 LCD(Liquid Crystal Display)이며, 제어부(130)의 제어 하에 각종 메시지, 아이콘 뿐만 아니라 동영상을 표시한다.
이제, 이동통신단말기와 정보 제공 서버 간에 메시지 흐름을 설명한다.
도 3은 본 발명의 일실시예에 따른 이동통신단말기와 정보 제공 서버 간에 메시지 흐름을 나타낸 도면이다. 도 3을 참조하면, 이동통신단말기(100)는 단계 310에서 소정 이미지를 촬영한 후 단계 320에서 정보 제공 서버(220)로 촬영한 이미지를 전송한다. 정보 제공 서버(220)는 단계 330에서 수신한 이미지로부터 이미지 패턴 또는 문자를 인식한다. 이어서 정보 제공 서버(220)는 단계 332에서 이미지 패턴 또는 문자에 관련된 정보를 검색한다. 전술한 바와 같이 정보 제공 서버(220)는 이동통신단말로부터 제공되는 이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스(230)를 구비하여 이미지 관련 정보 검색시 데이터베이스를 검색한다. 그리고 정보 제공 서버(220)는 단계 340에서 검색한 정보를 이동통신단말기(100)로 전송한다. 그에 따라 이동통신단말기(100)는 단계 350에서 수신한 정보를 사용자에게 표시한다.
도 4는 본 발명의 다른 실시예에 따른 이동통신단말기와 정보 제공 서버 간에 메시지 흐름을 나타낸 도면이다. 도 4를 참조하면, 이동통신단말기(100)는 단계 410에서 소정 이미지를 촬영한 후 단계 420에서 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식한다. 그리고 이동통신단말기(100)는 단계 430에서 이미지 패턴 또는 문자를 정보 제공 서버(220)에 전송한다. 예컨대, 이동통신단말기(100)는 특정 버스의 번호판을 촬영한 후OCR(Optical Character Recognition) 기술 등을 이용 하여 번호판으로부터 버스 번호를 판독할 수 있다. 이 경우 이동통신단말기(100)는 소정 버스 번호를 정보 제공 서버(220)에 전송하는 것이다. 만약 제어부(130)가 촬영한 이미지로부터 획득한 이미지 패턴 또는 문자를 인식할 수 없는 경우에는 촬영한 이미지를 그대로 정보 제공 서버(220)로 전송할 수 있다.
그러면 정보 제공 서버(220)는 단계 440에서 전송된 이미지 패턴 또는 문자에 관련된 정보를 데이터베이스(230)로부터 검색한다. 그리고 정보 제공 서버(220)는 단계 450에서 검색한 정보를 이동통신단말기(100)에게 전송한다. 전술한 바와 같이 이동통신단말기(100)가 버스 번호를 정보 제공 서버(220)에 전송한다면 정보 제공 서버(220)는 데이터베이스(230)를 검색하여 해당 버스 번호에 대한 노선/시간 안내 정보를 이동통신단말기(100)에게 전송할 수 있다. 이동통신단말기(100)는 정보 제공 서버(220)로부터 전송되어 온 정보를 예컨대 표시부(150) 상에 표시한다.
전술한 실시예들에서 이동통신단말기는 정보 제공 서버에 접속하여 촬영한 이미지에 관련한 정보를 획득하는 것을 기술하였다. 그러나, 이동통신단말기는 정보 제공 서버 없이 카메라 모듈(170)을 이용하여 촬영한 이미지에 관련한 정보를 자신이 구비한 데이터베이스로부터 검색하여 사용자에게 제공할 수 있다.
도 5는 이동통신단말기에서 촬영한 이미지에 관련한 정보를 제공하기 위한 제어 흐름을 나타낸 도면이다. 도 5를 참조하면, 이동통신단말기의 제어부(130)는 단계 510에서 사용자에 의해 이미지 캡쳐 기능이 선택되는 지를 판단한다. 본 실시예에 따르면, 사용자는 촬영된 이미지중에 원하는 부분을 캡쳐할 수 있다. 사용자에 의해 이미지 캡쳐 기능이 선택되면 제어부(130)는 단계 520으로 진행하여 이미 지 캡쳐를 위한 창을 표시부(150) 상에 표시한다. 이 캡쳐 창은 카메라 모듈(170)을 통해 촬영되는 전체 이미지중 일부만을 캡쳐하기 위한 것이다. 예컨대, 제어부(130)는 카메라 모듈(170)을 통해 촬영되는 전체 이미지 상에 예컨대, 사각틀의 소정 창이 표시되도록 한다. 이 캡쳐 창은 사용자에 의해 크기 또는 위치가 변경될 수 있다. 제어부(130)는 단계 530에서 캡쳐 창의 크기 또는 위치를 변경하기 위한 키입력이 있는 지를 판단한다. 사용자에 의해 캡쳐 창의 크기 또는 위치를 변경하기 위한 키입력이 있으면, 제어부(130)는 단계 540으로 진행하여 해당 키입력에 따라 캡쳐 창을 변경한다. 그리고 제어부(130)는 단계 550에서 이미지 캡쳐가 완료되었는 지를 판단한다. 제어부(130)는 사용자가 이미지 캡쳐 완료키를 선택하거나, 소정 시간 캡쳐 창이 변경되지 않으면 이미지 캡쳐가 완료된 것으로 판단할 수 있다. 이미지 캡쳐가 완료되었으면 제어부(130)는 단계 560으로 진행하여 캡쳐한 이미지로부터 이미지 패턴 또는 문자를 인식한다.
그리고 제어부(130)는 단계 570으로 진행하여 인식한 이미지 패턴 또는 문자에 관련한 정보를 예컨대 메모리(140) 상에 구현된 데이터베이스로부터 검색한다. 전술한 바와 같이 이 실시예에 따르면 이동통신단말기(100)는 이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스를 구비할 수 있다. 이어서 제어부(130)는 단계 580에서 검색한 정보를 표시부(150) 상에 표시한다.
전술한 실시예에서는 촬영된 이미지로부터 일부분을 캡쳐하는 경우를 설명하였지만, 다른 실시예에 따르면 촬영중에 즉, 촬영을 위해 촬영 이미지가 표시되는 중에 패턴 인식할 영역을 선택할 수도 있다. 이를 위한 구성이 전술한 실시예의 약 간의 변형으로부터 가능함을 당업자에 의해 명백하다. 이 때 촬영된 전체 이미지는 단말에 저장하고 패턴 인식 대상이 되는 영역만이 파일 전송 서버로 전송되거나 단말이 패턴 인식 대상이 되는 영역에 대해서만 패턴 인식을 수행하여 관련 정보를 검색할 수 있다.
한편, 본 발명의 실시예에 따라 이동통신단말기는 표시되는 동영상중 한 장면을 캡쳐할 수 있다. 도 6을 참조하여 동영상중 한 장면을 캡쳐하여 관련 정보를 획득하기 위한 제어 흐름을 설명한다.
도 6을 참조하면, 제어부(130)는 단계 620에서 동영상을 표시한다. 이 때 동영상은 실시간으로 수신되어 표시될 수도 있고 저장된 동영상 파일이 재생되어 표시될 수 도 있다. 동영상이 표시되는 도중 제어부(130)는 단계 620에서 캡쳐키가 입력되는 지를 판단한다. 사용자가 표시되는 동영상중 해당 동영상의 장면과 관련된 정보를 알고 싶으면 캡쳐키를 눌러 원하는 장면을 획득할 수 있다. 사용자가 캡쳐키를 누르면 제어부(130)는 단계 630으로 진행하여 캡쳐키가 눌러진 순간의 이미지를 캡쳐한다. 이어서 제어부(130)는 단계 640으로 진행하여 캡쳐한 이미지로부터 이미지 패턴 또는 문자를 인식한다.
그리고 제어부(130)는 단계 650으로 진행하여 인식한 이미지 패턴 또는 문자에 관련한 정보를 예컨대 메모리(140) 상에 구현된 데이터베이스로부터 검색한다. 또는 제어부(130)는 단계 650에서 인식한 이미지 패턴 또는 문자에 관련한 정보를 정보 제공 서버(220)에 요청하여 해당 정보를 얻을 수도 있다. 제어부(130)는 단계 580에서 이와 같이 획득된 이미지 패턴 또는 문자에 관련한 정보를 표시한다.
또, 본 발명의 실시예에 따라 이동통신단말기는 촬영된 이미지에서 인식 대상이 여러 개인 경우에2이상의 패턴 인식 대상을 선택하여 그 관련 정보를 획득할 수 있도록 구성된다. 도 7을 2 이상의 패턴 인식 대상이 존재하는 경우에 그 관련 정보를 획득하기 위한 제어 흐름을 설명한다.
도 7을 참조하면 제어부(130)는 단계 710에서 소정 이미지를 촬영한 후 단계 720에서 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식한다. 그리고 제어부(130)는 단계 730에서 인식된 이미지 패턴 또는 문자 인식 대상이 2 이상인지를 판단한다. 예컨대, 여러가지 패턴 인식 대상이 예컨대, 버스의 번호판이 하나의 이미지에 포함될 수 있다. 제어부(130)는 촬영한 이미지에 하나의 패턴 인식 대상만이 포함되어 있으면 단계 760으로 진행한다.
한편, 제어부(130)는 촬영한 이미지에 여러가지 패턴 인식 대상이 포함되어 있으면 단계 740으로 진행하여 2이상의패턴 인식 대상을 표시한다. 즉, 제어부(130)는 사용자에게 여러가지 패턴 인식 대상을 표시하고 이들중 하나를 사용자에게 선택하도록 안내한다. 표시부(150)에는 제어부(130)가 인식한 패턴 인식 대상이 차례로 표시되고 사용자는 커서를 움직이거나 번호를 선택함으로써 원하는 패턴 인식 대상을 선택할 수 있다. 제어부(130)는 단계 750에서 사용자에 의해 패턴 인식 대상이 선택되는 지를 판단한다. 이어서 제어부(130)는 사용자에 의해 패턴 인식 대상이 선택되면 단계 760으로 진행하여 해당 인식한 패턴 또는 문자를 정보 제공 서버(220)에 전송한다.
이어서, 제어부(130)는 단계 770에서 정보 제공 서버(220)로부터 해당 패턴 또는 문자에 관한 정보를 수신하면 단계 780에서 해당 정보를 표시한다.본 실시예에서는 패턴 인식 대상을 이동통신단말기(100)에서 인식하는 것으로 기재하였으나 정보 제공 서버가 촬영된 이미지로부터 패턴 인식 대상이 여러 개임을 인식하여 이동통신단말기에 대해 어떤 패턴 인식 대상을 선택할지를 질의할 수도 있다.
상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시할 수 있다. 예컨대, 전술한 본 발명에 따른 여러 실시예들은 서로 결합되어 수행될 수 있음은 당업자에게 명백하다. 따라서 본 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위와 특허청구범위의 균등한 것에 의해 정해져야 한다.
전술한 바에 같은 본원 발명에 따르면 이동통신단말기에 구비된 카메라 모듈을 이용하기 때문에 카메라 모듈의 응용 범위를 넓히면서 사용자의 사용 편의성을 증대시킬 수 있다. 또, 이동통신단말기에서 카메라 모듈을 이용하여 캡쳐한 이미지에 관련된 정보를 검색하므로, 사용자는 이미지를 촬영하는 것만으로도 원하는 정보를 손쉽게 획득할 수 있다.

Claims (8)

  1. 이동통신단말기와 정보 제공 서버를 포함하는 시스템에서 이미지와 관련한 정보를 사용자에게 제공하는 방법에 있어서,
    상기 이동통신단말기가 소정 이미지를 촬영하며 상기 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하고 그 결과를 상기 정보 제공 서버에 전송하는 단계와,
    상기 정보 제공 서버가 상기 인식한 이미지 패턴 또는 문자에 관련된 정보를 검색하여 상기 이동통신단말기로 전송하는 단계와,
    상기 이동통신단말기가 상기 정보 제공 서버로부터의 검색 정보를 표시하는 단계를 포함하는 것을 특징으로 하는 방법.
  2. 이동통신단말기와 정보 제공 서버를 포함하는 시스템에서 이미지와 관련한 정보를 사용자에게 제공하는 방법에 있어서,
    상기 이동통신단말기가 소정 이미지를 촬영하여 상기 정보 제공 서버에 전송하는 단계와,
    상기 정보 제공 서버가 상기 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하는 단계와,
    상기 정보 제공 서버가 상기 이미지 패턴 또는 문자에 관련된 정보를 검색하 여 상기 이동통신단말기로 전송하는 단계와,
    상기 이동통신단말기가 상기 정보 제공 서버로부터의 검색 정보를 표시하는 단계를 포함하는 것을 특징으로 하는 방법.
  3. 이동통신단말기와 정보 제공 서버를 포함하는 시스템에서 이미지와 관련한 정보를 사용자에게 제공하는 방법에 있어서,
    상기 이동통신단말기가 소정 이미지를 촬영하며 상기 촬영한 이미지를 상기 정보 제공 서버에 전송하는 단계와,
    상기 정보 제공 서버가 상기 촬영한 이미지에 관련된 정보를 검색하여 상기 이동통신단말기로 전송하는 단계와,
    상기 이동통신단말기가 상기 정보 제공 서버로부터의 검색 정보를 표시하는 단계를 포함하는 것을 특징으로 하는 방법.
  4. 이미지와 관련한 정보를 사용자에게 제공하는 시스템에 있어서,
    소정 이미지를 촬영하여 전송하는 이동통신단말기와,
    상기 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하고, 상기 인식한 이미지 패턴 또는 문자에 관련된 정보를 검색하여 상기 이동통신단말기로 전송하는 정보 제공 서버를 포함하며,
    상기 이동통신단말기는 상기 정보 제공 서버로부터의 검색 정보를 수신하면 표시하는 것을 특징으로 하는 시스템.
  5. 이미지와 관련한 정보를 사용자에게 제공하는 이동통신단말기에 있어서,
    이미지를 촬영하기 위한 카메라 모듈과,
    이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스와,
    상기 카메라 모듈을 이용하여 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하여 상기 데이터베이스에서 그 관련 정보를 검색한 후 사용자에게 제공하는 제어부를 포함하는 것을 특징으로 하는 이동통신단말기.
  6. 제5항에 있어서, 상기 제어부는 상기 이미지중 일부를 캡쳐하기 위한 캡쳐 창을 표시하고 사용자로부터의 키입력에 따라 상기 캡쳐 창의 위치 또는 크기를 변경하는 것을 특징으로 하는 이동통신단말기.
  7. 이동통신단말기와 정보 제공 서버를 포함하는 시스템에서 이미지와 관련한 정보를 사용자에게 제공하는 방법에 있어서,
    상기 이동통신단말기가 소정 이미지를 촬영하며 상기 촬영한 이미지로부터 이미지 패턴 또는 문자를 인식하고 그 결과 2 이상의 패턴 인식 대상이 존재하면 사용자로부터 하나의 패턴 인식 대상을 선택받아 상기 정보 제공 서버에 전송하는 단계와,
    상기 정보 제공 서버가 상기 인식한 이미지 패턴 또는 문자에 관련된 정보를 검색하여 상기 이동통신단말기로 전송하는 단계와,
    상기 이동통신단말기가 상기 정보 제공 서버로부터의 검색 정보를 표시하는 단계를 포함하는 것을 특징으로 하는 방법.
  8. 이미지와 관련한 정보를 사용자에게 제공하는 이동통신단말기에 있어서,
    소정 동영상을 표시하기 위한 표시부와,
    이미지, 이미지 패턴 또는 문자와 그 관련 정보를 저장하기 위한 데이터베이스와,
    상기 동영상의 표시중 사용자에 의해 캡쳐키가 눌러지면 상기 캡쳐키가 눌러진 순간의 이미지를 상기 동영상으로부터 캡쳐한 후 상기 캡쳐한 이미지로부터 이미지 패턴 또는 문자를 인식하여 상기 데이터베이스에서 그 관련 정보를 검색한 후 사용자에게 제공하는 제어부를 포함하는 것을 특징으로 하는 이동통신단말기.
KR1020050053256A 2005-06-20 2005-06-20 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기 KR100754656B1 (ko)

Priority Applications (9)

Application Number Priority Date Filing Date Title
KR1020050053256A KR100754656B1 (ko) 2005-06-20 2005-06-20 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기
RU2007147402/09A RU2391797C2 (ru) 2005-06-20 2006-06-20 Способ и система, предназначенные для предоставления информации, связанной с изображением, пользователю, и подвижный терминал, предназначенный для этого
JP2006170314A JP2007006488A (ja) 2005-06-20 2006-06-20 イメージに係る情報をユーザーに提供する方法及びシステム、並びにこのための移動通信端末機
EP06012636A EP1737198A3 (en) 2005-06-20 2006-06-20 Method and system for providing photographed image-related information to user, and mobile terminal therefor
PCT/KR2006/002352 WO2006137667A1 (en) 2005-06-20 2006-06-20 Method and system for providing image-related information to user, and mobile terminal therefor
CN2010102249311A CN101883197A (zh) 2005-06-20 2006-06-20 用于向用户提供图像相关信息的方法和系统及其移动终端
US11/471,427 US20070036469A1 (en) 2005-06-20 2006-06-20 Method and system for providing image-related information to user, and mobile terminal therefor
CNA2006100930646A CN1885291A (zh) 2005-06-20 2006-06-20 用于向用户提供图像相关信息的方法和系统及其移动终端
JP2009157066A JP2009219166A (ja) 2005-06-20 2009-07-01 イメージに係る情報をユーザーに提供する方法及びシステム、並びにこのための移動通信端末機

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050053256A KR100754656B1 (ko) 2005-06-20 2005-06-20 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기

Publications (2)

Publication Number Publication Date
KR20060133430A true KR20060133430A (ko) 2006-12-26
KR100754656B1 KR100754656B1 (ko) 2007-09-03

Family

ID=37072959

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050053256A KR100754656B1 (ko) 2005-06-20 2005-06-20 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기

Country Status (7)

Country Link
US (1) US20070036469A1 (ko)
EP (1) EP1737198A3 (ko)
JP (2) JP2007006488A (ko)
KR (1) KR100754656B1 (ko)
CN (2) CN1885291A (ko)
RU (1) RU2391797C2 (ko)
WO (1) WO2006137667A1 (ko)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100838580B1 (ko) * 2007-01-17 2008-06-20 한국과학기술원 이동통신단말기를 이용한 상점정보 제공 시스템 및 그 방법
KR100916817B1 (ko) * 2008-03-26 2009-09-14 엔에이치엔(주) 이동 단말의 데이터에 매칭되는 웹 컨텐츠를 제공하는 방법및 시스템
KR100948033B1 (ko) * 2007-09-05 2010-03-19 이니텍(주) 통신 네트워크를 통한 금융 상품 판매 시스템 및 그 방법
KR100957575B1 (ko) * 2009-10-01 2010-05-11 (주)올라웍스 단말기의 움직임 또는 자세에 기초하여 비주얼 서치를 수행하기 위한 방법, 단말기 및 컴퓨터 판독 가능한 기록 매체
KR101035744B1 (ko) * 2008-12-08 2011-05-20 삼성전자주식회사 카메라를 이용한 문자 인식 장치 및 방법
WO2011139131A2 (ko) * 2010-05-07 2011-11-10 엔에이치엔(주) 모바일 카메라를 이용한 다중 정보 인식 및 이를 이용한 검색 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
KR20110129714A (ko) * 2010-05-26 2011-12-02 엘지전자 주식회사 영상표시기기, 그 시스템 및 그 영상표시기기에 표시된 오브젝트 검색방법
WO2013125802A1 (en) * 2012-02-24 2013-08-29 Samsung Electronics Co., Ltd. Method of capturing content and mobile terminal thereof
KR101338818B1 (ko) * 2010-11-29 2013-12-06 주식회사 팬택 이동 단말기 및 이를 이용한 정보 표시 방법
US9529520B2 (en) 2012-02-24 2016-12-27 Samsung Electronics Co., Ltd. Method of providing information and mobile terminal thereof
US9659034B2 (en) 2012-02-24 2017-05-23 Samsung Electronics Co., Ltd. Method of providing capture data and mobile terminal thereof
US9773024B2 (en) 2012-02-24 2017-09-26 Samsung Electronics Co., Ltd. Method of sharing content and mobile terminal thereof
US10223466B2 (en) 2014-05-23 2019-03-05 Samsung Electronics Co., Ltd. Method for searching and device thereof
KR20200007946A (ko) * 2017-05-16 2020-01-22 구글 엘엘씨 캡처된 이미지들과 관련된 메타 데이터 저장
US11314826B2 (en) 2014-05-23 2022-04-26 Samsung Electronics Co., Ltd. Method for searching and device thereof

Families Citing this family (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9171202B2 (en) 2005-08-23 2015-10-27 Ricoh Co., Ltd. Data organization and access for mixed media document system
US8156116B2 (en) 2006-07-31 2012-04-10 Ricoh Co., Ltd Dynamic presentation of targeted information in a mixed media reality recognition system
US8184155B2 (en) 2007-07-11 2012-05-22 Ricoh Co. Ltd. Recognition and tracking using invisible junctions
US8856108B2 (en) 2006-07-31 2014-10-07 Ricoh Co., Ltd. Combining results of image retrieval processes
US8510283B2 (en) 2006-07-31 2013-08-13 Ricoh Co., Ltd. Automatic adaption of an image recognition system to image capture devices
US8332401B2 (en) 2004-10-01 2012-12-11 Ricoh Co., Ltd Method and system for position-based image matching in a mixed media environment
US8989431B1 (en) 2007-07-11 2015-03-24 Ricoh Co., Ltd. Ad hoc paper-based networking with mixed media reality
US8144921B2 (en) 2007-07-11 2012-03-27 Ricoh Co., Ltd. Information retrieval using invisible junctions and geometric constraints
US8600989B2 (en) 2004-10-01 2013-12-03 Ricoh Co., Ltd. Method and system for image matching in a mixed media environment
US8156427B2 (en) 2005-08-23 2012-04-10 Ricoh Co. Ltd. User interface for mixed media reality
US8369655B2 (en) 2006-07-31 2013-02-05 Ricoh Co., Ltd. Mixed media reality recognition using multiple specialized indexes
US8521737B2 (en) 2004-10-01 2013-08-27 Ricoh Co., Ltd. Method and system for multi-tier image matching in a mixed media environment
US8825682B2 (en) * 2006-07-31 2014-09-02 Ricoh Co., Ltd. Architecture for mixed media reality retrieval of locations and registration of images
US8868555B2 (en) 2006-07-31 2014-10-21 Ricoh Co., Ltd. Computation of a recongnizability score (quality predictor) for image retrieval
US7970171B2 (en) 2007-01-18 2011-06-28 Ricoh Co., Ltd. Synthetic image and video generation from ground truth data
US8949287B2 (en) 2005-08-23 2015-02-03 Ricoh Co., Ltd. Embedding hot spots in imaged documents
US8385589B2 (en) 2008-05-15 2013-02-26 Berna Erol Web-based content detection in images, extraction and recognition
US7702673B2 (en) 2004-10-01 2010-04-20 Ricoh Co., Ltd. System and methods for creation and use of a mixed media environment
US9405751B2 (en) 2005-08-23 2016-08-02 Ricoh Co., Ltd. Database for mixed media document system
US8838591B2 (en) 2005-08-23 2014-09-16 Ricoh Co., Ltd. Embedding hot spots in electronic documents
US7812986B2 (en) * 2005-08-23 2010-10-12 Ricoh Co. Ltd. System and methods for use of voice mail and email in a mixed media environment
US8176054B2 (en) 2007-07-12 2012-05-08 Ricoh Co. Ltd Retrieving electronic documents by converting them to synthetic text
US8335789B2 (en) 2004-10-01 2012-12-18 Ricoh Co., Ltd. Method and system for document fingerprint matching in a mixed media environment
US8086038B2 (en) 2007-07-11 2011-12-27 Ricoh Co., Ltd. Invisible junction features for patch recognition
US9384619B2 (en) 2006-07-31 2016-07-05 Ricoh Co., Ltd. Searching media content for objects specified using identifiers
US8276088B2 (en) 2007-07-11 2012-09-25 Ricoh Co., Ltd. User interface for three-dimensional navigation
US9373029B2 (en) 2007-07-11 2016-06-21 Ricoh Co., Ltd. Invisible junction feature recognition for document security or annotation
US9530050B1 (en) 2007-07-11 2016-12-27 Ricoh Co., Ltd. Document annotation sharing
US8195659B2 (en) 2005-08-23 2012-06-05 Ricoh Co. Ltd. Integration and use of mixed media documents
US9176984B2 (en) 2006-07-31 2015-11-03 Ricoh Co., Ltd Mixed media reality retrieval of differentially-weighted links
US8073263B2 (en) * 2006-07-31 2011-12-06 Ricoh Co., Ltd. Multi-classifier selection and monitoring for MMR-based image recognition
US8201076B2 (en) 2006-07-31 2012-06-12 Ricoh Co., Ltd. Capturing symbolic information from documents upon printing
US8676810B2 (en) 2006-07-31 2014-03-18 Ricoh Co., Ltd. Multiple index mixed media reality recognition using unequal priority indexes
US9063952B2 (en) 2006-07-31 2015-06-23 Ricoh Co., Ltd. Mixed media reality recognition with image tracking
US9020966B2 (en) 2006-07-31 2015-04-28 Ricoh Co., Ltd. Client device for interacting with a mixed media reality recognition system
US8489987B2 (en) * 2006-07-31 2013-07-16 Ricoh Co., Ltd. Monitoring and analyzing creation and usage of visual content using image and hotspot interaction
KR101232107B1 (ko) * 2008-02-15 2013-02-12 에스케이플래닛 주식회사 영상을 이용한 쇼핑 정보 서비스 제공 방법, 서버 및시스템
EP2105845B1 (de) * 2008-03-28 2018-05-02 Neoperl GmbH Identifikationsverfahren
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
CN101751566B (zh) * 2008-12-12 2014-02-12 汉王科技股份有限公司 一种基于手持设备的菜谱识别及注解方法和装置
TWI514337B (zh) 2009-02-20 2015-12-21 尼康股份有限公司 Carrying information machines, photographic devices, and information acquisition systems
KR20100120753A (ko) * 2009-05-07 2010-11-17 (주)실리콘화일 문자인식을 위한 이미지 센서 및 이미지 센싱 방법
US8385660B2 (en) 2009-06-24 2013-02-26 Ricoh Co., Ltd. Mixed media reality indexing and retrieval for repeated content
KR20110005174A (ko) 2009-07-09 2011-01-17 엘지전자 주식회사 와인 정보를 설명해주는 이동 단말기 및 그 제어 방법
US9135277B2 (en) 2009-08-07 2015-09-15 Google Inc. Architecture for responding to a visual query
US9087059B2 (en) 2009-08-07 2015-07-21 Google Inc. User interface for presenting search results for multiple regions of a visual query
US8670597B2 (en) 2009-08-07 2014-03-11 Google Inc. Facial recognition with social network aiding
KR101778135B1 (ko) * 2009-08-24 2017-09-14 삼성전자주식회사 오브젝트 정보 제공방법 및 이를 적용한 촬영장치
US8121618B2 (en) * 2009-10-28 2012-02-21 Digimarc Corporation Intuitive computing methods and systems
KR101662595B1 (ko) * 2009-11-03 2016-10-06 삼성전자주식회사 사용자 단말 장치, 경로 안내 시스템 및 그 경로 안내 방법
US8977639B2 (en) 2009-12-02 2015-03-10 Google Inc. Actionable search results for visual queries
US9405772B2 (en) 2009-12-02 2016-08-02 Google Inc. Actionable search results for street view visual queries
US8805079B2 (en) 2009-12-02 2014-08-12 Google Inc. Identifying matching canonical documents in response to a visual query and in accordance with geographic information
US9183224B2 (en) 2009-12-02 2015-11-10 Google Inc. Identifying matching canonical documents in response to a visual query
US8811742B2 (en) 2009-12-02 2014-08-19 Google Inc. Identifying matching canonical documents consistent with visual query structural information
US9852156B2 (en) 2009-12-03 2017-12-26 Google Inc. Hybrid use of location sensor data and visual query to return local listings for visual query
JP4924721B2 (ja) * 2010-01-20 2012-04-25 カシオ計算機株式会社 携帯端末、及び、素材バンク管理システム
CN102480682A (zh) * 2010-11-26 2012-05-30 财团法人资讯工业策进会 移动定位装置、服务器及其移动定位方法
CN102737238A (zh) * 2011-04-01 2012-10-17 洛阳磊石软件科技有限公司 基于手势动作的字符识别系统、方法、及其应用
KR101809750B1 (ko) * 2011-06-22 2018-01-18 엘지전자 주식회사 스캔 이미지 편집 방법, 이의 표시기기
US9058331B2 (en) 2011-07-27 2015-06-16 Ricoh Co., Ltd. Generating a conversation in a social network based on visual search results
CN103067856A (zh) * 2011-10-24 2013-04-24 康佳集团股份有限公司 基于图像识别的地理位置定位方法及系统
KR101851239B1 (ko) * 2011-11-08 2018-04-23 삼성전자 주식회사 휴대단말기의 이미지 표현장치 및 방법
CN103186593A (zh) * 2011-12-30 2013-07-03 牟颖 一种通过手机快速获取电器产品质量认证信息的方法
US9019568B2 (en) * 2012-03-22 2015-04-28 Intuit Inc. Accurately extracting information based on orthogonal images
US8620021B2 (en) 2012-03-29 2013-12-31 Digimarc Corporation Image-related methods and arrangements
US8922662B1 (en) * 2012-07-25 2014-12-30 Amazon Technologies, Inc. Dynamic image selection
US8935246B2 (en) 2012-08-08 2015-01-13 Google Inc. Identifying textual terms in response to a visual query
CN103686256A (zh) * 2012-08-31 2014-03-26 北京网秦天下科技有限公司 一种显示互动信息的方法和系统
CN103678305A (zh) * 2012-08-31 2014-03-26 北京网秦天下科技有限公司 一种基于图片识别显示咨询信息的方法和系统
US9311640B2 (en) 2014-02-11 2016-04-12 Digimarc Corporation Methods and arrangements for smartphone payments and transactions
CN105008251B (zh) * 2013-03-13 2017-10-31 日本电气株式会社 核对系统、终端装置、服务器装置及核对方法
KR20140112914A (ko) * 2013-03-14 2014-09-24 삼성전자주식회사 휴대단말기의 어플리케이션 정보 처리 장치 및 방법
CN103927552A (zh) * 2014-04-23 2014-07-16 北京奇虎科技有限公司 匹配目标试题答案的方法和装置
CN105208299A (zh) * 2014-04-29 2015-12-30 杭州美盛红外光电技术有限公司 热像拍摄装置、热像处理装置和热像拍摄方法、热像处理方法
KR102299262B1 (ko) * 2015-06-23 2021-09-07 삼성전자주식회사 단말기에서 부가 컨텐츠를 제공하는 방법 및 이를 이용하는 단말기
CN105606086A (zh) * 2015-08-28 2016-05-25 宇龙计算机通信科技(深圳)有限公司 一种定位方法及终端
CN105824928A (zh) * 2016-03-17 2016-08-03 广东欧珀移动通信有限公司 移动终端、服务器、基于内容的图像识别搜索方法及系统
JP7111175B2 (ja) * 2018-11-05 2022-08-02 日本電気株式会社 物体認識システム、認識装置、物体認識方法および物体認識プログラム

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1145277A (ja) * 1997-07-29 1999-02-16 Sony Corp 情報検索装置及び情報検索システム
JP2000306365A (ja) * 1999-04-16 2000-11-02 Sony Corp 編集支援システム及び編集支援システムの制御装置
AU2001241083A1 (en) * 2000-03-09 2001-09-17 Takashi Kitagawa Information processing apparatus with optical data reader, servers, and electronic commerce method
JP2002048586A (ja) * 2000-07-31 2002-02-15 Takatsugu Kitagawa ナビゲーション方法、携帯情報機器、ナビゲーション用サーバ、及び光学的データ解析用サーバ
JP2001281529A (ja) * 2000-03-29 2001-10-10 Minolta Co Ltd デジタルカメラ
JP4443735B2 (ja) * 2000-07-11 2010-03-31 富士フイルム株式会社 撮像装置およびその動作制御方法
US7016532B2 (en) * 2000-11-06 2006-03-21 Evryx Technologies Image capture and identification system and process
JP2002288178A (ja) * 2001-03-23 2002-10-04 Toshiba Corp マルチメディア情報収集管理装置およびプログラム
JP4240859B2 (ja) * 2001-09-05 2009-03-18 株式会社日立製作所 携帯端末装置及び通信システム
US20030076408A1 (en) * 2001-10-18 2003-04-24 Nokia Corporation Method and handheld device for obtaining an image of an object by combining a plurality of images
US20030200078A1 (en) * 2002-04-19 2003-10-23 Huitao Luo System and method for language translation of character strings occurring in captured image data
JP2004072591A (ja) * 2002-08-08 2004-03-04 Canon Inc 記録装置
KR20040017511A (ko) * 2002-08-21 2004-02-27 나중열 휴대폰을 이용한 전자사전기능을 갖는 문자인식 스캐너
JP4593873B2 (ja) * 2002-11-22 2010-12-08 フリュー株式会社 画像検索システム、端末装置、サーバ、および画像検索方法
DE10354556B4 (de) * 2002-11-25 2008-10-09 Samsung Electronics Co., Ltd., Suwon Vorrichtung und Verfahren zum Anzeigen von Bildern in einem mobilen Endgerät
JP2004201191A (ja) * 2002-12-20 2004-07-15 Nec Corp 画像処理送信システム、携帯電話、画像処理送信方法、および、画像処理送信プログラム
JP2004234465A (ja) 2003-01-31 2004-08-19 Toshiba Corp 検索サーバ、携帯端末及び情報提供システム
WO2004080064A1 (ja) * 2003-03-06 2004-09-16 Fujitsu Limited 情報処理装置、情報処理方法及び情報処理プログラム
WO2004080097A1 (en) * 2003-03-07 2004-09-16 Ktfreetel Co., Ltd Method for providing mobile service using code-pattern
KR101009974B1 (ko) * 2003-03-20 2011-01-21 주식회사 아이콘랩 코드 패턴을 이용한 지리 정보 제공장치 및 그 방법
JP2004287808A (ja) * 2003-03-20 2004-10-14 Olympus Corp 携帯型情報端末装置
US20040193676A1 (en) * 2003-03-24 2004-09-30 Nokia Corporation System, terminal and method of transmitting information utilizing a variable-string uniform resource locator (URL)
JP4037790B2 (ja) * 2003-05-02 2008-01-23 アルパイン株式会社 ナビゲーション装置
JP4269811B2 (ja) * 2003-07-09 2009-05-27 株式会社日立製作所 携帯電話
DE10336320A1 (de) * 2003-08-05 2005-03-03 Deutsche Telekom Ag Ubiquitäre Dienste
JP4383790B2 (ja) * 2003-08-06 2009-12-16 日立オムロンターミナルソリューションズ株式会社 携帯情報端末
US20050073436A1 (en) * 2003-08-22 2005-04-07 Negreiro Manuel I. Method and system for alerting a patrol officer of a wanted vehicle
US8723964B2 (en) * 2003-09-12 2014-05-13 Sony Corporation Method and device for communication using an optical sensor
JP2005100277A (ja) * 2003-09-26 2005-04-14 Mazda Motor Corp 情報処理装置、サーバ、情報処理方法及びプログラム
CA2442603C (en) * 2003-10-01 2016-11-22 Aryan Saed Digital composition of a mosaic image
JP4443194B2 (ja) * 2003-11-10 2010-03-31 日立オムロンターミナルソリューションズ株式会社 携帯端末の文字認識における処理対象選択方法および携帯端末
US8421872B2 (en) * 2004-02-20 2013-04-16 Google Inc. Image base inquiry system for search engines for mobile telephones with integrated camera
KR20060072905A (ko) * 2004-12-24 2006-06-28 주식회사 팬택 이동통신단말기에서의 사진 패턴 정보를 이용한 전화 발신방법

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100838580B1 (ko) * 2007-01-17 2008-06-20 한국과학기술원 이동통신단말기를 이용한 상점정보 제공 시스템 및 그 방법
KR100948033B1 (ko) * 2007-09-05 2010-03-19 이니텍(주) 통신 네트워크를 통한 금융 상품 판매 시스템 및 그 방법
KR100916817B1 (ko) * 2008-03-26 2009-09-14 엔에이치엔(주) 이동 단말의 데이터에 매칭되는 웹 컨텐츠를 제공하는 방법및 시스템
US8594424B2 (en) 2008-12-08 2013-11-26 Samsung Electronics Co., Ltd Apparatus and method for recognizing characters using a camera
KR101035744B1 (ko) * 2008-12-08 2011-05-20 삼성전자주식회사 카메라를 이용한 문자 인식 장치 및 방법
US8818098B2 (en) 2008-12-08 2014-08-26 Samsung Electronics Co., Ltd Apparatus and method for recognizing characters using a camera
KR100957575B1 (ko) * 2009-10-01 2010-05-11 (주)올라웍스 단말기의 움직임 또는 자세에 기초하여 비주얼 서치를 수행하기 위한 방법, 단말기 및 컴퓨터 판독 가능한 기록 매체
WO2011040710A3 (ko) * 2009-10-01 2011-06-30 (주)올라웍스 단말기의 움직임 또는 자세에 기초하여 비주얼 서치를 수행하기 위한 방법, 단말기 및 컴퓨터 판독 가능한 기록 매체
WO2011139131A2 (ko) * 2010-05-07 2011-11-10 엔에이치엔(주) 모바일 카메라를 이용한 다중 정보 인식 및 이를 이용한 검색 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
WO2011139131A3 (ko) * 2010-05-07 2012-04-19 엔에이치엔(주) 모바일 카메라를 이용한 다중 정보 인식 및 이를 이용한 검색 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
KR20110129714A (ko) * 2010-05-26 2011-12-02 엘지전자 주식회사 영상표시기기, 그 시스템 및 그 영상표시기기에 표시된 오브젝트 검색방법
KR101338818B1 (ko) * 2010-11-29 2013-12-06 주식회사 팬택 이동 단말기 및 이를 이용한 정보 표시 방법
WO2013125802A1 (en) * 2012-02-24 2013-08-29 Samsung Electronics Co., Ltd. Method of capturing content and mobile terminal thereof
US9275077B2 (en) 2012-02-24 2016-03-01 Samsung Electronics Co., Ltd. Method of capturing content and mobile terminal thereof
US9529520B2 (en) 2012-02-24 2016-12-27 Samsung Electronics Co., Ltd. Method of providing information and mobile terminal thereof
US9659034B2 (en) 2012-02-24 2017-05-23 Samsung Electronics Co., Ltd. Method of providing capture data and mobile terminal thereof
US9773024B2 (en) 2012-02-24 2017-09-26 Samsung Electronics Co., Ltd. Method of sharing content and mobile terminal thereof
US10223466B2 (en) 2014-05-23 2019-03-05 Samsung Electronics Co., Ltd. Method for searching and device thereof
US11080350B2 (en) 2014-05-23 2021-08-03 Samsung Electronics Co., Ltd. Method for searching and device thereof
US11157577B2 (en) 2014-05-23 2021-10-26 Samsung Electronics Co., Ltd. Method for searching and device thereof
US11314826B2 (en) 2014-05-23 2022-04-26 Samsung Electronics Co., Ltd. Method for searching and device thereof
US11734370B2 (en) 2014-05-23 2023-08-22 Samsung Electronics Co., Ltd. Method for searching and device thereof
KR20200007946A (ko) * 2017-05-16 2020-01-22 구글 엘엘씨 캡처된 이미지들과 관련된 메타 데이터 저장
US10893202B2 (en) 2017-05-16 2021-01-12 Google Llc Storing metadata related to captured images
KR20210024222A (ko) * 2017-05-16 2021-03-04 구글 엘엘씨 캡처된 이미지들과 관련된 메타 데이터 저장

Also Published As

Publication number Publication date
EP1737198A3 (en) 2007-05-30
JP2007006488A (ja) 2007-01-11
KR100754656B1 (ko) 2007-09-03
US20070036469A1 (en) 2007-02-15
CN1885291A (zh) 2006-12-27
CN101883197A (zh) 2010-11-10
WO2006137667A1 (en) 2006-12-28
RU2007147402A (ru) 2009-06-27
JP2009219166A (ja) 2009-09-24
EP1737198A2 (en) 2006-12-27
RU2391797C2 (ru) 2010-06-10

Similar Documents

Publication Publication Date Title
KR100754656B1 (ko) 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기
US20050054352A1 (en) Introduction system and method utilizing mobile communicators
KR100724939B1 (ko) 카메라부를 이용한 유저 인터페이스 구현 방법 및 이를위한 이동통신단말기
KR100783550B1 (ko) 무선 통신 시스템에서 휴대 단말기의 위치정보 제공 시스템및 방법
EP3432588B1 (en) Method and system for processing image information
JP2002191067A (ja) 携帯通信機器
US20050096087A1 (en) Portable terminal capable of copying data between subscriber identification module cards and data copy method using the same
KR100692005B1 (ko) 사진별 메모 입력 기능을 갖는 이동통신 단말기 및 그제어 방법
US20090291669A1 (en) Method for creating photo files in accordance with scheduler function and mobile communication terminal supporting the same
JPH06269044A (ja) 地域情報サービスシステム
US20070120952A1 (en) Method for image communication in mobile equipment
US7148918B1 (en) Electronic camera system capable of remote data storing
KR20030061505A (ko) 발신자정보를 전송하는 장치 및 방법
US20060109354A1 (en) Mobile communication terminal for controlling a zoom function and a method thereof
US20060142050A1 (en) Method and device for telephone number search in a mobile terminal
KR100567545B1 (ko) 이동통신 단말기의 촬영 사진 위치 정보 저장 관리 방법
US20060109355A1 (en) Mobile communication terminal having a camera function and a method for implementing the camera function
US7099703B1 (en) Data communication system
KR20050046147A (ko) 이동통신단말기에서의 사진 이름 생성 방법
KR100578519B1 (ko) 이동통신 단말기를 이용한 교통 및 지리정보 제공 시스템및 방법
JP2002125208A (ja) 画像電話システム
JP4120494B2 (ja) 携帯情報端末及びその画像管理方法並びにプログラム
JP2004297122A (ja) 携帯通信方法、携帯通信システムおよびそれに用いる携帯通信端末
KR100547813B1 (ko) 휴대 단말기에서 호출 서비스 제공방법
JP4293101B2 (ja) 電話装置及び発信者番号表示システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Publication of correction
FPAY Annual fee payment

Payment date: 20120730

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130730

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140730

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee