KR100930802B1 - 이미지를 이용한 브라우저 제어 방법 및 시스템 - Google Patents

이미지를 이용한 브라우저 제어 방법 및 시스템 Download PDF

Info

Publication number
KR100930802B1
KR100930802B1 KR1020070065339A KR20070065339A KR100930802B1 KR 100930802 B1 KR100930802 B1 KR 100930802B1 KR 1020070065339 A KR1020070065339 A KR 1020070065339A KR 20070065339 A KR20070065339 A KR 20070065339A KR 100930802 B1 KR100930802 B1 KR 100930802B1
Authority
KR
South Korea
Prior art keywords
image
command
browser
recommendation
recognized
Prior art date
Application number
KR1020070065339A
Other languages
English (en)
Other versions
KR20090001160A (ko
Inventor
황준호
양병석
나건표
김동현
김종태
Original Assignee
엔에이치엔(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔에이치엔(주) filed Critical 엔에이치엔(주)
Priority to KR1020070065339A priority Critical patent/KR100930802B1/ko
Priority to JP2007270689A priority patent/JP5140377B2/ja
Priority to CN2008100858676A priority patent/CN101334790B/zh
Priority to US12/055,677 priority patent/US8121413B2/en
Priority to TW097120412A priority patent/TW200901035A/zh
Publication of KR20090001160A publication Critical patent/KR20090001160A/ko
Application granted granted Critical
Publication of KR100930802B1 publication Critical patent/KR100930802B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 이미지를 이용한 브라우저 제어 방법 및 시스템에 관한 것으로, 이 방법은 이미지를 입력받는 단계, 상기 이미지를 인식하는 단계, 그리고 상기 인식된 이미지에 기초한 명령을 실행하는 단계를 포함한다. 본 발명에 의하면, 사용자가 입력한 이미지에 기초한 명령을 브라우저에서 실행시킬 수 있다. 또한 브라우저 창에 각종 기능 버튼을 표시할 필요가 없게 되므로 화면을 보다 효율적으로 이용할 수 있다.
브라우저, 명령, 이미지, 문자, 기호, 이미지 입력 인터페이스

Description

이미지를 이용한 브라우저 제어 방법 및 시스템 {METHOD AND SYSTEM FOR CONTROLLING BROWSER BY USING IMAGE}
도 1은 본 발명의 한 실시예에 따른 이미지를 이용한 브라우저 제어 시스템을 설명하기 위한 블록도이다.
도 2는 도 1에 도시한 사용자 단말기의 한 예를 도시한 블록도이다.
도 3은 본 발명의 한 실시예에 따른 이미지를 이용한 브라우저 제어 방법을 도시한 흐름도이다.
도 4는 본 발명의 실시예에 따른 이미지 명령 컴포넌트가 실행되어 있는 웹 페이지의 한 예를 도시한 개략도이다.
도 5는 본 발명의 실시예에 따른 이미지 명령 컴포넌트가 실제로 구현되어 있는 웹 페이지의 한 예를 도시한 도면이다.
도 6은 본 발명의 다른 실시예에 따른 이미지를 이용한 브라우저 제어 방법을 도시한 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
10: 통신망, 100: 사용자 단말기,
110: 입력부, 120: 표시부,
130: 웹 브라우저, 140: 이미지 명령 컴포넌트,
200: 웹 서버, 300: 이미지 처리 서버,
400: 웹 페이지 화면, 410: 이미지 입력 인터페이스,
412: 이미지 입력란, 414: 추천란,
420: 검색창
본 발명은 이미지를 이용한 브라우저 제어 방법 및 시스템에 관한 것이다.
최근 들어, 초고속 인터넷이 급속도로 보급됨에 따라 인터넷은 현대 생활에 없어서는 안 될 필수품이 되고 있다. 인터넷 사용자들은 통신 단말 장치를 통해 검색 사이트, 게임 사이트 또는 커뮤니티 사이트 등에 접속하여 다양한 웹 서비스를 이용하고 있다.
웹 서비스 이용을 위해서 사용자는 웹 브라우저에 각종 명령 및 데이터를 입력하여 웹 브라우징을 행한다. 예컨대 사용자는 웹 서핑을 하면서 주소창에 URL(uniform resource locator)을 입력하거나, 검색창에 검색어를 입력하여 원하는 정보를 얻을 수 있다. 또한 뒤로 가기, 앞으로 가기, 스크롤, 새로 고침 등의 웹 브라우징 명령을 통해 여러 웹 페이지로 이동할 수 있다.
일반적으로 사용자는 웹 브라우징을 위해 키보드나 마우스를 입력 수단으로 사용한다. 키보드는 주로 한글이나 영문 알파벳 같은 텍스트를 입력하는 데 사용되고 마우스는 웹 브라우저 창의 각종 버튼(뒤로 가기, 앞으로 가기, 새로 고침 버 튼 등) 및 명령을 선택하거나 웹 페이지 상에서 하이퍼링크를 선택하는 데 이용된다.
그런데 한글이나 영문 알파벳을 키보드를 통해 입력하는 것은 수월할 수 있으나 한자나 아라비아 문자 또는 각종 기호를 키보드를 통해 입력하는 것은 불편하다. 더욱이 키보드를 사용하기 어려운 사용자 단말기의 경우는 더욱 그러하다. 휴대폰, PDA 등과 같은 무선 단말기의 경우에도 키패드를 통해 입력할 수 있는 문자 또는 기호의 수가 제한되어 있으므로 원하는 문자를 입력하기 어렵다.
한편 소형 컴퓨터나 무선 단말기의 경우 화면이 작기 때문에 브라우저 창에 각종 기능 버튼 및 메뉴를 표시할 경우 실제 사용자가 원하는 정보를 표시할 수 있는 영역이 감소된다.
따라서 본 발명이 이루고자 하는 기술적 과제는 사용자가 보다 용이하게 브라우저 명령을 실행할 수 있고, 브라우저 화면을 효율적으로 이용할 수 있도록 하는 이미지를 이용한 브라우저 제어 방법 및 시스템을 제공하는 것이다.
이러한 기술적 과제를 이루기 위한 본 발명의 한 실시예에 따른 이미지를 이용한 브라우저 제어 방법은, 이미지를 입력받는 단계, 상기 이미지를 인식하는 단계, 그리고 상기 인식된 이미지에 기초한 명령을 실행하는 단계를 포함한다.
상기 명령 실행 단계는 상기 인식된 이미지에 대응하는 브라우저 메뉴 명령 또는 웹 페이지 메뉴 명령을 실행하는 단계를 포함할 수 있다.
상기 명령 실행 단계는 상기 인식된 이미지에 대응하는 문자를 검색창에 입력하는 단계를 포함할 수 있다.
상기 명령은 브라우저의 DOM(document object model) 객체를 변경하여 실행될 수 있다.
상기 인식된 이미지에 기초한 추천 문자 또는 추천 기호를 추출하여 표시하는 단계를 더 포함하고, 상기 명령 실행 단계는 상기 추천 문자 또는 상기 추천 기호 중에서 선택된 문자 또는 기호에 대응하는 명령을 실행하는 단계를 포함할 수 있다.
상기 인식된 이미지에 대응하는 명령이 존재하는지 판단하는 단계를 더 포함하고, 상기 명령 실행 단계는, 상기 판단 단계에서 상기 인식된 이미지에 대응하는 명령이 존재하는 것으로 판단하면 상기 인식된 이미지에 대응하는 명령을 실행하는 단계, 그리고 상기 판단 단계에서 상기 인식된 이미지에 대응하는 명령이 존재하지 않은 것으로 판단하면 상기 인식된 이미지에 기초한 추천 문자 또는 추천 기호로부터 선택된 문자 또는 기호에 대응하는 명령을 실행하는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따른 컴퓨터로 읽을 수 있는 매체는 상기한 방법 중 어느 하나를 컴퓨터에 실행시키기 위한 프로그램을 기록한다.
본 발명의 다른 실시예에 따른 이미지를 이용한 브라우저 제어 시스템은, 이미지 명령 컴포넌트 및 웹 페이지 정보를 사용자 단말기에 제공하는 웹 서버를 포함하며, 상기 이미지 명령 컴포넌트는 입력된 이미지에 기초한 명령을 브라우저에서 실행하도록 상기 브라우저에 이벤트를 전달한다.
상기 명령은 브라우저 메뉴 명령 및 웹 페이지 메뉴 명령 중 적어도 하나를 포함할 수 있다.
상기 입력된 이미지에 기초한 명령은 상기 입력된 이미지에 대응하는 문자를 웹 페이지 검색창에 입력하는 명령일 수 있다.
상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하여 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달할 수 있다.
상기 이미지 명령 컴포넌트로부터의 상기 입력된 이미지를 인식하여 추천 문자 또는 추천 기호를 추출하고 상기 추천 문자 또는 추천 기호를 상기 사용자 단말기에 전송하는 이미지 처리 서버를 더 포함할 수 있다.
상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하여 인식된 이미지에 대응하는 명령이 존재하는지 판단하고, 상기 인식된 이미지에 대응하는 명령이 존재하면 상기 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달하고, 상기 인식된 이미지에 대응하는 명령이 존재하지 않으면 상기 추천 문자 또는 상기 추천 기호 중에서 사용자의 선택에 따라 선택된 문자 또는 기호에 대응하는 명령 이벤트를 상기 브라우저에 전달할 수 있다.
상기 이미지 처리 서버는 상기 입력된 이미지를 인식하면서 정확도를 산출하며 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 상기 인식된 이미지에 대응하는 명령 정보를 상기 이미지 명령 컴포넌트에 전송할 수 있다.
상기 이미지 처리 서버는 인식된 이미지에 대응하는 명령이 존재하는지 판단하고, 상기 인식된 이미지에 대응하는 명령이 존재하면 상기 인식된 이미지에 대응 하는 명령 정보를 상기 이미지 명령 컴포넌트에 전송하고, 상기 인식된 이미지에 대응하는 명령이 존재하지 않으면 상기 추천 문자 또는 상기 추천 기호를 상기 사용자 단말기에 전송할 수 있다.
상기 이미지 명령 컴포넌트는 상기 추천 문자 또는 상기 추천 기호를 상기 사용자 단말기에 표시하고, 상기 추천 문자 또는 상기 추천 기호 중에서 사용자의 선택에 따라 선택된 문자 또는 기호에 대응하는 명령 이벤트를 상기 브라우저에 전달할 수 있다.
상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하면서 정확도를 산출하며 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 상기 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달할 수 있다.
상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하여 추천 문자 또는 추천 기호를 추출하고 상기 추천 문자 또는 추천 기호를 상기 사용자 단말기에 표시할 수 있다.
이하 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.
도 1은 본 발명의 한 실시예에 따른 이미지를 이용한 브라우저 제어 시스템을 설명하기 위한 블록도이고, 도 2는 도 1에 도시한 사용자 단말기의 한 예를 도시한 블록도이다.
도 1을 참고하면, 본 발명의 실시예에 따른 이미지를 이용한 브라우저 제어 시스템은 웹 서버(200) 및 이미지 처리 서버(300)를 포함하며, 통신망(10)을 통하여 복수의 사용자 단말기(100)와 연결되어 있다.
통신망(10)은 구내 정보 통신망(local area network, LAN), 도시권 통신망(metropolitan area network, MAN), 광역 통신망(wide area network, WAN), 인터넷 등을 포함하는 데이터 통신망뿐만 아니라 전화망 등을 포함할 수 있고, 유선과 무선을 가리지 않으며, 어떠한 통신 방식을 사용하더라도 상관없다.
사용자 단말기(100)는 사용자가 웹 서비스를 이용하기 위해 사용하는 통신 단말 장치로서, 통신망(10)을 통해 웹 서버(200)에 접속하여 정보를 주고받는다. 사용자 단말기(100)는 데스크톱 컴퓨터뿐만 아니라 노트북 컴퓨터, 워크스테이션, 팜톱(palmtop) 컴퓨터, UMPC(ultra mobile personal computer), 태블릿 PC, 개인 휴대 정보 단말기(personal digital assistant, PDA), 웹 패드, 휴대전화 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 단말기로 이루어질 수 있다.
도 2를 참고하면, 사용자 단말기(100)는 입력부(110), 표시부(120), 브라우저(130) 및 이미지 명령 컴포넌트(140)를 포함한다.
입력부(110)는 사용자로부터 정보 또는 명령을 입력받는 기능을 수행하며, 필기 입력이 가능한 마우스, 펜 마우스, 전자 펜, 터치 패드, 터치 패널 또는 태블릿(tablet) 등으로 이루어질 수 있다. 사용자 단말기(100)는 입력부(110)를 통하여 사용자로부터 이미지를 입력받을 수 있다.
표시부(120)는 각종 정보를 화면에 출력하여 사용자에게 제공하는 기능을 수 행하며, LCD(liquid crystal display), CRT(cathode-ray tube), LED(light emitting diode) 모니터 등으로 이루어질 수 있다. 한편 표시부(120)가 터치 스크린을 포함할 수도 있으며 이 경우 입력부(110)의 기능을 함께 가질 수 있다.
브라우저(130)는 웹 페이지를 열어 볼 수 있는 응용 프로그램으로서, 웹 서버(200)에 접속하여 이로부터 웹 페이지 정보를 받아 해당 웹 페이지를 표시부(120)에 표시한다. 브라우저(130)의 예로서 인터넷 익스플로러, 넷스케이프, 모질라, 파이어폭스 등과 같은 상용 프로그램을 들 수 있으나 이에 한정되지 않는다. 또한 사용자 단말기(100)가 무선 단말기일 경우 브라우저(130)는 모바일 웹 브라우저일 수 있다.
이미지 명령 컴포넌트(140)는 웹 서버(200)로부터 전송되어 사용자 단말기(100)에서 실행되며, 플래시, 자바 스크립트, 액티브 X(Active-X) 등의 웹 컴포넌트로 이루어질 수 있으나 이에 한정되지 않는다. 이미지 명령 컴포넌트(140)는 이미지 인식 알고리즘을 구비하여 사용자가 입력한 이미지를 인식할 수 있으며, 인식된 이미지에 대응하는 명령을 브라우저(130)가 실행할 수 있도록 브라우저(130)에 해당 이벤트를 보낸다. 즉, 이미지 명령 컴포넌트(140)는 브라우저(130) 내에 탑재된 스크립트 머신에 명령 이벤트를 전송하고 스크립트 머신은 이에 대응하는 스크립트를 실행하여 CSS(cascading style sheets)를 변경하거나 브라우저(130)의 DOM(document object model) 객체를 변경함으로써 해당 명령을 실행시킬 수 있다. 예를 들어 브라우저(130)의 텍스트 에디터 DOM 객체의 TextBox의 밸류값이 바뀌게 됨으로써 텍스트 박스에 문자가 써넣어지게 된다.
여기서 명령은 브라우저(130)에서 실행될 수 있는 명령으로서, 브라우저(130)의 DOM 객체를 변경함으로써 실행될 수 있는 명령이라면 어느 것이라도 적용될 수 있다. 이러한 명령의 예로서 '뒤로가기', '앞으로가기', '중지', '새로고침', '홈', '즐겨찾기' 등의 브라우저(130) 메뉴 명령뿐만 아니라 웹 페이지 화면을 스크롤하거나 브라우저(130)의 배경 화면의 색상을 변경하거나 텍스트 박스(예를 들면, 검색창) 내에 문자를 입력하는 것 등의 명령을 들 수 있으며, 나아가 웹 페이지 내에서 제공하는 메뉴 명령을 들 수 있다. 웹 페이지 내에서 제공하는 메뉴의 예로서, 블로그 바로가기, 메일 바로가기, 카페 바로가기 등과 같이 특정 페이지로 하이퍼링크시키는 것과 검색창에 입력되어 있는 쿼리에 대한 검색 실행 등을 들 수 있으나 이에 한정되지 않는다.
한편 필요에 따라 특정 명령(예를 들면, 검색창에 쿼리를 입력하는 명령)만 실행할 수 있도록 이미지 명령 컴포넌트(140)가 구현되거나, 일부의 명령만 실행할 수 있도록 이미지 명령 컴포넌트(140)가 구현될 수도 있다.
인식된 이미지가 '←', '→', '×', 'Ｒ', 'Ｈ', 'Ｆ'라면 '뒤로가기', '앞으로가기', '중지', '새로고침', '홈', '즐겨찾기' 명령을 각각 실행시킬 수 있고, '↑', '↓'라면 스크롤 올리기와 스크롤 내리기를 각각 실행시킬 수 있으며, '(b)'라면 배경 화면의 색상을 검은색으로 변경하는 명령을 실행시킬 수 있고, 'Ｂ', 'Ｍ', 'Ｃ'라면 블로그 바로가기, 메일 바로가기, 카페 바로가기를 각각 실행시킬 수 있으며, 'Ｓ'라면 검색창에 입력되어 있는 쿼리에 대한 검색 명령을 실행시킬 수 있다. 그리고 인식된 이미지가 이와 같이 미리 설정되어 있는 이미지 이외의 이미지라면 인식된 이미지에 대응하는 문자 등을 검색창에 입력시킬 수 있다. 그러나 이러한 이미지와 명령의 대응 관계는 예일 뿐이며, 이미지 명령 컴포넌트(140)가 제공하는 옵션 메뉴를 통하여 사용자는 이러한 명령의 활성화 여부를 선택할 수 있고 각 명령과 이미지를 임의로 매칭시킬 수 있다.
이미지 명령 컴포넌트(140)는 입력된 이미지를 인식할 때 정확도를 산출할 수 있으며, 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 해당 이미지에 대응하는 명령을 곧바로 수행하도록 명령 이벤트를 브라우저(130)에 제공하나 기준치를 넘지 못하면 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 표시하여 사용자의 선택에 따른 명령을 수행할 수 있다.
한편, 이미지 명령 컴포넌트(140)는 필요에 따라 입력된 이미지를 웹 서버(200) 또는 이미지 처리 서버(300)에 전송할 수 있다. 그러고 웹 서버(200) 또는 이미지 처리 서버(300)로부터 입력된 이미지에 대응하는 추천 문자 정보 또는 추천 기호 정보를 받아 해당 추천 문자 또는 추천 기호를 브라우저(130)에 표시할 수 있으며 사용자의 선택에 따라 선택된 추천 문자 또는 추천 기호에 대응하는 명령을 수행하도록 브라우저(130)에 해당 이벤트를 보낼 수 있다.
이미지 명령 컴포넌트(140)는 웹 서버(200)가 제공하는 웹 사이트 이외의 다른 웹 사이트에서도 독립적으로 구동될 수 있으며, 이를 위하여 이미지 명령 컴포넌트(140)를 활성화시키는 버튼을 브라우저(130)의 메뉴 표시줄 또는 툴 바 등에 표시할 수 있다.
이미지 명령 컴포넌트(140)는 사용자 단말기(100)가 웹 서버(200)에 접속할 때마다 웹 서버(200)로부터 전송되어 사용자 단말기(100)에서 실행될 수 있으나 한번 전송되면 사용자 단말기(100)에 설치되어 업데이트 등의 경우를 제외하고 웹 서버(200)로부터 재차 전송되지 않을 수 있다.
다시 도 1을 참고하면, 웹 서버(200)는 검색, 게임, 커뮤니티 등의 웹 사이트를 제공하며, 사용자 단말기(100)가 접속하면 웹 페이지 정보 및 이미지 명령 컴포넌트(140)를 통신망(10)을 통하여 사용자 단말기(100)에 전송한다. 웹 페이지 정보에는 검색, 게임, 커뮤니티 등의 관련 정보가 포함될 수 있다.
이미지 처리 서버(300)는 문자 정보 및 기호 정보가 기록된 데이터베이스(도시하지 않음)와 이미지 인식 알고리즘을 구비할 수 있으며, 웹 서버(200) 또는 사용자 단말기(100)로부터 이미지가 전달되면 그 이미지를 이미지 인식 알고리즘을 통하여 인식하고 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 데이터베이스로부터 추출하고 이를 웹 서버(200)를 경유하여 사용자 단말기(100)에 제공하거나 직접 사용자 단말기(100)에 제공한다.
이미지 처리 서버(300)는 이미지를 인식할 때 정확도를 산출할 수 있으며, 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 해당 이미지에 대응하는 명령 정보를 이미지 명령 컴포넌트(140)에 전송하여 해당 명령을 곧바로 수행하도록 하고, 그 정확도가 기준치를 넘지 못하면 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 사용자 단말기(100)에 전송하여 사용자의 선택에 따른 명령을 수행할 수 있다.
이미지 처리 서버(300)는 복수의 추천 문자 또는 추천 기호를 추출할 수 있 으며, 추출된 추천 문자 또는 추천 기호를 텍스트 또는 이미지 형태로 웹 서버(200) 또는 사용자 단말기(100)에 전송할 수 있다. 한편 이미지 처리 서버(300)가 웹 서버(200)와 별도로 구현되지 않고 웹 서버(200)와 함께 하나로 구현될 수도 있다.
그러면 본 발명의 실시예에 따른 이미지를 이용한 브라우저 제어 방법에 대하여 도 3 내지 도 5를 참고하여 상세하게 설명한다.
도 3은 본 발명의 한 실시예에 따른 이미지를 이용한 브라우저 제어 방법을 도시한 흐름도이고, 도 4는 본 발명의 실시예에 따른 이미지 명령 컴포넌트가 실행되어 있는 웹 페이지의 한 예를 도시한 개략도이며, 도 5는 본 발명의 실시예에 따른 이미지 명령 컴포넌트가 실제로 구현되어 있는 웹 페이지의 한 예를 도시한 도면이다.
도 3 및 도 4를 참고하면, 사용자 단말기(100)가 웹 서버(200)에 접속하면(S510), 웹 서버(200)는 웹 페이지 정보 및 이미지 명령 컴포넌트(140)를 사용자 단말기(100)에 전송한다(S515). 그런 후 사용자 단말기(100)는 전송 받은 웹 페이지 정보에 기초한 웹 페이지(400)를 브라우저(130)에 표시하고(S520), 이미지 입력 인터페이스(410)를 표시한다(S525).
웹 페이지(400)에는 검색창(420), 검색 버튼(Search), 이미지 인식 버튼(Handwriting Recognition) 및 이미지 입력 인터페이스(410)가 표시되며, 검색, 게임, 커뮤니티 등의 다양한 컨텐츠가 텍스트 또는 이미지 등으로 표시될 수 있다.
이미지 입력 인터페이스(410)는 이미지 명령 컴포넌트(140)에 의하여 생성되 어 표시되며, 이미지 입력란(412), 추천란(414), Undo 버튼, Clear 버튼 및 Close 버튼을 포함한다. 이미지 명령 컴포넌트(140)가 사용자 단말기(100)로 전송된 후 곧바로 실행되어 이미지 입력 인터페이스(410)가 표시될 수 있다. 그러나 이와 달리 사용자가 이미지 인식 버튼을 누르거나 마우스 포인터를 이미지 인식 버튼 위에 둔 채로 소정 시간 경과한 후에 이미지 명령 컴포넌트(140)가 실행되어 이미지 입력 인터페이스(410)가 표시될 수도 있다. 후자와 같이 사용자가 원하는 때에 이미지 입력 인터페이스(410)를 표시함으로써 다른 컨텐츠들이 표시되는 영역을 침범하지 않을 수 있고 기존의 웹 페이지의 형태 및 디자인을 보호할 수 있다.
이미지 명령 컴포넌트(140)는 이미지 입력 인터페이스(410)가 표시되어 있는 상태에서 사용자의 이미지 입력을 기다린다(S530). 사용자는 마우스, 전자 펜이나 태블릿 등으로 이미지 입력란(412)에 그림을 그려 넣음으로써 이미지를 입력할 수 있다. 한편 사용자는 이미지를 이미지 입력란(412)에 직접 입력하지 않고 문자 등이 그려져 있는 이미지 파일을 불러들여 이미지 인식을 수행시킬 수도 있다.
이미지 명령 컴포넌트(140)는 마우스 등의 이벤트에 의한 좌표 정보, 입력 순서, 클릭과 릴리즈 여부 등을 조합한 정보를 가지고 이미지 데이터를 생성한다. 입력부(110)가 태블릿인 경우에는 압력의 크기 등의 부가적인 정보도 이미지 데이터에 포함되어 어느 정도의 세기로 눌렀는가에 따라 이미지 데이터를 다르게 생성할 수도 있다.
사용자는 이미지를 입력하면서 Undo 버튼, Clear 버튼 및 Close 버튼을 이용할 수 있다. Undo 버튼은 사용자가 이미지 입력란(412) 내에 남아있는 이미지 중 에서 가장 최근에 입력한 획을 지우는 기능을 하며, Clear 버튼은 사용자가 입력한 전체 이미지를 지워 새로운 이미지를 입력받을 수 있는 상태로 돌아가는 기능을 한다. Close 버튼은 이미지 입력 인터페이스(410)를 비활성화시켜 브라우저(130)에서 사라지게 한다.
이미지 명령 컴포넌트(140)는 이미지가 입력되면 입력된 이미지를 인식한다(S535). 이미지 인식은 사용자가 한 획을 그릴 때마다 그때까지 입력된 이미지에 기초하여 수행될 수 있으나, 이와 달리 사용자가 이미지 입력을 완료하고 인식 버튼(도시하지 않음)을 누르면 이미지 인식이 수행될 수도 있다.
이미지 명령 컴포넌트(140)는 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 추출하여 추천란(414)에 표시할 수 있다. 추천 문자 또는 추천 기호는 인식된 이미지와 비교하여 소정 이상의 정확도를 가지는 문자 또는 기호로 추출될 수 있다. 그러나 이미지 명령 컴포넌트(140)가 추천 문자를 추출할 수 없는 경우에는 이미지 처리 서버(300)에 입력된 이미지를 전송하고 이미지 처리 서버(300)에서 이미지를 인식한 후 추천 문자를 전송 받아 이를 추천란(414)에 표시할 수도 있다.
다음으로, 이미지 명령 컴포넌트(140)는 인식된 이미지와 관련된 명령을 실행시킬 수 있는지 판단한다(S540). 즉 이미지 명령 컴포넌트(140)는 인식된 이미지에 대응하는 명령이 존재하는지 판단하여 해당 명령이 존재하면 브라우저(130)가 해당 명령을 실행하도록 명령 이벤트를 보낸다(S565). 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 이에 대응하는 명령이 존재하는 것으로 판단한다.
이미지 명령 컴포넌트(140)가 인식할 수 있는 이미지를 명령에 직접 관계되는 문자 또는 기호로 국한시킬 수 있다. 따라서 쿼리 입력을 위한 일반 문자나 기호에 대한 이미지 인식은 이미지 처리 서버(300)에서 수행되며, 따라서 입력된 이미지를 일반 문자나 기호에 매칭시키기 위하여 많은 데이터를 구비할 필요가 없으므로 이미지 명령 컴포넌트(140)의 크기를 줄일 수 있다. 여기서 일반 문자는 한자나 아라비아 문자 등과 같이 검색창(420)에 직접 입력하기 어려운 문자뿐만 아니라 한글, 가나, 알파벳 등과 같은 문자를 포함한다.
단계(S540)에서 판단 결과, 해당 명령이 존재하지 않은 것으로 판단하면 입력된 이미지를 이미지 처리 서버(300)에 전송한다(S545). 이미지 처리 서버(300)는 전송된 이미지를 인식하고(S550) 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 추출하여 사용자 단말기(100)에 전송한다(S555). 이때 이미지 처리 서버(300)는 추천 문자 또는 추천 기호와 함께 이들과 관련된 명령 스크립트를 함께 전송할 수 있으며, 이미지 명령 컴포넌트(140)는 추천 문자 또는 추천 기호 중에서 선택된 문자 등에 관련된 명령 스크립트를 브라우저(130)에 전달하여 이를 실행하도록 할 수 있다.
이미지 명령 컴포넌트(140)는 전송된 추천 문자 또는 추천 기호를 추천란(414)에 표시하여 사용자의 선택을 기다리고 사용자가 추천 문자 또는 추천 기호에서 선택을 하면(S560) 선택된 문자 또는 기호에 해당하는 명령 이벤트를 브라우저(130)에 전송하여 해당 명령을 실행하도록 한다(S565). 이때, 사용자로부터 선 택된 문자 또는 기호가 명령에 직접 관계되는 것이 아니면 검색창(420)에 쿼리로 입력하도록 이벤트를 브라우저(130)에 보낸다. 브라우저(130)가 명령을 실행하면 이미지 입력 인터페이스(410)는 비활성화되어 사라진다.
이미지 처리 서버(300)는 추천 문자 또는 추천 기호에 대한 정확도 정보를 함께 전송할 수 있고, 이미지 명령 컴포넌트(140)는 정확도에 따른 순서대로 추천 문자 등을 추천란(414)에 표시할 수 있다. 추출된 추천 문자 또는 추천 기호의 수효가 추천란(414)에 표시할 수 있는 수효보다 많으면 추천란(414)은 복수의 페이지로 이루어질 수 있으며, 추천란(414) 아래에 다음 페이지 버튼이 생성되어 이를 누르면 다음 페이지가 표시된다.
도 5를 참고하여 실제로 사용자가 입력한 이미지가 쿼리로 입력되고 검색이 실행되는 예를 설명한다. 먼저 사용자가 이미지 입력란(412)에 '雨'를 그려 넣으면 이 이미지는 브라우저(130) 제어에 직접 관계되는 것이 아니므로 이미지 명령 컴포넌트(140)는 쿼리 입력 명령이라고 판단한다. 그리고 이 이미지를 이미지 처리 서버(300)로 전송하고 이미지 처리 서버(300)로부터 추천 문자를 전송 받은 후 이를 추천란(414)에 표시한다. 사용자가 추천란(414)의 좌측 상단에 표시되어 있는 '雨'를 선택하면 이미지 명령 컴포넌트(140)는 해당 이벤트를 브라우저(130)에 보내어 '雨'가 검색창(420)에 입력되도록 한다. 그런 후 사용자가 이미지 입력란(412)에 'Ｓ'를 그려 넣거나 검색 버튼을 누르면 '雨'에 대한 검색이 수행된다.
쿼리 입력의 경우 검색을 수행하기 전까지 복수의 이미지를 차례로 입력하여 복수의 문자로 이루어진 단어 또는 구에 대한 검색을 수행할 수 있다. 이때 이미 지를 입력할 때마다 이에 대응하는 문자가 검색창(420)에 차례로 입력되어 쿼리를 만들게 된다. 한편 웹 서버(200)는 검색창(420)에 입력된 적어도 하나의 문자에 기초하여 자동 완성 기능을 제공할 수 있으며 이에 따라 사용자가 검색하기를 원하는 단어를 쉽게 입력할 수 있다.
그러면 본 발명의 다른 실시예에 따른 이미지를 이용한 브라우저 제어 방법에 대하여 도 6을 참고하여 상세하게 설명한다. 그러나 본 실시예는 앞선 실시예와 많은 부분 실질적으로 동일하므로 동일한 부분에 대하여는 상세한 설명을 생략한다.
도 6은 본 발명의 다른 실시예에 따른 이미지를 이용한 브라우저 제어 방법을 도시한 흐름도이다.
도 6을 참고하면, 사용자 단말기(100)가 웹 서버(200)에 접속하면(S610), 웹 서버(200)는 웹 페이지 정보 및 이미지 명령 컴포넌트(140)를 사용자 단말기(100)에 전송한다(S615). 그런 후 사용자 단말기(100)는 전송 받은 웹 페이지 정보에 기초한 웹 페이지(400)를 브라우저(130)에 표시하고(S620), 이미지 입력 인터페이스(410)를 표시한다(S625).
이미지 명령 컴포넌트(140)는 이미지 입력 인터페이스(410)가 표시되어 있는 상태에서 사용자의 이미지 입력을 기다린다(S630).
이미지 명령 컴포넌트(140)는 이미지가 입력되면 이미지 데이터를 생성하여 이미지 처리 서버(300)에 전송한다(S635).
이미지 처리 서버(300)는 이미지 명령 컴포넌트(140)로부터의 이미지 데이터 에 기초하여 이미지 인식을 수행한다(S640).
그런 후 이미지 처리 서버(300)는 인식된 이미지에 대응하는 명령이 존재하는지 판단하여(S645) 해당 명령이 존재하면 해당 명령 정보를 이미지 명령 컴포넌트(140)에 전송한다(S660). 이에 따라 이미지 명령 컴포넌트(140)는 브라우저(130)가 해당 명령을 실행하도록 브라우저(130)에 명령 이벤트를 보낸다(S665). 이미지 처리 서버(300)는 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 이에 대응하는 명령이 존재하는 것으로 판단한다.
단계(S645)에서 판단 결과, 해당 명령이 존재하지 않은 것으로 판단하면 이미지 처리 서버(300)는 인식된 이미지에 대응하는 추천 문자 또는 추천 기호를 추출하여 사용자 단말기(100)에 전송한다(S650). 추천 문자 또는 추천 기호는 인식된 이미지와 비교하여 소정 이상의 정확도를 가지는 문자 또는 기호로 추출될 수 있다. 이때 이미지 처리 서버(300)는 추천 문자 또는 추천 기호와 함께 이들과 관련된 명령 스크립트를 함께 전송할 수 있다.
이미지 명령 컴포넌트(140)는 전송된 추천 문자 또는 추천 기호를 추천란(414)에 표시하여 사용자의 선택을 기다리고 사용자가 추천 문자 또는 추천 기호에서 선택을 하면(S655) 선택된 문자 또는 기호에 해당하는 명령 이벤트를 브라우저(130)에 전송하여 해당 명령을 실행하도록 한다(S665).
이와 같이 본 실시예에 의하면, 이미지 명령 컴포넌트(140)가 이미지 인식을 수행하지 않고 또한 이미지에 대응하는 명령이 존재하는지에 대한 판단을 하지 않으며, 이러한 동작을 이미지 처리 서버(300)가 수행한다. 따라서 이미지 명령 컴 포넌트(140)가 이미지 인식 알고리즘 및 판단 모듈을 구비하지 않아도 되므로 이미지 명령 컴포넌트(140)의 크기를 더욱 줄일 수 있다.
이와 같이 본 발명의 실시예에 따른 이미지를 이용한 브라우저 제어 방법 및 시스템에 의하면, 별도의 응용 프로그램을 설치하지 않고 사용자가 필요한 경우 웹 서버(200)에서 제공하는 이미지 입력 인터페이스(410)를 표시하여 브라우저(130)가 있는 곳에서는 어디서나 이미지 형태의 입력을 가능하게 하고, 사용자가 입력한 이미지에 기초하여 브라우저(130)의 DOM 객체를 변경함으로써 브라우저(130)를 제어할 수 있으며, 따라서 입력된 이미지에 대응하는 명령을 브라우저(130)에서 실행시킬 수 있다.
이에 따라 키보드가 없는 UMPC, 태블릿 PC 등의 경우 입력 장치 또는 운영 체제에 구애받지 않고 웹 서비스로의 접근성을 향상시켜줄 수 있다. 또한 입력 방법이 어려웠던 한자나 아라비아 문자 등의 검색창 입력을 용이하게 해주고 문자를 이용하여 표현할 수 없었던 기하학적 형태인 기호에 기반한 질의를 용이하게 생성할 수 있다. 결국 검색 서비스 이용 시 검색 결과를 향상시킬 수 있으며 검색 질의 입력의 편의성을 제공할 수 있으므로 사용자 만족도를 향상시킬 수 있다.
본 발명의 실시예는 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터로 읽을 수 있는 매체를 포함한다. 이 매체는 지금까지 설명한 이미지를 이용한 브라우저 제어 방법을 실행시키기 위한 프로그램을 기록한다. 이 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 이러한 매체의 예에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기 매체, CD 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 자기-광 매체, 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 하드웨어 장치 등이 있다. 또는 이러한 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
이상에서 본 발명의 바람직한 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
이와 같이 본 발명에 의하면, 사용자가 입력한 이미지에 기초하여 브라우저의 DOM 객체를 변경함으로써 브라우저를 제어할 수 있으며, 입력된 이미지에 대응하는 명령을 브라우저에서 실행시킬 수 있다.
이에 따라 브라우저를 보다 용이하게 이용할 수 있고 웹 서비스로의 접근성을 향상시킬 수 있다. 또한 입력 방법이 어려웠던 한자나 아라비아 문자 등의 검색창 입력을 용이하게 해주고 기호에 기반한 질의를 용이하게 생성할 수 있으므로 사용자 만족도를 향상시킬 수 있다.
그리고 브라우저 창에 각종 기능 버튼을 표시할 필요가 없게 되므로 화면을 보다 효율적으로 이용할 수 있다.

Claims (19)

  1. 이미지 명령 컴포넌트가 사용자 단말기의 입력 장치로부터 이미지를 입력받는 단계,
    상기 이미지 명령 컴포넌트가 이미지 인식 알고리즘을 이용하여 상기 이미지를 인식하는 단계,
    상기 이미지 명령 컴포넌트가 브라우저 메뉴 명령 및 웹 페이지 메뉴 명령을 문자 또는 기호에 매칭시켜 두고 상기 인식된 이미지가 상기 매칭된 문자 또는 기호와 일치하는지 판단하여 상기 인식된 이미지에 대응하는 브라우저 메뉴 명령 또는 웹 페이지 메뉴 명령이 존재하는지 판단하는 단계,
    상기 이미지 명령 컴포넌트가 상기 판단 단계에서 상기 인식된 이미지에 대응하는 명령이 존재하는 것으로 판단하면 상기 인식된 이미지에 대응하는 명령을 실행하는 단계, 그리고
    상기 이미지 명령 컴포넌트가 상기 판단 단계에서 상기 인식된 이미지에 대응하는 명령이 존재하지 않은 것으로 판단하면 상기 인식된 이미지에 따른 추천 문자 또는 추천 기호로부터 선택된 문자 또는 기호에 대응하는 명령을 실행하는 단계
    를 포함하며,
    상기 브라우저 메뉴 명령은 뒤로가기, 앞으로가기, 중지, 새로고침, 홈, 즐겨찾기, 스크롤 올리기, 스크롤 내리기, 배경 화면 색상 변경 및 텍스트 박스에 문자 입력하기 중 적어도 하나의 명령을 포함하고,
    상기 웹 페이지 메뉴 명령은 블로그 바로가기, 메일 바로가기, 카페 바로가기 및 검색 실행 중 적어도 하나의 명령을 포함하는
    이미지를 이용한 브라우저 제어 방법.
  2. 삭제
  3. 제1항에서,
    상기 인식된 이미지에 대응하는 문자를 검색창에 입력하는 단계를 더 포함하는 이미지를 이용한 브라우저 제어 방법.
  4. 제1항에서,
    상기 브라우저 메뉴 명령 및 웹 페이지 메뉴 명령은 브라우저의 DOM(document object model) 객체를 변경하여 실행되는 이미지를 이용한 브라우저 제어 방법.
  5. 제1항에서,
    상기 추천 문자 또는 추천 기호를 추출하여 표시하는 단계를 더 포함하는 이미지를 이용한 브라우저 제어 방법.
  6. 삭제
  7. 컴퓨터에 제1항, 제3항 내지 제5항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
  8. 입력된 이미지에 따라서 인식된 이미지에 대응하는 브라우저 메뉴 명령 또는 웹 페이지 메뉴 명령을 브라우저에서 실행하도록 상기 브라우저에 이벤트를 전달하는 이미지 명령 컴포넌트 및 웹 페이지 정보를 사용자 단말기에 제공하는 웹 서버를 포함하며,
    상기 이미지 명령 컴포넌트는 상기 인식된 이미지에 대응하는 명령이 존재하면 상기 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달하는 수단과 상기 인식된 이미지에 대응하는 명령이 존재하지 않으면 상기 인식된 이미지에 따른 추천 문자 또는 추천 기호로부터 선택된 문자 또는 기호에 대응하는 명령 이벤트를 상기 브라우저에 전달하는 수단을 포함하며,
    상기 브라우저 메뉴 명령은 뒤로가기, 앞으로가기, 중지, 새로고침, 홈, 즐겨찾기, 스크롤 올리기, 스크롤 내리기, 배경 화면 색상 변경 및 텍스트 박스에 문자 입력하기 중 적어도 하나의 명령을 포함하고,
    상기 웹 페이지 메뉴 명령은 블로그 바로가기, 메일 바로가기, 카페 바로가기 및 검색 실행 중 적어도 하나의 명령을 포함하는
    이미지를 이용한 브라우저 제어 시스템.
  9. 삭제
  10. 제8항에서,
    상기 이미지 명령 컴포넌트는 상기 입력된 이미지에 대응하는 문자를 웹 페이지 검색창에 입력하는 이미지를 이용한 브라우저 제어 시스템.
  11. 제8항에서,
    상기 브라우저 메뉴 명령 및 웹 페이지 메뉴 명령은 상기 브라우저의 DOM(document object model) 객체를 변경하여 실행되는 이미지를 이용한 브라우저 제어 시스템.
  12. 제8항에서,
    상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하여 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달하는 이미지를 이용한 브라우저 제어 시스템.
  13. 제8항에서,
    상기 이미지 명령 컴포넌트로부터의 상기 입력된 이미지를 인식하여 상기 추천 문자 또는 추천 기호를 추출하고 상기 추천 문자 또는 상기 추천 기호를 상기 사용자 단말기에 전송하는 이미지 처리 서버를 더 포함하는 이미지를 이용한 브라우저 제어 시스템.
  14. 삭제
  15. 제13항에서,
    상기 이미지 처리 서버는 상기 입력된 이미지를 인식하면서 정확도를 산출하며 상기 산출된 정확도 중에서 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 상기 인식된 이미지에 대응하는 명령 정보를 상기 이미지 명령 컴포넌트에 전송하는 이미지를 이용한 브라우저 제어 시스템.
  16. 제13항에서,
    상기 이미지 처리 서버는 인식된 이미지에 대응하는 명령이 존재하는지 판단하고, 상기 인식된 이미지에 대응하는 명령이 존재하면 상기 인식된 이미지에 대응하는 명령 정보를 상기 이미지 명령 컴포넌트에 전송하고, 상기 인식된 이미지에 대응하는 명령이 존재하지 않으면 상기 추천 문자 또는 상기 추천 기호를 상기 사용자 단말기에 전송하는 이미지를 이용한 브라우저 제어 시스템.
  17. 제13항 또는 제16항에서,
    상기 이미지 명령 컴포넌트는 상기 추천 문자 또는 상기 추천 기호를 상기 사용자 단말기에 표시하고, 상기 추천 문자 또는 상기 추천 기호 중에서 사용자의 선택에 따라 선택된 문자 또는 기호에 대응하는 명령 이벤트를 상기 브라우저에 전달하는 이미지를 이용한 브라우저 제어 시스템.
  18. 제8항에서,
    상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하면서 정확도를 산출하며 상기 산출된 정확도 중에서 가장 높은 정확도를 가지는 인식 이미지의 정확도가 기준치 이상이면 상기 인식된 이미지에 대응하는 명령 이벤트를 상기 브라우저에 전달하는 이미지를 이용한 브라우저 제어 시스템.
  19. 제8항에서,
    상기 이미지 명령 컴포넌트는 상기 입력된 이미지를 인식하여 상기 추천 문자 또는 추천 기호를 추출하고 상기 추천 문자 또는 추천 기호를 상기 사용자 단말기에 표시하는 이미지를 이용한 브라우저 제어 시스템.
KR1020070065339A 2007-06-29 2007-06-29 이미지를 이용한 브라우저 제어 방법 및 시스템 KR100930802B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020070065339A KR100930802B1 (ko) 2007-06-29 2007-06-29 이미지를 이용한 브라우저 제어 방법 및 시스템
JP2007270689A JP5140377B2 (ja) 2007-06-29 2007-10-17 イメージを利用したブラウザー制御方法及びそのシステム
CN2008100858676A CN101334790B (zh) 2007-06-29 2008-03-21 利用图像的浏览器控制方法及系统
US12/055,677 US8121413B2 (en) 2007-06-29 2008-03-26 Method and system for controlling browser by using image
TW097120412A TW200901035A (en) 2007-06-29 2008-06-02 Method and system for controlling browser by using image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070065339A KR100930802B1 (ko) 2007-06-29 2007-06-29 이미지를 이용한 브라우저 제어 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20090001160A KR20090001160A (ko) 2009-01-08
KR100930802B1 true KR100930802B1 (ko) 2009-12-09

Family

ID=40160591

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070065339A KR100930802B1 (ko) 2007-06-29 2007-06-29 이미지를 이용한 브라우저 제어 방법 및 시스템

Country Status (5)

Country Link
US (1) US8121413B2 (ko)
JP (1) JP5140377B2 (ko)
KR (1) KR100930802B1 (ko)
CN (1) CN101334790B (ko)
TW (1) TW200901035A (ko)

Families Citing this family (188)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US9396280B2 (en) * 2008-06-23 2016-07-19 Microsoft Technology Licensing, Llc Command driven web site browsing
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
WO2011089450A2 (en) 2010-01-25 2011-07-28 Andrew Peter Nelson Jerram Apparatuses, methods and systems for a digital conversation management platform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
CN101893995A (zh) * 2010-07-15 2010-11-24 汉王科技股份有限公司 在网页上实现手写输入的方法及系统
US20120191744A1 (en) * 2011-01-21 2012-07-26 Microsoft Corporation Detecting search mode in a browser navigation bar
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
CN103186559A (zh) * 2011-12-28 2013-07-03 鸿富锦精密工业（深圳）有限公司 电子装置及其在播放幻灯片时传输演示文稿的方法
US9063936B2 (en) 2011-12-30 2015-06-23 Verisign, Inc. Image, audio, and metadata inputs for keyword resource navigation links
US8965971B2 (en) 2011-12-30 2015-02-24 Verisign, Inc. Image, audio, and metadata inputs for name suggestion
CN102546797B (zh) * 2011-12-31 2014-08-13 互动在线（北京）科技有限公司 一种基于浏览器端/服务器端结构的移动设备截屏方法
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US11023933B2 (en) 2012-06-30 2021-06-01 Oracle America, Inc. System and methods for discovering advertising traffic flow and impinging entities
US9323730B2 (en) * 2012-09-05 2016-04-26 Hbr Labs Llc Platform and method for real-time synchronized co-browsing of web pages
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
EP3809407A1 (en) 2013-02-07 2021-04-21 Apple Inc. Voice trigger for a digital assistant
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10715864B2 (en) * 2013-03-14 2020-07-14 Oracle America, Inc. System and method for universal, player-independent measurement of consumer-online-video consumption behaviors
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
KR102272770B1 (ko) * 2014-10-08 2021-07-05 원투씨엠 주식회사 웹페이지를 이용한 서비스 제공 방법
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10551498B2 (en) * 2015-05-21 2020-02-04 Navico Holding As Wireless sonar device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
CN107203572A (zh) * 2016-03-18 2017-09-26 百度在线网络技术（北京）有限公司 一种图片搜索的方法及装置
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
KR101759845B1 (ko) * 2016-09-19 2017-07-21 원투씨엠 주식회사 웹페이지를 이용한 터치 기반 승인 방법
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
JP7124280B2 (ja) * 2017-09-13 2022-08-24 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
CN110377500A (zh) * 2019-06-14 2019-10-25 平安科技（深圳）有限公司 网站页面的测试方法、装置、终端设备及介质
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
CN111153301B (zh) * 2020-03-04 2022-04-15 广东伟邦科技股份有限公司 一种免接触式电梯呼梯方法
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10334187A (ja) * 1997-06-05 1998-12-18 Mitsubishi Electric Corp 文字認識装置及び文字認識方法
WO2004012135A1 (en) * 2002-07-25 2004-02-05 America Online, Inc. Chinese character handwriting recognition system

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3384429B2 (ja) * 1995-11-30 2003-03-10 ソニー株式会社 遠隔入力装置および方法
JP2000075887A (ja) * 1998-08-31 2000-03-14 Sony Corp パターン認識装置、方法及びシステム
JP3477432B2 (ja) * 2000-08-04 2003-12-10 旭化成株式会社 音声認識方法およびサーバならびに音声認識システム
JP2002259908A (ja) * 2000-12-28 2002-09-13 Brother Ind Ltd 筆記データ処理システム、筆記データ処理サーバ及び筆記データ処理装置
JP4245820B2 (ja) * 2001-03-16 2009-04-02 株式会社リコー 文字認識装置、文字認識方法および記録媒体
CN1404323A (zh) * 2001-08-31 2003-03-19 英业达集团(上海)电子技术有限公司 对应用无线通讯协议的网站资料进行搜索的方法
US7546382B2 (en) * 2002-05-28 2009-06-09 International Business Machines Corporation Methods and systems for authoring of mixed-initiative multi-modal interactions and related browsing mechanisms
JP2004153375A (ja) * 2002-10-29 2004-05-27 Matsushita Electric Ind Co Ltd テレビ受信装置およびリモコン送受信装置
ES2252629T3 (es) * 2003-05-08 2006-05-16 Orange S.A. Procedimiento y aparato de procesamiento de datos.
JP2005011045A (ja) * 2003-06-18 2005-01-13 Fuji Xerox Co Ltd インターネット情報サービスシステム及びインターネット情報入出力装置
US7623119B2 (en) * 2004-04-21 2009-11-24 Nokia Corporation Graphical functions by gestures
US7954050B2 (en) * 2004-06-25 2011-05-31 Icesoft Technologies Canada Corp. Systems and methods for rendering and increasing portability of document-based user interface software objects
US7996589B2 (en) * 2005-04-22 2011-08-09 Microsoft Corporation Auto-suggest lists and handwritten input
JP4749468B2 (ja) 2005-06-24 2011-08-17 ノキア コーポレイション 電子デバイスにおける手書き文字認識
US8145997B2 (en) * 2005-06-30 2012-03-27 Canon Kabushiki Kaisha Method for simultaneously performing a plurality of handwritten searches
CN100356392C (zh) * 2005-08-18 2007-12-19 北大方正集团有限公司 一种字符识别的后处理方法
US7720316B2 (en) * 2006-09-05 2010-05-18 Microsoft Corporation Constraint-based correction of handwriting recognition errors

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10334187A (ja) * 1997-06-05 1998-12-18 Mitsubishi Electric Corp 文字認識装置及び文字認識方法
WO2004012135A1 (en) * 2002-07-25 2004-02-05 America Online, Inc. Chinese character handwriting recognition system

Also Published As

Publication number Publication date
JP2009015813A (ja) 2009-01-22
CN101334790B (zh) 2011-12-14
JP5140377B2 (ja) 2013-02-06
TW200901035A (en) 2009-01-01
KR20090001160A (ko) 2009-01-08
US8121413B2 (en) 2012-02-21
CN101334790A (zh) 2008-12-31
US20090003704A1 (en) 2009-01-01

Similar Documents

Publication Publication Date Title
KR100930802B1 (ko) 이미지를 이용한 브라우저 제어 방법 및 시스템
US8473857B1 (en) Link annotation for keyboard navigation
US9189564B2 (en) Method and apparatus for providing user interface for internet service
US7036086B2 (en) Displaying software keyboard images
JP3773770B2 (ja) ハイパーテキスト表示装置
US9507519B2 (en) Methods and apparatus for dynamically adapting a virtual keyboard
US8014011B2 (en) Method of printing web page and apparatus therefor
JP2014535110A (ja) ジェスチャベースの検索
KR20060021810A (ko) 웹 대응 전자 기기 장치, 웹페이지 처리 방법 및 프로그램
EP1475741B1 (en) Data processing apparatus and method
CN102436477A (zh) 具关联内容搜索功能的装置及方法
KR20110029278A (ko) 단축키 인터페이스 제공 단말 및 방법
US20130063357A1 (en) Method for presenting different keypad configurations for data input and a portable device utilizing same
US20140082550A1 (en) Systems and methods for integrated query and navigation of an information resource
JPWO2008013128A1 (ja) 端末装置、コンテンツ表示方法、およびコンテンツ表示プログラム
EP2608047A1 (en) Web management device, web management method, web management program, computer readable recording medium for recording said program, and web system
KR100933270B1 (ko) 이미지 정보에 기초하여 웹 검색을 수행하기 위한 방법,시스템 및 컴퓨터 판독 가능한 기록 매체
JP5423149B2 (ja) 閲覧情報収集システム、閲覧情報収集方法、サーバ、及び、プログラム
KR100907342B1 (ko) 이미지 입력기를 사용하여 검색을 수행하기 위한 방법,장치 및 컴퓨터 판독 가능한 기록 매체
US20140115525A1 (en) Systems and methods for integrated query and navigation of an information resource
US20090287474A1 (en) Web embedded language input arrangement
KR20150093045A (ko) 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
US9411885B2 (en) Electronic apparatus and method for processing documents
US20230099124A1 (en) Control method and device and electronic device
KR100698966B1 (ko) 문자 입력모드 변경 방법 및 그 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
E902 Notification of reason for refusal
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121011

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20130926

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140925

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20151102

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161024

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20171011

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20191001

Year of fee payment: 11